Zoals veel van zijn tijdgenoten schilderde Viegers regelmatig op de Veluwe waar het landschap en de boerenbevolking een voortdurende bron van inspiratie voor hem waren.

In 1938 verhuisde hij met zijn echtgenote Josina Maria Jacobs van Den Haag naar Nunspeet, waar ze gingen wonen in een verwaarloosd pand aan de Brinkersweg 27, dat hijzelf opknapte. Aan het begin van de Tweede Wereldoorlog woonden ze in Castricum en later verhuisde het echtpaar naar Hilversum. In 1943 keerden ze weer terug naar Nunspeet. Opnieuw kocht Viegers een bouwvallig pand aan de Laan 62. In Nunspeet bevond hij zich onder collega’s als Jaap Hiddink (1910-2000), Jos Lussenburg (1889-1975), Frans Huysmans (1885-1954) en Jan van Vuuren (1871-1941).

Het eigenhandig restaureren van zijn woonhuis werd Viegers uiteindelijk fataal, want bij het tillen van een zwaar kozijn overleed hij aan een hartaanval. Hij overleed in oktober 1947 op 60-jarige leeftijd in zijn geliefde Nunspeet. Later werd er daar een straat naar hem vernoemd.

In oktober 2014 werd het Noord Veluws museum in Nunspeet geopend met een expositie van Ben Viegers. Op de expositie werden 130 van zijn werken tentoongesteld.

Naar aanleiding van de 75-jarige verjaardag van Viegers' sterfdag was er in 2022 wederom een succesvolle overzichtstentoonstelling in hetzelfde museum.