Många Torsåkersbönder var tidigare bergsmän vid sidan av sitt jordbruk. De bröt malm i egna gruvor och framställde järn i egna små hyttor. Järnet såldes till köpmän i Gävle som exporterade det ut i världen. Bergsmännen blev ofta förmögna och hade större och mer påkostade gårdar än vanliga bönder. ”Torsåkershögfärd” ansågs prägla trakten.
Flera bergsmansbyar med hyttor och ståtliga gårdar är bevarade i Torsåker. En av dem är Torsåkers hembygdsgård. Huset byggdes 1801-1805 och flyttades till sitt nuvarande läge hundra år senare.