Torpa, som är känt sedan 1300-talet som en gränsbefästning nära Ätrans dalgång, är släkten Stenbocks stamgods. Det nuvarande, mäktiga stenhusets äldsta delar härrör från 1400-talets senare del.