Hjälmarsnäs nämns tidigast vid 1400-talets början. Den nuvarande huvudbyggnaden av sten är dock uppförd på en välvd källare från 1200-talet, och i bottenvåningen ingår murverk från medeltiden eller 1500-talet. Den ombyggdes vid 1700-talets mitt, 1893–94 och fick sin nuvarande nyklassicistiska karaktär 1924.