Gyllebo är känt sedan 1200-talets slut. En 1538–44 uppförd borganläggning övergavs på 1730-talet efter flera bränder och kvarstår som ruin. Den nuvarande nyklassicistiska huvudbyggnaden, av sten i två våningar med ovalt mittparti, byggdes 1813–18. Gyllebo blev byggnadsminne 1981.