Från Magnus Erikssons tid (1319–64) var borgen en viktig stödjepunkt i nordisk storpolitik, men den blev så småningom omodern, och under nordiska sjuårskriget (1563–70) erövrades den två gånger: 15 september 1565 av svenskarna och 13 december 1569 av danskarna.