De äldre kungliga samlingarna med anor från Kristian IV:s tid utökades av främst Fredrik V (cirka 1750) samt Fredrik VI (1809). De inventerades och katalogiserades cirka 1840, förstatligades på 1880-talet och inrymdes i den museibyggnad som uppförts efter ritningar av Vilhelm Dahlerup 1889–96.