Het Kabinet van de Koning kent als organisatie een lange geschiedenis. Ook het monumentale pand waarin het Kabinet van de Koning is gevestigd heeft een rijke historie.