1762年，英国国王乔治三世从谢菲尔德公爵手里以28000英镑的价格买下白金汉宫，后者是在守寡的公爵夫人逝世后从她那继承过来的。白金汉开始改名叫“王后宫”，作为英国国王夏洛特及其家人的宫殿。夏洛特王后在这个宫殿里生下了除她大儿子之外的所有孩子。