1760年，英国国王乔治三世即位。他对自己在君主立宪制度下徒有虚名、没有实权的国王地位大为不满，企图恢复国王的个人专制统治。乔治三世执意不肯入住当时的王宫——詹姆士宫。他以2.1万英镑的价钱买下了白金汉公爵的这座公馆，并交由一位建筑大师重新设计。自此，这就成了王室的新家。由于这笔购房款项出自夏洛特王后的私囊，乔治三世便把宫殿算做王后的财产，所以这也被称为王后宫。时至1825年，乔治四世正式将白金汉宫改做王宫。但他并不是第一个在该宫殿居住的君王。因为在宫殿装修好之前，他就去世了。1837年继任登基的维多利亚女王，成为第一位真正入主白金汉宫的君主。以后，英国的历代君王都住在这里。
自从王室买下白金汉宫后，就不断对其进行改装、扩建，最终形成了色调不尽一致，式样五花八门，被人戏称为“补丁宫殿”的样貌。最先在19世纪20年代，白金汉宫是意大利风格。到了1821年，国王乔治四世聘请了当时英国最有名的建筑家约翰·纳什来设计和装修白金汉宫。整个工程从1825年开始，到1836年竣工。重建后的白金汉宫用巴斯石灰石取代了原来的红砖，更加整齐气派，豪华富丽。等到20世纪初期，白金汉宫又进行了整修。在白金汉宫的东侧增建了一座长达110米的东正殿大楼。这座大楼是用波特兰岛出产的白石块砌成的，洁净和谐。它面朝大门，正好把原来的三栋大楼遮挡起来，使白金汉宫越加显见王家气派。在1931年，白金汉宫外墙面又被用石料装饰一新。