1937年2月17日，国王乔治六世一家搬进了白金汉宫。白金汉宫在18世纪以前，一直是白金汉公爵在伦敦的住所，在当时叫做白金汉屋，那时白金汉屋得到了人们的普遍赞誉，人们形容它为“伦敦新的一景”，甚至还被预言为“一座非常美丽的宫殿，无论多么挑剔的国王都不会对它有所轻视”。1761年，乔治三世从白金汉公爵的私生子查尔斯·舍费尔德爵士手中花了4.56万英镑买下了白金汉屋。1820年，国王乔治四世登基，将白金汉屋改名为白金汉宫并将其重新翻修和装饰。最初的工程预算为3.2万多英镑，但是一期工程就达到了54万英镑，最后完工时，整个花费超过了100万英镑。但是，在20世纪30年代，白金汉宫却不像现在这样有着许多现代化的设备。国王一家搬进去的时候，那里刚刚装上电灯。房间里仍旧在用木材生火取暖，一到阴雨季节，霉味就会在房间中四处蔓延。直到5月底，王宫才装上了燃油供暖设备，这样白金汉宫的霉味消失了，人们再也不用穿着厚厚的毛大衣穿过走廊了。古老陈旧的地板也得到了整修，地面上铺上了地毯。国王就在一楼办公，楼上则是他们各自的套房。
在白金汉宫的周围是一片巨大的花园，这里是伊丽莎白和玛格丽特两位小公主的游乐场。花园里有一座小山，在小山的不远处有一个足够大的湖泊。夏天的时候，小公主们常常在湖中划船戏水。有时，她们也会到湖边的草丛里去寻找野鸭和其他野禽的踪迹。在离湖泊不远的地方，一幢专门用来避暑的别墅屹立在碧绿的草坪上。老国王乔治五世晚年的时候，每个夏天都会来这里避暑、办公。如今那里还保存着乔治五世生前用过的写字台、铅笔和墨水等物品。但是现在，那里却成了女童子军白金汉宫分队的司令部。王宫里的这支女童子军大概有24名成员，她们大都是王室和政府官员及王宫雇员的孩子。当然，两位小公主也是其中的成员。王室认为，同人民保持一定的接触是非常有必要的，是一种很有价值的生活体验。平时，伊丽莎白和玛格丽特公主姐妹俩总爱站在花园内的小山上向外张望，看一看宫外所发生的事情。今天，如果你早上起来得足够早，并在哈罗德和塞尔弗利奇两家商店还没开门时就到那里，那么，你就有可能看见女王伊丽莎白二世正和普通人一样在那里采购所需物品。当然，女王是不用付现钱的，而是先记账，再由宫廷侍女来付钱。女王外出采购的主要目的是感受一下普通人的生活，并进一步加强她和她的人民之间的联系。
每年假期，国王和王后都会带着伊丽莎白和玛格丽特姐妹去拜访她们的外祖母和其他一些亲戚。在那里，他们可以和普通民众一样挤上开往海边的汽车，而不用受到宫廷侍卫的阻拦。有时国王也会自己开车，载着一大家子人去苏格兰东海岸的一个安静的海滩，其中有国王的堂兄妹，也有小公主的堂兄妹。他们乐此不疲地在海滩上跑来跑去，打闹嬉戏。国王夫妇总是尽量将两姐妹像普通孩子一样培养，这对她们童年时期的成长起了重要的作用。后来，在伊丽莎白公主成为母亲后，她把自己的四个孩子都送到了公立学校，让他们像普通孩子一样生活、成长。
在20世纪30年代，两位小公主是伦敦上流社会各种聚会中最受欢迎的两个小客人。但是，她们的母亲认为，过于频繁地参加各种宴会对小公主们的成长非常不利。于是，王后决定，两位小公主只参加王室成员和他们最亲密的朋友所举办的聚会，其余聚会则不再参加。
