Alors que la famille s'installait à Windsor, Philip devint impatient. Elizabeth le nomma garde forestier du Grand Parc de Windsor, mais cela ne fit qu'engendrer davantage de problèmes. Pendant ce temps, Margaret menait une vie mondaine, la Reine Mère accumulait une dette de 7 millions de livres sterling et les journaux commencèrent à publier des articles sur ses liaisons extraconjugales.