został zaprzysiężony na członka Tajnej Rady, zaś w 1921 r. został ministrem lotnictwa, na którym to stanowisku utrzymał się aż do rozpadu koalicji po wyborach w październiku 1922 r.
W listopadzie 1922 r. Guest utracił swoje miejsce w Parlamencie, ale już w 1923 r. wygrał wybory w okręgu Stroud. Od 1924 r. reprezentował okręg Bristol North. Po porażce liberałów w wyborach 1929 r. ponownie wstąpił do Partii Konserwatywnej. Z jej ramienia wygrał wybory 1931 r. w okręgu Plymouth Drake, który to okręg reprezentował aż do swojej śmierci z powodu raka w 1937 r.
Guest był wielkim fanem wyścigów samochodowych i lotnictwa. W 1930 r. został zastępcą mistrza Gildii Lotniczej, zaś w 1932 r. mistrzem. Był również zapalonym graczem w polo, lubił polować i był popularny w najwyższych kręgach towarzyskich Londynu i Nowego Jorku. Jego żona, prominentna sufrażystka, filantropka i entuzjastka lotnictwa, odziedziczyły posiadłości na Long Island. Małżonkowie często przebywali w USA w latach dwudziestych i trzydziestych. Ich synowie przyjęli amerykańskie obywatelstwa.