Manewr Whitlama nie powiódł się, a „Gair affair” została przyjęta w Australii bardzo negatywnie.

W 1975 w wyniku kryzysu konstytucyjnego Whitlam został zdymisjonowany z funkcji premiera przez Gubernatora Generalnego Johna Kerra. Z tego okresu pochodzi najbardziej znany bon mot australijskiej polityki, po otrzymaniu wiadomości o tym, że jego rząd został zdymisjonowany, Whitlam, stojąc na schodach Old Parliament House w Canberze, powiedział: „Ladies and gentlemen, well may we say 'God Save the Queen’, because nothing will save the Governor-General.” (Panie i panowie, powiedzmy „Boże chroń królową”, bo nic nie jest już w stanie uchronić Gubernatora Generalnego).

Późniejsze życie Whitlam kierował ALP do 1977 roku, kiedy to zastąpił go Bill Hayden. W 1978 zrezygnował z mandatu parlamentarnego, po czym przez kilka lat pracował na różnych uczelniach. W latach 1983–1986 był stałym przedstawicielem Australii przy UNESCO w Paryżu. W późniejszych latach pozostał znanym działaczem społecznym, zaangażowanym w takie kwestie jak rozwój stosunków australijsko-chińskich czy kandydatura Sydney na gospodarza igrzysk olimpijskich w 2000 roku.