Stirling przybył do zamku 20 sierpnia 1944 roku i otrzymał zadanie utworzenia brytyjskiej jednostki wywiadowczej w Colditz, na mocy rozkazu stay-behind, obowiązującego w tym rejonie. Po schwytaniu Stirlinga dowództwo nad SAS objął Paddy Mayne.
Działalność powojenna W 1947 roku Stirling został przeniesiony do rezerwy. Jako rezerwista otrzymał honorowy awans na pułkownika, który zachował po ostatecznym przejściu na emeryturę w 1965 roku.
W Afryce Stirling był założycielem Capricorn Africa Society, organizacji sprzeciwiającej się dyskryminacji rasowej w Afryce. Założona w 1949 roku, gdy znaczna część Afryki znajdowała się jeszcze pod rządami kolonialnymi, organizacja osiągnęła swój szczyt popularności na konferencji w Salimie w 1956 roku, będącej wydarzeniem towarzyskim, którego celem było umożliwienie białym „nawiązania relacji z Afrykanami na zasadach zbliżonych do równości społecznej”. Jednakże, ze względu na sprzeciw Stirlinga wobec powszechnego prawa wyborczego, preferującego kwalifikowane i bardzo elitarne prawo wyborcze, wykształceni Afrykanie byli podzieleni w tej kwestii i organizacja nie zyskała wystarczającego poparcia.