Rodzina thumb|Ślub lorda Longforda i Elizabeth Harman 3 listopada 1931 r. poślubił Elizabeth Harman (30 sierpnia 1906 – 23 października 2002), córkę Nathaniela Bishopa Harmana. Frank i Elizabeth mieli razem ośmioro dzieci: Antonia Margaret Caroline Pakenham (ur. 27 sierpnia 1932), pisarka i historyk, żona Hugh Frasera i Harolda Pintera, ma dzieci z pierwszego małżeństwa Thomas Francis Dermot Pakenham (ur. 14 sierpnia 1933), 8. hrabia Longford Patrick Maurice Pakenham (ur. 17 kwietnia 1937), ożenił się z Mary Plummer, ma dzieci Judith Elizabeth Pakenham (ur. 14 sierpnia 1940), żona Alexandra Kazantisa, ma dzieci Rachel Mary Pakenham (ur. 11 maja 1942), pisarka, żona Kevina Billingtona, ma dzieci Michael Aidan Pakenham (ur. 3 listopada 1943), ożenił się z Metą Doak, ma dzieci Catherine Rose Pakenham (28 lutego 1946 – 11 sierpnia 1969), zginęła w wypadku samochodowym Kevin John Toussaint Pakenham (ur. 1 listopada 1947), ożenił się z Ruth Jackson, ma dzieci
Kultura Starania hrabiego o ułaskawienie Myry Hindley zostały przedstawione w filmie Longford z 2006 r.