Rodzina Ojciec Władysława, Witold Jaxa-Rożen, był sztabskapitanem armii rosyjskiej, zdymisjonowanym i skazanym na karę śmierci za okazywanie pomocy powstańcom styczniowym. Ułaskawiony przez cara Aleksandra II, został osadzony w twierdzy w Benderach. Matka, Maria z Matuszewskich, była córką Stanisława Matuszewskiego, członka Rządu Narodowego. Po śmierci Witolda wyszła za Szymona Kossobudzkiego. Siostra, Ludmiła, działaczka PPS, była pierwszą żoną Stanisława Grabskiego. Władysław Jaxa-Rożen był żonaty z Wiktorią z Kossobudzkich (1905), działaczką partyjną. Miał z nią troje dzieci: • Stanisława (1906–1985, płk. saperów, w kampanii wrześniowej 1939 w stopniu kapitana, dowódca kompanii przeprawowej Batalionu Saperów Warszawskiej Brygady Pancerno-Motorowej) • Marię (ur. 20 sierpnia 1907, działaczka PLAN-u, rozstrzelana 14 czerwca 1940 w Palmirach) • Bohdana (ur. 19 lutego 1915, student Wydziału Prawa UW, redaktor i wydawca pisma „Orka na Ugorze”, utonął w Dunajcu w czasie spływu kajakowego)