Viveca Lindfors (1920–1995) była szwedzką aktorką filmową i teatralną, od 1942 mieszkającą w USA. Pobrali się w lipcu 1954. Tabori był jej czwartym mężem; zaadoptował troje jej dzieci z poprzednich małżeństw: Johna, Lenę i Kristoffera, wszystkie nosiły nazwisko Tabori. Para współpracowała na gruncie zawodowym. Rozwiedli się w 1972, gdy Tabori zdecydował się osiedlić w Niemczech.
Trzecią żoną była Ursula Grützmacher-Tabori, z którą poza małżeństwem łączyła go długoletnia współpraca zawodowa. Ursula przetłumaczyła na niemiecki wszystkie dramaty Taboriego napisane po 1970. Ich związek trwał 8 lat (1976–1984); po rozwodzie nadal pozostała jego jedyną tłumaczką. Zdaniem Taboriego przekłady Ursuli były doskonałe; „zawsze znajdowała ton tak właściwy, że tekst wydawał się napisany oryginalnie po niemiecku”.