Życie prywatne Był trzykrotnie żonaty. Po raz pierwszy zawarł związek 12 maja 1823 roku w Le Rœulx z Mélanie de Conflans (1802–1833), córką Charlesa Louisa (1772–1849) i Amélie de Croÿ (1774–1847). Z tego małżeństwa pochodzi pierworodny syn Eugène’a:
Henri Maximilien Joseph Charles Louis (ur. 16 października 1824, zm. 27 listopada 1871) ⚭ Marguerite de Talleyrand-Périgord (1832–1917), córka (1807–1871) i Marie Louise Le Peletier de Mortefontaine (1811–1893).
Ponownie ożenił się 21 lipca 1834 w Brukseli z Nathalie de Trazegnies (1811–1835), córką (1762–1849) i Marie Louise de Maldeghem (1785–1844). Małżeństwo miało jedyną córkę:
Nathalia Flora Georgina Eugénie (ur. 31 maja 1835, zm. 23 lipca 1863) ⚭ (1823–1902), syn Alfreda (1789–1861) i Eleonore von Salm-Salm (1794–1871).
Trzeci i ostatni związek małżeński zawarł 28 października 1836 w Wiedniu z Jadwigą Lubomirską (1815–1895), córką Henryka (1777–1850) i Teresy Czartoryskiej (1785–1868). Z tego związku pochodzi czworo dzieci: