Trzy lata wcześniej siostra Karola – Maria Teresa Wirtemberska wyszła za starszego brata Diany – Henryka Burbona.
Po śmierci ojca w 1975 roku został głową rodziny Wirtembergów oraz prezesem Kamery Dworskiej rodziny Wirtembergów, do której należą: lasy, winnice, nieruchomości i ziemia w Niemczech, Kanadzie, Austrii i Hiszpanii, manufaktura porcelany, biuro projektowe. Oprócz zarządzania majątkiem rodziny, książę wspiera akcje charytatywne i programy socjalne. Wspiera Niemiecki Czerwony Krzyż, jest honorowym senatorem uniwersytetów Eberharda Karola w Tybindze i w Hohenheim.
Za swoje zasługi dla katolickiej diecezji Rottenburg-Stuttgart otrzymał w 2001 roku od papieża Jana Pawła II Order św. Grzegorza Wielkiego, który wręczył mu biskup Gebhard Fürst.
Został też odznaczony m.in. włoskim Orderem Annuncjaty.
Potomstwo Karol i Diana mają sześcioro dzieciThe Peerage: Fryderyk Filip (ur. 1961, zm. 2018)Zginął w wypadku samochodowym – ożenił się z księżniczką Wilhelminą Marią zu Wied, Matylda (ur. 1962) – wyszła za Ericha von Waldburg zu Zeil und Trauchburg, Eberhard (ur. 1963) – ożenił się z Lucią Désirée Copf, Filip Albert (ur. 1964) – ożenił się z Marią Karoliną Wittelsbach, córką Maxa Emanuela Wittelsbacha, Michał (ur. 1965) – ożenił się z Julią Storz, Fleur (ur.