W tym czasie dobudowana została także wieża, a całość pokryto nowym dachem mansardowym.
Podczas II wojny światowej, w przeciwieństwie do wielu węgierskich pałaców, wystrój wnętrz, wyposażenie i sam budynek pozostały w większości nienaruszone. Po wyjeździe rodziny Festeticsów we wrześniu 1944 roku część zbiorów została zrabowana przez żołnierzy niemieckich i węgierskich oraz miejscową ludność, jednak znaczna część oryginalnego wyposażenia ocalała. W celu zapobieżenia przed grabieżami ze strony sowieckiej zamurowano skrzydło biblioteki, gdzie zgromadzono najcenniejsze wyposażenie, które przetrwało w ten sposób wojnę na swoim pierwotnym miejscu. Pozostała część ocalałych przedmiotów prawdopodobnie została wywieziona z pałacu do budynku uzdrowiskowego w Hévíz, należącego do rodziny Festetics, gdzie pozostała w nienaruszonym stanie. Po nacjonalizacji pałacu w 1948 roku do zwiedzania udostępnione było jedynie skrzydło biblioteki wraz z zamurowanymi wcześniej pomieszczeniami pod nazwą Biblioteka Helikona, która znajdowała się pod zarządem Państwowej Biblioteki Széchényiego. Pozostała część budynku była wykorzystywana przez wojsko, szkoły i bibliotekę powiatową.