W 1816 roku w pojedynku ze studentem Friedrichem von Saldernem, zginął nie pozostawiając dziedzica, ostatni męski potomek rodu, linii z Drogosz, 20-letni Stanisław Otton von Dönhoff (1795–1816). Po jego śmierci, zgodnie z zasadami majoratu, w majątku przez około pół wieku rządziła kobieta – hrabina Angelika zu Dohna, która rozwiodła się z mężem hrabią Dohna-Lauck w 1830. Hrabina Angelika miała duży wkład w rozwój majątku m.in. upiększyła wnętrza, zmieniając ich styl, rozbudowała znacznie park krajobrazowy, rozwinęła zabudowania folwarczne. W 1830 roku na jej polecenie przebudowano przypałacową kaplicę na styl neogotycki.
Po śmierci Angeliki zu Dohny, majątek przejęła jej siostrzenica hrabina Marianna Stolberg-Wernigrode, a ród Stolberg-Wernigrode nieznacznie powiększył dobra, jakie otrzymał po Dönhoffach. W połowie XIX wieku zarządzał terenami znajdującymi się na ziemiach ówczesnych powiatów kętrzyńskiego i mrągowskiego, o łącznej powierzchni równej 5866 ha. Natomiast w samym pałacu, poza dobudowaniem pod koniec XIX wieku do przypałacowej kaplicy rodowego mauzoleum, nie dokonali znaczących zmian. Dobra pozostawały w ich rękach aż do zakończenia II wojny światowej, a ostatnim właścicielem majątku był Albrecht Graf zu Stolberg-Wernigerode (1886–1948).