Hrabia Edgar sprowadził do Brynka Aleksandra Vlahovitisa von Dragomiresta wraz z jego rodzicami i zatrudnił go w charakterze zarządcy dóbr. Sam zmarł 14 maja 1939 roku. Po Edgarze panem na Brynku został jego syn - Karl Henckel von Donnersmarck, który przeżył ojca tylko o 8 miesięcy. 26 stycznia 1940 roku zginął na wojnie, a dobra przeszły w ręce jego trzech córek. Wszystkie miały, na cześć matki na pierwsze imię Maria, lecz posługiwały się drugimi imionami: Wilhelmina, Zofia i Karolina. Ta ostatnia była najbardziej znana w okolicach Brynka. 17 lipca 1944 roku Maria Karoline Walerie Gabriele Josephine Elizabeth Anna von Donnersmarck wyszła za mąż za majora wojsk pancernych, Clemensa, Heinricha, Karla, Hubertusa, grafa von Kagenecka. Z początkiem wojny siostry wraz z matką zostały zmuszone do opuszczenia pałacu, gdyż rodzina nie kryła niechęci do narodowego socjalizmu.
Hrabianki zamieszkały w „domu ogrodnika” nieopodal kotłowni. W opustoszałym pałacu otwarto szkołę dla członków Hitlerjugend, a później Seminarium Nauczycielskie im. Adolfa Hitlera. Również kaplica pałacowa została zamknięta i przerobiona na nazistowską bibliotekę.