W 1970 r. we wsi mieszkało 277 osób. W tym czasie w Silginach była szkoła podstawowa i sala kinowa na 50 miejsc (w pałacu). W 1973 r. sołectwo Silginy należało do gminy Skandawa i obejmowało pięć miejscowości (osada Dobrzykowo, wieś Garbno, wieś Silginy, osada Solkieniki, leśniczówka Zielone). W latach 70. XX w., po wybuchu butli z gazem i częściowym uszkodzeniu budynku, w dużej części pałac został opuszczony. W tym czasie przynajmniej raz zatrzymali się na dłuższy postój w pałacu Romowie. Nieremontowany i niekonserwowany budynek systematycznie niszczał. W 1993 pałac został zakupiony przez polsko-niemiecką fundację Dittchebuche e.v. z Elmshorn z zamiarem urządzenia w nim Domu Przyjaźni Polsko-Niemieckiej. Podjęto drobne prace zabezpieczające. Jednakże już w 1994 remont przerwano a pałac niszczał dalej. Przed 2005 zawaliła się część murów i fragment dachu.
W latach 70. i 80. XX wieku funkcjonowała we wsi mleczarnia (zlewnia mleka) w nowo wybudowanym budynku. Część domów (jeden lub dwa) należały do leśnictwa. Nowo wybudowaną szkołę (tzw. tysiąclatkę) zamknięto już w latach 80. XX wieku, przeznaczając budynek na mieszkania prywatne.