Kolejnym właścicielem Włodowic był hrabia Bernhard II, syn Bernharda I, który zmarł bezdzietnie w 1689 roku. Dobra włodowickie przejęli Stillfriedowie z Drogosławia i były w ich rękach do XIX w.
W 1586 roku, na mocy układu o dziedziczeniu z 1581 roku, posiadłości Georga (V) von Stillfried auf Neurode przeszły w ręce jego kuzyna Heinricha von Stillfrieda Starszego auf Mittelsteine (pana na Ścinawce Średniej). W k. XVI w. Heinrich Starszy podzielił wiejskie posiadłości między swych pięciu synów (w 1598 przekazał formalnie w użytkowanie, w 1600 - na własność).Kwaśniewski, Artur, Historia majątku ziemskiego i architektura dawnej siedziby szlacheckiej we Włodowicach Dolnych (pow. kłodzki). Wyciąg z dysertacji doktorskiej z 1998 r. Aktualizacja danych. Opinia o wartościach zabytkowych dworu i wstępne wnioski konserwatorskie. Wrocław, Maszynopis, 2021, s. 7.
W 1845 roku właścicielem zespołu dworskiego była rodzina von Götzen z pobliskiego zamku w Sarnach.