W latach 1842–1945 wieś należała do pruskiej rodziny . W roku 1842 nabyli ją Rudolf Alexander Rogalla von Bieberstein i jego żona Nanny (z domu ). Krótko po roku 1877 Walter Alexander Rogalla von Bieberstein i jego żona Olga (z domu Schilke) wybudowali tutaj neoklasycystyczny dwór. Dwór ten, jak również zabudowania ówczesnego folwarku, zachowały się do chwili obecnej.
W 1904 r. do wsi należało prawie 30 włók. W 1935 r. w dwuklasowej szkole nauczało dwóch nauczycieli i uczyło się 57 uczniów. W 1939 r. Rozogi należały do parafii w Rybnie i miały 308 mieszkańców.
Zabytki Dawny dwór z zabudowaniami folwarcznymi. Droga oddziela zespół dworsko-pałacowy od podwórza gospodarczego. Klasycystyczny dwór pochodzi z drugiej połowy XIX wieku. Wybudowany na planie prostokąta, parterowy, ze ścianką kolankową i licznymi detalami architektonicznymi widocznymi w elewacji. Dach dwuspadowy. Dwukondygnacyjny ryzalit oraz taras z lustrzanymi schodami. Na początku XXI w. w posiadaniu Agencji Własności Rolnej Skarbu Państwa. Dawny park o charakterze krajobrazowym ze stawem.