Od 15 listopada 1927 r. ustanowiono tu parafię dla obszaru dworskiego Kolibki, Orłowa oraz położonej na północ od torów stronie Małego Kacka. W 1928 do parafii w Kolibkach należały 143 osoby, zaś w 1934 było to odpowiednio po: 237 mieszkańców obszaru dworskiego Kolibki, 94 - z Orłowa oraz 294 - z Małego Kacka.
Ostatnim pracującym tu księdzem był ks. Roman Wiśniewski.
W 1939 hitlerowskie władze okupacyjne zamknęły kościół oraz rozpoczęły jego wyburzanie. Rozbiórka trwała od jesieni 1939 do wiosny 1940 roku. Zniszczono też fundamenty, ogrodzenie cmentarza oraz kapliczkę przycmentarną. Obrazy przeniesiono do kościoła na Witominie, gdzie spłonęły w 1945 roku.
W kościele znajdowały się trzy czczone przez miejscową ludność obrazy:
obraz Matki Bożej Piaseckiej (namalowany dla Królowej Marysieńki), obraz Matki Bożej na drewnie (XVI), obraz Świętej Rodziny z głównego ołtarza.
W 1999 r. z inicjatywy Towarzystwa Przyjaciół Orłowa postawiono w obrębie zarysu fundamentów kościoła niski murek, na którym umieszczono tablicę informującą o dziejach świątyni.