Przyczyną była odległość do kościoła macierzystego wynosząca od 7 do 11 km. Wtedy wydzierżawiono jedno z pomieszczeń karczmy kosztowskiej na tymczasową kaplicę, w której odprawiano nabożeństwa. 1 maja 1919 rozpoczęto wykopy pod mury mającego powstać kościoła. W połowie października budynek był gotowy w stanie surowym. Kościół postawiono w środku wsi Krasowy w mniej więcej równej odległości między Wesołą a Kosztowami. Projekt architektoniczny wykonał architekt Kokoszyński, a budowę nadzorował ks. Jan Wodarz, który następnie został pierwszym proboszczem nowej parafii. 1 sierpnia 1925 została erygowana parafia.

Duszpasterstwo Największe zasługi w organizacji parafii posiada jej pierwszy proboszcz ks. Jan Wodarz. Dobrze wykształcony, posiadał bardzo bogatą bibliotekę teologiczną. Założył Kongregację Mariańską Panien i Młodzieńców, następnie III Zakon franciszkański, Żywy Różaniec, Bractwo Najświętszego Serca Jezusowego, Bractwo Matek Chrześcijańskich, Apostolstwo Mężów, Kółko św. Józefa, stowarzyszenie misyjne Dzieło Dziecięctwa Jezus, Katolickie Stowarzyszenie Młodzieży Męskiej. Z danych liczbowych wynika, iż w okresie międzywojennym ponad połowa mieszkańców należała do organizacji parafialnych. W 1933 ks. Wodarz zaprosił do parafii siostry służebniczki, które zajęły się ambulatoryjną opieką nad chorymi.