Rabczak również zorganizował w placówce 10 pełnych plutonów oraz 1 pluton dywersyjny, a w czasie akcji „Burza” liczba członków organizacji dochodziła do tysiąca. 11 listopada 1941 Jan Rabczak otrzymał awans na stopień porucznika, 15 sierpnia 1944 na stopień kapitana. 23 lipca 1944 r. zarządził odprawę dowódców grup bojowych i wyznaczył termin rozpoczęcia akcji „Burza” na 26 lipca 1944Anna Kowalczyk Edukacja regionalna Program wycieczek po Tyczynie i okolicy dla klas IV–VI Tyczyn, 2006.
16 września 1944 został aresztowany w swoim domu przez żołnierzy Korpusu Bezpieczeństwa Wewnętrznego. 20 października 1944 został skazany przez Sąd Okręgowy w Rzeszowie na karę śmierci. Wyrok wydał płk Michniewicz. Następnego dnia wyrok zatwierdził gen. Rola-Żymierski. Następnie kpt. Rabczak został nocą wywieziony do lasów głogowskich. Gdy od żołnierza KBW usłyszał słowo „uciekaj”, pobiegł w ciemną noc przed siebie. Przez 5 miesięcy ukrywał się w różnych miejscach. 3 maja 1945 wyjechał do Leszna na tzw. Ziemie Odzyskane. 12 maja został sekretarzem gminy Wschowa, następnie sekretarzem powiatowym. Po uchwaleniu Ustawy z dnia 22 lutego 1947 r. o amnestii zgłosił się dobrowolnie do Urzędu Bezpieczeństwa Publicznego w Iławie. W 1949 spotkały go jednak kolejne represje ze strony władzy. W obawie po raz kolejny decyduje się na ucieczkę.