Od roku 1920 do 29 listopada 1927 roku był Naczelnym Kapelanem Policji Państwowej. Piastował również stanowisko prefekta szkół średnich w Warszawie. Pełnił funkcję prezesa Towarzystwa Rozwoju Życia Narodowego w Polsce. Od 1925 roku był generalnym kapelanem Stowarzyszenia Straż Narodowa. Był również członkiem zarządu Związku Kół Księży Prefektów, patronem Katolickiego Związku Polek.
W 1922 roku został posłem na Sejm I kadencji z Klubu Chrześcijańsko-Narodowego. thumb|240px|left|Tablica poświęcona żołnierzom września 1939 roku i powstańcom warszawskim poświęcona na nowym cmentarzu na Służewie przy ul. Wałbrzyskiej w Warszawie przez ks. Adama Wyrębowskiego
W latach 1928–1952 był proboszczem parafii św. Katarzyny w Warszawie. Przed wojną wykupił działkę i dwór służewski, przeznaczając je na miejscowy dom opieki. Stworzył przy parafii ośrodek kulturalny, stowarzyszenie katolickie grupujące zarówno młodzież, jak i starszych. Działała tu również orkiestra kościelna i chór, a dla wiejskich kobiet organizowano praktyczne kursy gotowania i szycia. Organizował też na terenie parafii wiele imprez o charakterze charytatywnym. W czasie wojny ksiądz Wyrębowski ukrywał na plebanii kilka osób pochodzenia żydowskiego.