W 1891 przedstawił na łamach „Tambowskich Jeparchialnych Wiedomostiej” program gruntownych przekształceń w eparchii. Zapowiedział utworzenie nowych szkół parafialnych, organizację spotkań o tematyce religijnej poza nabożeństwami i bractw trzeźwości przy poszczególnych placówkach duszpasterskich. Wszystkich proboszczów zobowiązał, by do końca 1891 nauczyli parafian przykazań bożych, zaś regentów i chórzystów – do wykorzystywania w praktyce liturgicznej starych melodii cerkiewnych lub ich nowszych adaptacji. Zalecał również przyuczanie wiernych do wspólnego śpiewu podczas nabożeństw. Również w 1891 z inicjatywy biskupa Hieronima w każdym powiecie guberni tambowskiej rozpoczął działalność oddział bractwa misyjnego Kazańskiej Ikony Matki Bożej. Dwa lata później biskup otworzył przytułek dla będących w podeszłym wieku kapłanów, wdów po duchownych oraz sług cerkiewnych. Kolejną jego inicjatywą było utworzenie stowarzyszenia otaczającego opieką ubogich uczniów seminarium duchownego w Tambowie i przekształcenie comiesięcznego dotąd organu prasowego eparchii w tygodnik, co miało miejsce w 1893. Rok później hierarcha rozpoczął budowę nowej siedziby i szkoły duchownej w Tambowie.