W kurii diecezjalnej w Płocku przedstawiali sprawę świątyni w Olszewce. lewo|mały|Widok na dzwonnicę, kościół, wystawę plenerową i tablicę informacyjną (2022) Kościół stanowił kaplicę w parafii Parciaki. Dojeżdżał tu ksiądz z Parciak i w wybrane niedziele odprawiał msze. Od 1980 obiekt jest świątynią parafialną. To jedyny ośmioboczny kościół w diecezji łomżyńskiej oraz jedna z 12 drewnianych świątyń w Puszczy Zielonej.
W parafii obchodzone są dwa odpusty: św. Antoniego, patrona parafii, i Najświętszego Serca Jezusowego jako wezwanie kościoła. W kościele są przechowywane relikwie św. Antoniego. Sprowadzono je do parafii w 2022.
Architektura lewo|mały|Kościół w Olszewce przed obłożeniem sidingiem Kościół jest orientowany, usytuowany równolegle do drogi przez Olszewkę. Ma konstrukcję zrębową, jest zbudowany na planie wydłużonego ośmioboku. Kościół ma 18 m długości, 8,5 m szerokości i 8 m wysokości do sklepienia.