W roku szkolnym 1925/1926 w jednej wynajętej sali o powierzchni 20 m² uczyło się 89 dzieci, w roku szkolnym 1930/1931 w jednej wynajętej sali o powierzchni 27 m² – 61 dzieci. Pracował tu jeden nauczyciel. W 1926 z inicjatywy nauczyciela Karola Synoradzkiego założono straż pożarną. Na początku lat 30. XX wieku liczba domów wynosiła 93.
W 1929 działacze społeczni z Olszewki próbowali przeforsować plan zorganizowania nowej gminy. Miały do niej należeć: Olszewka z dotychczasowej gminy Jednorożec, Poścień, Rachujka, Łaz, Budki, Sosnówek, Ostrówek, Rawki i Brodowe Łąki z gminy Zaręby oraz Dąbrowa i Wola Błędowska z gminy Baranowo. Nie otrzymano pozytywnej odpowiedzi ze starostwa w Przasnyszu.
W 1936 ks. Władysław Skierkowski prowadził we wsi badania etnograficzne na temat kultury Kurpiów Zielonych. Mieszkańcy innych wsi nazywali olszewiaków tukami. mały|Szkoła podstawowa Na dzień 1 września 1939 we wsi mieszkało 626 osób. W dniu 1 stycznia 1945 liczebność mieszkańców określono na 711 osób. mały|Linia nr 35 w Olszewce W czasie II wojny światowej w Olszewce aktywny był ruch oporu. Niektórzy mieszkańcy zostali zamordowali przez Niemców w styczniu 1945 w Starych Jabłonkach pod Ostródą. Po wojnie w okolicy działała antykomunistyczna partyzantka.