Władysława Łęgi - działało Polskie Towarzystwo Krajoznawcze. Podczas okupacji gmach przejęła niemiecka Książnica Miejska (niem. Stadtbücherei Graudenz) i ogromna większość polskich zbiorów została natychmiast z premedytacją zniszczona. Z kolei budynek został zdewastowany a księgozbiór niemiecki poniósł znaczne straty podczas walk toczonych o miasto w 1945 r.
Po 1945 Biblioteka Miejska rozpoczęła działalność 20 maja 1946 r., jej pierwszym powojennym dyrektorem została Helena Minkiewicz. Po roku zbiory liczyły 1436 książek polskich, z których korzystało 1201 czytelników. W 1949 r. powstała pierwsza filia biblioteczna, później kolejne. W 1956 r. muzeum otrzymało nową siedzibę i biblioteka stała się głównym gospodarzem gmachu przy ul. Legionów, który dzieliła z Biblioteką Powiatową i Powiatowym Archiwum Państwowym. Tu też miał siedzibę oddział Polskiego Towarzystwa Historycznego. W latach 1972–2007 dyrektorem była Karola Skowrońska. Od czasu gruntownego remontu w latach 1973–1975, gmach służy wyłącznie celom bibliotecznym, chociaż siedzibę miały tu również Grudziądzkie Towarzystwo Kultury i Fundacja na Rzecz Tradycji Jazdy Polskiej. Do 1990 r. podlegały jej również inne biblioteki w rejonie Grudziądza. W 1996 r. otrzymała imię Wiktora Kulerskiego.