W latach 1940–1944 na stadionie swoje mecze rozgrywała niemiecka drużyna SG Bromberg.
Po wojnie obiekt służył jako główny stadion miejski dla różnych dyscyplin sportu i dla wielu klubów. Mecze rozgrywali tu także m.in. piłkarze Zawiszy do czasu wzniesienia własnego stadionu. W 1949 po likwidacji klubu Polonia, miasto przekazało obiekt MKS Gwardii (od 1957 MKS Polonia). Po 1960 funkcję głównego miejskiego stadionu piłkarsko-lekkoatletycznego przejął nowy obiekt Zawiszy, natomiast stadion Polonii modernizowano głównie pod potrzeby rozgrywanych tu imprez żużlowych. W latach 1963–1964 wybudowano bandy ochronne, zaplecze warsztatowe, boksy dla zawodników, a w latach 60. oświetlenie, które zdemontowano pod koniec lat 80https://web.archive.org/web/20170225052327/http://www2.um.bydgoszcz.pl/sport/obiekty-sportowe/Stadion_Polonii.aspx#1 dostęp 2017-02-23.. Tor żużlowy kilkukrotnie skracano, dostosowując go do międzynarodowych przepisów: 550 m (1948), 460 m (1951), 399 m (1964), 374 m (1987), 348 m (1991).