Po ukończeniu rozbudowy, gdy wody napełniły głęboką fosę, Szydłowiecki kazał założyć zwierzyniec, w którym hodowano sarny, daniele, jelenie, zające i bażanty dla zamkowej rozrywki. Nowy ogród powstał na trzech połaciach terenu: dawnego ogrodu włoskiego czyli na północny zachód od wyspy, pomiędzy drogą do Starej Wsi a zabudowaniami gospodarczymi Podzamcza, oraz na wschód od zamku - na prawym brzegu rzeki, na obszarze pomiędzy stawem a nowo zakładaną częścią miasta - Skałką (obecny park). Założenie zwierzyńca poprzedzało lub odbywało się równolegle z wytyczeniem nowej części miasta. Na wyżej wymienionych połaciach znajdowały się: zwierzyniec, ogród owocowy, warzywny, oraz ozdobny ogród włoski, ogrodzony kamiennym murem. Mikołaj dokonał największych ukierunkowań kompozycji przestrzennej, która była kontynuowana przez następnych właścicieli.