Mikołaj założył także park wokół zamku, poszerzył fosę oraz utworzył zwierzyniec i ogród włoski.

Siedziba „hrabstwa” Radziwiłłów (1548–1802) thumb|left|Kartusz herbowy Mikołaja Krzysztofa Radziwiłła „Sierotki” nad portalem wejściowym zamku, 1670–1680. Na Mikołaju i Krzysztofie zamykają się dzieje linii męskiej rodu Szydłowieckich. W 1548 roku, poprzez małżeństwo córki Krzysztofa, Elżbiety z Mikołajem Radziwiłłem „Czarnym” miasto z otaczającymi je dobrami przeszło w posiadanie nowożeńca. Nowy właściciel miasta otrzymał tytuł hrabiego na Szydłowcu od cesarza Ferdynanda I i chętnie go używał. Rezydował na stałe w Nieświeżu, a dobrami szydłowieckimi zarządzali w jego imieniu starostowie i dzierżawcy.

Choć nowi właściciele Szydłowca nie mieszkali tu stale, troszczyli się o rozwój miasta i zabiegali o kolejne przywileje królewskie. Dekretem Zygmunta Augusta z 1550 roku Szydłowiec otrzymał dwa kolejne jarmarki. Szydłowieccy kupcy mogli też handlować na obszarze całej Rzeczypospolitej, zwolnieni od opłat targowych i ceł wodnych. Handlowali żelazem, drewnem, wyrobami skórzanymi, szklanymi, płodami rolnymi. Podejmowano dalekie wyprawy handlowe na Ruś i Litwę.