Wiek XVII W 1 połowie XVII wieku wzmocniono fortyfikacje oraz rozbudowano budynki gospodarcze na zamku dolnym. Zbudowano także beluard broniący bramy wschodniej, kurtynę północną i nową (trzecią) basteję północno-zachodnią. W 1607 roku zatrzymał się na zamku przez trzy dni król Zygmunt III Waza. W 1637 roku na zamku spotkał się Władysław IV ze swoją późniejszą małżonką Cecylią Renatą. Podczas tzw. potopu zamek po kilkugodzinnej obronie zajęli Szwedzi w dniu 17 września 1655 roku. Król Szwecji Karol X Gustaw w dniu 12 listopada przyjął na zamku na audiencji posła od Bohdana Chmielnickiego, a w dniu 20 listopada posła brandenburskiego. W związku z niewielkimi zniszczeniami zamek górny zaczęto odnawiać już w 1656, lecz w 1657 roku nowych zniszczeń dokonały wojska księcia Siedmiogrodu Jerzego Rakoczego. Zamek odnowiono w roku 1670, jednak zamek dolny przestał pełnić już rolę rezydencjonalną i stał się tyko zapleczem gospodarczym zamku górnego. Nowym elementem dodanym podczas restauracji był barokowy hełm na wieży.

Wiek XVIII Kolejne prace remontowe prowadzono w roku 1732 i w latach 1750, 1760 i 1782 z inicjatywy biskupa Kajetana Sołtyka, gdy naprawiono dachy, okna, drzwi, rynny i wieżę.