Kolejne dramatyczne wydarzenia były udziałem zamku w XVII wieku, podczas pierwszej angielskiej wojny domowej. W tym czasie zamek był dwukrotnie oblężony i 25 lipca 1645 roku dostał się w ręce wojsk parlamentarnych. Jednak dalsze fazy wojny sprawiły, że forteca wraz z miastem jeszcze kilka razy zmieniała swoją przynależność, znajdując się we władaniu bądź to zwolenników monarchii, bądź to sił rządowych. Ostatecznie, aby uniemożliwić rojalistom wykorzystywanie zamku jako twierdzy, parlament angielski nakazał rozebranie umocnień.
Przez ponad dwa kolejne stulecia zamek służył jako więzienie, a następnie jako koszary wojskowe.
16 grudnia 1914 roku, w czasie I wojny światowej, miasto i pozostałości umocnień dostały się pod ostrzał dwóch niemieckich krążowników liniowych: "Derfflinger" i "Von der Tann". Zarówno zamek jak i Scarborough poważnie ucierpiały w wyniku tego ataku.
Czasy współczesne Zamek Scarborough jest obecnie zarządzany przez fundację English Heritage, która przejęła miejsce w 1984 roku. Istniejące zabudowania odrestaurowano w