Architektura Faza I (zamek górny) Zamek został wzniesiony w stylu gotyckim w połowie XIV w., najprawdopodobniej przez Ottona z Pilczy herbu Topór i zastąpił istniejącą tu być może wcześniej drewnianą strażnicę. Pierwszy zamek składał się z murów obwodowych biegnących wokół skalnej platformy, budynku mieszkalnego we wschodniej części i cylindrycznej wieży (stołpu) o średnicy ok. 7,5 m. Wejście do stołpu znajdowało się na wysokości kilku metrów (dzisiejsze wejście na poziomie gruntu powstało znacznie później).
Faza II (zamek wschodni) Otton z Pilczy i jego żona Jadwiga z Melsztyna po 1350 r. wznieśli na wschód od zamku górnego zamek dolny składający się z kamiennego muru obronnego o grubości do 2 metrów założonego na planie pięciokąta. Na teren zamku dolnego wjeżdżało się przez zachowaną do dzisiaj gotycka ostrołukową bramę, w której znajdują się widoczne wgłębienia służące do spuszczania brony.