Fortalicjum w Ostrorogu, o którym pisze kronikarz, było prawdopodobnie nieduże, ale opisu nie znajdujemy w powyższej kronice ani w ówczesnych źródłach. Przypuszczać jednak można, że - podobnie jak inne tego typu obiekty - był to niewielki obiekt drewniany łączący funkcje mieszkalno–obronne, wzniesiony był na kolistym wale otoczonym fosą, posiadał więcej niż jedną kondygnację (w najniższej kondygnacji znajdowały się z reguły magazyny i pomieszczenia gospodarcze, na kolejnych kondygnacjach pomieszczenia o charakterze mieszkalnym, a na poddaszu spichlerze). Z reguły w bliskości takiego dworu, zwanego też wieżą, znajdowała się zabudowa gospodarcza i domy kmieci. W Ostrorogu badania powierzchniowe, wykonane w 1914 roku, wskazały takową zabudową po wschodniej stronie Jeziora Wielkiego.
Pierwszy opis miasta (w tym również zamku) pojawia się natomiast pod koniec XV wieku. Opis miasta z tamtego okresu rozpoczyna się od opisania jeziora (dzisiejsze Jezioro Wielkie), określonego ówcześnie jako wielki zlew wód, który dzieli się na dwie części – jedna z nich płynie na północny zachód i wpływa do Warty w Wartosławiu, druga natomiast płynie na zachód i wpada do Warty przy Sierakowie.