Być może Kazimierz Wielki zburzył gród, znajdujący się na terenie obecnej wsi Kolonia Bolesławiec, a zachowany do dzisiaj zamek, król zbudował w nowym miejscu, na co może wskazywać to, że podczas prac archeologicznych na zamku nie znaleziono śladów obiektu starszego niż XIV wiek.
XIV – XV wiek
Murowany zamek w Bolesławcu powstał przypuszczalnie już przed 1340 rokiem, a więc w początkach panowania Kazimierza Wielkiego. Budowę zamku przez Kazimierza Wielkiego poświadczyli w swoich wzmiankach kronikarze Janko z Czarnkowa i Jan DługoszPietrzak J., Zamki i dwory obronne w dobrach państwowych prowincji wielkopolskiej, Łódź 2003.. Prosty kształt zamku w pierwszej fazie może wskazywać, że pełnił rolę czysto militarną, jako warownia graniczna strzegąca Królestwa Polskiego od będących ówcześnie pod wpływam czeskim Księstwa Opolskiego. Mur o wysokości 5 m i grubości do 2,4 m został zbudowany na fundamentach z kamieni eratycznych. Łączna długość muru obwodowego wynosi 170 m. Od strony południowej wzniesiono wieżę bramną o wymiarach 6,5 × 7,5 m z przejazdem o szerokości 2,5 m zamykanym mostem zwodzonym. Wewnątrz murów znajdowała się zabudowa drewniana.