Rozkwit przypadł na wiek XV, kiedy osada znajdowała się w posiadaniu Millicent, żony sir Stephena Le Scrope'a, a następnie sir Johna Fastolfa (1380–1459), rycerza z Norfolk, który był jej właścicielem przez 50 lat. Fastolf rozwijał przemysł wełniany, dzięki któremu zaopatrywał własne wojsko oraz oddziały innych rycerzy walczących we Francji za czasów Henryka V. Specjalnie do celów farbowania i tkania wełny zostało zbudowanych 50 domów, a woda z potoku By Brook napędzała maszyny. W XIX w. przemysł wełniany zaczął upadać, gdyż produkcja była przenoszona większych miast; osada powróciła do rolnictwa.

Od 1617 roku nie wybudowano żadnych nowych domów. Kościół został odnowiony w 1851 roku.

Współczesność W 1947 roku w wyniku sprzedaży aukcyjnej wieś przestała być własnością potomka dawnych właścicieli Paula Lysleya, posiadacza 2800-akrowego terenu Castle Combe estate, na terenie którego leżała osada – przechodząc w ręce dotychczasowych mieszkańców za ceny od 100 do 200 funtów. Starania o pozyskanie czynił National Trust, jednak zrezygnował, zadowalając się pozyskaniem sąsiedniego Lacock.