W 1925 roku na zebraniu zgromadzenia parafialnego podjęto decyzję o wzniesieniu nowego, murowanego parkanu oraz o urządzeniu bramy wjazdowej i furtki. Postanowiono także wybudować w okolicach cmentarza jednoizbowy domek z kuchnią, który miał być przeznaczony na mieszkanie dla grabarza. Postanowiono także obudować parkanem przylegający do cmentarza ogród owocowo-warzywny, który stanowił własność proboszcza i miał zostać przeznaczony na dalsze rozszerzenie cmentarza. Przeciwko tym działaniom zaprotestował jednak kłodawski proboszcz – ks. Hipolit Pyszyński, który dopatrzył się w działaniach zgromadzenia „zamachu na całość posiadania probostwa w Kłodawie” i w związku z tym wysyłał pisma m.in. do magistratu miasta, starosty powiatu kolskiego oraz do kurii diecezjalnej w Łodzi, planował także powiadomić w tej sprawie urząd wojewódzki oraz prokuraturę.