Z powodu skarg mieszkańców Halicza władze austriackie (urząd obwodowy w Stryju) nałożyły na Potockiego kaucję non desolando, czyniąc go odpowiedzialnym za ewentualne szkody, Potocki wolał jednak zrzec się wszelkich praw do zamku niż łożyć na jego konserwację i ponosić odpowiedzialność za bezużyteczne ruiny.
W latach 1763–1797 był ostatnim starostą niegrodowym w Czorsztynie, po wykupieniu dóbr czorsztyńskich w 1763 roku. Stał się wówczas właścicielem niszczejącego zamku w Czorsztynie, lecz nie dysponował środkami na jego remont. Jako starosta czorsztyński odegrał pozytywną rolę w odbudowie starostwa po zniszczeniach wywołanych buntami chłopskimi, doprowadził do podpisania ugody między starostwem a chłopami zatwierdzonej przez króla w 1768 roku, energicznie działał na rzecz rozwoju osadnictwaDawid Golik, Wojciech Mulets.Ochotnica i Tylmanowa: miejsca pamięci. Ochotnica Dolna: Urząd Gminy Ochotnica Dolna, 2020, s. 36–37. . [dostęp 2026-02-14].. Jego działania na rzecz rozwoju i odbudowy starostwa zostały przerwane przez rozbiory. Po I rozbiorze Polski (1772) wraz z innymi starostami Sądecczyzny złożył hołd cesarzowej austriackiej Marii Teresie, a na początku XIX wieku zamek w Czorsztynie stał się własnością Cesarstwa AustriiStanisław Kostka Michalczuk. Zamek Czorsztyn – pomnik historii Polski. „Przyroda i Człowiek”.