Na sejmie repninowskim 1767 nie uznał dyktatu posła rosyjskiego Nikołaja Repnina w sprawie narzucenia Polsce tzw. traktatu gwarancyjnego, który dawałby prawno-formalną podstawę do ingerencji Rosji w wewnętrzne sprawy Polski, za co 14 października 1767 roku wraz z trzema innymi senatorami (hetmanem polnym koronnym Wacławem Rzewuskim, jego synem, posłem podolskim Sewerynem Rzewuskim oraz biskupem kijowskim Józefem Załuskim) został na rozkaz Repnina podczas trwania sejmu uwięziony i wywieziony do Kaługi, skąd powrócił dopiero w 1773. Czyn ten stał się jedną z przyczyn katalizujących zawiązanie przez szlachtę konfederacji w Barze (konfederacja barska). Repnin ogłosił, że uwięził ich za obrazę majestatu Katarzyny II. Porwany Sołtyk zdołał jeszcze wydać manifest, w którym wzywał do modlitw o całość wiary i utrzymanie wolności narodowych. thumb|Rokokowe epitafium bp. Kajetana Sołtyka w Parafii Podwyższenia Krzyża św. w Sławkowie, stan po renowacji w 2010 r. Wróciwszy w 1773 r., entuzjastycznie witany przez naród, próbował organizować opór przeciw uznaniu pierwszego rozbioru. Rychło popadł w melancholię, potem obłęd i wdał się w gorące spory z kapitułą krakowską, które spowodowały odsunięcie go od obowiązków biskupich.