Badeniowie posiadali pałac aż do połowy XIX wieku, kiedy to już mocno zniszczony pałac wszedł we własność rodziny Tarnowskich.
Podjęli oni decyzje o całkowitej przebudowie budynku, który został zaprojektowany przez Antoniego Łuszczkiewicza w 1878 – ta forma budynku zachowała się do dziś. W Pałacu w tym okresie mieszkał profesor Uniwersytetu Jagiellońskiego hr. Stanisław Kostka TarnowskiDawny pałac Tarnowskich (Pałac na Szlaku) www.polskaniezwykla.pl [dostęp 2017-01-28]. Przed 1939 rokiem przeszedł w ręce Zgromadzenia Salwatorianów. Podczas wojny zaadaptowany na siedzibę Hitlerjugend. Rodzina Tarnowskich przekazała miastu do użytku publicznego przypałacowy park, nazwany później Parkiem Jalu Kurka.
W okresie okupacji hitlerowskiej znajdował się tu sztab Hitlerjugend.
Po II wojnie światowej budynek został odebrany zgromadzeniu zakonnemu. W 1950 roku stał się on siedzibą Radia Kraków. Pełnił tę funkcję aż do 1998 roku, kiedy radio zostało przeniesione do nowo wybudowanej siedziby przy al. Słowackiego. Od tego czasu budynek stał pusty i niszczał.