Przez historię klasztoru przewijają się opowieści o napadach Tatarów, przed którymi kiedyś siostry uciekły na pobliskie wzgórze Góra św. Bronisławy. Jedna z nich, św. Bronisława, nie wróciła już do klasztoru – pustelnię miała w okolicy dzisiejszego Kopca Kościuszki.
Legenda o dzwonie topielców Tajemnicą klasztoru jest również Dzwon topielców. Są różne wersje tej legendy, a w klasztornych księgach pojawiają się zapisy o kłopotach z pękniętym dzwonem.
Było to dawno temu, kiedy przy klasztorze, położonym w dogodnym miejscu do przeprawy przez Wisłę, bo gdy woda opadała, można było przejechać konno na drugi brzeg, cumował prom. Korzystali z niego kupcy, jako że leżał na szlaku handlowym. Pewnej nocy ogromna wichura zerwała linę i prom popłynął z nurtem Wisły. Siostry zamierzały wybudować nowy. Nim to jednak nastąpiło, stało się nieszczęście: w nocy obudził je dźwięk sygnaturki, a kiedy przerażone wybiegły z cel, ujrzały jeźdźców pędzących na koniach – byli to kupcy – a za nimi ordę tatarską. Uciekający kierowali się w stronę przystani, nie wiedząc, że promu tam nie ma. Przybór wody nie pozwalał na bezpieczną przeprawę. I kupcy, i Tatarzy w pogoni za nimi, rzucili się w nurt Wisły. Utonęli wszyscy z wyjątkiem jednego kupca. Ten postanowił ufundować dzwon dla klasztoru.