Niewygody i uciążliwości podróżowania, głównie pociągiem, przez Amerykę nie osłabiały jej entuzjazmu dla poznawania nowych krajów i nie prowadziły do dolegliwości zdrowotnych. Te jednak pojawiły się z wcześniejszą intensywnością wraz z powrotem do Wielkiej Brytanii. W nadziei na poprawę zdrowia ponownie wyjechała do USA w 1857. Po śmierci ojca w 1858 Dora Bird przeprowadziła się z córkami do Edynburga, gdzie zmarła w 1866. Przez okres do początku lat 70. XIX w. siostry oddawały się przede wszystkim działalności społecznej: Henrietta angażując się na rzecz społeczności wyspy Mull, gdzie po śmierci matki kupiła dom (w Tobermory) i zamieszkała, a Isabella walcząc piórem o godne warunki życia dla mieszkańców miejskich slumsów w SzkocjiPor. rozdział Działalność pisarska poniżej, gdzie omówiono jej tekst Notes on Old Edinburgh.. Dolegliwości chorobowe stawały się tak bardzo uciążliwe, że Isabella bliska była załamania psychicznego.