Kariera Ramsaya w Izbie Gmin nie trwała długo. Po śmierci ojca w 1838 r. odziedziczył tytuł 10. hrabiego Dalhousie i zasiadł w Izbie Lordów. Swoją pierwszą mowę (maiden speech) w Izbie wygłosił 16 czerwca 1840 r. na poparcie kontrowersyjnego projektu ustawy Church of Scotland Benefices Bill lorda Aberdeena. W maju 1843 r. został wiceprzewodniczącym Zarządu Handlu w drugim rządzie Roberta Peela. Został również członkiem Tajnej Rady. W 1845 r. zastąpił Gladstone’a na stanowisku przewodniczącego Zarządu Handlu. Podczas kryzysu wywołanego zniesieniem w 1846 r. ustaw zbożowych Dalhousie stanął po stronie premiera Peela. Po upadku jego gabinetu w czerwcu 1846 r. nowy premier, lord John Russell, zaproponował Dalhousiemu pozostanie w gabinecie, ale hrabia odmówił. W 1847 r. przyjął jednak ofiarowane mu stanowisko gubernatora generalnego Indii.