Już w XIX wieku istniały poważne wątpliwości co do położenia tych wysp; do 1910 roku linia zmiany daty była wygięta w kierunku zachodnim, aby wyspy Morrella i Byersa znajdowały się po tej samej stronie, co archipelag hawajski.
Ganges mały|Nakanotorishima (Ganges) na mapie Japonii z 1941 (z prawej pośrodku) Wyspa Ganges pojawiła się na europejskich mapach w latach 1830 i na mapach japońskich w 1855. Kilka odrębnych raportów wskazywało na istnienie wyspy, bądź rafy w pobliżu . Nazwa Ganges pochodzi od jednego ze statków wielorybniczych pływających na tych wodach. Próby jej zlokalizowania spełzły na niczym, aż w 1908 roku Japończyk Teizaburo Yamada zgłosił władzom Podprefektury Ogasawara jej pozycję: , wraz z mapą, opisem zasobów w postaci licznych albatrosów i guana. Wyspa została uznana za terytorium japońskie, nadano jej nową nazwę: Nakanotorishima (). Na przełomie 1913 i 1914 roku ekspedycja wysłana na wyspę bezskutecznie próbowała ją zlokalizować, przeczesując obszar w promieniu 100 mil morskich od wskazanej pozycji.