O ile zwykle uznaje się go za Gruzina, o tyle częsta jest też opinia, że był on Osetyjczykiem, co było kilkakrotnie wykorzystywane w propagandzie Gruzji, jak i Osetii Południowej, pozostających ze sobą w konflikcieKamil Janicki, Osetia Południowa. Trzy ludobójstwa czy ratowanie ojczyzny? (do 1992), [w:] Źródła nienawiści. Konflikty etniczne w krajach postkomunistycznych, pod red. Kamila Janickiego, Histmag.org/Instytut Wydawniczy Erica, Kraków-Warszawa 2009, , s. 220..

Ojciec Józefa prowadził w Gori własny zakład szewski, gdzie zatrudniał co najmniej dziesięciu robotników, nie licząc terminatorów. Z czasem, jego postępujący alkoholizm doprowadził do upadku zakładuS.S. Montefiore Young Stalin, Vintage Books 2007, , s. 22, 29–36.. Przez problemy z alkoholem bił chłopca i jego matkę. Stalin starał się bronić przed agresją ojca, rzucając w niego po jednym z napadów furii nożem. Częste libacje alkoholowe doprowadziły w końcu do wyrzucenia „Beso” przez matkę chłopca. Według Montefiore Stalin w późniejszym czasie zawsze dobrze mówił o matce, którą charakteryzowała według niego „niezłomna siła woli”, z kolei według Radzińskiego po 1917 roku zapomniał o niej, odwiedzając ją tylko dwukrotnie. Kobieta zajmowała się praniem bielizny dla miejscowych kupców.