W obronie tytułu Nelson w 1909 wygrał przez techniczny nokaut z Dickiem Hylandem w 23. rundzie i z Jackiem Cliffordem w 5. rundzie. 13 lipca tego roku w Los Angeles stoczył walkę no decision z Adem Wolgastem, która zdaniem prasy wygrał Wolgast. Ponieważ jednak pojedynek nie zakończył się przed czasem, tytuł zachował Nelson. Po pokonaniu Eddiego Langa w styczniu 1910 Nelson ponownie zmierzył się z Wolgastem 22 lutego tego roku w Richmond. Stawką był tytuł mistrza świata. Pojedynek został zakontraktowany na 45 rund. Początkowo Nelson przeważał, ale później wskutek ciosów Wolgasta coraz gorzej widział. W 40 rundzie sędzia wstrzymał walkę ogłaszając zwycięstwo Wolgasta.
Nelson kontynuował karierę bokserską przez następne siedem lat. Wśród jego licznych walk można wymienić przegraną przez nokaut z Owenem Moranem w 1911 i walkę no decision z Adem Wolgastem w 1913, którą zdaniem prasy wygrał Wolgast. 17 kwietnia 1917 w Saint Louis Nelson spróbował odebrać Freddiemu Welshowi tytuł mistrza świata w wadze lekkiej w walce no decision, ale nie udało mu się pokonać czempiona przez czasem, Zdaniem prasy w tym pojedynku zdecydowanie przeważał Welsh.