W latach 50. zaczął się zmagać z nasilającym się uzależnieniem od narkotyków. Wprawdzie występował (w okresie wojny koreańskiej odbył z zespołem Oscara Pettiforda trasę koncertową w Korei Południowej i Japonii) i nagrywał, ale jego działalność zawodowa została wyhamowana. W początkach następnego dziesięciolecia uczestniczył w kilku przedsięwzięciach muzycznych producenta Georege’a Weina, ale w połowie dekady znów rzadko pracował. Pod jej koniec powrócił do występów, organizując big-band, trzykrotnie zakładany i rozwiązywany. Do nagrań powrócił dopiero 1976. W latach 70. zajmował się także nauczaniem muzyki w szkołach. natomiast w swoim mieszkaniu na Manhattanie dokształcał muzyków zawodowych w zakresie teorii, aranżacji i kompozycji. Ponadto w ostatnich latach życia występował w pobliskim, luterańskim Kościele św. Piotra w Nieszporach Jazzowych.
Zmarł w nowojorskim szpitalu Mount Sinai. Miał 69 lat.
Małżeństwo i dzieci Był żonaty z Tiną. Małżonkowie byli rodzicami czworga dzieci: synów – Howarda i Davida oraz córek – Dru Ann i Joylin.