La leyenda del boxeo había sido ingresado por problemas respiratorios. Se retiró en 1981 y luchó contra la enfermedad de Parkinson durante años. Su salud estaba cada vez más debilitada y trataba de llevar una vida tranquila en el área de Phoenix con su cuarta esposa, Lonnie, con quien se casó en 1986.