Джо Фрейзер виступав у важкій ваговій категорії. У 1964 році він став Олімпійським чемпіоном. Однак найбільше відомий його поєдинок з колишнім чемпіоном світу у важкій вазі Мохаммедом Алі.

Ця зустріч на рингу в 1971 році увійшла в історію боксу, як чемпіонський бій двох непереможних чемпіонів. У підсумку, Мохаммед Алі вперше за свою кар'єру програв поєдинок.

Згодом Фрейзер і Алі ще двічі зустрічалися на рингу, але обидва рази успіху добивався Мохаммед. З Алі Фрейзера все життя пов'язували непрості стосунки: вони не раз обмінювалися образами, потім мирилися, потім сварилися знову.