Фрейзер блистал в конце 60-х – начале 70-х годов, владев несколько лет одновременно двумя поясами чемпиона мира в супертяжелом весе по версиям WBC и WBA. В 1971-м Фрейзер первым нанес поражение Мохаммеду Али, а вершиной их противостояния стал бой в 1975 году под названием “Триллер в Маниле”, который Джо проиграл Али. Из-за рассечения под глазом секунданты запретили ему выходить на последний раунд.
За свою карьеру Джо Фрейзер провел 37 поединков – 32 победы (27 нокаутом), 4 поражения, 1 ничья. По оценкам специалистов, Фрэйзер входит в число 10 лучших боксеров-супертяжеловесов всех времен.