Joseph Spencer tiene dos pérdidas contra dos oponentes en su carrera de boxeo. Para una lista de las mejores peleas de Spencer, consulta "Mejores peleas de Joseph Spencer".
El 6 de abril de 2025 Joseph Spencer se enfrentó a Tim Tszyu en un combate de semimedio a la edad de 25. Él entró con un récord de 19-2 (11), y Tszyu tenía 30 años y un récord de 24-2 (17). Spencer perdió la pelea por TKO en el asalto 4º.
El 25 de marzo de 2023 Joseph Spencer se enfrentó a Jesus Alejandro Ramos Jr. a la edad de 23. Él entró con un récord de 16-1 (10), y Ramos Jr. tenía 22 años y un récord de 19-0 (15). Spencer perdió la pelea por TKO en el asalto 7º.