En 1975, Spencer fue entrenador de lucha libre y lacrosse en la Universidad Estatal de Nueva York como asistente graduado. De 1976 a 1979 fue entrenador en Detroit County Day High School en Birmingham, Michigan. Spencer pasó los siguientes dos años como asistente de posgrado en la Universidad de Cornell. Después de entrenar durante una temporada en Gilman School en Baltimore, Maryland, Spencer recibió un puesto de entrenador en Ithaca College. De 1981 a 1985, fue el entrenador en jefe de primer año y en 1986 se desempeñó como coordinador ofensivo. Spencer se trasladó a Wesleyan University, donde fue entrenador en jefe durante cinco años (1987-1991). [1] Con un récord de 6-2 en 1990, terminó con un récord general de 14-26. De 1989 a 1990, Spencer entrenó a los Cleveland Browns y al ex entrenador en jefe de los New York Jets, Eric Mangini. [2]
Spencer comenzó su carrera en la NFL con los Cleveland Browns como asistente de entrenador con Bill Belichick en 1991. Su última temporada con el equipo fue en 1994.
Spencer se trasladó a los Oakland Raiders en 1995. Bajo Mike White , se desempeñó como entrenador de control de calidad durante la temporada de 1995. En 1996, fue nombrado entrenador asistente de apoyadores. En 1997, el nuevo entrenador en jefe Joe Bugel lo nombró asistente defensivo.
En 1998, Spencer fue contratado por los Indianapolis Colts como entrenador de equipos especiales Jim E. Mora . [2] Ocupó este cargo hasta la temporada 2001, el mismo año en que Mora dejó el equipo.
Spencer firmó con los Pittsburgh Steelers en 2002 y era miembro del personal cuando los Steelers ganaron el Super Bowl XL . En 2003, Spencer fue nombrada Entrenador de Equipos Especiales del Año.
Después de la temporada 2006, el ex coordinador ofensivo de los Steelers , Ken Whisenhunt, fue nombrado entrenador en jefe de los Arizona Cardinals. [3] A Spencer se le permitió salir del último año de su contrato con los Steelers para entrenar a los Cardinals. [2] Spencer hizo su segunda aparición en el Super Bowl en 2009 con los Cardinals. [1]