Después de haber sido inicialmente un jugador de fútbol de la asociación (pasando a prueba en el Bristol City Football Club cuando tenía 14 años), Rafter se convirtió en un jugador de rugby como alumno en St Brendan's College y se inscribió en Bristol, haciendo su debut en 1973. contra Exeter. Luego se convirtió en capitán del equipo de Bristol y los llevó a su histórica victoria en la copa sobre Leicester en la temporada 1982–83. [1]
Rafter hizo su debut en Inglaterra en 1977 en la victoria 26-6 sobre Escocia en Twickenham . Fue miembro del equipo ganador del Grand Slam de 1980 y compitió en su último partido internacional con Inglaterra en 1981, contra Argentina en Buenos Aires , para terminar su carrera internacional con 17 partidos internacionales. [2]