Fundado en 1923 bajo el nombre de Imperio Foot-Ball Club , el club cambió su nombre a Imperio Club de Fútbol en 1940 debido a las nuevas reglas lingüísticas en todo el país.
Después de jugar la temporada 1939-1940 en Segunda División (que terminó en descenso), Imperio finalmente se desempeñó como equipo de reserva del Atlético de Madrid durante un año. En 1943 el club logró el ascenso a Tercera División , pero se retiró después de cuatro años.