Esto llevo,a que en el año 1921, algunos de aquellos estudiantes constituyeran el primer club deportivo de la ciudad, vestirían uniforme blanco, y cosecharía sus primeros triunfos sobre el Moralo y Academia de Infantería. En 1926 surgen otros conjuntos de colegios y barriadas de Talavera, tres años mas tarde, se proyecta la idea de reformar este club en otro mas potente. Esta idea es aceptada con gran entusiasmo entre afición, jugadores y distintos clubes de la ciudad, de esta fusión de clubes nace el Club Deportivo Talavera, encabezando en la presidencia por D. Juan Angulo, considerado como primer presidente reconocido del club, y que estaría acompañado en las tareas de dirección por el Sr. Montero y el Sr. Caballero.

El crecimiento del club le lleva atener que abandonar "El Prado" y trasladarse al Santa Clotilde. Disputando partidos contra equipos como Toledo, Torrijos, Rácing y otros muchos. Los primeros resultados fueron muy positivos y esperanzadores para la entidad ya que de 16 partidos disputados, ganaron 8, empataron 2, perdieron 6 y en total marcaron 52 goles.

Pero no todo iba a ser positivo, y llegan problemas al club, derivando en su desaparición. El relevo lo tomaría el Club Deportivo San Prudencio cuyo presidente sería D. Moisés de las Heras. Tras unos cuantos años en categoría regional, en el año 1948 se convoca una asamblea general en el Teatro Victoria, con el fin de recuperar aquel anhelado Club Deportivo Talavera, por aplastante mayoría el personal convocado aprueba tal propuesta, naciendo lo que es hoy en día el Talavera Club de Fútbol, que tomó el compromiso de mantener como filial del club a aquel que le había dado su puesto (el Club Deportivo San Prudencio). ya en la temporada 1930/1931 vuelven al campo abierto del Prado, que se lamentan de que este no estuviera cerrado para así obtener algún beneficio económico y así poder traer clubes de mayor relevancia. Pero este anhelado sueño, se hace realidad en el año 1944, ya que en este año será cuando se vuelve a poner en marcha el club una vez terminada la Guerra Civil que sufrió todo el país, y el 30 de abril de ese mismo año se inauguraría el cerramiento de lo que hoy es su actual campo.

Ya en la temporada 1974-1975, después de muchos años jugando en categoría regional, el Talavera ascendería a Tercera División siendo en este momento el presidente del club D. Juan Bermúdez y el entrenador del mismo Pinto. Este hecho sería celebrado en toda la ciudad, así como en la barriada madrileña de Ventas ya que fue allí donde se disputo tan memorable encuentro.

En los años 1981/1982 el campo municipal del Prado, sufrió una serie de remodelaciones, obligando al equipo a disputar sus partidos en el campo de fútbol de una localidad vecina a Talavera, Alberche. Una vez finalizadas las obras el campo se reinaugura en mayo del 1982 con el césped que en la actualidad luce. Este mismo año el equipo vuelve a ascender de categoría pero esta vez a Segunda B, en la temporada 1984/1985 el equipo vuelve a descender debido a la reestructuración del fútbol nacional que dictamino que solo permanecerían en la categoría los 8 primeros clubes de cada Segunda B, quedando el Talavera en una mas que merecida 9ª posición.

En la temporada 1988/1989 la existencia del club peligra, ya que nadie quiere hacerse al frente, pero esto duraría poco y gracias a los jugadores del momento y a D. Federico Gómez como presidente el club sale adelante. Ya en la temporada del 92/93 y tras la dimisión del hasta entonces su presidente D. Juan Bermúdez, se hace cargo del mismo D. Ignacio Valero, vicepresidente del mismo hasta ese momento. Logrando que el equipo ascendiera a la anhelada 2ª división B, siendo en este momento el entrenador del equipo Félix Banderas "Felines".