Las últimas actividades arqueológicas realizadas datan la población en la Edad de Hierro, se han encontrado viviendas, ánforas y vasijas del S VII a.C. La historia de La Villa es larga y también se han encontrado restos de su época Imperial Romana y de la época Árabe.
Ya en época almohade el Barrio de La Villa tenía la estructura típica de las ciudades hispano-musulmanas, contando para el llegar al barrio medieval con varias puestas de acceso.
En el Barrio de la Villa podemos destacar, por su interés histórico-artístico, diferentes monumentos y edificios. Entre ellos se pueden admirar la iglesia neoclásica de San Nicolás, las iglesias góticas de Santa María y del Salvador, la Torre del Homenaje, la Fortaleza, la Casa Mayor del Arte de la Seda, el Palacio del Cid, el Museo de Arte Contemporáneo «Florencio de la Fuente», la Judería y las Cuevas de la Villa.
El centro neurálgico del barrio lo representa, desde el siglo XVI, la Plaza de la Villa actualmente llamada Plaza de Albornoz.