A las afueras de Vitoria-Gasteiz se localiza la basílica de San Prudencio y San Andrés de Armentia, sede del culto a San Prudencio, patrón de Álava. Construida durante el siglo XII como colegiata, tuvo diferentes fases y, en el siglo XVIII, contó con una serie de modificaciones que desdibujaron su aspecto original. A pesar de ello, estamos ante uno de los edificios románicos más interesantes del País Vasco.
A lo largo de su historia, el enclave ha tenido diferentes usos y funciones: ha sido tenencia con una fortaleza hoy en día desaparecida, fue concebido como monasterio, tuvo un hospital para peregrinos y viajeros del camino de Santiago, fue ermita de gran devoción y, en sus años de decadencia, allá por el siglo XIX, se convirtió en almacén agrario y casa particular de un vecino de la zona.
A escasos metros de las termas romanas, vestigio más antiguo de la población de Arkaia, encontramos la iglesia parroquial de la Natividad. Los abundantes (aunque a veces ocultos) restos románicos que salpican todo el edificio permiten hacernos una idea de su aspecto en la Edad Media.
La iglesia de Villafranca se encuentra ubicada a los pies del cerro de Estíbaliz. Esta iglesia, dedicada a San Andrés, se construyó a partir del siglo XVI y no conserva resto medieval alguno, lo que aporta mucha información sobre la historia de esta histórica localidad.