Cuando el geógrafo Tomás López preparaba su Diccionario Geográfico en el siglo XVIII, recogía un dato curioso. De los dos Alcaldes de la Hermandad de Ayala, uno tenía que ser de los lugares a la izquierda del río que pasa por Izoria y el otro del lado derecho.

En uno de sus trece barrios, se asentó la Torre de Ibargüen, uno de los cinco linajes importantes en Ayala.