La Plaza de Armas fue en principio la Plaza Mayor de San Roque, el suelo era de arena y aquí se celebraban los espectáculos taurinos; cuentan que aquí dio el primer pase de muletas Manuel Ballón “El Africano” en 1720. La plaza se creó como tal, con el suelo enlosado, en el año 1846. Se cree que su nombre procede de una escuela de esgrima que hubo aquí y a que sus alumnos practicaban este arte en la plaza.
En este lugar se encontraba la cárcel de la ciudad hasta que en 1847 se trasladó al antiguo convento de franciscanos, junto al Mirador Domingo de Mena. Hay un escudo de armas en la fachada en una de sus viviendas de la plaza perteneciente a la familia Rendón. En esta casa se alojó en 1775 el beato Diego José de Cádiz para oficiar la misa de Cuaresma de ese año.