La Casa de la Cultura de Isidro Gómez de Los Barrios es otro de los edificios históricos de la Villa.
Es una vivienda señorial del siglo XVIII. A principios del XIX fue vivienda familiar de Bartolomé del Castillo y Santos. Luego, por breve tiempo, sería arrendada al ilustre político local José González de la Vega, pasando más tarde a propiedad de los Parody, cuyo linaje familiar tenía bastante importancia mercantil en Gibraltar y en Cádiz.
En la primera mitad del siglo XX, sus patios y salones sirvieron como lugar de baile, mítines políticos e incluso como templo protestante. Por último, y hasta 1975, se transformó en casa cuartel de la Guardia Civil.
Tras su adquisición por el Ayuntamiento y su restauración se convirtió en sede de la delegación de Cultura, denominándose Casa de la Cultura Isidro Gómez, en memoria del poeta barreño, autor del pasodoble a Los Barrios, que es el himno local.