Las viviendas más antiguas de la localidad se encuentran en el casco antiguo, de calles peatonales y que tiene un trazado menos regular que el resto del núcleo. En la calle Nuestra Señora de la Oliva destacan una serie de viviendas de pescadores, que datan de inicios del siglo {{versalita|xx}} aproximadamente, las cuales están construidas mediante [[mampuesto]]s y tienen tejado a dos aguas de tejas curvas sobre entramado de vigas de madera.<ref>{{cita web|url= http://www.iaph.es/patrimonio-inmueble-andalucia/resumen.do?id=i1480&ids=110070086|título= Vivienda 0086 (Barbate)|editor= Instituto Andaluz del Patrimonio Histórico|fechaacceso= 28 de septiembre de 2013}}</ref><ref name="patrimonio" /> Fue a partir de la segregación de Barbate en 1938 cuando, acompañada del incremento demográfico y económico, se produjo la expansión urbanística de Barbate, en la que fueron figuras elementales Agustín Varo y Serafín Romeu como promotores y el [[Madrid|madrileño]] [[Casto Fernández Shaw|Casto Fernández-Shaw Iturralde]] como arquitecto.<ref name="Rivera" />
Entre los años 40 y 50, Casto Fernández-Shaw proyectó la construcción del ayuntamiento, que aún se utiliza como tal, y de la lonja de pescados y del matadero, estosque doshan últimossido reconvertidos en espacios de usos múltiples. Para el Ayuntamientoayuntamiento, el arquitecto se inspiró en el estilo [[Arquitectura neoclásica|neoclásico]], con la idea de hacer de la sede del [[Ayuntamiento|Consistorio]] un edificio monumental y solemne.<ref name="patrimonio" /> El edificio estaba coronado por un escudo de época franquista que fue retirado en 2017 por aplicación de la [[Ley de Memoria Histórica de España|Ley de Memoria Histórica]]<ref>{{Cita noticia|título=El Ayuntamiento de Barbate retira el escudo franquista que presidía su fachada|url=https://www.lavozdelsur.es/el-ayuntamiento-de-barbate-retira-el-escudo-franquista-que-presidia-su-fachada|fecha=2017-12-10|fechaacceso=2017-12-11|periódico=lavozdelsur.es|idioma=es}}</ref>. Por otro lado, la que hoy es la Lonja Vieja de Barbate fue una de las obras más características del madrileño. Es una muestra de [[racionalismo arquitectónico]], en la que prima la funcionalidad del edificio sobre su imagen. Pese a esto, el edificio evoca claramente la figura de un barco varado a orillas del río, gracias a un torreón a modo de mascarón de proa y a unos [[vano]]s semejantes a [[ojo de buey|ojos de buey]].<ref name="patrimonio" /><ref>{{cita web|url= http://www.iaph.es/patrimonio-inmueble-andalucia/resumen.do?id=i374&ids=110070003|título= Lonja de pescado (Barbate)|editor= Instituto Andaluz del Patrimonio Histórico|fechaacceso= 29 de septiembre de 2013}}</ref> Por su parte, para el matadero, hoy convertido en centro cultural, Casto Fernández-Shaw optó por la [[Arquitectura vernácula|arquitectura tradicional]] andaluza, que tiene elementos como la organización en torno a un patio (como un [[cortijo]] cerrado), las cubiertas de teja a dos aguas y el [[encalado]] de los muros.<ref name="patrimonio" />
