La historia de Silves se remonta a hace unos 3.0003000 años. Fue habitada por fenicios y cartagineses, y más tarde conquistada por los romanos. Recientemente, arqueólogos alemanes de la universidad de Jena han descubierto en un campo cerca de la localidad los restos de los muros de una villa romana. Se han hallado restos de cerámica y mosaico, el perfil de un edificio de tres alas, restos de los muros exteriores masivos, que rodeaban los muros interiores del edificio. Asimismo aseguran haber encontrado broches de bronce, restos de frescos murales, miles de teselas de mosaico y monedas con la efigie del emperador Constantino y ánforas.
Tras la conquista musulmana se convirtió en la capital de la región del Algarve, recibiendo el nombre de Silb durante el dominio musulmán.
