Fortificação raiana, em posição dominante sobre o chamado monte do Castelo, defendia aquele ponto de travessia sobre a margem direita da foz do rio Guadiana, fronteiro ao Castelo de Ayamonte na margem oposta, hoje na Espanha. Ex-libris da vila, é considerado pelos estudiosos como um dos mais significativos monumentos da Idade Média portuguesa na paisagem da região. Encontra-se integrado na Reserva Natural do Sapal de Castro Marim, sendo bastante apreciada a vista panorâmica sobre o rio, a zona do Sapal, a serra algarvia, a Espanha, as salinas e as praias daquele litoral.
Em posição dominante sobre um monte, o castelo medieval (também denominado Castelo Velho ou simplesmente Castelejo) apresenta planta planta quadrangular irregular (orgânica), com quatro cubelos cilíndricos nos vértices dos muros, percorrido por adarve, onde se rasgam duas portas, uma a norte e outra a sul, uma das quais encimada por pedra de armas e inscrição epigráfica. No interior da praça de armas, erguem-se edifícios de dois pavimentos adossados aos muros oeste e norte; do lado leste, as ruínas da primitiva alcáçova. Externamente, identificam-se os restos da torre de menagem e de um baluarte que a ladeava.
Ao abrigo da barbacã, de planta triangular, percorrida por adarve, erguem-se a Igreja de São Tiago, a Igreja de Santa Maria, Igreja da Misericórdia e um núcleo museológico, com testemunhos arqueológicos da ocupação da região. No vértice sul ergue-se uma plataforma para artilharia, nos vértices leste e oeste, dois torreões de planta quadrangular, cobertos por terraços nos quais se rasgam portas em arco pleno. Encimando a porta do torreão oeste, uma pedra de armas e uma inscrição epigráfica."
