Ultrera est situé sur un piton rocheux

Au 5^e siècle, après avoir mis Rome à sac, les Wisigoths se replient en Gaule méridionale. Argelès et le Roussillon font partie de la Septimanie. De cette période marquée par de nombreux conflits internes et luttes religieuses, il reste les vestiges d'une citadelle qui domine tout Argelès : le château d'Ultréra.
 
Ultréra est mentionné pour la première fois dans les textes en 673. Cependant, les Romains avaient du fortifier ce défilé qui mettait en communication la Gaulle avec la péninsule ibérique. A la fin du moyen-âge, Ultréra faisait partie de la seigneurie de Sorède.

Le château et l'église furent détruits en 1675 par les troupes françaises. Jeanne de Béarn, alors seigneur de Sorède, réussit à récupérer le mobilier de Sainte-Marie d'Ultréra et  fit transférer  l'ensemble à Sorède. Quelques années plus tard, elle fit édifier l'actuel ermitage  de Notre-Dame-du-Château.

D'Ultréra, il ne reste  aujourd'hui que quelques vestiges principalement regroupés sur la partie la plus haute du piton. Dans ce secteur on devine une ancienne citerne voûtée ainsi que les ruines de la chapelle dont les murs s'intégraient à l'époque, dans l'enceinte fortifiée. De style roman, elle se composait d'une nef terminée par une abside en forme de fer à cheval.

Y aller 

Les ruines de la forteresse d'Ultréra se dressent en haut d'un impressionnant piton rocheux qui domine à plus de 530 mètres d'altitude, le hameau de “la Pave”.  Pour y accéder depuis le centre d'Argelès village, prendre aux feux tricolores la direction de  Sorède (D2). 

A l'entrée de Sorède, avant de franchir le pont qui mène vers Laroque-des-Albères, tourner à gauche et suivre la rue du Campet jusqu'à la place du Christ.  Ensuite, prendre à gauche la rue de N.D d'Ultréra ; cette route se poursuit  par une piste carrossable menant à un parking. Laisser la voiture et continuer à pied jusqu'à l'ermitage (environ 5 minutes de marche).