L’histoire de l’ermitage de Notre Dame du Château, situé au-dessus du village de Sorède, est liée au sort réservé au château d’Ultrera qui couronne le Puig Alt.
A l’origine, il s’appelait Castrum Vulturarium, c à d château du vautour, puis Castrum Vultararia et enfin Castell d’Ultrera.
Simple fort défendant la vallée de la Pave, sa construction serait antérieure au VIIe siècle puisqu’il en était déjà fait mention sous la domination wisigothique du roi Wamba. Il fut doté d’une chapelle au début du XIIe s dédiée à la Vierge Marie. ..
C’est sur ce site que le physicien portugais Manoel Antonio Gomes dit Padre Himalaya, installa durant l’été 1900 le premier four solaire jamais réalisé dans le monde.
On peut voir encore de nos jours le rail circulaire de béton sur lequel pivotait la machine et aussi les restes de la plate-forme construite en pierres sèches...