Imposant rocher que Napoléon III décida d’utiliser comme point d’ancrage de la digue du Port du Refuge qu’il voulait créer. Aussi ce rocher fut il relié à la terre par un pont en bois (remplacée par une passerelle métallique attribuée à Gustave Eiffel) et percé d’un tunnel comme l’Atalaye, pour permettre l’amenée des blocs de pierre destinés à la construction de la digue. Ce rocher doit son nom actuel à la statue de la vierge érigée à son sommet en 1865.