En el siglo XIII, Saint-Raphaël estaba bajo la autoridad del obispo de Fréjus, que ocasionalmente reside allí, así como en Fayence y Puget, siendo su residencia principal Fréjus. Fue él quien inició la construcción de esta torre, erigida en el brazo del crucero sur de la Iglesia de San Rafeu, a finales del siglo XIII.

Esta torre fortificada, cuyo origen durante mucho tiempo se atribuyó erróneamente a los templarios, debido a similitudes en las técnicas de construcción, es más un símbolo de autoridad que un elemento defensivo. 25 metros de altura, tiene 3 plantas y sus muros están formados en lugares de antiguas reutilizaciones.

No fue hasta 1881 que se colocó el campanario de hierro forjado en la parte superior de la torre, así como la campana, que pesaba 100 kg y martillaba las horas. En la parte superior de los 129 escalones, se abre un magnífico panorama de 360 ??°, desde las cumbres del Estérel hasta la punta de Saint-Tropez, pasando por los estanques de Villepey, la roca de Roquebrune y una vista impresionante. de la basílica y sus cúpulas bizantinas.