El 3 de enero de 1516, la madre de Francisco I Luisa de Saboya y su esposa, la reina Claudia, hija de Luis XII, fueron hasta el sur de Francia para encontrarse allí con el joven rey, aureolado por su victoria en Marignano. El 7 de enero de 1516 subieron hasta la ermita de Nuestra Señora de la Guarda y, unos días más tarde, el 22 de enero de 1516, Francisco I se unió a ellas y también visitó la capilla. Durante la visita, el rey se dio cuenta de que la ciudad de Marsella no estaba bien defendida. La necesidad de fortalecer el sistema de defensa fue aún más evidente en 1524 después del asedio a la ciudad por el condestable Carlos III de Borbón que tenía acuerdos con Carlos I de España y casi tomaron la ciudad. Francisco I decidió construir dos fuertes: uno en la isla de If, que se convirtió en el famoso castillo de If, y otro en la parte superior de la colina de la Guarda, donde estaba situada la capilla. Fue un ejemplo de convivencia entre un fuerte militar y un santuario abierto al público.