Οι βασιλείς Ερρίκος Δ΄ και Λουδοβίκος ΙΓ' άφησαν επίσης το σημάδι τους στην πόλη. Ο Λουδοβίκος ΙΔ' γεννήθηκε στο κάστρο (το οικόσημο της πόλης απεικονίζει μια κούνια και την ημερομηνία της γέννησής του) και καθιέρωσε το Σαιν-Ζερμαίν-αν-Λαι ως κύρια κατοικία του από το 1661 έως το 1681. Ο Λουδοβίκος ΙΔ' παραχώρησε το κάστρο στον εξόριστο βασιλιά της Αγγλίας και της Σκωτίας Ιάκωβο Β' μετά την εξορία του από τη Βρετανία μετά την ένδοξη επανάσταση το 1688. Ο Ιάκωβος έζησε στο κάστρο για 13 χρόνια έως τον θάνατό του και είναι θαμμένος στην εκκλησία του Αγίου Ζερμαίν.