Während der Hugenottenkriege im 16. Jahrhundert starb die Hauptlinie der Familie aus. Eine bedeutende Rolle spielte hierbei Thiébauld II und die verlorene Schlacht bei Moncontour 1569. Mit dem Ende des Dreißigjährigen Krieges 1648 (Westfälischer Friede) erreichte Frankreich bedeutende territoriale Zugeständnisse im Elsass, wodurch die Machtansprüche der Familie in der nunmehr französischen Region verloren gingen. Darüber hinaus mussten die übrigen Zweige der Familie aufgrund ihrer erfolglosen Unterstützung der Hugenotten im Kampf gegen den französischen König die angestammte Region verlassen und in der ihnen wohlgesinnten Schweizerischen Eidgenossenschaft Zuflucht suchen. Einer dieser Familienzweige konzentrierte sich in der Folge in Delémont, das dazumal zum Bistum Basel gehörte, und stellte dort mit den nachfolgenden Generationen wichtige Offiziere in verschiedensten Positionen. Bekannt sind u. a. Jean-Vernier de Grandvillers (1612–1675; Statthalter des Fürstbischofs, Bürgermeister und Bannerherr), François Conrad de Grandvillers (1717–1806; Hofkavalier in Regensburg und Obervogt von Freiberg, Saint-Ursanne und der Ajoie) sowie Antoine de Grandvillers (1743–1828; Regimentskommandant, Bürgermeister, Chevalier de l'Ordre Royale et Militaire de Saint-Louis). Der andere Teil der Familie wurde in der Region um Eptingen im heutigen Kanton Basel-Landschaft ansässig. Mit der Adelsfamilie von Eptingen bestanden bereits zuvor verschiedene verwandtschaftliche Beziehungen. In diesem deutschsprachigen Raum wurde der Name fast ausschließlich in der eingedeutschten Form (Grandwiler, Graweiler, Grauwiler) verwendet. Der Bezug der Familie zur Stadt Basel besteht auch heute, nach der Teilung des Kantons Basel, weiterhin.