Vanneste stammt aus einer katholischen und antikommunistisch geprägten Familie. Als Jugendlicher sprach er sich für eine Fortsetzung der französischen Herrschaft in Algerien aus. Er studierte Philosophie an der geisteswissenschaftlichen Fakultät der Universität Lille. Während der Studentenunruhen im Mai 1968 unterstützte er die Regierung des Generals de Gaulle und trat der gaullistischen Jugendorganisation Union des jeunes pour le progrès bei. Anschließend lehrte er Philosophie am privaten (katholischen) Wirtschaftsgymnasium von Tourcoing und war ab 1976 dessen stellvertretender Direktor.