Faits : A. A._ est propriétaire de deux parcelles, nos 3183 et 3185, sur le territoire de la Commune d'Ollon. La parcelle n° 3183 est d'une surface de 4'058 m2, dont 557 m2 de forêt. La parcelle n° 3185, partiellement contiguë, est d'une surface de 4'459 m2, dont 1'725 m2 de forêt, et dispose d'un accès et d'un chemin privé. Ces deux biens-fonds, non construits, sont situés en bordure ouest du village de Villars-sur-Ollon; ils sont classés en zone de chalets D selon le plan d'extension communal du secteur "Les Ecovets-Chesières-Villars-Arveyes" de 1985. Au mois de juin 2016, la Municipalité d'Ollon a mis à l'enquête publique un projet de zone réservée avec le règlement y relatif. Les deux parcelles précitées, tout comme les parcelles voisines se trouvent colloquées en zone réservée "périmètre A", soit, selon le rapport justificatif selon l'art. 47 OAT, l'ensemble des zones à bâtir dédiées à l'habitation et situées hors du périmètre urbanisé. Selon le même rapport, le territoire communal présentait une surcapacité d'accueil d'environ 8'400 habitants à l'horizon 2036. L'adoption d'un plan partiel d'affectation en 2016 avait permis, selon le rapport, de déclasser environ 230'500 m2 de terrain, de sorte qu'il restait une surcapacité d'environ 6'400 habitants. Le 15 décembre 2017, le Conseil communal d'Ollon a levé l'opposition formée par A._ et a adopté la zone réservée et son règlement, considérant que les deux parcelles concernées étaient situées hors du territoire urbanisé. La zone réservée a été approuvée le 2 mai 2018 par le Département du territoire et de l'environnement du canton de Vaud (DTE). B. Par arrêt du 5 septembre 2019, la Cour de droit administratif et public du Tribunal cantonal vaudois a confirmé cette décision et rejeté le recours formé par A._. La décision communale était suffisamment motivée. Compte tenu du taux de croissance admis par le plan directeur cantonal pour les villages et quartiers hors centre (15,75% pour 2036), la zone à bâtir destinée à l'habitation devait être réduite et la zone réservée devait permettre de garantir ce dimensionnement. Les parcelles du recourant, non construites, se trouvaient hors du territoire urbanisé tel que défini par la fiche d'application du Service cantonal du développement territorial (SDT); elles se situaient en bordure d'une vaste forêt et aucune demande d'autorisation de construire n'avait été déposée. C. Agissant par la voie du recours en matière de droit public, A._ demande au Tribunal fédéral d'annuler les décisions du DTE et du Conseil communal. La cour cantonale se réfère aux considérants de son arrêt, sans autres observations. Le SDT conclut à l'irrecevabilité, subsidiairement au rejet du recours. La commune d'Ollon conclut au rejet du recours. Dans leurs dernières observations, le recourant, la commune et le SDT persistent dans leurs conclusions.