Sachverhalt: A. A._, geboren 1966, meldete sich am 27. Januar 2016 beim Regionalen Arbeitsvermittlungszentrum Rheinfelden (RAV) zur Arbeitsvermittlung an und stellte am 16. Februar 2016 den Antrag auf Arbeitslosenentschädigung ab dem 1. Februar 2016. Am 30. März 2017 ersuchte sie zudem um Übernahme der Kurskosten für die Weiterbildung zur Chauffeuse Kategorie C. Mit Verfügung vom 18. Mai 2017 lehnte das Amt für Wirtschaft und Arbeit des Kantons Aargau (nachfolgend: AWA oder Beschwerdeführerin) dieses Gesuch ab. Daran hielt es mit Einspracheentscheid vom 15. Juni 2017 fest. B. Die dagegen erhobene Beschwerde hiess das Versicherungsgericht des Kantons Aargau mit Entscheid vom 14. Dezember 2017 gut, hob den Einspracheentscheid vom 15. Juni 2017 auf und bejahte einen Anspruch von A._ auf Übernahme der Kosten für den Erwerb des Führerausweises der Kategorie C im Sinne der Erwägungen. C. Das AWA führt Beschwerde in öffentlich-rechtlichen Angelegenheiten und beantragt die Aufhebung des angefochtenen Entscheids. Zudem ersucht es um Erteilung der aufschiebenden Wirkung. A._ lässt auf Abweisung der Beschwerde und des Gesuchs um Erteilung der aufschiebenden Wirkung schliessen. Das Staatssekretariat für Wirtschaft (SECO) verzichtet auf eine Vernehmlassung. D. Mit Verfügung vom 13. März 2018 hat die Instruktionsrichterin der Beschwerde die aufschiebende Wirkung zuerkannt.