Sachverhalt: A. A.A._ (Beschwerdeführer 1) ist Vater seines in erster Ehe geborenen Sohnes C.A._ (geboren am 30. Dezember 1997). Gestützt auf das Scheidungsurteil des Kantonsgerichts Nidwalden vom 4. April 2007 ist er verpflichtet, für seinen Sohn bis zum Eintritt in die volle Erwerbstätigkeit, mindestens bis zum Erreichen der Volljährigkeit, monatlich im Voraus Unterhaltsbeiträge von Fr. 1'500.-- zu leisten. Diese Unterhaltsbeiträge hat er im Jahr 2015 jeweils zum Monatsersten an seine Ex-Frau D.A._ überwiesen. In der Steuererklärung für die Steuerperiode 2015 brachte A.A._ sowohl für die Staats- und Gemeindesteuer als auch für die direkte Bundessteuer die geleisteten Unterhaltsbeiträge zum Abzug; gleichzeitig beanspruchte er die Gewährung des Kinderabzugs. B. Mit definitiver Steuerveranlagung vom 9. November 2016 liess die kantonale Steuerverwaltung die geltend gemachten Unterhaltsbeiträge zum Abzug zu; hingegen verweigerte sie den Kinderabzug. Gegen diese Veranlagung erhob A.A._ zusammen mit seiner gemeinsam veranlagten zweiten Ehefrau B._ Einsprache. Mit Entscheid vom 14. Dezember 2016 wies die kantonale Steuerverwaltung die Einsprache ab und hielt an ihrer ursprünglichen Veranlagung sowohl für die Staats- und Gemeindesteuer als auch für die direkte Bundessteuer fest. Das Verwaltungsgericht des Kantons Zug wies die daraufhin erhobene Beschwerde mit Urteil vom 29. August 2017 ab. C. Gegen das Urteil des Verwaltungsgerichts des Kantons Zug vom 29. August 2017 führen A.A._ und B._ Beschwerde in öffentlich-rechtlichen Angelegenheiten. Sie beantragen die Feststellung, dass für C.A._ in der Steuerperiode 2015 Anspruch auf einen Kinderabzug gemäss Art. 35 Abs. 1 lit. a DBG sowie auf den entsprechenden Versicherungsprämienabzug bestehe und die Gewährung des Kinderabzugs einschliesslich Versicherungsprämienabzugs beim alimentenzahlenden Kindsvater. Was die Staatssteuer betrifft, verzichten sie ausdrücklich auf eine Anfechtung des Urteils des Verwaltungsgerichts des Kantons Zug vom 29. August 2017. Die kantonale Steuerverwaltung, das Verwaltungsgericht des Kantons Zug und die Eidgenössische Steuerverwaltung beantragen die Abweisung der Beschwerde.