Sachverhalt: A. A.A._ und B.A._ erwarben im Jahr 1998 ihre Liegenschaft in U._ mit Wohnhaus und angebauter Scheune mit Stall. Im gleichen Jahr sanierten sie den Wohntrakt. Im Jahr 2004 bauten sie die Scheune im Parterre im Rahmen der bestehenden Gebäudehülle zu einem Wohnraum mit Küche aus. Die Decke wurde im Hinblick auf eine spätere Sanierung nur rudimentär isoliert. Im Jahr 2010 erfolgte der Ausbau des Dachgeschosses zu einem Schlafzimmer mit Ankleide und Bad. In der Steuererklärung 2010 machten A.A._ und B.A._ im Zusammenhang mit dem Ausbau des Dachgeschosses die Planungs- und Umbaukosten von insgesamt Fr. 45'554.-- (einschliesslich Gebäudeversicherungsprämie) als Unterhaltskosten zum Abzug geltend. Die Steuerkommission der Gemeinde U._ liess im Veranlagungsentscheid für die Kantons- und Gemeindesteuern 2010 nur den Pauschalabzug für privat genutzte Liegenschaften in der Höhe von Fr. 2'388.-- zum Abzug zu. Mit Einspracheentscheid vom 31. Oktober 2012 bestätigte die Steuerkommission U._ diese Veranlagung. B. Einen Rekurs der Steuerpflichtigen wies das Spezialverwaltungsgericht des Kantons Aargau, Abteilung Steuern, mit Urteil vom 21. März 2013 ab. Die Steuerpflichtigen gelangten in der Folge an das Verwaltungsgericht des Kantons Aargau, welches die Beschwerde mit Urteil vom 17. Dezember 2013 ebenfalls abwies. C. Hiergegen führen A.A._ und B.A._ Beschwerde in öffentlich-rechtlichen Angelegenheiten mit dem (sinngemässen) Antrag, die im Rahmen des Umbaus realisierten Energiesparmassnahmen seien zum Abzug zuzulassen. Das Kantonale Steueramt beantragt Abweisung der Beschwerde, das Verwaltungsgericht und die Eidg. Steuerverwaltung verzichteten auf eine Vernehmlassung.