Citation: 9C_500/2023 E. A

A.a. A.A.________ et B.A.________ sont propriétaires d'un immeuble sis à U.________ (article xxx du Registre foncier de la Commune de U.________). Dans leur déclaration d'impôt pour la période fiscale 2019, ils ont annoncé pour cet immeuble des frais d'entretien effectifs de 45'321 fr., constitués de la prime d'assurance de l'Établissement cantonal d'assurance des bâtiments (ECAB) de 1'825 fr., de la contribution immobilière de 2'844 fr. ainsi que d'une facture de Gruyère Énergie SA (GESA) de 40'652 fr. relative à l'installation de panneaux photovoltaïques. Par avis de taxation du 20 mai 2021 concernant l'impôt fédéral direct (IFD) et l'impôt cantonal et communal (ICC) pour la période fiscale 2019, le Service cantonal des contributions du canton de Fribourg (ci-après: le SCC) a admis les frais d'entretien à concurrence de 9'901 fr. pour l'immeuble en question. Le SCC n'a pas admis la déduction des acomptes de 21'200 fr. et 16'960 fr. payés en 2018 en lien avec l'installation photovoltaïque; par une annotation sur la formule de répartition pour la déduction des frais effectifs des immeubles, il a indiqué que ces acomptes n'avaient pas fait l'objet d'une demande de déduction pour l'année 2018. A.b. A.A.________ et B.A.________ ont déposé une réclamation contre l'avis de taxation du 20 mai 2021. Par décision sur réclamation du 20 décembre 2022, le SCC l'a rejetée en tant qu'elle concernait la déduction des frais d'entretien effectifs de l'immeuble en question. Il a fixé ces frais à 9'384 fr., soit 4'715 fr. de frais d'entretien relatifs à l'économie d'énergie (correspondant au solde dû selon la facture du 31 décembre 2018 - envoyée le 11 janvier 2019 et acquittée par la suite -, à l'exception des acomptes versés en 2018), et 4'669 fr. concernant la prime d'assurance ECAB et la contribution immobilière.