Faits : A. Les époux B.A._ et A.A._ sont domiciliés dans le canton de Genève. A.A._ détient l'intégralité du capital-actions de la société anonyme Etude A.A._ SA (ci-après: la Société), non cotée en bourse, qui exploite une étude d'avocats dans le canton de Genève. Dans leur déclaration fiscale 2008, les époux A.A._ et B.A._ ont mentionné les titres Etude A.A_ SA à leur valeur nominale, soit 100'000 francs. B. Par bordereau d'impôt cantonal et communal (ci-après : ICC) du 29 octobre 2013, l'Administration fiscale du canton de Genève (ci-après: l'Administration cantonale) a taxé les époux A.A._ et B.A._ pour l'année 2008 en fixant la valeur fiscale des actions de la Société à 7'117'900 fr., sur la base du double de la valeur de rendement de la Société, sous déduction de la moitié de la perte reportée. Le 22 novembre 2013, les contribuables ont formé réclamation contre cette décision. Ils contestaient notamment l'estimation fiscale des actions de la Société, considérant que seule la valeur comptable de la Société devait être prise en considération pour la détermination de leur fortune. Le 25 juillet 2016, l'Administration cantonale a informé la Société que ses actions étaient évaluées à 8'125'504 fr. 76 fr. au 31 décembre 2008. Ce montant correspondait à la moyenne entre la valeur substantielle de la Société (0 fr.), et sa valeur de rendement (16'251'009 fr. 52) prise en compte une seule fois. Cette dernière valeur était obtenue par la moyenne des résultats de la Société sur trois ans (périodes fiscales 2006 à 2008), capitalisée à 10,5%. Le 20 septembre 2016, l'Administration cantonale a admis la réclamation des contribuables s'agissant du montant de la créance postposée de l'actionnaire, mais l'a rejetée en tant qu'elle concernait l'évaluation des titres de la Société. Contre cette décision, les époux A.A._ et B.A._ ont recouru, le 19 octobre 2016, auprès du Tribunal administratif de première instance du canton de Genève (ci-après: le Tribunal administratif), demandant à ce que les titres de l'Etude A.A._ SA soient évalués, aux fins de l'impôt sur la fortune, sur la base de la seule valeur de ses fonds propres au 31 décembre 2008, correspondant à un montant nul. Par jugement du 28 juin 2018, le Tribunal administratif a rejeté le recours et confirmé l'évaluation à 8'125'500 fr. de l'Administration cantonale. Le recours des époux A.A._ et B.A._auprès de la Cour de justice, Chambre administrative, du canton de Genève (ci-après: la Cour de justice) a été rejeté par arrêt du 27 août 2019. C. Agissant par la voie du recours en matière de droit public, A.A _ et B.A._ demandent en substance au Tribunal fédéral, sous suite de frais et dépens, d'annuler l'arrêt du 27 août 2019 de la Cour de justice, ainsi que le jugement du 28 juin 2018 du Tribunal administratif et de renvoyer la cause à l'Administration cantonale pour nouveau bordereau de taxation d'impôt cantonal et communal 2008, en lui ordonnant en conséquence de rectifier l'imposition. La Cour de justice s'en rapporte à justice quant à la recevabilité du recours et persiste dans les considérants et le dispositif de son arrêt. L'Administration cantonale conclut au rejet du recours. Les recourants ont répliqué.