Faits : A. A._, dont le domicile fiscal était à Genève entre 1987 et 1991, s'est vu notifier par l'Administration fiscale cantonale de la République et canton de Genève (ci-après: l'Administration fiscale), pour cette période, cinq bordereaux de taxation d'office relatifs aux impôts cantonal et communal. Le 21 janvier 1997, ceux-ci ont été partiellement rectifiés sur réclamation. Par la suite, le 27 mars 2003, la Commission cantonale de recours en matière d'impôt de la République et canton de Genève (ci-après: la Commission; actuellement le Tribunal administratif de première instance de la République et canton de Genève, ci-après: le Tribunal administratif de première instance) a partiellement admis le recours formé par A._ contre la décision sur réclamation. L'intéressé a contesté ce prononcé auprès du Tribunal administratif de la République et canton de Genève (ci-après: le Tribunal administratif; actuellement la Chambre administrative de la Cour de justice, ci-après: la Cour de justice). B. Dans un arrêt du 18 janvier 2005, le Tribunal administratif, après avoir procédé à une appréciation anticipée des preuves à sa disposition et rejeté les offres de preuves formulées par l'intéressé (audition de cinq témoins et obtention de pièces auprès de tiers), a partiellement admis le recours. Il a ainsi légèrement modifié la fortune imposable pour les années 1987 et 1988 ainsi que le revenu imposable des années 1988 et 1990. Il a renvoyé la cause à l'Administration fiscale pour nouvelles taxations dans le sens des considérants. Le contribuable a contesté cet arrêt auprès du Tribunal fédéral. Celui-ci, dans un arrêt du 10 mars 2005 (2P.82/2005) a déclaré le recours irrecevable, dès lors que l'arrêt du 18 janvier 2005 du Tribunal administratif consistait en une décision incidente qui n'entraînait aucun dommage irréparable pour l'intéressé. Cet arrêt conférait une latitude de jugement à l'Administration fiscale, puisque celle-ci devait procéder à de nouvelles taxations contre lesquelles le contribuable pourrait recourir, peu importe que le Tribunal cantonal ait statué définitivement sur certains points (fixation du revenu et de la fortune; cf. consid. 2.2 de l'arrêt précité). C. Le 13 juin 2005, l'Administration fiscale a rendu cinq nouveaux bordereaux de taxation pour les impôts cantonal et communal des périodes fiscales 1987 à 1991. Suite à une réclamation du contribuable qui avait découvert certaines pièces attestant de l'inexactitude des montants, l'Administration fiscale a rendu une décision sur réclamation le 5 août 2011. L'intéressé a contesté ce prononcé auprès du Tribunal de première instance puis, à la suite du rejet du recours par cette autorité le 6 mai 2013, auprès de la Cour de justice. Par arrêt du 27 mai 2014, la Cour de justice a rejeté le recours de A._. Après avoir constaté que le droit de taxer n'était pas prescrit, elle a rejeté les griefs de déni de justice formel, de violation du droit d'être entendu et de violation du principe de la bonne foi. D. Agissant par la voie du recours en matière de droit public, A._ demande au Tribunal fédéral, sous suite de frais et dépens, outre l'effet suspensif, d'annuler les arrêts du 27 mai 2014 de la Cour de justice et du 18 janvier 2005 du Tribunal administratif et de renvoyer la cause à l'autorité cantonale pour nouvelles taxations dans le sens des considérants. Il se plaint de déni de justice formel, de violation du droit d'être entendu et de formalisme excessif. Par ordonnance du 18 juillet 2014, le Président de la IIe Cour de droit public du Tribunal fédéral a rejeté la requête d'effet suspensif. La Cour de justice persiste dans les considérants et le dispositif de son arrêt, l'Administration fiscale conclut au rejet du recours et l'Administration fédérale des contributions renonce à prendre position.