Citation: 2C_607/2017 E. 8

Partant, le recours est partiellement admis en tant qu'il concerne l'impôt fédéral direct et admis s'agissant des impôts cantonal et communal. Les arrêts entrepris sont annulés en tant qu'ils ont trait à la responsabilité solidaire du recourant pour le paiement des dettes fiscales d'IFD 2004, ainsi que d'ICC 2003, 2004, 2005, 2006 et 2007 de la société. S'agissant de la responsabilité du recourant pour le paiement des dettes d'ICC et d'IFD 2004 de la société, la cause est renvoyée à l'autorité précédente pour nouvelle décision dans le sens des considérants. Le recours est rejeté pour le surplus. Le recourant obtenant partiellement gain de cause devant le Tribunal fédéral, il convient de lui faire supporter des frais judiciaires réduits, le reste des frais devant être mis à la charge du canton de Genève dont l'intérêt patrimonial est en cause (art. 66 al. 1 et 4 LTF). En tant qu'il succombe partiellement, le canton de Genève sera condamné à verser au recourant des dépens réduits (art. 68 al. 1 LTF), aucun dépens ne lui étant alloué (art. 68 al. 3 LTF). Par ces motifs, le Tribunal fédéral prononce :