Faits : Faits : A. Le 23 septembre 1991, au décès de sa mère, Z._, X._, employé de commerce, a hérité de quatorze actions de la société immobilière A._ SA, dont celle-là avait elle-même hérité de son mari, Y._, décédé le 7 mars 1988. Ce dernier exerçait de son vivant l'activité de menuisier à titre indépendant. Il avait acquis dix-huit actions de la société immobilière au cours de l'année 1957, puis vingt-deux autres en 1959. Le 30 avril 1997, X._ a vendu ses actions à B._ pour un montant de 252'000 fr. Il a déclaré un gain immobilier imposable de 245'000 fr. Le 4 août 2000, l'Administration cantonale des impôts l'a informé qu'elle considérait le bénéfice de cette vente comme un revenu provenant d'une opération immobilière à caractère professionnel. Par décision de taxation définitive du 30 octobre 2000 concernant l'impôt cantonal pour la période de taxation 1999/2000, l'Administration cantonale des impôts du canton de Vaud a fixé le revenu imposable de X._ à 165'800 fr. y compris le bénéfice de 245'000 fr. Le 28 novembre 2000, X._ a interjeté une réclamation à l'encontre de la taxation du 30 octobre 2000. Il contestait le caractère professionnel de l'opération. Son père avait effectué un placement privé en achetant les actions en cause. Les actions n'avaient jamais figuré dans le bilan de sa raison individuelle. Feu Y._ avait cessé toute activité (menuiserie et opération immobilière) pour raison d'âge et remis son entreprise à son fils C._. Il demandait en outre à être imposé comme son frère C._, qui avait précédemment vendu des actions de la société immobilière, dont il avait aussi hérité; or, le bénéfice en provenant avait été soumis à l'impôt sur les gains immobiliers. Par décision de taxation définitive du 29 novembre 2000 en matière d'impôt fédéral direct pour la période de taxation 1999/2000, l'Administration cantonale des impôts du canton de Vaud a ajouté au revenu réalisé par X._ en 1997 le bénéfice de 245'000 fr. et l'a imposé sur un revenu de 164'600 fr. Par décision du 17 août 2005 portant sur l'impôt fédéral, cantonal et communal, l'Administration cantonale des impôts a rejeté la réclamation du 28 novembre 2000. Le 16 septembre 2005, réitérant les griefs exposés dans sa réclamation, X._ a déposé un recours contre la décision sur réclamation rendue le 17 août 2005 par l'Administration cantonale des impôts. Il concluait à ce que le bénéfice de la vente des actions soit soumis à l'impôt sur les gains immobiliers. Le 14 février 2006, sous la plume d'un nouveau mandataire, X._ a déposé un mémoire de recours complémentaire et demandé au Tribunal administratif du canton de Vaud d'ordonner la production du dossier fiscal de feu Y._ pour les années au cours desquelles étaient intervenues la cessation d'activité et la transmission de la raison individuelle à C._. Dans sa réponse, l'Administration cantonale des impôts a informé le Tribunal administratif que le dossier fiscal de feu Y._ pour la période fiscale 1985/1986 et celui de Z._ pour la période fiscale 1991/1992 avaient été détruits en raison de leur ancienneté. Dans ses ultimes remarques, X._ en a déduit que le fisc n'avait pas été en mesure de prouver que les actions n'avaient pas déjà été imposées du vivant de son père. Le 16 septembre 2005, réitérant les griefs exposés dans sa réclamation, X._ a déposé un recours contre la décision sur réclamation rendue le 17 août 2005 par l'Administration cantonale des impôts. Il concluait à ce que le bénéfice de la vente des actions soit soumis à l'impôt sur les gains immobiliers. Le 14 février 2006, sous la plume d'un nouveau mandataire, X._ a déposé un mémoire de recours complémentaire et demandé au Tribunal administratif du canton de Vaud d'ordonner la production du dossier fiscal de feu Y._ pour les années au cours desquelles étaient intervenues la cessation d'activité et la transmission de la raison individuelle à C._. Dans sa réponse, l'Administration cantonale des impôts a informé le Tribunal administratif que le dossier fiscal de feu Y._ pour la période fiscale 1985/1986 et celui de Z._ pour la période fiscale 1991/1992 avaient été détruits en raison de leur ancienneté. Dans ses ultimes remarques, X._ en a déduit que le fisc n'avait pas été en mesure de prouver que les actions n'avaient pas déjà été imposées du vivant de son père. B. Par arrêt du 29 décembre 2006, le Tribunal administratif du canton de Vaud a rejeté le recours. Il a jugé en substance que feu Y._ était de son vivant commerçant d'immeuble, que les actions en cause appartenaient à sa fortune commerciale et qu'elles n'avaient jamais été transférées dans sa fortune privée. Le fardeau de la preuve du transfert des actions dans la fortune privée du père au moment de la cessation d'activité de ce dernier incombait à X._, ce que ce dernier n'avait pas réussi à démontrer. La règle selon laquelle l'héritage ne modifie pas l'appartenance d'un bien à la fortune commerciale trouvait application même dans l'hypothèse où, comme en l'espèce, il y avait deux transferts successoraux. L'Administration cantonale des impôts avait en outre à bon droit considéré que les conditions pour se prévaloir d'égalité dans l'illégalité n'étaient pas réalisées. B. Par arrêt du 29 décembre 2006, le Tribunal administratif du canton de Vaud a rejeté le recours. Il a jugé en substance que feu Y._ était de son vivant commerçant d'immeuble, que les actions en cause appartenaient à sa fortune commerciale et qu'elles n'avaient jamais été transférées dans sa fortune privée. Le fardeau de la preuve du transfert des actions dans la fortune privée du père au moment de la cessation d'activité de ce dernier incombait à X._, ce que ce dernier n'avait pas réussi à démontrer. La règle selon laquelle l'héritage ne modifie pas l'appartenance d'un bien à la fortune commerciale trouvait application même dans l'hypothèse où, comme en l'espèce, il y avait deux transferts successoraux. L'Administration cantonale des impôts avait en outre à bon droit considéré que les conditions pour se prévaloir d'égalité dans l'illégalité n'étaient pas réalisées. C. Agissant par la voie du recours en matière de droit public prévu par les art. 82 ss LTF, X._ demande au Tribunal fédéral, sous suite de frais et dépens, de casser l'arrêt rendu le 22 (recte le 29) décembre 2006 par le Tribunal administratif et de renvoyer la cause à l'autorité fiscale pour nouvelles taxations dans le sens des considérants. En matière d'impôt fédéral direct, il se plaint de la violation de l'art. 18 al. 2 de la loi fédérale du 14 décembre 1990 sur l'impôt fédéral direct (LIFD; RS 642.11) et de la mauvaise application des règles relatives au fardeau de la preuve. En matière d'impôt cantonal et communal, il se plaint de la violation de l'interdiction de l'arbitraire ainsi que de la mauvaise application des règles relatives au fardeau de la preuve. Le Tribunal administratif conclut au rejet du recours. L'Administration cantonale des impôts conclut à l'irrecevabilité du recours, subsidiairement à son rejet. L'Administration fédérale des contributions conclut à l'irrecevabilité du recours, subsidiairement à l'irrecevabilité du recours traité comme recours de droit administratif en tant qu'il concerne l'impôt cantonal et communal et à son rejet en tant qu'il concerne l'impôt fédéral direct, plus subsidiairement au rejet entier du recours. Sur ordre de la Juge déléguée à l'instruction, le mandataire de Y._ a été invité à déposer des observations sur la recevabilité du recours en matière de droit public.