Faits: Faits: A. X._, comptable de formation, exerce à la fois une activité lucrative salariée et une activité lucrative indépendante. Le prénommé n'ayant pas remis sa déclaration d'impôt pour la période fiscale 2001/2002, l'Office d'impôt du district de Vevey a taxé d'office, pour l'impôt cantonal et communal, son revenu imposable à 82'000 fr. et sa fortune imposable à 0 fr. En outre, une amende de 800 fr. lui a été infligée. Cette décision, datée du 16 janvier 2002, lui a été notifiée par lettre-signature le 21 janvier 2002. Le prénommé n'ayant pas remis sa déclaration d'impôt pour la période fiscale 2001/2002, l'Office d'impôt du district de Vevey a taxé d'office, pour l'impôt cantonal et communal, son revenu imposable à 82'000 fr. et sa fortune imposable à 0 fr. En outre, une amende de 800 fr. lui a été infligée. Cette décision, datée du 16 janvier 2002, lui a été notifiée par lettre-signature le 21 janvier 2002. B. Par acte du 21 février 2002 (date du sceau postal), X._ a formé une réclamation contre cette décision. Le 26 mars 2002, il a déposé sa déclaration d'impôt. Après avoir reçu un courrier du 8 octobre 2002 lui notifiant le calcul de l'impôt 2002, le prénommé a adressé à l'Office d'impôt du district de Vevey une écriture datée du 6 novembre 2002, où il déclare "contester le calcul de l'impôt ainsi que les éléments imposables. (Ces derniers ayant déjà fait l'objet d'un recours)". Le 27 novembre 2003, l'Administration cantonale des impôts a déclaré la réclamation irrecevable pour cause de tardiveté. X._ a déféré cette décision au Tribunal administratif du canton de Vaud, qui a rejeté le recours par arrêt du 26 mars 2004. Le 27 novembre 2003, l'Administration cantonale des impôts a déclaré la réclamation irrecevable pour cause de tardiveté. X._ a déféré cette décision au Tribunal administratif du canton de Vaud, qui a rejeté le recours par arrêt du 26 mars 2004. C. Agissant par la voie du recours de droit administratif, X._ demande au Tribunal fédéral de lui accorder la restitution du délai de réclamation contre la décision de taxation d'office du 16 janvier 2002, d'annuler la décision sur réclamation du 27 novembre 2003 ainsi que l'arrêt du 26 mars 2004 et, en substance, de le taxer sur la base du revenu imposable figurant dans sa déclaration d'impôt. Il requiert également que le recours ait effet suspensif. Il dénonce une inégalité de traitement ainsi qu'une violation de son droit d'être entendu, du principe de l'imposition selon la capacité contributive ainsi que de l'art. 186 al. 2 de la loi vaudoise du 4 juillet 2000 sur les impôts directs cantonaux (disposition réglant la réclamation contre une taxation d'office) et des art. 133 al. 3 de la loi fédérale du 14 décembre 1990 sur l'impôt fédéral direct (LIFD; RS 642.11), 48 de la loi fédérale de la même date sur l'harmonisation des impôts directs des cantons et des communes (LHID; RS 642.14) et 168 de la loi vaudoise sur les impôts directs cantonaux (dispositions réglant la restitution de délai). A l'appui de ses allégations en vue d'obtenir la restitution du délai, il produit un certificat médical et annonce qu'il va en produire un autre. Il n'a pas été requis d'observations.