Faits: Faits: A. M._, né en 1973, a requis des prestations de l'assurance-chômage depuis le 16 décembre 2002. Un délai-cadre lui a été ouvert jusqu'au 15 décembre 2004. Le 5 avril 2004, M._ a été engagé en qualité d'aide-électricien par l'entreprise de travail temporaire T._ SA pour une mission chez O._ SA (ci-après: O._ SA; contrat du 7 avril 2004). L'engagement, qui était prévu pour une durée maximale de trois, a pris fin dans des circonstances qui ont conduit la Caisse cantonale vaudoise de chômage (ci-après: la caisse) à estimer que M._ avait abandonné un travail réputé convenable. Aussi par décision du 24 juin 2004 la caisse a-t-elle prononcé une suspension du droit à l'indemnité de 36 jours, qualifiant la faute de l'assuré de grave. Saisie d'une opposition de l'intéressé, la Division technique et juridique de la caisse, en sa qualité d'autorité d'opposition de première instance, l'a rejetée par décision du 5 décembre 2005. Sur recours de l'assuré, le Tribunal administratif du canton de Vaud a annulé cette décision et renvoyé la cause à l'autorité concernée pour complément d'instruction et nouvelle décision (jugement du 14 mars 2006). A l'issue d'une instruction complémentaire, la Division technique et juridique de la caisse a, par décision du 20 juillet 2006, confirmé celle du 24 juin 2004. Le 5 avril 2004, M._ a été engagé en qualité d'aide-électricien par l'entreprise de travail temporaire T._ SA pour une mission chez O._ SA (ci-après: O._ SA; contrat du 7 avril 2004). L'engagement, qui était prévu pour une durée maximale de trois, a pris fin dans des circonstances qui ont conduit la Caisse cantonale vaudoise de chômage (ci-après: la caisse) à estimer que M._ avait abandonné un travail réputé convenable. Aussi par décision du 24 juin 2004 la caisse a-t-elle prononcé une suspension du droit à l'indemnité de 36 jours, qualifiant la faute de l'assuré de grave. Saisie d'une opposition de l'intéressé, la Division technique et juridique de la caisse, en sa qualité d'autorité d'opposition de première instance, l'a rejetée par décision du 5 décembre 2005. Sur recours de l'assuré, le Tribunal administratif du canton de Vaud a annulé cette décision et renvoyé la cause à l'autorité concernée pour complément d'instruction et nouvelle décision (jugement du 14 mars 2006). A l'issue d'une instruction complémentaire, la Division technique et juridique de la caisse a, par décision du 20 juillet 2006, confirmé celle du 24 juin 2004. B. Saisi d'un recours de M._, le Tribunal administratif l'a partiellement admis, en ce sens qu'il a réduit à vingt jours la durée de la suspension prononcée par la caisse (jugement du 2 octobre 2006). B. Saisi d'un recours de M._, le Tribunal administratif l'a partiellement admis, en ce sens qu'il a réduit à vingt jours la durée de la suspension prononcée par la caisse (jugement du 2 octobre 2006). C. M._ a interjeté un recours de droit administratif contre ce jugement, dont il requiert l'annulation. Il conclut à ce qu'aucune suspension de son droit à l'indemnité ne soit prononcée à son égard. La caisse s'en remet à dire de justice et le Secrétariat d'Etat à l'économie (Seco) a renoncé à se déterminer.