Faits : A. Le 24 septembre 2019, A._ a été entendu par la police en qualité de prévenu de fabrication, respectivement, utilisation d'une fausse plaque d'immatriculation. Par ordonnance pénale du 4 novembre 2019, le Ministère public genevois a condamné A._ à une peine pécuniaire de 45 jours-amende à 50 fr. le jour, avec sursis pendant trois ans, ainsi qu'à une amende pour falsification ou contrefaçon de plaques de contrôle, utilisation de plaques de contrôle falsifiées ou contrefaites ainsi que contravention à l'OCR. L'ordonnance a été adressée, le 8 novembre 2019, par pli recommandé, au domicile de A._. Avisé pour retrait le 11 novembre 2019, A._ n'est pas allé à la poste retirer le pli contenant l'ordonnance pénale, laquelle a été retournée au Ministère public. B. Le 31 janvier 2020, A._, par l'entremise de son conseil, a formé opposition à l'ordonnance pénale du 4 novembre 2019, indiquant qu'il n'aurait eu connaissance de son existence que par le bordereau de jugement que lui avait adressé le Service des contraventions. Par ordonnance du 9 mars 2020, le Tribunal de police genevois a déclaré irrecevable, car tardive, l'opposition à l'ordonnance pénale. C. Par arrêt du 14 mai 2020, la Chambre pénale de recours de la Cour de justice genevoise a rejeté le recours de A._ contre l'ordonnance du 9 mars 2020. D. A._ forme un recours en matière pénale auprès du Tribunal fédéral contre l'arrêt cantonal, dont il requiert l'annulation ainsi que le renvoi de la cause auprès de l'autorité intimée. Il sollicite par ailleurs l'assistance judiciaire.