Алабамский университет
Ирв родился 9 августа 1998 года в Новом Орлеане. Его отец, Ирв Смит, в прошлом профессиональный футболист, игравший за «Нью-Орлеан Сэйнтс», «Сан-Франциско» и «Кливленд Браунс». Смит-младший окончил старшую школу брата Мартина в статусе одного из лучших игроков Луизианы по версии ESPN. В 2016 году он поступил в Алабамский университет, предпочтя его ряду других футбольных программ.