University of Oregon
Джейк родился в городе Траверс-Сити в штате Мичиган. Там же он окончил старшую школу. Во время учёбы он играл в составе школьной команды на позициях тайт-энда и линейного защиты. На момент выпуска сайт Rivals.com, специализирующийся на оценке футболистов-школьников, поставил Фишера на пятое место среди всех игроков штата. В 2011 году он поступил в Орегонский университет.