Brandon Jacobs vokste opp i Napoleonville i Louisiana. Han er den eldste sønnen til alenemoren Janica Jacobs, og har en lillebror, Michael Jacobs. Han ble oppdratt av sin mor og hennes søstre. Hans tant og unkel, Dianne og Phil Cheavious, ble senere hans verger. Han hadde aldri noe forhold til sin far. Brandon spilte basketball og amerikansk fotball ved Assumption High School, hvor han deltok i spesialundervisningstimer, og i sitt år som senior fikk han utmerkelser som USA Today All-America, Orlando Sentinel All-Souther, Prep Star All-Region og Louisiana Class 4A Most Valuable Offensive Player. Han hadde over 3 000 yards på løp og scoret 38 touchdowns i løpet av det året.