Favreau ble født i nabolaget Flushing i Queens som sønn av Madeleine, en lærer som døde av leukemi i 1978, og Charles Favreau, også en lærer som spesialiserte seg i spesialpedagogikk. Charles Favreau var katolsk og Madeleine var jødisk.