Stephen Baldwin er broren til skuespillerne Alec, Daniel og William. Baldwin ble oppdratt i en katolsk familie og er av irsk, engelsk og fransk avstamming. Han er sønnen til Alexander og Carol Baldwin og har tre søstre som heter Jane, Elizabeth og Sarah Baldwin.