Han ble født i Illinois 17. oktober 1884, da hans familie flyttet til Union, Oregon. I 1907 giftet han seg med Hilder Florentina Youngber fra Galesburg, Illinois. Deres første sønn, Sylvester Smith ble drept 11 år gammel, påkjørt av en bil i 1919 i Chicago. De hadde en annen sønn, Prevost Floyd Smith (1913-1991). I 1930 bodde familien i Morrisville, Bucks County, Pennsylvania og Floyd arbeidet som ingeniør. Prevost og Floyd startet Smith Parachute Company på Schauer Field i San Diego County, California som ble Prevost Smith Parachute Company.