Familien slo seg først ned i Sør-Carolina hvor Spreckels startet en butikkvirksomhet. I løpet av kort tid flyttet de til New York, deretter i 1856 til San Francisco, hvor Spreckels startet et bryggeri. Spreckels kom inn sukkervirksomheten på midten av 1860-årene og kom til å dominere den Hawaiiske sukkeromsetningen på Vestkysten. Hans første raffineri, bygget i 1867, lå på 8th og Brannan Street i San Francisco. Ved slutten av 1870-tallet kunne ikke fabrikken på Brannan Street utvide kapasiteten. Ved dette tidspunktet valgte Spreckels et område i Potrero Point til å bygge et nytt sukkerraffineri med tilgang til vann. Han kalte firmaet .