I 1767 ble han ansatt som direktør for det britiske handelsfortet i Whydah, en havneby i kongedømmet Dahomey. Der ble han til 1770, før han reiste hjemover igjen. Han ankom England i 1771. Han hadde håpet å bygge seg opp en formue før han dro hjem, men formuen ble ikke stor, så han fortsatte med slavehandel. Han kjøpte tre slaveskip: «Little Archie», «Hannah» og «Nancy», og hadde stor økonomisk fremgang, før han mistet hele sin kapital til amerikanske kaprere i 1778. Etter dette gikk han konkurs. Denne høsten endret han etternavn fra Dalziel til Dalzel, men skrivemåten Dalziel forekommer også etter 1778.