Tre år etter, i 1883 overtok HSD Det Vestlandske Dampskibsselskab, som hadde de 3 dampskip, og selskapet hadde da tilsammen 6 dampskip i sin tjeneste. Etter dette vokste selskapet jevnt og trutt og i 1930 hadde selskapet 14 dampskip og 3 motorskip på tilsammen 4.295 brutto registertonn. Selskapets første motorskip var MK «Austli» som ble kjøpt i 1920. I 1938 bygget HSD sin første rene bilferge, MF «Folgefonn».