På 80-tallet jobbet Parish med bandet Automatic Dlamini der også Harvey var medlem fra 1988–1991. Automatic Dlamini spilte inn tre plater: (1987), (1990, ikke utgitt men tilgjengelig som bootleg) og (1992). I denne perioden startet Parish sin karriere som plateprodusent ved å jobbe med band som The Chesterfields og the Brilliant Corners før han produserte og spilte en rekke instrumenter på Harveys i 1995.