Han var født i fiskeværet Nordre Bjørnsund i Fræna kommune i Møre og Romsdal som den yngste av 12 søsken. Etter endt utdanning som sosialøkonom ble han ansatt i Fiskeridirektoratet i 1953 som sekretær for daværende fiskeridirektør Klaus Sunnanå. I 1958 tiltrådte han som generalsekretær i Norges Fiskarlag. Ti år senere, i 1968, ble han tilsatt som assisterende fiskeridirektør. Han ble utnevnt til fiskeridirektør i 1978. Etter åremålets utløp i 1988 og fram til han gikk av med pensjon i 1995 hadde Rasmussen igjen tittelen som assisterende fiskeridirektør.