Hardy ble ikke draftet i NFLs draft i 1955, og til tross for å prøvespille for flere lag ble han ikke signert. San Francisco 49ers signerte ham i 1958, men kuttet ham under treningsleiren. Han ble signert av det nylig stiftede Oakland Raiders, hvor han ble utnevnt kampstarter før sesongstart. Han endte året som lagets nest beste mottaker, med 24 mottakelser for 424 yards og tre touchdowns. Hardy ble kuttet halvveis gjennom 1962-sesongen. I løpet av 33 kamper tok Hardy imot 54 pasninger for 840 yards og syv touchdowns.