Der er en populær legende om at slangen for prostitusjon på engelsk stammer fra hans etternavn på grunn av festene og mangelen på militær disiplin ved hans hovedkvarter. Noen versjoner av legenden hevder at gruppen av prostituerte som fulgte hans divisjoner ble kalt «General Hooker's Army». Men begrepet «hooker» ble brukt i trykk så tidlig som i 1845, mange år før Hooker ble en offentlig person. Utbredelsen til Hooker-legenden kan delvis være ansvarlig for begrepets popularitet.