فلوید در خانواده ای بوکسور کار بزرگ شده پدر و دو عمو ی او بوکسور کار حرفه ای بودند و او این ورزش را اول از پدر خود اموخت و بعد از عمویش که مربی او نیز بود.