Su apellido -o más bien apodo- Pollaiolo deriva de que Simone fue pariente de los, antes que él, ya célebres hermanos Antonio y Piero Benci quienes fueron conocidos por el apodo "Pollaiuolo" o "Pollaiolo" al haberse criado en las cercanías de un gallinero ("pollaio" en italiano).