Fue famoso por contratar y echar al fundador de IBM, Thomas J Watson, Patterson de hecho fue famoso por echar a trabajadores por asuntos triviales por ejemplo por no saber montar a caballo bien o por no saber decir porque en un día en concreto las banderas estaban volando.