Baby Face Nelson
Пёрвис возглавлял группу, которая разыскивала таких преступников, как Малыш Нельсон, Красавчик Флойд и Джон Диллинджер. После убийства Диллинджера, которое случилось 22 июля 1934 года, Пёрвис стал популярной персоной в СМИ. Гувер заявил, что за дело Диллинджера отвечал агент Сэмюэл Коули. Коули был позднее смертельно ранен Нельсоном, и Пёрвис навещал его в больнице. Пёрвис навлёк на себя гнев Гувера тем, что преувеличивал собственную роль в деле Диллинджера и преуменьшал роль Гувера и других агентов. Позднее, по крайней мере, один из официальных отчётов Пёрвиса вызвал вопросы. Отчёт о смерти Красавчика Флойда указывал на то, что Пёрвис и его агенты убили Флойда без помощи местной полиции, хотя офицер полиции Ист-Ливерпуля (Огайо) Честер Смит заявил Гуверу, что он убил Флойда.