I 1960 ble Swanstrom utnevnt til hjelpebiskop i New York av pave Johannes XXIII. Paven bispeviet ham personlig den 28. oktober samme år; medkonsekrerende var kurieerkebiskopen Diego Venini og biskopen av Imola, Benigno Carrara.