I mars 1966 besøkte Buddy kirker i innlandet i Sør-California for å foreta ferminger der; om kvelden 5. mars ankom han Banning i San Gorgonio Pass i Riverside County, som da var en del av bispedømmet San Diego. Biskopen døde dagen etter av et hjerteinfarkt. Han ble 78 år gammel.