Specter innledet sin politiske karriere i Det demokratiske parti. På den republikanske kongressrepresentanten Gerald Fords anbefaling ble han ansatt av Warrenkommisjonen. Han utviklet teorien om én kule som en forklaring på at John F. Kennedy skulle ha kunne bli skutt av en enesste gjerningsmann.