I 1963 flyttet Patriots til Fenway Park og avsluttet sesongen 7–6–1. Det holdt for en delt førsteplass i Eastern Division, og de måtte derfor spille en sluttspillkamp mot det andre laget som endte sesongen 7–6–1, Buffalo Bills. I sluttspillet i Eastern Division sikret de en 26–8 seier og gikk videre til tittelkampen, hvor de tapte 51–10 mot San Diego Chargers. Neste år tok Holovak også på seg ansvaret som general manager, og etter at laget forbedret til 10–3–1 (andreplass bak Buffalo), ble han utnevnt til AFL Coach of the Year og fikk en ny 5-årig kontrakt.