To nederlag til i tittelkampen fulgte i 1952 og 1953, begge mot Detroit Lions. I løpet av sin tid med Browns spilte Carpenter halfback med Dub Jones som en del av et angrep som inkluderte quarterback Otto Graham, fullback Marion Motley og ends Mac Speedie og Dante Lavelli. Han var en nyttig tilføyelse til Clevelands backfield etter at Edgar Jones, Bill Boedeker og Ara Parseghian la opp etter 1949-sesongen.