Etter andre verdenskrig ble All-America Football Conference stiftet, med sin første sesong i 1946. I sitt andre år ble laget som hadde blitt tildelt til Miami Seahawks flyttet til Baltimore, Maryland. Etter en avstemning for tilhengere ble navnet Baltimore Colts valgt, med lagfargene sølv og grønn. Colts spilte de neste tre sesongene i AAFC, frem til de flyttet over til National Football League da NFL ble omorganisert. Baltimore Colts var et av tre AAFC-lag som ble med i NFL, sammen med San Francisco 49ers og Cleveland Browns. Det nye laget, som for første gang deltok i en stor liga, spilte kun i NFL i 1950-sesongen før det ble oppløst.