Das Spectrum wurde 1967 als Teil des "South Philadelphia Sports Complex" fertiggestellt und kostete 7 Mio. US-Dollar. Im Laufe des Bestehens wechselten sowohl die Namensrechte an der Halle, als auch die Nutzer der Sportstätte, welche ursprünglich den Teams der Philadelphia Flyers aus der National Hockey League und der Philadelphia 76ers aus der National Basketball Association als Heimspielstätte diente. Die 76ers zogen aus der 1996 geschlossenen und 2005 abgerissenen "Convention Hall" in das Spectrum um, welches die zweite große Sportstätte am Südende der "Broad Street" im damaligen "East League Island Park" war. Als weitere Mieter kamen 1974 das "World Team Tennis" Team Philadelphia Freedoms, in der Saison 1974/75 und von 1987 bis 1996 die Lacrosse-Mannschaft Philadelphia Wings, von 1978 bis 1981 die Fußballmannschaft Philadelphia Fever, sowie die Philadelphia Bulldogs aus der Roller Hockey International Liga von 1994 bis 1996 dazu. 1976 und 1992 wurde das NHL All-Star Game im Spectrum ausgetragen.