Sachverhalt: Sachverhalt: A. C._, geboren 1958, arbeitete von 1992 bis zum 31. Juli 1999 als Hausangestellter für das Altersheim X._. Anschliessend bezog er Leistungen der Arbeitslosenversicherung. Am 23. August 2000 liess er sich bei der Invalidenversicherung zum Leistungsbezug anmelden, worauf die zuständige IV-Stelle Berichte der Frau Dr. med. R._, FMH Physikalische Medizin und Rehabilitation, sowie der Frau Dr. med. O._, Ärztin für Allgemeine Medizin FMH, beizog. Weiter veranlasste die Verwaltung ein Gutachten des Instituts Y._ (Expertise vom 16. August 2001 mit psychiatrischem Gutachten vom 30. Juli 2001 sowie rheumatologischer Untersuchung vom 10. Juli 2001). Mit Verfügung vom 31. Oktober 2001 lehnte die IV-Stelle den Anspruch auf eine Rente ab, da ein Invaliditätsgrad von 36 % vorliege, was letztinstanzlich durch Urteil des Eidgenössischen Versicherungsgerichts vom 16. Juli 2003, I 768/02, bestätigt worden ist. Nachdem sich C._ im Oktober 2003 erneut bei der Invalidenversicherung zum Rentenbezug angemeldet hatte, lehnte die Verwaltung mit Verfügung vom 12. Februar 2004 den Rentenanspruch wiederum ab, da sich der Gesundheitszustand nicht verändert habe. Die Pensionskasse Stadt Zürich, bei welcher C._ während seiner Tätigkeit für das Altersheim versichert gewesen war, lehnte das am 2. September 2003 gestellte Gesuch um Zusprechung einer berufsvorsorgerechtlichen Invalidenrente mit Schreiben vom 9. Oktober 2003 ab, da zum Zeitpunkt des Austrittes am 31. Juli 1999 für die Tätigkeit als Hausangestellter keine Arbeitsunfähigkeit bestanden habe. Am 18. November 2003 bestätigte die Pensionskasse ihre Ablehnung des Rentenanspruchs, da während der Versicherungszeit keine "invaliditätsrelevante Arbeitsunfähigkeit" eingetreten sei. Die Pensionskasse Stadt Zürich, bei welcher C._ während seiner Tätigkeit für das Altersheim versichert gewesen war, lehnte das am 2. September 2003 gestellte Gesuch um Zusprechung einer berufsvorsorgerechtlichen Invalidenrente mit Schreiben vom 9. Oktober 2003 ab, da zum Zeitpunkt des Austrittes am 31. Juli 1999 für die Tätigkeit als Hausangestellter keine Arbeitsunfähigkeit bestanden habe. Am 18. November 2003 bestätigte die Pensionskasse ihre Ablehnung des Rentenanspruchs, da während der Versicherungszeit keine "invaliditätsrelevante Arbeitsunfähigkeit" eingetreten sei. B. Die von C._ gegen die Pensionskasse am 8. Januar 2004 eingereichte Klage auf Zusprechung einer Invalidenrente ab 1. August 2000 wies das Sozialversicherungsgericht des Kantons Zürich mit Entscheid vom 7. September 2004 ab, nachdem es die Akten der Invalidenversicherung beigezogen hatte. B. Die von C._ gegen die Pensionskasse am 8. Januar 2004 eingereichte Klage auf Zusprechung einer Invalidenrente ab 1. August 2000 wies das Sozialversicherungsgericht des Kantons Zürich mit Entscheid vom 7. September 2004 ab, nachdem es die Akten der Invalidenversicherung beigezogen hatte. C. C._ lässt Verwaltungsgerichtsbeschwerde führen mit den Anträgen, unter Aufhebung des vorinstanzlichen Entscheides seien ihm mit Wirkung ab dem 1. August 2000 die statutarisch zustehenden Invalidenleistungen zuzusprechen; eventualiter sei die Sache zur weiteren Abklärung und zu neuem Entscheid an die Vorinstanz zurückzuweisen. Die Pensionskasse schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde, während das Bundesamt für Sozialversicherung auf eine Vernehmlassung verzichtet.