Sachverhalt: Sachverhalt: A. Am 9. Juli 2001 reichten 35 Krankenversicherer beim Schiedsgericht in Sozialversicherungsstreitigkeiten des Kantons Zürich gegen Dr. med. S._, Facharzt FMH für allgemeine Medizin mit Praxis in X._, Klage ein. Sie forderten von ihm wegen unwirtschaftlicher Behandlungsweise im Jahr 1999 die Rückerstattung eines gerichtlich zu bestimmenden Betrags. Im Sühneverfahren mit einer Sühneverhandlung am 13. Dezember 2001 wirkten zwei vom Beklagten vorgeschlagene Schiedsrichter, Dr. T._ und M._, mit. Eine Einigung der Parteien kam nicht zu Stande und auf die Durchführung eines Einigungsverfahrens vor der Blauen Kommission wurde verzichtet. Mit Eingabe vom 26. März 2002 beantragte der Beklagte, das Sühneverfahren sei - neu unter Teilnahme der Schiedsrichter G._ und Dr. H._ - zu wiederholen. Nachdem er am 20. Januar 2003 mahnte, dass keine weiteren Verfahrensschritte erfolgt seien, ordnete das leitende Mitglied des Schiedsgerichts am 22. Januar 2003 an, es sei beim Regierungsrat des Kantons Zürich als Wahlbehörde der Schiedsrichter eine Stellungnahme zur Frage einzuholen, bis wann die mit Regierungsratsbeschluss vom 18. Oktober 1995 für die Amtsdauer 1995-2001 gewählten Schiedsrichter im Amt gestanden seien. Mit Beschluss vom 1. Oktober 2003 teilte der Regierungsrat des Kantons Zürich mit, dass die für die Amtsdauer 1995-2001 gewählten Fachrichter gestützt auf die kantonalen Wahlvorschriften bis zur Wieder- bzw. Neuwahl am 8. Januar 2002 im Amt blieben; die beteiligten Schiedsrichter hätten sich somit im Zeitpunkt der am 13. Dezember 2001 durchgeführten Sühneverhandlung noch im Amt befunden. Die Parteien wurden eingeladen, sich zur regierungsrätlichen Stellungnahme und in der Folge auch zur diesbezüglichen Eingabe der Gegenpartei verlauten zu lassen. Dr. med. S._ beantragte am 30. Oktober 2003 die Wiederholung der Sühneverhandlung. Das Schiedsgericht entsprach dem Begehren nicht und verpflichtete ihn mit Entscheid vom 5. Juli 2004 dazu, den Klägern wegen unwirtschaftlicher Behandlungsweise im Jahr 1999 den Betrag von Fr. 118'574.- zu bezahlen. A. Am 9. Juli 2001 reichten 35 Krankenversicherer beim Schiedsgericht in Sozialversicherungsstreitigkeiten des Kantons Zürich gegen Dr. med. S._, Facharzt FMH für allgemeine Medizin mit Praxis in X._, Klage ein. Sie forderten von ihm wegen unwirtschaftlicher Behandlungsweise im Jahr 1999 die Rückerstattung eines gerichtlich zu bestimmenden Betrags. Im Sühneverfahren mit einer Sühneverhandlung am 13. Dezember 2001 wirkten zwei vom Beklagten vorgeschlagene Schiedsrichter, Dr. T._ und M._, mit. Eine Einigung der Parteien kam nicht zu Stande und auf die Durchführung eines Einigungsverfahrens vor der Blauen Kommission wurde verzichtet. Mit Eingabe vom 26. März 2002 beantragte der Beklagte, das Sühneverfahren sei - neu unter Teilnahme der Schiedsrichter G._ und Dr. H._ - zu wiederholen. Nachdem er am 20. Januar 2003 mahnte, dass keine weiteren Verfahrensschritte erfolgt seien, ordnete das leitende Mitglied des Schiedsgerichts am 22. Januar 2003 an, es sei beim Regierungsrat des Kantons Zürich als Wahlbehörde der Schiedsrichter eine Stellungnahme zur Frage einzuholen, bis wann die mit Regierungsratsbeschluss vom 18. Oktober 1995 für die Amtsdauer 1995-2001 gewählten Schiedsrichter im Amt gestanden seien. Mit Beschluss vom 1. Oktober 2003 teilte der Regierungsrat des Kantons Zürich mit, dass die für die Amtsdauer 1995-2001 gewählten Fachrichter gestützt auf die kantonalen Wahlvorschriften bis zur Wieder- bzw. Neuwahl am 8. Januar 2002 im Amt blieben; die beteiligten Schiedsrichter hätten sich somit im Zeitpunkt der am 13. Dezember 2001 durchgeführten Sühneverhandlung noch im Amt befunden. Die Parteien wurden eingeladen, sich zur regierungsrätlichen Stellungnahme und in der Folge auch zur diesbezüglichen Eingabe der Gegenpartei verlauten zu lassen. Dr. med. S._ beantragte am 30. Oktober 2003 die Wiederholung der Sühneverhandlung. Das Schiedsgericht entsprach dem Begehren nicht und verpflichtete ihn mit Entscheid vom 5. Juli 2004 dazu, den Klägern wegen unwirtschaftlicher Behandlungsweise im Jahr 1999 den Betrag von Fr. 118'574.- zu bezahlen. B. Dr. med. S._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Antrag, der Entscheid des Schiedsgerichts vom 5. Juli 2004 sei aufzuheben und die Klagen seien abzuweisen. Der Verband santésuisse Zürich-Schaffhausen als Vertreter der klagenden Krankenversicherer lässt die Abweisung der Verwaltungsgerichtsbeschwerde beantragen, soweit darauf einzutreten ist. Das Bundesamt für Gesundheit reicht keine Vernehmlassung ein.