Sachverhalt: Sachverhalt: A. A._ ist Pathologe. Er gründete und führt als privates Unternehmen das Institut X._. Am 27. Mai 1994 schloss er mit B._, der ebenfalls Pathologe ist, eine als Gesellschaftsvertrag betitelte Vereinbarung. Danach wollten sie das Institut X._ ab 1. September 1994 gemeinsam führen. Sie vereinbarten, der Vertrag dauere vorerst bis am 31. August 1997 ("Übergangszeit") und werde danach auf unbestimmte Zeit verlängert. Bis zum 31. August 1997 erhielt B._ ein monatliches Fixum von Fr. 25'000.-- ausbezahlt, später sollten die Vertragsparteien zu gleichen Teilen am Erfolg des Instituts beteiligt werden. Unter Ziff. 9.1 des Gesellschaftsvertrags (Titel: Kündigung des Vertrages) wird folgendes festgehalten: "Bei Umständen, die ein Weiterführen der gemeinsamen Praxis verunmöglichen, kann jede Partei kündigen, mittels Kündigung durch den betreffenden Gesellschafter mit eingeschriebenem Brief, Kündigungsfrist sechs Monate. In jedem Fall ist A._ berechtigt, das Institut weiterzuführen und B._ tritt aus dem Institut zurück." Unter der folgenden Ziffer 9.2 wird bestimmt, dass ab dem Austrittsdatum während zwei Jahren für B._ ein Konkurrenzverbot für das Gebiet des Kantons Zürich bestehe und er im Fall der Widerhandlung eine Konventionalstrafe von Fr. 300'000.-- zu zahlen habe. Unter der folgenden Ziffer 9.2 wird bestimmt, dass ab dem Austrittsdatum während zwei Jahren für B._ ein Konkurrenzverbot für das Gebiet des Kantons Zürich bestehe und er im Fall der Widerhandlung eine Konventionalstrafe von Fr. 300'000.-- zu zahlen habe. B. Mit Brief vom 30. Mai 1995 erklärte A._ gegenüber B._, er kündige gestützt auf Ziff. 9.1 den Gesellschaftsvertrag auf den 30. November 1995; die Gründe für die Kündigung habe er bereits an der Sitzung vom 28. Mai 1995 mitgeteilt. Als B._ die Gültigkeit der Kündigung bestritt, antwortete ihm der Anwalt von A._ mit Brief vom 20. Juni 1995, die Kündigung sei wegen seines pflichtwidrigen Verhaltens zu Recht erfolgt. Da eine weitere Zusammenarbeit nicht mehr möglich sei, habe er alle Schlüssel, welche den Zugang zum Institut ermöglichen, abzugeben und jegliche weitere Zusammenarbeit mit und im Institut mit sofortiger Wirkung einzustellen. Sollte eine gütliche Einigung - Annahme der Kündigung und aufforderungsgemässe Räumung des Arbeitsplatzes durch B._ - verhindert werden, bleibe die sofortige Auflösung des Vertrages aus wichtigen Gründen vorbehalten. Das monatliche Fixum von Fr. 25'000.-- wurde B._ noch bis Ende Juli 1995 ausbezahlt. Das monatliche Fixum von Fr. 25'000.-- wurde B._ noch bis Ende Juli 1995 ausbezahlt. C. B._ reichte im November 1995 beim Bezirksgericht Zürich Klage gegen A._ ein. Der Kläger verlangte die Zahlung von Fr. 670'500.-- nebst Zins und die Leistung einer Entschädigung im Sinne von Art. 337c Abs. 3 OR, deren Höhe vom Gericht zu bestimmen sei. Er stellte zudem ein Herausgabebegehren betreffend elektronisch gespeicherter Daten und ein Begehren um Feststellung, dass das Konkurrenzverbot gemäss Ziff. 9.2 des Gesellschaftsvertrags sowie die vereinbarte Konventionalstrafe widerrechtlich seien. Der Beklagte beantragte die Abweisung der Klage und erhob Widerklage auf Feststellung, dass er zur sofortigen Auflösung des Vertrages bzw. zur fristlosen Entlassung des Klägers berechtigt gewesen sei. Er stellte zudem den Antrag, den Kläger zu verpflichten, ihm eine der Dauer der Verletzung des Konkurrenzverbotes entsprechende Konventionalstrafe zu zahlen. Mit Urteil vom 30. November 1999 verpflichtete das Bezirksgericht den Beklagten zur Zahlung von Fr. 625'000.-- nebst 5 % Zins seit 1. September 1997. Es verpflichtete ihn ausserdem zur Herausgabe von Magnetbändern und stellte fest, dass das vertraglich vereinbarte Konkurrenzverbot gemäss Ziff. 9.2 des Vertrags vom 27. Mai 1994 nicht verbindlich sei. Schliesslich wies es die Widerklage vollumfänglich ab. Mit Urteil vom 30. November 1999 verpflichtete das Bezirksgericht den Beklagten zur Zahlung von Fr. 625'000.-- nebst 5 % Zins seit 1. September 1997. Es verpflichtete ihn ausserdem zur Herausgabe von Magnetbändern und stellte fest, dass das vertraglich vereinbarte Konkurrenzverbot gemäss Ziff. 9.2 des Vertrags vom 27. Mai 1994 nicht verbindlich sei. Schliesslich wies es die Widerklage vollumfänglich ab. D. Der Beklagte gelangte mit Berufung an das Obergericht des Kantons Zürich. Dieses verpflichtete ihn mit Urteil vom 14. Dezember 2004 zur Zahlung von Fr. 310'167.40 nebst Zins und bestätigte im Übrigen das Urteil des Bezirksgerichts. Dieser Entscheid des Obergerichts wurde auf kantonale Nichtigkeitsbeschwerde des Beklagten hin vom Kassationsgericht des Kantons Zürich mit Zirkulationsbeschluss vom 23. Dezember 2005 aufgehoben und die Sache im Sinne der Erwägungen zur Neubeurteilung an das Obergericht zurückgewiesen. Mit Beschluss vom 28. März 2006 nahm das Obergericht davon Vormerk, dass sein Urteil vom 14. Dezember 2004 in den Dispositiv-Ziffern 1.b und c (Herausgabe der Magnetbänder und Feststellung der Unverbindlichkeit des Konkurrenzverbots) sowie 2 - 4 (Abweisung der Widerklage; Abweisung der Eventualwiderklage, soweit sie den Verrechnungsanspruch in Höhe von Fr. 4'798.60 übersteigt; Bestätigung des erstinstanzlichen Kostendispositivs) in Rechtskraft erwachsen sei. Mit Urteil vom 28. März 2006 verpflichtete sodann das Obergericht den Beklagten zur Zahlung von Fr. 542'966.-- nebst 5 % Zins seit 1. September 1997 und wies die Klage im Mehrbetrag ab. Mit Urteil vom 28. März 2006 verpflichtete sodann das Obergericht den Beklagten zur Zahlung von Fr. 542'966.-- nebst 5 % Zins seit 1. September 1997 und wies die Klage im Mehrbetrag ab. E. Mit der vorliegenden Berufung beantragt der Beklagte dem Bundesgericht, das Urteil des Obergerichts vom 28. März 2006 aufzuheben und ihn zur Zahlung von Fr. 100'000.-- nebst Zins ab 1. September 1997 zu verpflichten und im Mehrbetrag die Klage abzuweisen; eventualiter die Sache zur Neubeurteilung an die Vorinstanz zurückzuweisen. Der Kläger stellt in der Berufungsantwort den Antrag, die Berufung abzuweisen und das Urteil des Obergerichts vom 28. März 2006 zu bestätigen.