Sachverhalt: Sachverhalt: A. Mit Urteilen des Bezirksgerichtes Plessur vom 17. August 1999, des Kantonsgerichtes Graubünden vom 15. Februar 2000 sowie zwei Urteilen des Bundesgerichtes vom 6. Oktober 2000 wurde A._ (Beklagter) verpflichtet, X._ und der Y._ AG in Liquidation (...) Prozessentschädigungen von insgesamt Fr. 66'958.-- zu bezahlen. Am 25. Oktober 2000 zedierten X._ und die Y._ AG die erwähnten Forderungen aus ausseramtlicher Prozessentschädigung an B._ (Kläger). Am 10. Januar 2003 liess sich der Kläger die besagten Forderungen erneut abtreten, nachdem das Bundesgericht in seinem Entscheid vom 28. Oktober 2002 (5P.265/2002) die Zession in einem obiter dictum als rechtswidrig und ungültig erklärt hatte. A. Mit Urteilen des Bezirksgerichtes Plessur vom 17. August 1999, des Kantonsgerichtes Graubünden vom 15. Februar 2000 sowie zwei Urteilen des Bundesgerichtes vom 6. Oktober 2000 wurde A._ (Beklagter) verpflichtet, X._ und der Y._ AG in Liquidation (...) Prozessentschädigungen von insgesamt Fr. 66'958.-- zu bezahlen. Am 25. Oktober 2000 zedierten X._ und die Y._ AG die erwähnten Forderungen aus ausseramtlicher Prozessentschädigung an B._ (Kläger). Am 10. Januar 2003 liess sich der Kläger die besagten Forderungen erneut abtreten, nachdem das Bundesgericht in seinem Entscheid vom 28. Oktober 2002 (5P.265/2002) die Zession in einem obiter dictum als rechtswidrig und ungültig erklärt hatte. B. Aufgrund eines früheren rechtskräftigen Schiedsgerichtsurteils steht dem Beklagten gegen X._ eine Forderung im Betrag von Fr. 197'600.-- zu. Nachdem der Beklagte in Bezug auf die an den Kläger zedierte Prozessentschädigung von Fr. 66'958.-- betrieben worden war, erklärte der Beklagte die Verrechnung mit seiner Forderung gegenüber X._ in der Höhe von Fr. 197'600.--. Umstritten ist die Verrechenbarkeit der beiden Forderungen. Nachdem es dem Kläger nicht gelungen war, im Rahmen des summarischen Rechtsöffnungsverfahrens für die in Betreibung gesetzte Forderung definitive Rechtsöffnung zu erhalten, verlangte er im ordentlichen Verfahren, der Beklagte sei zu verpflichten, ihm Fr. 66'958.-- zuzüglich Zins zu bezahlen. Mit Urteil vom 11. April 2003 hiess das Bezirksgericht Plessur die Klage gut. Eine vom Beklagten dagegen erhobene Berufung hiess das Kantonsgericht Graubünden mit Urteil vom 3. November 2003 gut, hob das Urteil des Bezirksgerichts Plessur auf und wies die Klage ab. B. Aufgrund eines früheren rechtskräftigen Schiedsgerichtsurteils steht dem Beklagten gegen X._ eine Forderung im Betrag von Fr. 197'600.-- zu. Nachdem der Beklagte in Bezug auf die an den Kläger zedierte Prozessentschädigung von Fr. 66'958.-- betrieben worden war, erklärte der Beklagte die Verrechnung mit seiner Forderung gegenüber X._ in der Höhe von Fr. 197'600.--. Umstritten ist die Verrechenbarkeit der beiden Forderungen. Nachdem es dem Kläger nicht gelungen war, im Rahmen des summarischen Rechtsöffnungsverfahrens für die in Betreibung gesetzte Forderung definitive Rechtsöffnung zu erhalten, verlangte er im ordentlichen Verfahren, der Beklagte sei zu verpflichten, ihm Fr. 66'958.-- zuzüglich Zins zu bezahlen. Mit Urteil vom 11. April 2003 hiess das Bezirksgericht Plessur die Klage gut. Eine vom Beklagten dagegen erhobene Berufung hiess das Kantonsgericht Graubünden mit Urteil vom 3. November 2003 gut, hob das Urteil des Bezirksgerichts Plessur auf und wies die Klage ab. C. Mit Berufung vom 29. Dezember 2003 beantragt der Kläger dem Bundesgericht, das Urteil des Kantonsgerichts von Graubünden vom 3. November 2003 aufzuheben, das Urteil des Bezirksgerichts Plessur vom 11. April 2003 zu bestätigen und den Beklagten zu verpflichten, dem Kläger Fr. 66'958.-- zuzüglich Zins zu bezahlen. Eventuell sei die Sache an die Vorinstanz zurückzuweisen zur Beurteilung der Frage, ob die Forderungen den Gläubigern X._ und Y._ AG in der Form der Bruchteilsgemeinschaft oder der Gesamthandschaft zustehen. Der Beklagte und das Kantonsgericht von Graubünden beantragen die Abweisung der Berufung, soweit darauf einzutreten sei. Der Beklagte und das Kantonsgericht von Graubünden beantragen die Abweisung der Berufung, soweit darauf einzutreten sei. D. Mit Urteil vom heutigen Tag ist eine gleichzeitig erhobene staatsrechtliche Beschwerde abgewiesen worden, soweit darauf einzutreten war.