Sachverhalt: A. A._ (Kläger, Beschwerdeführer) und B._ (Beklagter, Beschwerdegegner) gründeten zusammen mit C._ die D._ AG (seit 2013 E._ AG; nachfolgend: Gesellschaft), die am 7. Juli 1993 ins Handelsregister eingetragen wurde, wobei die Parteien je 40 % und C._ 20 % der Aktien hielten und alle als Verwaltungsräte der Gesellschaft fungierten. Ein von den drei Gesellschaftsgründern am 17. Juni 1993 geschlossener Aktionärbindungsvertrag (nachfolgend: ABV) sah vor, dass jeder von ihnen berechtigt sei, im Verwaltungsrat und, wenn er zur aktiven Mitarbeit gewillt sei, in der Geschäftsleitung der AG persönlich Einsitz zu nehmen. In der Folge schied C._ aus, wobei beide Parteien je die Hälfte seiner Aktien übernahmen. Im Jahre 2000 verkauften die Parteien je 10 % der Aktien der Gesellschaft an F._, der 2005 deren Verwaltungsrat wurde, aber dem ABV nicht beitrat. Am 12. Juni 2012 kündigte die durch den Beklagten und F._ organschaftlich vertretene Gesellschaft dem Kläger das Arbeitsverhältnis per Ende September 2012. Die Parteien standen bereits vor der Kündigung vom 12. Juni 2012 miteinander in Verhandlung betreffend Ausscheiden eines von ihnen aus der Gesellschaft. In diesem Rahmen hatte der Kläger seinerseits am 13. April 2012 einen Vorschlag unterbreitet, die Aktien des Beklagten und von F._ zu übernehmen. Nach der Kündigung wurden diese Verhandlungen fortgesetzt. Mit Kaufvertrag vom 13. September 2012 verkaufte der Kläger seine vierzig Aktien an den Beklagten und F._ zu einem Preis von Fr. 500'000.--. Gleichzeitig schlossen der Kläger und die durch den Beklagten und F._ vertretene Gesellschaft eine Austrittsvereinbarung, worin sich die Gesellschaft zur Zahlung eines (Cash-) Bonus von Fr. 1'003'167.28 verpflichtete. B. Mit Klage vom 27. Juni 2013 beim Bezirksgericht Bremgarten beantragte der Kläger im Sinn einer Teilklage, der Beklagte sei kostenfällig zu verpflichten, ihm Fr. 337'000.-- zuzüglich 5 % Zins seit Klageeinleitung zu bezahlen. Er machte geltend, der Beklagte habe mit der Mitwirkung an der Kündigung vom 12. Juni 2012 gegen den zwischen ihnen bestehenden ABV verstossen. Daraus sei ihm ein Einkommensverlust in der Zeit von Oktober bis Dezember 2012 von mindestens Fr. 31'000.-- (3 x Fr. 16'500.-- [durchschnittliches monatliches Nettoeinkommen während der Anstellung bei der Gesellschaft]./. ausbezahlte Arbeitslosenentschädigung) und entgangene Pauschalspesen von Fr. 6'000.-- für den gleichen Zeitraum entstanden. Als weiteren Schaden machte er einen Betrag von Fr. 300'000.-- geltend, mit welchem er sich bei der G._ GmbH (recte: H._ AG) habe einkaufen müssen, um sich eine neue Einkommensmöglichkeit zu schaffen. Das Bezirksgericht wies die Klage mit Entscheid vom 26. März 2015 kostenfällig ab. Am 8. März 2016 wies das Obergericht des Kantons Aargau die vom Kläger gegen den bezirksgerichtlichen Entscheid erhobene Berufung kostenfällig ab. C. Mit Beschwerde in Zivilsachen beantragt der Kläger dem Bundesgericht, das Urteil des Obergerichts sei aufzuheben und die Sache an dieses zurückzuweisen. Der Beschwerdegegner trägt auf Abweisung der Beschwerde an, soweit darauf einzutreten ist. Das Obergericht reichte ebenfalls eine Vernehmlassung ein, ohne einen ausdrücklichen Antrag zu stellen. Mit Präsidialverfügung vom 27. Juni 2016 wies das Bundesgericht das Gesuch des Beschwerdeführers um Erteilung der aufschiebenen Wirkung ab.