Sachverhalt:
A.
Der Verein A._ bezweckt die Bereitstellung und Verwaltung preiswerten Wohnraumes für Sehbehinderte. Zur Erfüllung dieses Zwecks führt er an der G._strasse xx eine in seinem Eigentum stehende Liegenschaft mit 13 Zimmern. Mitglieder des Vereins können natürliche und juristische Personen sein. Die Aufnahme und der Ausschluss von Mitgliedern erfolgt durch den Vorstand. Die Vorstandsmitglieder werden durch die Vereinsversammlung (in den Statuten bezeichnet als Generalversammlung) für eine Amtsdauer von drei Jahren gewählt.
Die Beschwerdegegner sind Mitglieder des Vereins. In einem früheren Verfahren hatten sie - ihnen wurde im Zusammenhang mit kritischen Berichten im Beobachter zum finanziellen Gebaren des Vereinspräsidenten und des Geschäftsführers seitens des Vereins bzw. der betroffenen Personen ein rufschädigendes Verhalten vorgeworfen - die Aufhebung ihres Ausschlusses aus dem Verein gemäss Beschluss der Generalversammlung vom 28. März 2008 erwirkt. Anlässlich der Vorstandssitzung vom 15. Januar 2010 wurden sie mit Mehrheitsentscheid erneut aus dem Verein ausgeschlossen. An der darauf folgenden Generalversammlung vom 26. März 2010 sollten sie nochmals angehört werden und die Versammlung sollte über die angefochtenen Ausschlüsse befinden. Die betreffende Versammlung wurde abgebrochen und es wurde zu deren Weiterführung auf den 29. Mai 2010 eingeladen.
Die Einladung zur Generalversammlung vom 26. März 2010 erfolgte am 27. Februar 2010. Sie war nicht unterzeichnet, sondern lediglich mit dem Vermerk "Mit freundlichen Grüssen, Verein A._" versehen. Die Einladung ging vom Präsidenten des Vereins aus. Die Versammlung wurde wie erwähnt nicht vollständig durchgeführt, sondern unter dem Traktandum "Anhörung der Rekurrenten" (d.h. der ausgeschlossenen Mitglieder) durch den Präsidenten abgebrochen. Dabei erwähnte er als mögliche Daten für die Fortsetzung den 23. oder 24. April bzw. den 7. oder 8. Mai 2010. Schliesslich lud er am 5. Mai 2010 zur Weiterführung der Generalversammlung auf den 29. Mai 2010 ein, dies erneut mit dem Vermerk "Mit freundlichen Grüssen: Verein A._".
B.
Am 16. Mai 2010 gelangten die heutigen Beschwerdegegner an das Friedensrichteramt der Stadt H._. Nach Durchführung der Sühneverhandlung am 17. August 2010 reichten sie am 9. November 2010 beim Bezirksgericht H._ eine Klage ein mit den Feststellungsbegehren, dass die Generalversammlung vom 29. Mai 2010 nicht statutengemäss einberufen worden und sämtliche Beschlüsse nichtig seien, sowie mit dem Anfechtungsbegehren, dass die Vereinsausschlüsse ungültig seien.
Mit Urteilen vom 23. März 2012 bzw. 20. Februar 2013 stellten das Bezirksgericht H._ und sodann das Obergericht des Kantons Zürich fest, dass die Beschlüsse der Generalversammlung des Vereins A._ vom 29. Mai 2010 nichtig seien.
C.
Gegen das obergerichtliche Urteil hat der Verein A._ am 18. März 2013 eine Beschwerde eingereicht mit den Begehren um dessen Aufhebung und Abweisung der Klage. Mit Präsidialverfügung vom 22. April 2013 wurde festgestellt, dass der Beschwerde die aufschiebende Wirkung nicht von Gesetzes wegen zukommt, weil es sich nicht um eine Gestaltungs-, sondern um eine negative Feststellungsklage handelt. Mit Vernehmlassung vom 22. Mai 2013 schlossen die Beschwerdegegner auf Abweisung der Beschwerde. Das Obergericht verzichtete auf eine Vernehmlassung.

Erwägungen:
1.
Angefochten ist eine kantonal letztinstanzlich beurteilte nicht vermögensrechtliche Zivilrechtsstreitigkeit, gegen welche streitwertunabhängig die Beschwerde in Zivilsachen offen steht (Art. 72 Abs. 1, Abs. 75 Abs. 1 und <ref-law>).
2.
Das Obergericht hat erwogen, dass gemäss Art. 7 der Statuten die Generalversammlung einmal jährlich durch den Vorstand einzuberufen ist und ausserordentlicherweise dann, wenn dieser oder ein Fünftel der Mitglieder unter Angabe des Traktandums dies verlangen. Sowohl die Einladung zur Versammlung vom 26. März 2010 als auch diejenige zur Weiterführung am 29. Mai 2010 seien mithin nicht statutengemäss erfolgt, da die Kompetenz zur Einladung nicht dem Vereinspräsidenten, sondern dem Vorstand zukomme, was auch <ref-law> entspreche. Der Verein anerkenne dies selbst und behaupte auch nicht, dass die Aufgabe an den Präsidenten delegiert worden wäre. Die Einladung zur Weiterführung der Versammlung am 29. Mai 2010, welche vorliegend angefochten sei, leide damit an einem formellen Mangel. Gemäss übereinstimmender und auf BGE 71 I 383 E. 2a S. 388 basierender Lehre seien Vereinsbeschlüsse nichtig, wenn die Einberufung durch ein unzuständiges Organ erfolgt sei. Dies müsse umso mehr angesichts der konkreten Umstände gelten: Zwischen den Beschwerdegegnern und dem Vereinspräsidenten hätten erhebliche Differenzen bestanden. An der Versammlung vom 26. März 2010 sei ein Ordnungsantrag, wonach der Beschluss über die Ausschliessung auszusetzen sei, nur mit dem Stichentscheid des Präsidenten abgelehnt worden. Sodann habe der Beschwerdegegner Nr. 5 anlässlich seiner Stellungnahme die Abwahl mehrerer Vorstandsmitglieder beantragt. Schliesslich sei am 26. März 2010 weder hierüber noch über die Ausschliessung der Beschwerdegegner abgestimmt worden; vielmehr habe der Präsident die Verhandlung von sich aus abgebrochen und eine neue Einladung in Aussicht gestellt. Angesichts dieser Turbulenzen und der umstrittenen Geschäfte wäre es auf jeden Fall Sache des Vorstandes und nicht diejenige des in Frage gestellten Präsidenten gewesen, entsprechend dem Gesetz und den Statuten die Weiterführung der Generalversammlung sowie die Erstellung der Traktandenliste vorzubereiten und hierzu einzuladen, zumal der Präsident nicht einmal bei der mit einem Ordnungsantrag aufgeworfenen Frage, ob bei der Wahl der Vorstandsmitglieder und v.a. bei der Wahl des Präsidenten ein Tagungspräsident zu bestimmen wäre, in den Ausstand getreten sei und er bei dem weiteren Ordnungsantrag, wonach die Frage des Ausschlusses der fraglichen Mitglieder auszusetzen sei, mit Stichentscheid die Ablehnung des Antrages bestimmt habe.
3.
In ihrer Klage hatten die Beschwerdeführer sowohl Begehren um Feststellung der Nichtigkeit als auch ein Anfechtungsbegehren gestellt. Die kantonalen Gerichte haben sich mit dem Anfechtungsbegehren zufolge Bejahung der Nichtigkeit der Beschlüsse nicht näher auseinandergesetzt. Soweit dies vor Bundesrecht standhalten sollte, was zu prüfen sein wird, zumal sich auch die Beschwerde auf dieses Thema konzentriert, erübrigen sich Weiterungen zur Frage des Verhältnisses der beiden Klagearten.
In der Beschwerde wird nicht angezweifelt, dass die Kompetenz zur Einladung nach Art. 7 der Statuten, welcher der subsidiären gesetzlichen Regelung von <ref-law> entspricht, dem Vorstand zusteht. Ebenso wenig wird die obergerichtliche Sachverhaltsfeststellung in Frage gestellt, wonach keine nachträgliche Genehmigung für das Handeln des Präsidenten vorliegt. Schliesslich beanstandet die Beschwerdeführerin nicht, dass das Obergericht implizit davon ausgegangen ist, für die Einladung zur (Fortsetzungs-) Versammlung vom 29. Mai 2010 hätten die gleichen Voraussetzungen gegolten wie für die ursprüngliche vom 26. März 2010. Weil das Bundesgericht nur hinreichend begründete Vorbringen prüft (vgl. <ref-law>), ist auf diese Punkte nicht einzugehen.
Die Beschwerdeführerin wirft dem Obergericht vor, gegen <ref-law> verstossen zu haben, weil diese Norm grundsätzlich nur die Anfechtbarkeit von Vereinsbeschlüssen vorsehe und im Übrigen für die Nichtigkeit der Subsidiaritätsgrundsatz gelte. Das Obergericht habe aber nicht begründet, inwiefern vorliegend die Anfechtung keine genügende Sanktion darstelle; auf die relevanten Unterscheidungskriterien sei es nicht eingegangen, sondern es habe vielmehr auf einen alten Bundesgerichtsentscheid abgestellt, der eine andere Konstellation betroffen habe. Ohnehin habe vorliegend gar nicht ein unzuständiges Organ zur Versammlung eingeladen, sondern vielmehr der Vereinspräsident als Mitglied des zuständigen Organs. Dies entspreche denn auch einer langjährigen Usanz und dieser sei ein besonderes Gewicht beizulegen. Schliesslich sei zu berücksichtigen, dass sich bei korrekter Einladung am Abstimmungsergebnis nichts geändert hätte.
4.
<ref-law> gibt einem jeden Vereinsmitglied die Möglichkeit, gesetzes- oder statutenwidrige Beschlüsse innert Monatsfrist anzufechten, soweit es diesen nicht zugestimmt hat. Leiden Beschlüsse an einer qualifizierten Gesetzes- oder Statutenwidrigkeit, müssen sie als nichtig betrachtet werden. Dies kann, unter Vorbehalt des Rechtsmissbrauchs, grundsätzlich von jedermann ohne Bindung an eine Frist geltend gemacht werden; bei der Annahme von Nichtigkeit ist jedoch Zurückhaltung geboten (<ref-ruling> E. 3b S. 473 f.; <ref-ruling> E. 3.3.2 S. 465).
Vorliegend geht es um einen formellen Mangel, nämlich um die Einladung durch ein unzuständiges Organ. Die Auswirkungen auf die körperschaftliche Willensbildung mögen hier geringer sein als beispielsweise bei der bewussten Nichteinladung oder Fernhaltung von Vereinsmitgliedern, denn grundsätzlich hatten diese vorliegend Kenntnis von Ort und Zeit der anberaumten Versammlung. Dennoch gehen Lehre und Rechtsprechung bei der Einladung durch ein unzuständiges Organ grundsätzlich von Nichtigkeit aus (betr. Verein: BGE 71 I 383 E. 2a 387 f.; RIEMER, Berner Kommentar, N. 99 f. zu <ref-law>; HEINI/ SCHERRER, Basler Kommentar, N. 36 zu <ref-law>; HEINI/PORTMANN/ Seemann, Grundriss des Vereinsrechts, Basel 2009, Rz. 231; betr. andere Körperschaften oder Personengemeinschaften: BGE 78 III 33 E. 11 S. 46 (Genossenschaft); <ref-ruling> E. 3b S. 473 (AG); Urteil 5A.37/2004 vom 1. Juni 2005 E. 4.1 (Stiftung); Urteil 5A_590/2011 vom 27. Februar 2012 E. 3.1 (Stockwerkeigentümergemeinschaft); Riemer, Anfechtungs- und Nichtigkeitsklage im schweizerischen Gesellschaftsrecht, Bern 1998, S. 123; KNOBLOCH, Das System zur Durchsetzung von Aktionärsrechten, Habil. Zürich 2011, S. 81; Schott, Aktienrechtliche Anfechtbarkeit und Nichtigkeit von Generalversammlungsbeschlüssen wegen Verfahrensmängeln, Diss. Zürich 2009, S. 142 ff.; Studer, Die Einberufung der Generalversammlung der Aktiengesellschaft, Diss. Zürich 1995, S. 122 ff.; TRUFFER/DUBS, Basler Kommentar, N. 18 zu <ref-law>). Die Begründung liegt darin, dass die Mitglieder nicht gehalten sein sollen, einer Einberufung, welche von einem unzuständigen Organ ausgeht, Beachtung zu schenken ( STUDER, a.a.O., S. 122; SCHOTT, a.a.O., S. 144; KNOBLOCH, a.a.O., S. 82) und dass diesfalls auch gar keine Mitgliederversammlung im Rechtssinn zustande kommt, weshalb keine gemäss Körperschaftsrecht anfechtbaren Beschlüsse gefasst werden können (Riemer, Klage, S. 122; RIEMER, Kommentar, N. 99 zu <ref-law>).
Soweit die Beschwerdeführerin geltend macht, es habe nicht irgendwer eingeladen, sondern der Vereinspräsident, der zugleich auch Mitglied des Vereinsvorstandes sei, so dürfte sie eine partielle Lehrmeinung zur Aktiengesellschaft ansprechen, wonach nur dann von Nichtigkeit auszugehen sei, wenn ein offensichtlich bzw. generell unzuständiges Organ eine Versammlung einberufen hat (dahingehend STUDER, a.a.O. S. 123; SCHOTT, a.a.O., S. 144 f.), was namentlich nicht der Fall sein soll, wenn bei einer AG ein einzelnes Verwaltungsratsmitglied eigenmächtig einberuft (Schott, a.a.O., S. 146). Die herrschende Lehre und die Rechtsprechung treffen diese Unterscheidung jedoch nicht, und RIEMER (Klage, S. 123; Kommentar, N. 100 zu <ref-law>) hält im Gegenteil explizit fest, dass Nichtigkeit insbesondere auch dann vorliege, wenn die Einladung vom Präsidenten statt vom Vorstand oder Verwaltungsrat ausgegangen sei. Diese Ansicht verdient Zustimmung. Wie das Obergericht festgehalten hat, würde die Abgrenzung mangels eindeutiger Unterscheidungskriterien Schwierigkeiten bieten. Dies zeigt sich exemplarisch im vorliegenden Fall: Es liesse sich in guten Treuen die Ansicht vertreten, die Einladung durch den Präsidenten sei (gerade nicht) vergleichbar der Einladung durch den Geschäftsleiter, wie sie in BGE 71 I 383 zu beurteilen war. Es rechtfertigt sich daher, in Übereinstimmung mit der herrschenden Lehre an der bisherigen Rechtsprechung festzuhalten und davon auszugehen, dass keine beschlussfähige Versammlung zustande kommt, wenn eine unzuständige Person oder ein unzuständiges Organ eingeladen hat.
Als Frage bleibt, ob eine langjährige unangefochtene Praxis eine stillschweigende Delegation der Kompetenzen des Vorstandes an den Präsidenten begründen und aus diesem Grund die Nichtigkeit zu verneinen sein könnte (so z.B. RIEMER, Klage, S. 123). Hierfür fehlt es allerdings an einer verbindlichen Sachverhaltsfeststellung im angefochtenen Entscheid. Das Obergericht hat die Behauptung der Beschwerdeführerin erwähnt, wonach eine langjährige Übung bestehen soll (angefochtener Entscheid S. 12 mit Verweis auf Klageantwort S. 10), aber festgehalten, dass die Beschwerdegegner eine solche Übung bestritten und vorgebracht hätten, erst der heutige Präsident sei eigenmächtig so vorgegangen (angefochtener Entscheid S. 17 mit Verweis auf Berufungsantwort S. 9). Wenn die Beschwerdeführerin dem Obergericht in diesem Zusammenhang eine falsche Anwendung von <ref-law> vorwirft, verkennt sie, dass es bei der Feststellung einer langjährigen Handhabung nicht um eine Rechts-, sondern um eine Tatfrage geht. Die Sachverhaltsfeststellung im angefochtenen Entscheid ist für das Bundesgericht verbindlich (<ref-law>); die Beschwerdeführerin könnte einzig eine offensichtlich unrichtige bzw. willkürliche Sachverhaltsfeststellung geltend machen (<ref-law>; <ref-ruling> E. 7.1 S. 398), was sie unterlässt. Damit hat es bei den Ausführungen im angefochtenen Entscheid zu bleiben und nach diesen liegt keine genügende Sachverhaltsbasis für die Annahme einer langjährigen Übung vor, welche so geartet wäre, dass von einer klaren Delegation der Einladungskompetenz vom statutarisch zuständigen Vorstand an den Präsidenten ausgegangen werden müsste.
5.
Zusammenfassend ergibt sich, dass die Beschwerde abzuweisen ist, soweit auf sie eingetreten werden kann. Die Beschwerdeführerin wird damit kosten- und entschädigungspflichtig (Art. 66 Abs. 1 und Art. 68 Abs. 2 BGG).

Demnach erkennt das Bundesgericht:
1.
Die Beschwerde in Zivilsachen wird abgewiesen, soweit darauf einzutreten ist.
2.
Die Gerichtskosten von Fr. 4'000.-- werden der Beschwerdeführerin auferlegt.
3.
Die Beschwerdeführerin hat die Beschwerdegegner für das bundesgerichtliche Verfahren mit Fr. 2'000.-- zu entschädigen.
4.
Dieses Urteil wird den Parteien und dem Obergericht des Kantons Zürich, I. Zivilkammer, schriftlich mitgeteilt.
Lausanne, 16. August 2013
Im Namen der II. zivilrechtlichen Abteilung
des Schweizerischen Bundesgerichts
Der Präsident: von Werdt
Der Gerichtsschreiber: Möckli