Sachverhalt: A. A._, geboren 1957, war seit 1991 als Reallehrer für den Bezirk X._ tätig. Nachdem es bereits in den Jahren 2004 und 2005 zu Massnahmen seitens des Arbeitgebers gekommen war, wurde A._ am 30. April 2012 ermahnt und ihm am 30. November 2012 eine Bewährungsfrist auferlegt. Letztere wurde am 26. März 2013 aufgehoben. Anlässlich eines Konflikttrainings vom 16. Dezember 2013 erfuhr die zuständige Instruktorin von diversen Problemen der Schüler mit A._, die sie am 20. Dezember 2013 der Schulleiterin mitteilte, welche diese umgehend dem Rektor weiterleitete. Am 13. Januar 2014 informierte der Rektor A._ über die eingegangenen Schüleraussagen, kündigte eine Schülerumfrage an und wies A._ an, dies nicht in der Klasse zu thematisieren; nach Auswertung der Umfrage werde ein weiteres Gespräch mit ihm stattfinden. Als A._ am 17. Januar 2014 per E-Mail von der Auswertung Kenntnis erhielt, diskutierte er diese gleichentags mit seiner Klasse. Obwohl er am 20. Januar 2014 die vormittäglichen Unterrichtsstunden noch wahrnahm, blieb er der auf 11.30 Uhr angesetzten Besprechung mit dem Rektor fern. Tags darauf stellte er der Schule das Arztzeugnis vom 21. Januar 2014 zu, gemäss welchem er von 20. Januar bis 4. Februar 2014 arbeitsunfähig sei. Am 22. Januar 2014 informierte der Rektor die Eltern über die Stellvertretung, die erfolgte Umfrage sowie die Probleme mit A._. Dessen Rechtsvertreter erhob im Schreiben vom 23. Januar 2014 Kritik am Vorgehen des Rektors, drohte mit der Einreichung einer Strafanzeige gegen diesen (was am 17. April 2014 auch geschah) und bot ein Gespräch zur gütlichen Regelung an. Letzteres wurde vom Schulpräsidenten am 29. Januar 2014 angenommen. In der Folge kam jedoch keine Aussprache mit A._ zustande, da er sich weigerte, in Anwesenheit des Rektors daran teilzunehmen. Zudem legte er ein Arztzeugnis vom 4. Februar 2014 vor, gemäss welchem er für sechs bis acht Wochen voll arbeitsunfähig sei. Am Gespräch vom 6. März 2014, an welchem A._ selbst nicht teilnahm, wohl aber sein Rechtsvertreter, wurde er zur Einhaltung seiner Treuepflicht ermahnt, nachdem bekannt geworden war, dass er verschiedene Tätigkeiten in Zusammenhang mit der Schule erledigt hatte. Als der Schulrat von der E-Mail von A._ vom 14. März 2014 Kenntnis erhielt, in welcher er dem Vertreter der Lehrpersonen im Schulrat für deren Einsatz im "Kampf gegen Rektor B._" dankte, gewährte ihm der Schulrat am 20. März 2014 das rechtliche Gehör zur beabsichtigten fristlosen Kündigung. Die beantragte Fristerstreckung wurde abgelehnt; mit Schreiben vom 25. März 2014 äusserte sich A._. Der Schulrat sprach am 26. März 2014 die fristlose Kündigung aus. Am 13. April 2014 unterbreitete der Bezirk A._ ein Vergleichsangebot, wonach ihm per Ende Schuljahr 2013/14 unter sofortiger Freistellung und bei vollem Lohn gekündigt werde, was dieser aber ablehnte. B. Die von A._ gegen die Kündigung am 21. November 2014 erhobene Klage wies das Verwaltungsgericht des Kantons Schwyz am 30. März 2016 ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen mit dem Antrag, es sei der kantonale Entscheid aufzuheben und ihm eine Abfindung in der Höhe von Fr. 67'548.- ( 1 /2 Jahreslohn) nebst Zins von 5 % seit 27. März 2014 sowie eine Pönalentschädigung in der Höhe von Fr. 67'548.- nebst Zins von 5 % seit 27. März 2014 infolge ungerechtfertigter fristloser Entlassung zu zahlen. Der Bezirk schliesst auf Abweisung der Beschwerde, soweit darauf einzutreten sei. Eventualiter sei von der Zusprechung einer Pönalentschädigung abzusehen; subeventualiter sei diese auf einen Monatslohn festzusetzen.