Sachverhalt: A. A._ war am Schulzentrum X._ als Sportlehrer angestellt. Er wurde im Juni 2011 mit Vorwürfen (anzügliche und sarkastische Bemerkungen, Kommentare und Sprüche; ungefragtes Filmen im Sportunterricht) einer weiblichen Schülerin konfrontiert. Am 21. Juni 2011 unterzeichnete er eine Vereinbarung mit der Schulleitung, welche insbesondere sein Verhalten gegenüber weiblichen Lernenden im Sportunterricht zum Gegenstand hatte. Am 23. September 2011 erteilte A._ eine selbstbestimmte Sportlektion, welche er mit seinem privaten Handy filmte. Am 30. September 2011 beanstandete die Schulklasse sein Verhalten (Filmen ohne Einverständnis, Anstarren des Busens, Sprüche). Nach den Herbstferien führte der Rektor am 20. Oktober 2011 eine Anhörung der betroffenen Lernenden durch und gab A._ am 31. Oktober 2011 Gelegenheit, sich zu den Vorwürfen zu äussern. Nachdem dieser die Vorwürfe bestritten hatte, schlug ihm die Schulleitung die Auflösung des Arbeitsverhältnisses bis spätestens Ende Januar 2012 vor und gab ihm eine Bedenkzeit bis zum 4. November 2011. A._ lehnte am 4. November 2011 eine vorzeitige Auflösung des Arbeitsverhältnisses ab, worauf dieses gleichentags schriftlich fristlos gekündigt wurde. B. Eine gegen die fristlose Kündigung eingereichte Beschwerde lehnten das Bildungs- und Kulturdepartement Obwalden am 1. März 2012 und der Regierungsrat des Kantons Obwalden am 23. Oktober 2012 ab. Die dagegen erhobene Beschwerde wies das Verwaltungsgericht des Kantons Obwalden mit Entscheid vom 12. März 2014 ebenfalls ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen mit dem Antrag, es sei der kantonale Entscheid aufzuheben und die Sache an die Vorinstanz zur Neubeurteilung zurückzuweisen. Eventualiter sei die fristlos ausgesprochene Kündigung als unzulässig zu bezeichnen und das Schulzentrum X._ zu verpflichten, ihm Lohnersatz in der Höhe von Fr. 103'155.- sowie eine Strafzahlung in der Höhe von Fr. 68'770.-, beides zuzüglich Zins von 5 % seit 8. November 2011, zu bezahlen; zudem sei das Schulzentrum X._ zu verpflichten, auf diesen Zahlungen die Sozialversicherungsbeiträge zu entrichten. Die Vorinstanz schliesst auf Abweisung der Beschwerde. Das Schulzentrum X._ enthält sich in seiner Stellungnahme eines Antrags. D. Mit Eingabe vom 4. Juli 2014 lässt A._ an seiner Beschwerde festhalten.