Faits : A. Par décision du 28 août 2014, la Municipalité de Y._ a mis un terme au contrat de location de la place d'amarrage de X._. Il était notamment reproché à celui-ci d'avoir proposé le versement de 1000 fr.- à la commune pour faciliter l'attribution de sa place à l'acheteuse de son bateau. Le 24 septembre 2014, X._ a adressé un courrier en allemand à la Cour de droit administratif et public du Tribunal cantonal du canton de Vaud (ci-après: le Tribunal cantonal), expliquant notamment que sa proposition de versement était un signe de remerciement. Il a conclu comme suit: "Aus den erwähnten Gründen erhebe ich Einsprache (Rekurs) gegen diese ungerechte Kündigung". Le 26 septembre 2014, le Juge instructeur du Tribunal cantonal a accusé réception du recours, invité l'intéressé à s'adresser en français conformément à l'art. 26 de la loi du 28 octobre 2008 sur la procédure administrative du canton de Vaud (LPA/VD; RSV 173.36) et imparti à l'intéressé un délai au 16 octobre 2014 pour effectuer une avance de frais de 1'000 fr. Le 29 septembre 2014, l'avocate de X._ a annoncé son mandat et déposé un mémoire de recours contre la décision du 28 août 2008 [recte: 2014], qualifiant l'acte de son client du 24 septembre 2014 d' "informe". B. Par courrier du 30 octobre 2014, le Juge instructeur a informé le recourant, par l'intermédiaire de son avocate, que l'avance de frais n'avait pas été payée dans le délai imparti. Par courrier du 4 novembre 2014, l'avocate du recourant a notamment allégué qu'elle ignorait qu'une avance de frais avait été requise. Elle a rappelé que le recours formé par le recourant lui-même était "informe" et indiqué qu'il pouvait être considéré comme retiré. Le mémoire de recours du 29 septembre 2014 interjeté par les soins de l'avocate du recourante était quant à lui maintenu. Par arrêt du 12 novembre 2014, le Tribunal cantonal a déclaré irrecevable pour défaut d'avance de frais le recours déposé par X._. C. Agissant par la voie du recours en matière de droit public et celle du recours constitutionnel subsidiaire, X._ demande au Tribunal fédéral, sous suite de frais et dépens, outre l'effet suspensif, d'annuler l'arrêt du Tribunal cantonal du 12 novembre 2014 et de renvoyer la cause à la juridiction cantonale pour qu'il déclare le recours recevable. Le Tribunal cantonal et la Municipalité de Y._ ont renoncé à se prononcer sur le recours.