Faits : A. B._ (décédé le 18 décembre 2008) était administrateur et actionnaire unique de la société G._ AG. Il était marié à C._ avec qui il a eu quatre enfants, D._, A._, E._ et F._. Par décision du 2 août 2007, la Justice de paix du district de Vevey a désigné en qualité de tuteur provisoire de B._, X._, gestionnaire de fortune au sein de la société H._ SA, entité membre de l'Association suisse des gérants de fortune et dont le but social est la gérance de fortunes, les conseils en placements et toutes autres prestations de conseils juridiques et financiers dans le domaine de l'administration de biens. Par ordonnance de mesures préprovisionnelles du 10 juillet 2008 (confirmée le 24 juillet 2008), le Juge de paix a mis fin au mandat du tuteur provisoire et lui a substitué Me K._. Le 14 novembre 2008, cette dernière et son pupille ont porté plainte contre X._. Par jugement du 7 novembre 2013, le Tribunal correctionnel de l'arrondissement de Lausanne a acquitté le prévenu des chefs d'accusation de faux dans les titres et de gestion déloyale. Le séquestre prononcé le 23 février 2009 tendant au blocage du compte en banque de O._ n° xxx de H._ SA à concurrence de 109'268 fr. 62 a été levé. X._ a été reconnu débiteur de l'exécuteur testamentaire A._, lui devant paiement immédiat des sommes de 109'268 fr. 62 avec intérêts à 5% l'an dès et y compris le 11 juillet 2008 ainsi que 21'200 fr., cette dernière somme à titre d'indemnité pour les dépenses obligatoires occasionnées par la procédure. Les conclusions civiles de l'exécuteur testamentaire ont été rejetées pour le surplus et les frais de justice mis à la charge de X._. B. La Cour d'appel pénale du Tribunal cantonal vaudois a été saisie d'un appel du Ministère public central. Ce dernier concluait à la réforme du jugement en ce sens que X._ soit condamné, pour gestion déloyale aggravée, à une peine de 360 jours-amende à 150 fr. le jour avec sursis pendant 2 ans et à une peine pécuniaire ferme de 120 jours-amende à 150 fr. le jour à titre de sanction immédiate. Il demandait en outre le prononcé d'une créance compensatrice de 109'268 fr. 62, cette somme devant être allouée aux héritiers de B._, représentés par l'exécuteur testamentaire A._, et que X._ soit condamné aux frais de justice. Celui-ci a également formé appel de ce jugement, concluant, sous suite de frais et dépens, à sa modification en ce sens que les chiffres III et IV du dispositif le condamnant au paiement, en main de l'exécuteur testamentaire A._, de 109'268 fr. 62 avec intérêts à 5% l'an dès et y compris le 11 juillet 2008 ainsi que 21'200 fr. soient annulés. A._ a, pour sa part, formé appel joint, concluant, en substance, à la condamnation de X._ pour gestion déloyale aggravée et faux dans les titres, à sa condamnation au paiement de 109'268 fr. 62 plus intérêts à 5% l'an dès et y compris le 10 juillet 2008, à l'allocation à la succession d'une créance compensatrice du même montant, au maintien du séquestre et à la dévolution de la somme séquestrée à la succession. Il demandait en outre qu'acte soit donné à la succession de ses réserves civiles et que la somme de 85'000 fr., majorée des frais d'audience de première instance, lui soit allouée à titre de remboursement des frais engagés pour les opérations effectuées jusqu'à l'audience de jugement de première instance. A titre subsidiaire, il demandait l'annulation du jugement et le renvoi de la cause à l'autorité de première instance pour nouveau jugement au sens des considérants. Par jugement sur appel du 1 er mai 2014, la Cour d'appel pénale a admis l'appel du Ministère public et partiellement l'appel joint de A._. L'appel de X._ a été rejeté. Ce dernier, libéré du chef d'accusation de faux dans les titres, a été condamné pour gestion déloyale aggravée à une année de privation de liberté, avec sursis pendant 2 ans, ainsi qu'à 90 jours-amende à 150 fr. le jour à titre de sanction immédiate. Une créance compensatrice de 109'268 fr. 60 a été prononcée à l'encontre de H._ SA et allouée aux héritiers de B._ représentés par l'exécuteur testamentaire A._. Le séquestre prononcé le 23 février 2009 tendant au blocage du compte xxx de H._ SA à concurrence de 109'268 fr. 60 a été levé et ce montant dévolu à la succession, à laquelle réserve a été, pour le surplus, donnée de ses prétentions civiles. L'exécuteur testamentaire a été renvoyé à agir dans cette mesure devant l'autorité civile compétente. X._ a également été condamné au paiement de 40'000 fr. à l'exécuteur testamentaire à titre d'indemnités pour les dépenses obligatoires occasionnées par la procédure. Les frais d'appel (3010 fr.) ont été répartis par deux tiers à la charge du condamné et un tiers à la charge de l'exécuteur testamentaire. Cet arrêt repose, outre ce qui a été exposé ci-dessus, sur l'état de fait pertinent suivant. B.a. X._ a eu la maîtrise du patrimoine financier de son pupille à compter du 21 septembre 2007. Il a alors réparti la fortune mobilière de B._ dans trois établissements bancaires, soit M._, N._ et O._. Dans ce contexte, l'intéressé a délégué la gestion de ces valeurs patrimoniales à la société H._ SA, malgré le caractère éminemment personnel du mandat provisoire qui lui avait été confié et sans avoir demandé l'autorisation de la Justice de paix. Il a formalisé les rapports contractuels à l'égard des banques concernées en agissant à la fois comme représentant de son pupille et de H._ SA. Le statut de gérant de fortune indépendant a été attesté dans la documentation bancaire qu'il a signée les 27 septembre 2007, 2 octobre 2007 et 19 mars 2008. B.b. Par décision du 2 août 2007, la Justice de paix a imparti à X._ un délai au 15 octobre de la même année pour produire en mains de l'assesseur L._ un inventaire d'entrée des biens de son pupille. L'intéressé n'ayant pas respecté ce délai, il a été prié, par lettre du 22 octobre 2007, de faire le nécessaire jusqu'au 15 novembre 2007 au plus tard. Le 23 octobre 2007, X._ a établi ledit inventaire et l'a adressé à l'assesseur, le 5 novembre suivant. Ce document fait état d'un actif net de 42'057'240 fr., à savoir des espèces et des titres déposés auprès des banques M._ et N._ pour un montant de respectivement 13'255'303 fr. (espèces) et 20'754'247 fr. (titres), ainsi que des immeubles estimés à 8'047'690 fr. X._ n'a toutefois pas inventorié la fortune pupillaire au jour de son entrée en fonction ni mentionné de " date de valeur " sur le formulaire d'inventaire. Cette manière de faire lui a permis de cacher à l'autorité tutélaire des transferts de fonds importants. En effet, lorsque X._ a pris ses fonctions de tuteur, son pupille était titulaire de dépôts totalisant environ 12'000'000 fr. auprès de la Banque P._. Les 8 et 12 octobre 2007, il a transféré ces avoirs auprès de M._ sans solliciter l'accord de la Justice de paix. Ce transfert de valeurs patrimoniales a permis à H._ SA, respectivement à X._, d'encaisser une commission d'apporteur d'affaires d'un montant de 22'341 fr. 95. Au total, les rétributions perçues par X._, par l'intermédiaire de sa société, s'élèvent à 109'268 fr. 62, soit 22'341 fr. 95 (commissions d'apport M._), 35'829 fr. 60 (rétrocessions M._), 47'868 fr. 99 (rétrocessions N._) et 3228 fr. 08 (rétrocessions O._). Ni X._, ni sa société, n'ont renseigné B._, respectivement l'autorité tutélaire, sur ces rémunérations spécifiques. Par ailleurs, aucune renonciation formelle à la restitution des commissions d'apport et/ou des rétrocessions n'a été établie. L'intéressé a agi à l'insu de l'autorité tutélaire afin de lui cacher les rémunérations (rétrocessions et commissions d'apporteur d'affaires) qu'il allait percevoir par l'entremise de sa société H._ SA. C. X._ recourt en matière pénale au Tribunal fédéral contre ce jugement sur appel. Il conclut, avec suite de frais et dépens, principalement à sa réforme en ce sens que son appel soit admis, les appel et appel joint du Ministère public et A._ rejetés, et le jugement de première instance annulé en tant qu'il porte condamnation de X._ au paiement de 109'268 fr. 62 et 21'200 fr. A titre subsidiaire, le recourant conclut à l'annulation du jugement du 1 er mai 2014 et au renvoi de la cause à la cour cantonale pour nouvelle décision au sens des considérants.