Faits : A. Par jugement du 26 novembre 2013, le Tribunal de police de l'arrondissement de l'Est vaudois a reconnu X._ coupable de tentative de contrainte, de violation de domicile, de conduite d'un véhicule automobile malgré le refus, le retrait ou l'interdiction de l'usage du permis, d'infraction à la Loi fédérale sur les armes, les accessoires d'armes et les munitions et de contravention à la Loi fédérale sur les stupéfiants. Il l'a condamné à 300 jours de privation de liberté, dont à déduire un jour de détention subie avant jugement, ainsi qu'à une amende de 500 fr., la peine privative de liberté de substitution étant fixée à 10 jours. B. La Cour d'appel pénale du Tribunal cantonal vaudois a rejeté l'appel de X._ le 19 mai 2014. En substance, ce jugement repose sur les faits suivants: Le 9 septembre 2012, X._ a soustrait le scooter de son amie et s'est rendu au logement de A._ et B._ à C._ au moyen de cet engin, alors qu'il faisait l'objet d'une mesure de retrait de son permis de conduire. Il a frappé à la porte et s'est immédiatement introduit dans l'appartement de A._ et B._ sans attendre d'y être invité. Il a ensuite réclamé à B._ l'argent que celui-ci lui devait, avant de lui arracher son sac noir en bandoulière et de le pousser, le faisant chuter de son fauteuil roulant. X._ a ensuite sorti un pistolet à un coup et a posé le canon au niveau du cou de sa victime, puis sur la tempe droite de cette dernière, tout en la menaçant de mort et en continuant de lui demander de l'argent. B._ a déposé plainte le 9 septembre 2012, mais l'a retirée par lettre du 10 octobre 2013, contresignée par X._. C. X._ forme un recours en matière pénale au Tribunal fédéral contre ce jugement. Il conclut, avec suite de frais et dépens, principalement à sa réforme dans le sens de son acquittement de tentative de contrainte, violation de domicile et infraction à la Loi fédérale sur les armes, les accessoires d'armes et les munitions et à sa condamnation à une peine pécuniaire qui n'est pas supérieure à 90 jours-amende à 30 fr., sous déduction d'un jour de détention subie avant jugement, assortie d'un sursis fixé à dire de justice, ainsi qu'à une amende de 500 fr. Il conclut également à l'octroi d'une indemnité au sens de l'art. 429 CPP. A titre subsidiaire il requiert sa condamnation à une peine pécuniaire assortie du sursis et à titre plus subsidiaire encore que la cause soit renvoyée à l'autorité cantonale pour nouveau jugement au sens des considérants. Il sollicite en outre la restitution de l'effet suspensif.