Faits : A. Par jugement du 1er décembre 2015, le Tribunal criminel de l'arrondissement de l'Est vaudois a libéré X._ des infractions d'exposition, d'omission de prêter secours et d'atteinte à la paix des morts. Il l'a condamné pour le meurtre de sa mère feue C.A._ le 12 novembre 2011 (art. 111 CP), pour pornographie (art. 197 ch. 3bis aCP) et pour infraction à la loi fédérale sur l'assurance maladie (LAMal), à une peine privative de liberté de six ans, sous déduction de la détention provisoire subie, et à une peine pécuniaire de 100 jours-amende, à 30 fr. le jour. Le Tribunal criminel a donné acte de leurs réserves civiles à l'encontre de X._ à ses deux soeurs A.A._ et B.A._ et ordonné la restitution d'objet à l'administratrice officielle de la succession de leur mère, d'autres étant confisqués et détruits. B. Par jugement du 12 mai 2016, la Cour d'appel pénale du Tribunal cantonal du canton de Vaud a admis partiellement le recours de X._ et rejeté l'appel joint du Ministère public du canton de Vaud. Il a réduit la peine privative de liberté prononcée de six ans à cinq ans. C. X._ forme un recours en matière pénale auprès du Tribunal fédéral contre ce jugement. Il conclut, avec suite de frais, à son acquittement des accusations de meurtre et de pornographie, à sa condamnation pour infraction à la LAMal à une peine pécuniaire avec sursis, à sa libération immédiate, au rejet des réserves civiles formulées par ses soeurs, à la levée des séquestres et à l'attribution en sa faveur d'une indemnité pour tort moral. Subsidiairement, il requiert sa condamnation pour omission de prêter secours, pornographie et infraction à la LAMal à une peine pécuniaire avec sursis, à sa libération immédiate, au rejet des réserves civiles formulées par ses soeurs, à la levée des séquestres et à l'attribution en sa faveur d'une indemnité pour tort moral. Il sollicite le bénéfice de l'assistance judiciaire. X._ a adressé plusieurs courriers au Tribunal fédéral, dont le dernier le 11 mai 2017.