Faits : Faits : A. A.a Entre 1984 et 1987, Z.X._ a commis à plusieurs reprises des abus sexuels sur sa fille A.X._. Le premier acte a eu lieu en 1984, alors que celle-ci était âgée de treize ans. Z.X._ l'avait emmenée dans une roulotte de chantier, lui avait introduit un doigt dans son vagin, lui avait expliqué qu'elle avait un clitoris et qu'elle pouvait jouir de deux façons. En outre, il a eu à cinq reprises des rapports sexuels complets avec elle. Entre 1986 et le printemps 1988, Z.X._ a également abusé sexuellement de sa fille B.X._. Alors que celle-ci était âgée de douze ans environ, il l'a rejointe dans le lit parental où elle regardait la télévision, lui a demandé d'ôter ses habits et lui a touché le sexe et les seins. Puis, il a introduit un doigt dans son vagin en lui disant: « je veux voir comme tu mouilles ». Par la suite, la jeune fille a été obligée d'entretenir à plusieurs reprises des rapports sexuels complets avec son père. Ce dernier a également exhibé son sexe en érection devant B.X._ et s'est masturbé « pour lui montrer comment un homme faisait pour jouir ». A une occasion, il a également demandé à la jeune fille de lui faire une fellation, ce qu'elle a refusé. Après avoir cessé d'entretenir des relations sexuelles avec B.X._, Z.X._ a continué à lui caresser les fesses et les seins par-dessus les habits, ce qu'il faisait déjà depuis de nombreuses années. Pour ces faits, bien que reconnu coupable d'actes d'ordre sexuel avec des enfants, contrainte sexuelle, viol, inceste et violation du devoir d'assistance ou d'éducation, Z.X._ n'a pas été condamné, au motif que ces infractions étaient atteintes par la prescription. A.b Depuis 1994, Z.X._ a pris l'habitude de caresser par-dessus les habits les fesses et la poitrine de sa fille C.X._, âgée d'environ 15 ans. Il lui arrivait également de se présenter nu devant ses filles D.X._, C.X._ et E.X._ et de jouer avec son pénis pendant 5 à 10 minutes, sans clairement se masturber. Z.X._ a également caressé sa fille D.X._ sur les fesses, le vagin et les seins jusqu'en 1988. Il l'a pénétrée avec ses doigts à plusieurs reprises et l'a violée à une occasion, en 1996. A.c En 1999, Z.X._ a forcé F._, alors âgée de 10 ans, à le suivre dans la forêt où il l'a déshabillée avant de se dévêtir. Après l'avoir menacée pour le cas où elle parlerait, il l'a pénétrée avec sa verge. Il a ensuite caressé son vagin, l'a pénétrée avec ses doigts et l'a léchée. Par la suite, il a mis son pénis dans la bouche de la fillette et l'a forcée à lui faire une fellation en lui disant qu'il la tuerait en cas de refus, puis il a éjaculé dans sa bouche. A.c En 1999, Z.X._ a forcé F._, alors âgée de 10 ans, à le suivre dans la forêt où il l'a déshabillée avant de se dévêtir. Après l'avoir menacée pour le cas où elle parlerait, il l'a pénétrée avec sa verge. Il a ensuite caressé son vagin, l'a pénétrée avec ses doigts et l'a léchée. Par la suite, il a mis son pénis dans la bouche de la fillette et l'a forcée à lui faire une fellation en lui disant qu'il la tuerait en cas de refus, puis il a éjaculé dans sa bouche. B. Non convaincu par les dénégations de Z.X._, le Tribunal correctionnel de la Broye et du Nord vaudois l'a reconnu coupable d'actes d'ordre sexuel avec des enfants au sens de l'art. 187 ch. 1 CP, de contrainte sexuelle au sens de l'art. 189 al. 1 CP ainsi que de viol au sens de l'art. 190 al. 1 CP et l'a condamné à une peine de huit ans de réclusion, a donné acte de leurs réserves civiles à trois des parties civiles et a alloué divers montants à des plaignants et parties civiles. B. Non convaincu par les dénégations de Z.X._, le Tribunal correctionnel de la Broye et du Nord vaudois l'a reconnu coupable d'actes d'ordre sexuel avec des enfants au sens de l'art. 187 ch. 1 CP, de contrainte sexuelle au sens de l'art. 189 al. 1 CP ainsi que de viol au sens de l'art. 190 al. 1 CP et l'a condamné à une peine de huit ans de réclusion, a donné acte de leurs réserves civiles à trois des parties civiles et a alloué divers montants à des plaignants et parties civiles. C. Le 22 janvier 2007, la Cour de cassation pénale du Tribunal cantonal vaudois a rejeté le recours de Z.X._ et confirmé le jugement de première instance. C. Le 22 janvier 2007, la Cour de cassation pénale du Tribunal cantonal vaudois a rejeté le recours de Z.X._ et confirmé le jugement de première instance. D. Contre cet arrêt, Z.X._ forme un recours en matière pénale auprès du Tribunal fédéral. Invoquant une violation de l'interdiction de l'arbitraire et du principe in dubio pro reo, il conclut à la réformation du jugement attaqué et à ce qu'il soit libéré de toute prévention, de toute peine et de tout montant à payer aux plaignants. Subsidiairement, il conclut à la réformation du jugement de condamnation et à ce qu'il soit libéré du chef d'accusation de viol et condamné à une peine réduite. Plus subsidiairement encore, il conclut à ce que l'arrêt attaqué soit annulé et la cause renvoyée à l'autorité cantonale pour nouvelle instruction et nouveau jugement. Par courrier ultérieur, Z.X._ a également demandé à être mis au bénéfice de l'assistance judiciaire.