R-facebook-bart-base-full-ft-with-tum-nlp-german-gpt2_easy-prior-pp-no-ls-4c77 Test scores and corresponding predictions Source: ['Sport baut durch die intensive körperliche Betätigung Aggressionen ab und trägt so zum spielerischen Umgang von deutschen und ausländischen Sportlern aller Altersstufen bei.'] Prediction: ['Deutschen und ausländische Sportlern baut durch die intensive körperliche Betätigung Aggressionen ab.\nDiese trägt so zum spielerischen Umgang von deutschen und ausländischen Sportlern aller Altersstufen bei.'] Label: [['Sport baut als intensive körperliche Betätigung Aggressionen ab und trägt so zum spielerischen Umgang von deutschen und ausländischen Sportlern bei.']] Sacrebleu: {'score': 48.1138843291231, 'counts': [19, 14, 11, 9], 'totals': [28, 27, 26, 25], 'precisions': [67.85714285714286, 51.851851851851855, 42.30769230769231, 36.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 21} Bleu: {'bleu': 0.4811388432912312, 'precisions': [0.6785714285714286, 0.5185185185185185, 0.4230769230769231, 0.36], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 28, 'reference_length': 21} Rouge: {'rouge1': 0.7999999999999999, 'rouge2': 0.6415094339622641, 'rougeL': 0.7636363636363636, 'rougeLsum': 0.7636363636363636} Sari: {'sari': 28.28436491517668} Flesh Reading Ease: 32.45 ---------------------------------------- Source: ['Der Generator kann rund sieben Watt erzeugen – um Mobiltelefone, Taschenlampen oder GPS-Geräte mit Energie zu speisen.'] Prediction: ['Der Generator in der Schweiz kann rund sieben Watt erzeugen.\nDas kann rund sieben Watt erzeugen.'] Label: [['Der Generator kann rund sieben Watt erzeugen – um Mobiltelefone, Taschenlampen oder GPS-Geräte mit Energie zu versorgen.']] Sacrebleu: {'score': 22.617373614366574, 'counts': [8, 5, 3, 2], 'totals': [18, 17, 16, 15], 'precisions': [44.44444444444444, 29.41176470588235, 18.75, 13.333333333333334], 'bp': 0.9459594689067654, 'sys_len': 18, 'ref_len': 19} Bleu: {'bleu': 0.22617373614366576, 'precisions': [0.4444444444444444, 0.29411764705882354, 0.1875, 0.13333333333333333], 'brevity_penalty': 0.9459594689067654, 'length_ratio': 0.9473684210526315, 'translation_length': 18, 'reference_length': 19} Rouge: {'rouge1': 0.411764705882353, 'rouge2': 0.3125, 'rougeL': 0.411764705882353, 'rougeLsum': 0.411764705882353} Sari: {'sari': 18.37814962814962} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Sie sollen die Natur dabei nah, intensiv und ursprünglich erleben.'] Prediction: ['Die Natur sollen nicht nur intensiv und ursprünglich erleben.\nDie Natur sollen sie nur intensiv und ursprünglich erleben.'] Label: [['Die Natur sollen sie dabei nah, intensiv und ursprünglich erleben.']] Sacrebleu: {'score': 30.024908760987614, 'counts': [9, 7, 5, 3], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 36.8421052631579, 27.77777777777778, 17.647058823529413], 'bp': 1.0, 'sys_len': 20, 'ref_len': 12} Bleu: {'bleu': 0.3002490876098761, 'precisions': [0.45, 0.3684210526315789, 0.2777777777777778, 0.17647058823529413], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 20, 'reference_length': 12} Rouge: {'rouge1': 0.5806451612903226, 'rouge2': 0.48275862068965514, 'rougeL': 0.5806451612903226, 'rougeLsum': 0.5806451612903226} Sari: {'sari': 44.31700244200245} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Das Lebendige Museum Online (LeMO) ist ein Gang durch die deutsche Geschichte von der Mitte des 19. Jahrhunderts bis zur Gegenwart.'] Prediction: ['Das Lebendige Museum Online (LeMO) ist ein Gang durch die deutsche Geschichte von der Mitte des 19.\nJahrhunderts bis zur Gegenwart.\nDie Lebendige Museum Online (LeMO) ist ein Gang durch die deutsche Geschichte von der Mitte des 19.\nJahrhunderts bis zur Gegenwart.'] Label: [['Bekannt ist das Lebendige Museum Online (LeMO).\nEs zeigt online die deutsche Geschichte von der Mitte des 19.\nJahrhunderts bis zur Gegenwart.']] Sacrebleu: {'score': 35.59258297406331, 'counts': [22, 18, 16, 14], 'totals': [50, 49, 48, 47], 'precisions': [44.0, 36.734693877551024, 33.333333333333336, 29.78723404255319], 'bp': 1.0, 'sys_len': 50, 'ref_len': 27} Bleu: {'bleu': 0.3559258297406333, 'precisions': [0.44, 0.3673469387755102, 0.3333333333333333, 0.2978723404255319], 'brevity_penalty': 1.0, 'length_ratio': 1.8518518518518519, 'translation_length': 50, 'reference_length': 27} Rouge: {'rouge1': 0.59375, 'rouge2': 0.4838709677419355, 'rougeL': 0.5625, 'rougeLsum': 0.5625} Sari: {'sari': 62.31554228647253} Flesh Reading Ease: 70.05 ---------------------------------------- Source: ['So schnell kann man zu Fuß oder mit der Bahn keinen Rundgang machen.'] Prediction: ['Die Bahn ist ein grosser Rundgang.\nDas ist nicht mehr ganz nach der Vergangenheit.'] Label: [['Ein großer Vorteil des virtuellen Museums: So schnell kann man zu Fuß oder mit der Bahn keinen Rundgang machen!']] Sacrebleu: {'score': 2.3547653529958312, 'counts': [3, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 0.7316156289466418, 'sys_len': 16, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7316156289466418, 'length_ratio': 0.7619047619047619, 'translation_length': 16, 'reference_length': 21} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.1764705882352941} Sari: {'sari': 5.960148239560004} Flesh Reading Ease: 91.1 ---------------------------------------- Source: ['Google hat vor über einem Jahr 17 bedeutende Museen und Galerien im Internet unter "Art Project" für alle zugänglich gemacht.'] Prediction: ['Google hat 17 bedeutende Galerien im Internet unter "Art Project" gemacht.\nDas hat vor über einem Jahr 17 bedeutende Museen und Galerien im Internet unter "Art Project" für alle zugänglich gemacht.'] Label: [['Google hat vor über einem Jahr 17 Museen und Galerien im Internet unter "Art Project" eröffnet.']] Sacrebleu: {'score': 37.811460788411914, 'counts': [18, 15, 12, 10], 'totals': [37, 36, 35, 34], 'precisions': [48.648648648648646, 41.666666666666664, 34.285714285714285, 29.41176470588235], 'bp': 1.0, 'sys_len': 37, 'ref_len': 19} Bleu: {'bleu': 0.37811460788411905, 'precisions': [0.4864864864864865, 0.4166666666666667, 0.34285714285714286, 0.29411764705882354], 'brevity_penalty': 1.0, 'length_ratio': 1.9473684210526316, 'translation_length': 37, 'reference_length': 19} Rouge: {'rouge1': 0.6, 'rouge2': 0.5416666666666666, 'rougeL': 0.6, 'rougeLsum': 0.6} Sari: {'sari': 42.30454230454231} Flesh Reading Ease: 53.35 ---------------------------------------- Source: ['Er besteht aus beschilderten Stationen an historischen Orten in Bonn.'] Prediction: ['Ein beschildertes Stationen-Fahrer ist in Bonn aufgefunden.\nEr besteht aus beschilderten Stationen an historischen Orten in Bonn.'] Label: [['Er besteht aus Stationen an historischen Orten in Bonn.']] Sacrebleu: {'score': 37.90325913518149, 'counts': [10, 8, 6, 4], 'totals': [19, 18, 17, 16], 'precisions': [52.63157894736842, 44.44444444444444, 35.294117647058826, 25.0], 'bp': 1.0, 'sys_len': 19, 'ref_len': 10} Bleu: {'bleu': 0.37903259135181483, 'precisions': [0.5263157894736842, 0.4444444444444444, 0.35294117647058826, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 19, 'reference_length': 10} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.56, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 60.899470899470906} Flesh Reading Ease: 36.95 ---------------------------------------- Source: ['Der Rundgang beginnt am Haus der Geschichte der Bundesrepublik Deutschland und führt in etwa 90 bis 120 Minuten an zwölf der 18 Stationen vorbei.'] Prediction: ['Der Bundesrepublik Deutschland führt in etwa 90 bis 120 Minuten an zwölf der 18 Stationen vorbei.\nDie Rundgang beginnt am Haus der Geschichte der Bundesrepublik Deutschland und führt in etwa 90 bis 120 Minuten an zwölf der 18 Stationen vorbei.'] Label: [['Der Rundgang beginnt am Haus der Geschichte der Bundesrepublik Deutschland und führt an zwölf der 18 Stationen vorbei.']] Sacrebleu: {'score': 37.13267871770799, 'counts': [19, 16, 14, 12], 'totals': [42, 41, 40, 39], 'precisions': [45.23809523809524, 39.02439024390244, 35.0, 30.76923076923077], 'bp': 1.0, 'sys_len': 42, 'ref_len': 19} Bleu: {'bleu': 0.3713267871770798, 'precisions': [0.4523809523809524, 0.3902439024390244, 0.35, 0.3076923076923077], 'brevity_penalty': 1.0, 'length_ratio': 2.210526315789474, 'translation_length': 42, 'reference_length': 19} Rouge: {'rouge1': 0.625, 'rouge2': 0.5483870967741935, 'rougeL': 0.625, 'rougeLsum': 0.59375} Sari: {'sari': 34.2062031071319} Flesh Reading Ease: 54.7 ---------------------------------------- Source: ['So kann man mit Bildern, Videos und Texten bequem vom Computer aus Geschichte und Kultur erleben und sich so viel Zeit wie nötig lassen.'] Prediction: ['Die Welt ist ein neuer Schutz für Bildern, Videos und Texten.\nDas kann man mit dem Computer aus Geschichte und Kultur erleben.\nDas kann man so viel Zeit wie nötig lassen.'] Label: [['Mit Bildern, Videos und Texten kann man bequem vom Computer aus Geschichte und Kultur erleben.']] Sacrebleu: {'score': 27.694132751313415, 'counts': [14, 11, 8, 6], 'totals': [35, 34, 33, 32], 'precisions': [40.0, 32.35294117647059, 24.242424242424242, 18.75], 'bp': 1.0, 'sys_len': 35, 'ref_len': 17} Bleu: {'bleu': 0.27694132751313416, 'precisions': [0.4, 0.3235294117647059, 0.24242424242424243, 0.1875], 'brevity_penalty': 1.0, 'length_ratio': 2.0588235294117645, 'translation_length': 35, 'reference_length': 17} Rouge: {'rouge1': 0.5416666666666666, 'rouge2': 0.391304347826087, 'rougeL': 0.5000000000000001, 'rougeLsum': 0.5000000000000001} Sari: {'sari': 45.4857160243157} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['So kann man die Innenräume der Alten Nationalgalerie und die Gemäldegalerie in Berlin oder das New Yorker Museum of Modern Art besuchen.'] Prediction: ['Die Innenräume der Alten Nationalgalerie und die Gemäldegalerie in Berlin oder das New Yorker Museum of Modern Art sind besuchen.\nDie Innenräume der Alten Nationalgalerie und die Gemäldegalerie in Berlin oder das New Yorker Museum of Modern Art sind besuchen.'] Label: [['So kann man das Innere der Alten Nationalgalerie und die Gemäldegalerie in Berlin oder das New Yorker Museum of Modern Art besuchen.']] Sacrebleu: {'score': 37.88321306040337, 'counts': [19, 16, 14, 13], 'totals': [42, 41, 40, 39], 'precisions': [45.23809523809524, 39.02439024390244, 35.0, 33.333333333333336], 'bp': 1.0, 'sys_len': 42, 'ref_len': 23} Bleu: {'bleu': 0.3788321306040338, 'precisions': [0.4523809523809524, 0.3902439024390244, 0.35, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.826086956521739, 'translation_length': 42, 'reference_length': 23} Rouge: {'rouge1': 0.5671641791044776, 'rouge2': 0.49230769230769234, 'rougeL': 0.5671641791044776, 'rougeLsum': 0.537313432835821} Sari: {'sari': 39.316380333822195} Flesh Reading Ease: 37.15 ---------------------------------------- Source: ['In den 34 Industriestaaten, die zur OECD gehören, liegt die Differenz im Schnitt bei 16 Prozent.'] Prediction: ['Die OECD hat 34 Industriestaaten, die zur OECD gehören, in den 34 Industriestaaten gehören.\nDie Differenz im Schnitt bei 16 Prozent liegt bei 16 Prozent.'] Label: [['In den 34 Industriestaaten, die zur OECD gehören, liegt die Differenz bei 16 Prozent.']] Sacrebleu: {'score': 35.35868789564808, 'counts': [15, 11, 9, 6], 'totals': [29, 28, 27, 26], 'precisions': [51.724137931034484, 39.285714285714285, 33.333333333333336, 23.076923076923077], 'bp': 1.0, 'sys_len': 29, 'ref_len': 17} Bleu: {'bleu': 0.3535868789564808, 'precisions': [0.5172413793103449, 0.39285714285714285, 0.3333333333333333, 0.23076923076923078], 'brevity_penalty': 1.0, 'length_ratio': 1.7058823529411764, 'translation_length': 29, 'reference_length': 17} Rouge: {'rouge1': 0.7142857142857143, 'rouge2': 0.55, 'rougeL': 0.5714285714285714, 'rougeLsum': 0.5238095238095238} Sari: {'sari': 36.2776171210311} Flesh Reading Ease: 68.05 ---------------------------------------- Source: ['An der Spitze, in den Führungspositionen, ist für Frauen "die Luft dünn". In Deutschlands großen Banken, Energie- und Automobilfirmen, in den Telefon- und Kommunikationsunternehmen, die an der Börse gelistet sind, arbeiten nur sehr wenige Frauen:'] Prediction: ['In Deutschland arbeiten nur wenige Frauen.\nIn den Führungspositionen, in den Führungspositionen, ist für Frauen "die Luft dünn".\nIn den Führungspositionen, in den Telefon und Kommunikationsunternehmen, die an der Börse gelistet sind, arbeiten nur sehr wenige Frauen.'] Label: [['Hier ist "die Luft dünn" in Deutschlands großen Banken, Energie- und Automobilfirmen, in den Telefon- und Kommunikationsunternehmen, die an der Börse gelistet sind.']] Sacrebleu: {'score': 27.882215574405457, 'counts': [21, 14, 11, 8], 'totals': [47, 46, 45, 44], 'precisions': [44.680851063829785, 30.434782608695652, 24.444444444444443, 18.181818181818183], 'bp': 1.0, 'sys_len': 47, 'ref_len': 29} Bleu: {'bleu': 0.2788221557440545, 'precisions': [0.44680851063829785, 0.30434782608695654, 0.24444444444444444, 0.18181818181818182], 'brevity_penalty': 1.0, 'length_ratio': 1.6206896551724137, 'translation_length': 47, 'reference_length': 29} Rouge: {'rouge1': 0.5217391304347826, 'rouge2': 0.44776119402985076, 'rougeL': 0.5217391304347826, 'rougeLsum': 0.5217391304347826} Sari: {'sari': 25.384193470442046} Flesh Reading Ease: 39.0 ---------------------------------------- Source: ['Die Gründe: Um Beruf und Familie zu vereinbaren verzichten auch heute noch immer viele Frauen auf eine Karriere.'] Prediction: ['Um Beruf und Familie zu vereinbaren verzichten auch heute noch immer viele Frauen auf eine Karriere.\nDas hat die Gründe aufgezeichnet.'] Label: [['Warum ist das so?\nUm Beruf und Familie zu vereinbaren, verzichten auch heute noch immer viele Frauen auf eine Karriere.']] Sacrebleu: {'score': 64.3604545490784, 'counts': [17, 15, 13, 11], 'totals': [23, 22, 21, 20], 'precisions': [73.91304347826087, 68.18181818181819, 61.904761904761905, 55.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 23} Bleu: {'bleu': 0.6436045454907839, 'precisions': [0.7391304347826086, 0.6818181818181818, 0.6190476190476191, 0.55], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 23, 'reference_length': 23} Rouge: {'rouge1': 0.8095238095238095, 'rouge2': 0.7500000000000001, 'rougeL': 0.761904761904762, 'rougeLsum': 0.8095238095238095} Sari: {'sari': 65.93948412698413} Flesh Reading Ease: 58.35 ---------------------------------------- Source: ['In Norwegen etwa bekommen Frauen lediglich 8,4 Prozent und in Belgien 8,9 Prozent weniger.'] Prediction: ['Frauen in Norwegen und Belgien sind lediglich 8,4 Prozent weniger.\nIn Norwegen etwa bekommen Frauen lediglich 8,4 Prozent und in Belgien 8,9 Prozent weniger.'] Label: [['In Norwegen etwa bekommen Frauen nur 8,4 Prozent und in Belgien 8,9 Prozent weniger.']] Sacrebleu: {'score': 43.9933170526582, 'counts': [14, 12, 10, 8], 'totals': [26, 25, 24, 23], 'precisions': [53.84615384615385, 48.0, 41.666666666666664, 34.78260869565217], 'bp': 1.0, 'sys_len': 26, 'ref_len': 15} Bleu: {'bleu': 0.439933170526582, 'precisions': [0.5384615384615384, 0.48, 0.4166666666666667, 0.34782608695652173], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 26, 'reference_length': 15} Rouge: {'rouge1': 0.6976744186046512, 'rouge2': 0.6341463414634146, 'rougeL': 0.6976744186046512, 'rougeLsum': 0.6976744186046512} Sari: {'sari': 62.9386845039019} Flesh Reading Ease: 51.0 ---------------------------------------- Source: ['Auch in der Schule wird das Reden in der Mundart gefördert, denn vielerorts wird es in den Unterricht integriert.'] Prediction: ['In der Mundart wird das Reden in der Mundart gefördert.\nDas Reden in der Schule wird vielerorts integriert.'] Label: [['Heute lernen in einigen Regionen sogar die Schüler im Unterreicht wieder " ihren" Dialekt.']] Sacrebleu: {'score': 2.276859592073037, 'counts': [2, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [10.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 20, 'reference_length': 16} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 35.13513513513513} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Auch Teilzeitarbeit oder Telearbeit, die Arbeit von zu Hause, machen das Arbeitsleben flexibler.'] Prediction: ['Die Arbeit von zu Hause machen das Arbeitsleben flexibler.\nAuch Teilzeitarbeit oder Telearbeit machen das Arbeitsleben flexibler.'] Label: [['Auch Teilzeitarbeit oder Homeoffice machen das Arbeitsleben flexibler.']] Sacrebleu: {'score': 25.34743707366162, 'counts': [8, 6, 4, 2], 'totals': [19, 18, 17, 16], 'precisions': [42.10526315789474, 33.333333333333336, 23.529411764705884, 12.5], 'bp': 1.0, 'sys_len': 19, 'ref_len': 9} Bleu: {'bleu': 0.2534743707366162, 'precisions': [0.42105263157894735, 0.3333333333333333, 0.23529411764705882, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 2.111111111111111, 'translation_length': 19, 'reference_length': 9} Rouge: {'rouge1': 0.56, 'rouge2': 0.43478260869565216, 'rougeL': 0.56, 'rougeLsum': 0.56} Sari: {'sari': 55.59375265257618} Flesh Reading Ease: 42.8 ---------------------------------------- Source: ['Kartons bestehen zu mehr als 90 Prozent aus Recyclingfasern.'] Prediction: ['Der Schweizer Kartons bestehen zu mehr als 90 Prozent aus Recyclingfasern.\nDas besteht zu mehr als 90 Prozent aus der Schweiz.'] Label: [['Kartons bestehen zu über 90 Prozent aus Recyclingfasern.']] Sacrebleu: {'score': 20.617350508583826, 'counts': [8, 6, 4, 2], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 27.272727272727273, 19.047619047619047, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 9} Bleu: {'bleu': 0.20617350508583818, 'precisions': [0.34782608695652173, 0.2727272727272727, 0.19047619047619047, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.5555555555555554, 'translation_length': 23, 'reference_length': 9} Rouge: {'rouge1': 0.48275862068965514, 'rouge2': 0.37037037037037035, 'rougeL': 0.48275862068965514, 'rougeLsum': 0.48275862068965514} Sari: {'sari': 56.66666666666668} Flesh Reading Ease: 81.75 ---------------------------------------- Source: ['Die Bräuche sind häufig ähnlich, diese Jahreszeit hat nur – abhängig von der Region in Deutschland – verschiedene Namen.'] Prediction: ['Die Bräuche in Deutschland sind häufig ähnlich, dass die Bräuche verschiedene Namen sind.\nDie Bräuche sind häufig ähnlich, diese Jahreszeit hat nur verschiedene Namen.'] Label: [['Die Bräuche sind häufig ähnlich, diese Zeit hat nur – je nach Region in Deutschland – verschiedene Namen.']] Sacrebleu: {'score': 28.755838200176385, 'counts': [14, 10, 6, 4], 'totals': [28, 27, 26, 25], 'precisions': [50.0, 37.03703703703704, 23.076923076923077, 16.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 20} Bleu: {'bleu': 0.28755838200176376, 'precisions': [0.5, 0.37037037037037035, 0.23076923076923078, 0.16], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 28, 'reference_length': 20} Rouge: {'rouge1': 0.5957446808510638, 'rouge2': 0.4444444444444445, 'rougeL': 0.5106382978723404, 'rougeLsum': 0.5106382978723404} Sari: {'sari': 41.78273115773116} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['Sie beginnt mit Weiberfastnacht, auch Weiberfasching (oder auf Kölsch: „Wieverfastelovend") oder „schmotziger Donnerstag" genannt.'] Prediction: ['Weiberfastnacht ist derzeit auf Weiberfasching.\nDie Schweizer Schweizerinnen und Schweizer starten mit Weiberfasching.\nDie Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer.'] Label: [['Sie beginnt mit Weiberfastnacht, auch Weiberfasching oder „schmotziger Donnerstag" genannt.']] Sacrebleu: {'score': 1.493369524819332, 'counts': [4, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6923076923076925, 'translation_length': 35, 'reference_length': 13} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.0, 'rougeL': 0.09523809523809523, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 20.503689780005573} Flesh Reading Ease: 46.45 ---------------------------------------- Source: ['Am Rosenmontag gibt es in vielen Städten Umzüge mit Mottowagen, die häufig lokale, nationale und auch internationale Politik kommentieren und von vielen Tausend kostümierten Zuschauern besucht werden.'] Prediction: ['Am Rosenmontag werden in vielen Städten Umzüge mit Mottowagen, die häufig lokale, nationale und auch internationale Politik kommentieren und von vielen Tausend kostümierten Zuschauern besucht werden.\nDie häufig lokale, nationale und auch internationale Politik kommentieren und von vielen Tausend kostümierten Zuschauern besucht werden.'] Label: [['Am Rosenmontag gibt es in vielen Städten Umzüge mit Mottowagen.']] Sacrebleu: {'score': 10.853414547943057, 'counts': [9, 6, 4, 3], 'totals': [48, 47, 46, 45], 'precisions': [18.75, 12.76595744680851, 8.695652173913043, 6.666666666666667], 'bp': 1.0, 'sys_len': 48, 'ref_len': 11} Bleu: {'bleu': 0.10853414547943052, 'precisions': [0.1875, 0.1276595744680851, 0.08695652173913043, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 4.363636363636363, 'translation_length': 48, 'reference_length': 11} Rouge: {'rouge1': 0.3278688524590165, 'rouge2': 0.2711864406779661, 'rougeL': 0.3278688524590165, 'rougeLsum': 0.3278688524590165} Sari: {'sari': 18.943615907901624} Flesh Reading Ease: 6.4 ---------------------------------------- Source: ['Vielerorts beginnt die „fünfte Jahreszeit" aber schon am 11.11 (November) um 11:11 Uhr.'] Prediction: ['Am 11.11 (November) startnt die "fünfte Jahreszeit" in der Radio-Section deiner 20-Minuten-App (ganz unten in der Leiste).\nDie "fünfte Jahreszeit" beginnt am 11.11 (November) um 11:11 Uhr.'] Label: [['An vielen Orten beginnt die „fünfte Jahreszeit" aber schon am 11.11 (November) um 11:11 Uhr.']] Sacrebleu: {'score': 25.165972150028303, 'counts': [15, 11, 9, 8], 'totals': [43, 42, 41, 40], 'precisions': [34.883720930232556, 26.19047619047619, 21.951219512195124, 20.0], 'bp': 1.0, 'sys_len': 43, 'ref_len': 21} Bleu: {'bleu': 0.25165972150028304, 'precisions': [0.3488372093023256, 0.2619047619047619, 0.21951219512195122, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 2.0476190476190474, 'translation_length': 43, 'reference_length': 21} Rouge: {'rouge1': 0.490566037735849, 'rouge2': 0.3921568627450981, 'rougeL': 0.4528301886792453, 'rougeLsum': 0.4528301886792453} Sari: {'sari': 31.277620929794843} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Von „Fasching" spricht man in Teilen Bayerns und auch in Norddeutschland, von „Fastnacht" unter anderem in Hessen, Baden und Württemberg. Der „Karneval" hat seine Hochburgen am Rhein wie in Köln oder Düsseldorf.'] Prediction: ['Der "Fasching"-Karneval ist in der Schweiz nicht mehr geworden.\nIn der Nacht auf Sonntag wurde der "Karneval" aufgefunden.\nIn der Schweiz wurde der "Karneval" am Rhein geborgen.'] Label: [['Von „Fasching" spricht man in Teilen Bayerns und auch in Norddeutschland, von „Fastnacht" unter anderem in Hessen, Baden und Württemberg, der „Karneval" ist besonders populär am Rhein in Städten wie Köln oder Düsseldorf.']] Sacrebleu: {'score': 2.6764693105392325, 'counts': [9, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [24.324324324324323, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 0.9221189220143736, 'sys_len': 37, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.24324324324324326, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 0.9221189220143738, 'length_ratio': 0.925, 'translation_length': 37, 'reference_length': 40} Rouge: {'rouge1': 0.2727272727272727, 'rouge2': 0.09375, 'rougeL': 0.24242424242424243, 'rougeLsum': 0.24242424242424243} Sari: {'sari': 14.08231498825558} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Auf Burn-out war in Deutschland im Jahr 2010 fast jeder zehnte Fehltag zurückzuführen, ein Anstieg von rund 80 Prozent gegenüber 1999.Die Krankheitstage kosten viel Geld:'] Prediction: ['Burn-out ist in Deutschland fast jeder zehnte Fehltag zurückzuführen.\nDie Krankheitstage kosten viel Geld: Die Krankheitstage kosten viel Geld:'] Label: [['Auf Burn-out war in Deutschland im Jahr 2010 fast jeder zehnte Fehltag zurückzuführen.\nDie Krankheitstage kosten viel Geld:']] Sacrebleu: {'score': 55.11532346688223, 'counts': [15, 12, 10, 9], 'totals': [22, 21, 20, 19], 'precisions': [68.18181818181819, 57.142857142857146, 50.0, 47.36842105263158], 'bp': 1.0, 'sys_len': 22, 'ref_len': 20} Bleu: {'bleu': 0.5511532346688224, 'precisions': [0.6818181818181818, 0.5714285714285714, 0.5, 0.47368421052631576], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 22, 'reference_length': 20} Rouge: {'rouge1': 0.7441860465116279, 'rouge2': 0.6341463414634146, 'rougeL': 0.7441860465116279, 'rougeLsum': 0.7441860465116279} Sari: {'sari': 54.06118178110278} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['So zahlt sich jeder einzelne Euro, der in Prävention investiert wird, für die deutsche Volkswirtschaft mit mindestens fünf und bis zu 16 Euro aus.'] Prediction: ['Die deutsche Volkswirtschaft hat einen einzelne Euro ausgezahlt.\nDas ist der einzelne Euro, der in Prävention investiert wird, für die deutsche Volkswirtschaft mit mindestens fünf und bis zu 16 Euro ausgezahlt.'] Label: [['So zahlt sich jeder einzelne Euro, der in Prävention investiert wird, für die deutsche Volkswirtschaft mit bis zu 16 Euro aus.']] Sacrebleu: {'score': 44.89965421966535, 'counts': [19, 16, 14, 12], 'totals': [35, 34, 33, 32], 'precisions': [54.285714285714285, 47.05882352941177, 42.42424242424242, 37.5], 'bp': 1.0, 'sys_len': 35, 'ref_len': 24} Bleu: {'bleu': 0.4489965421966536, 'precisions': [0.5428571428571428, 0.47058823529411764, 0.42424242424242425, 0.375], 'brevity_penalty': 1.0, 'length_ratio': 1.4583333333333333, 'translation_length': 35, 'reference_length': 24} Rouge: {'rouge1': 0.631578947368421, 'rouge2': 0.5818181818181818, 'rougeL': 0.631578947368421, 'rougeLsum': 0.631578947368421} Sari: {'sari': 24.719309173623895} Flesh Reading Ease: 59.2 ---------------------------------------- Source: ['In diesem Jahr gibt es laut Michelin-Restaurantführer in Deutschland 249 Sterne-Restaurants, neun davon haben drei Sterne. Die Speisen der rund sieben Millionen Einwanderer prägen und ergänzen die deutsche Küche.'] Prediction: ['In diesem Jahr gibt es 249 Sterne-Restaurants in Deutschland, neun davon haben drei Sterne.\nDie Speisen der rund sieben Millionen Einwanderer prägen und ergänzen die deutsche Küche.'] Label: [['Aktuell gibt es laut Michelin-Restaurantführer in Deutschland 308 Sterne-Restaurants.\nRund sieben Millionen Einwanderer prägen und ergänzen die deutsche Küche.']] Sacrebleu: {'score': 34.98766113994882, 'counts': [16, 11, 8, 7], 'totals': [30, 29, 28, 27], 'precisions': [53.333333333333336, 37.93103448275862, 28.571428571428573, 25.925925925925927], 'bp': 1.0, 'sys_len': 30, 'ref_len': 21} Bleu: {'bleu': 0.34987661139948806, 'precisions': [0.5333333333333333, 0.3793103448275862, 0.2857142857142857, 0.25925925925925924], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 30, 'reference_length': 21} Rouge: {'rouge1': 0.6785714285714285, 'rouge2': 0.5555555555555556, 'rougeL': 0.6428571428571428, 'rougeLsum': 0.6428571428571428} Sari: {'sari': 32.2327594819727} Flesh Reading Ease: 55.35 ---------------------------------------- Source: ['Nicht mehr wegzudenken ist die italienische Küche:'] Prediction: ['Die italienische Küche ist nicht mehr wegzudenken.\nDie italienische Küche ist nicht mehr wegzudenken.'] Label: [['Dazu gehört vor allem die italienische Küche:']] Sacrebleu: {'score': 4.891187874480726, 'counts': [2, 1, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [12.5, 6.666666666666667, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 16, 'reference_length': 8} Rouge: {'rouge1': 0.32, 'rouge2': 0.26086956521739135, 'rougeL': 0.32, 'rougeLsum': 0.32} Sari: {'sari': 31.9462481962482} Flesh Reading Ease: 56.0 ---------------------------------------- Source: ['Jede Person braucht am Tag etwa 42 Liter für die Toilettenspülung, 39 Liter fürs Baden oder Duschen, 18 Liter fürs Wäschewaschen, vier Liter für das Kochen und Trinken und zwei Liter für die Autowäsche.'] Prediction: ['Am Tag fand ein Tag einige Personen mit einem Tag für die Toilettenspülung.\nSie braucht das Liter für das Kochen und Trinken und zwei Liter für die Autowäsche.'] Label: [['Jede Person braucht am Tag etwa 42 Liter für die Toilettenspülung, 39 Liter fürs Baden oder Duschen, 18 Liter für das Waschen von Wäsche, vier Liter für das Kochen und Trinken und zwei Liter für die Autowäsche.']] Sacrebleu: {'score': 32.52850836356998, 'counts': [19, 14, 12, 10], 'totals': [30, 29, 28, 27], 'precisions': [63.333333333333336, 48.275862068965516, 42.857142857142854, 37.03703703703704], 'bp': 0.6930406200864415, 'sys_len': 30, 'ref_len': 41} Bleu: {'bleu': 0.3252850836356999, 'precisions': [0.6333333333333333, 0.4827586206896552, 0.42857142857142855, 0.37037037037037035], 'brevity_penalty': 0.6930406200864415, 'length_ratio': 0.7317073170731707, 'translation_length': 30, 'reference_length': 41} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.5, 'rougeL': 0.5897435897435898, 'rougeLsum': 0.6153846153846153} Sari: {'sari': 24.512213976499687} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Die Ressource Wasser ist in Deutschland ausreichend vorhanden, auch wenn es so wenig regnet wie im Herbst 2011.'] Prediction: ['Die Ressource Wasser ist in Deutschland ausreichend vorhanden.\nEs ist wenig regnet wie im Herbst 2011.'] Label: [['Die Ressource Wasser ist in Deutschland ausreichend vorhanden, auch wenn es in manchen Jahres sehr wenig regnet.']] Sacrebleu: {'score': 41.18986261905915, 'counts': [11, 8, 6, 5], 'totals': [18, 17, 16, 15], 'precisions': [61.111111111111114, 47.05882352941177, 37.5, 33.333333333333336], 'bp': 0.9459594689067654, 'sys_len': 18, 'ref_len': 19} Bleu: {'bleu': 0.41189862619059153, 'precisions': [0.6111111111111112, 0.47058823529411764, 0.375, 0.3333333333333333], 'brevity_penalty': 0.9459594689067654, 'length_ratio': 0.9473684210526315, 'translation_length': 18, 'reference_length': 19} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.5161290322580646, 'rougeL': 0.6666666666666667, 'rougeLsum': 0.6060606060606061} Sari: {'sari': 33.775686977299884} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Wissenschaftler haben in deutschen Flüssen 257 schädliche Chemikalien nachgewiesen.'] Prediction: ['In deutschen Flüssen hat sich einige Chemikalien ausgebrochen.\nDie Chemikalien sind in den sozialen Staaten nicht mehr gekommen.'] Label: [['Wissenschaftler*inenn haben in deutschen Flüssen 257 schädliche Chemikalien nachgewiesen.']] Sacrebleu: {'score': 4.814971807094068, 'counts': [5, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 20, 'reference_length': 12} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.20689655172413793, 'rougeL': 0.3225806451612903, 'rougeLsum': 0.3225806451612903} Sari: {'sari': 14.543650793650794} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['Die Vereinten Nationen haben daher die Jahre 2005 bis 2015 zur Dekade des Wassers, „International Decade for Action – Water for Life“, erklärt.'] Prediction: ['Die Vereinten Nationen haben zur Dekade des Wassers, "International Decade for Action – Water for Life“, erklärt.\nDie Vereinten Nationen haben die Jahre 2005 bis 2015 zur Dekade des Wassers, "International Decade for Action – Water for Life“, erklärt.'] Label: [['Die Jahre 2005 bis 2015 wurden zur Dekade des Wassers, „International Decade for Action – Water for Life“ von den Vereinten Nationen erklärt.']] Sacrebleu: {'score': 26.789951568502804, 'counts': [21, 15, 10, 7], 'totals': [47, 46, 45, 44], 'precisions': [44.680851063829785, 32.608695652173914, 22.22222222222222, 15.909090909090908], 'bp': 1.0, 'sys_len': 47, 'ref_len': 25} Bleu: {'bleu': 0.267899515685028, 'precisions': [0.44680851063829785, 0.32608695652173914, 0.2222222222222222, 0.1590909090909091], 'brevity_penalty': 1.0, 'length_ratio': 1.88, 'translation_length': 47, 'reference_length': 25} Rouge: {'rouge1': 0.6451612903225806, 'rouge2': 0.5333333333333333, 'rougeL': 0.5806451612903226, 'rougeLsum': 0.5806451612903226} Sari: {'sari': 41.91327172931267} Flesh Reading Ease: 38.65 ---------------------------------------- Source: ['Studien beweisen: Unternehmen, die gesellschaftliche Verantwortung übernehmen, stärken ihr positives Image.'] Prediction: ['Unternehmen, die gesellschaftliche Verantwortung übernehmen, stärken ihr positives Image.\nUnternehmen, die gesellschaftliche Verantwortung übernehmen, stärken ihr positives Image.'] Label: [['Studien beweisen: Unternehmen, die gesellschaftliche Verantwortung übernehmen, haben ein positives Image.']] Sacrebleu: {'score': 29.45642544824926, 'counts': [10, 8, 6, 4], 'totals': [24, 23, 22, 21], 'precisions': [41.666666666666664, 34.78260869565217, 27.272727272727273, 19.047619047619047], 'bp': 1.0, 'sys_len': 24, 'ref_len': 15} Bleu: {'bleu': 0.29456425448249246, 'precisions': [0.4166666666666667, 0.34782608695652173, 0.2727272727272727, 0.19047619047619047], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 24, 'reference_length': 15} Rouge: {'rouge1': 0.45161290322580644, 'rouge2': 0.3448275862068966, 'rougeL': 0.45161290322580644, 'rougeLsum': 0.45161290322580644} Sari: {'sari': 22.098360137428074} Flesh Reading Ease: 7.2 ---------------------------------------- Source: ['Sie sind wettbewerbsfähiger, steigern ihre Produktivität und damit ihren wirtschaftlichen Erfolg.'] Prediction: ['Die Schweizer Wettbewerbsproduktion steigt ihre Produktivität und damit ihren wirtschaftlichen Erfolg.\nDie Schweizer Wettbewerbsfähiger steigen ihre Produktivität und damit ihren wirtschaftlichen Erfolg.'] Label: [['Sie sind wettbewerbsfähiger, steigern ihre Produktivität und sind so wirtschaftlich erfolgreich.']] Sacrebleu: {'score': 6.2931739244581335, 'counts': [4, 2, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 8.695652173913043, 4.545454545454546, 2.380952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.08695652173913043, 0.045454545454545456, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.2222222222222222, 'rougeL': 0.3157894736842105, 'rougeLsum': 0.3157894736842105} Sari: {'sari': 8.3994708994709} Flesh Reading Ease: 16.9 ---------------------------------------- Source: ['Die Bereiche, die besonders beachtet werden, sind Menschenrechte, Arbeitsnormen, Bildung und Umweltschutz.'] Prediction: ['Die Bereiche, die besonders beachtet werden, sind Menschenrechte, Arbeitsnormen, Bildung und Umweltschutz.\nDie Menschenrechte, Arbeitsnormen, Bildung und Umweltschutz sind besonders beachtet.'] Label: [['Besonders beachtet werden Menschenrechte, Arbeitsnormen, Bildung und Umweltschutz.']] Sacrebleu: {'score': 25.47296653715805, 'counts': [10, 8, 6, 5], 'totals': [29, 28, 27, 26], 'precisions': [34.48275862068966, 28.571428571428573, 22.22222222222222, 19.23076923076923], 'bp': 1.0, 'sys_len': 29, 'ref_len': 11} Bleu: {'bleu': 0.25472966537158054, 'precisions': [0.3448275862068966, 0.2857142857142857, 0.2222222222222222, 0.19230769230769232], 'brevity_penalty': 1.0, 'length_ratio': 2.6363636363636362, 'translation_length': 29, 'reference_length': 11} Rouge: {'rouge1': 0.5517241379310345, 'rouge2': 0.4444444444444444, 'rougeL': 0.5517241379310345, 'rougeLsum': 0.5517241379310345} Sari: {'sari': 64.3926989190147} Flesh Reading Ease: 29.1 ---------------------------------------- Source: ['Tokio ist aktuell die größte Stadt der Welt:'] Prediction: ['In Tokyo ist die größte Stadt der Welt.\nDie größte Stadt ist aktuell die größte Stadt der Welt.'] Label: [['Tokio ist die größte Stadt der Welt:']] Sacrebleu: {'score': 23.588448106534212, 'counts': [6, 5, 4, 3], 'totals': [20, 19, 18, 17], 'precisions': [30.0, 26.31578947368421, 22.22222222222222, 17.647058823529413], 'bp': 1.0, 'sys_len': 20, 'ref_len': 8} Bleu: {'bleu': 0.23588448106534202, 'precisions': [0.3, 0.2631578947368421, 0.2222222222222222, 0.17647058823529413], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 20, 'reference_length': 8} Rouge: {'rouge1': 0.48275862068965514, 'rouge2': 0.4444444444444444, 'rougeL': 0.48275862068965514, 'rougeLsum': 0.48275862068965514} Sari: {'sari': 36.30952380952381} Flesh Reading Ease: 94.95 ---------------------------------------- Source: ['Besonders profitiert hat der Buchhandel im Internet:'] Prediction: ['Der Buchhandel in Bucharest hat einen Buchhandel im Internet gesprochen.\nDas Internet hat einen Buchhandel im Internet gesprochen.'] Label: [['Besonders hat der Buchhandel im Internet profitiert:']] Sacrebleu: {'score': 7.658412276041004, 'counts': [4, 2, 1, 0], 'totals': [20, 19, 18, 17], 'precisions': [20.0, 10.526315789473685, 5.555555555555555, 2.9411764705882355], 'bp': 1.0, 'sys_len': 20, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.10526315789473684, 0.05555555555555555, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 20, 'reference_length': 8} Rouge: {'rouge1': 0.4, 'rouge2': 0.2608695652173913, 'rougeL': 0.32, 'rougeLsum': 0.32} Sari: {'sari': 33.969780219780226} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Inzwischen fallen 18 Prozent des Buchumsatzes auf den Online-Handel.'] Prediction: ['Die Schweiz verzeichnet einen Buchumsatz.\n18 Prozent des Buchumsatzes wurden auf den Online-Handel verzeichnet.'] Label: [['18 Prozent des Buchumsatzes entstehen im Online-Handel.']] Sacrebleu: {'score': 16.94357181593088, 'counts': [6, 3, 2, 1], 'totals': [16, 15, 14, 13], 'precisions': [37.5, 20.0, 14.285714285714286, 7.6923076923076925], 'bp': 1.0, 'sys_len': 16, 'ref_len': 8} Bleu: {'bleu': 0.16943571815930883, 'precisions': [0.375, 0.2, 0.14285714285714285, 0.07692307692307693], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 16, 'reference_length': 8} Rouge: {'rouge1': 0.5217391304347827, 'rouge2': 0.38095238095238093, 'rougeL': 0.5217391304347827, 'rougeLsum': 0.5217391304347827} Sari: {'sari': 58.9484126984127} Flesh Reading Ease: 50.15 ---------------------------------------- Source: ['Viele Kunden kaufen nicht mehr in den Buchläden ein, sondern lassen sich die Ware nach Hause liefern.'] Prediction: ['Die Ware in den Buchläden sind nicht mehr in den Buchläden einzuhalten.\nDie Kunden kaufen nicht mehr in den Buchläden ein, sondern lassen sich die Ware nach Hause liefern.'] Label: [['Viele Kunden kaufen nicht mehr in Buchläden ein.\nSie lassen sich die Ware nach Hause liefern.']] Sacrebleu: {'score': 34.40746789740437, 'counts': [16, 12, 9, 7], 'totals': [32, 31, 30, 29], 'precisions': [50.0, 38.70967741935484, 30.0, 24.137931034482758], 'bp': 1.0, 'sys_len': 32, 'ref_len': 18} Bleu: {'bleu': 0.34407467897404376, 'precisions': [0.5, 0.3870967741935484, 0.3, 0.2413793103448276], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 32, 'reference_length': 18} Rouge: {'rouge1': 0.6122448979591837, 'rouge2': 0.5106382978723403, 'rougeL': 0.6122448979591837, 'rougeLsum': 0.6122448979591837} Sari: {'sari': 24.86130238048397} Flesh Reading Ease: 71.9 ---------------------------------------- Source: ['Die Staatsministerin für Kultur und Medien, Monika Grütters, bezeichnet die Buchhändler als „Überzeugungstäter aus Liebe zum Buch“. Sie gelten „als Fürsprecher auch unbekannter Autorinnen und Autoren und als Botschafter unabhängiger Verlage.'] Prediction: ['Monika Grütters, Staatsministerin für Kultur und Medien, bezeichnet die Buchhändler als "Überzeugungstäter aus Liebe zum Buch".\nSie gelten auch unbekannter Autorinnen und Autoren und als Botschafter unabhängiger Verlage.'] Label: [['Die Staatsministerin für Kultur und Medien, Monika Grütters, bezeichnet die Buchhändler „als Fürsprecher auch unbekannter Autorinnen und Autoren und als Botschafter unabhängiger Verlage.']] Sacrebleu: {'score': 53.074832571706736, 'counts': [23, 20, 16, 12], 'totals': [34, 33, 32, 31], 'precisions': [67.6470588235294, 60.60606060606061, 50.0, 38.70967741935484], 'bp': 1.0, 'sys_len': 34, 'ref_len': 26} Bleu: {'bleu': 0.5307483257170673, 'precisions': [0.6764705882352942, 0.6060606060606061, 0.5, 0.3870967741935484], 'brevity_penalty': 1.0, 'length_ratio': 1.3076923076923077, 'translation_length': 34, 'reference_length': 26} Rouge: {'rouge1': 0.819672131147541, 'rouge2': 0.711864406779661, 'rougeL': 0.721311475409836, 'rougeLsum': 0.721311475409836} Sari: {'sari': 43.730042396958275} Flesh Reading Ease: 31.45 ---------------------------------------- Source: ['“ Sie wecken oft erst die Lesebegeisterung und zeigen was es neben den Bestsellerlisten noch gibt.'] Prediction: ['Die besten neuen US-Bestseller-Nachrichten sind noch nie.\nSie wecken oft erst die Lesebegeisterung und zeigen was es neben den Bestsellerlisten noch gibt.'] Label: [['“ Sie wecken oft erst die Begeisterung für das Lesen.']] Sacrebleu: {'score': 15.41506497751075, 'counts': [6, 4, 3, 2], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 17.391304347826086, 13.636363636363637, 9.523809523809524], 'bp': 1.0, 'sys_len': 24, 'ref_len': 11} Bleu: {'bleu': 0.15415064977510756, 'precisions': [0.25, 0.17391304347826086, 0.13636363636363635, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 2.1818181818181817, 'translation_length': 24, 'reference_length': 11} Rouge: {'rouge1': 0.29411764705882354, 'rouge2': 0.25, 'rougeL': 0.29411764705882354, 'rougeLsum': 0.29411764705882354} Sari: {'sari': 12.542270531400964} Flesh Reading Ease: 52.0 ---------------------------------------- Source: ['Die bekannteste deutsche Rockband sind die Scorpions, die vor allem im Ausland große Erfolge feierten.'] Prediction: ['Die bekannteste deutsche Rockband sind die Scorpions.\nDie bekannteste deutsche Rockband sind die Scorpions, die vor allem im Ausland große Erfolge feierten.'] Label: [['Die bekannteste deutsche Rockband sind die Scorpions, die vor allem im Ausland Erfolg hatten.']] Sacrebleu: {'score': 49.6706736311865, 'counts': [14, 12, 11, 10], 'totals': [25, 24, 23, 22], 'precisions': [56.0, 50.0, 47.82608695652174, 45.45454545454545], 'bp': 1.0, 'sys_len': 25, 'ref_len': 16} Bleu: {'bleu': 0.4967067363118649, 'precisions': [0.56, 0.5, 0.4782608695652174, 0.45454545454545453], 'brevity_penalty': 1.0, 'length_ratio': 1.5625, 'translation_length': 25, 'reference_length': 16} Rouge: {'rouge1': 0.6486486486486486, 'rouge2': 0.6285714285714286, 'rougeL': 0.6486486486486486, 'rougeLsum': 0.6486486486486486} Sari: {'sari': 61.87932437932437} Flesh Reading Ease: 52.0 ---------------------------------------- Source: ['Rockmusik, zu der auch Metal und Punk gezählt werden, lag im Umsatz bei knapp 22 Prozent.'] Prediction: ['Die Schweiz verzeichnet den Umsatz von 22 Prozent.\nDie meisten Punkrockmusik wurde bei der auch Metal und Punk gezählt.'] Label: [['Rockmusik, zu der auch Metal und Punk gezählt werden, lag beim Umsatz bei knapp 22 Prozent.']] Sacrebleu: {'score': 29.945160623183913, 'counts': [11, 7, 5, 3], 'totals': [21, 20, 19, 18], 'precisions': [52.38095238095238, 35.0, 26.31578947368421, 16.666666666666668], 'bp': 1.0, 'sys_len': 21, 'ref_len': 19} Bleu: {'bleu': 0.29945160623183903, 'precisions': [0.5238095238095238, 0.35, 0.2631578947368421, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 1.105263157894737, 'translation_length': 21, 'reference_length': 19} Rouge: {'rouge1': 0.5945945945945946, 'rouge2': 0.39999999999999997, 'rougeL': 0.37837837837837834, 'rougeLsum': 0.5405405405405405} Sari: {'sari': 26.46666469725335} Flesh Reading Ease: 82.75 ---------------------------------------- Source: ['Rockmusik klingt wesentlich härter im Vergleich zu Schlager oder auch Pop.'] Prediction: ['Die Schweizer Rockmusik ist wichtig.\nDie Schweizer Musiker sind wieder härter im Vergleich zu Schlager oder auch Pop.'] Label: [['Rockmusik klingt härter als Popmusik.']] Sacrebleu: {'score': 2.5197593442434796, 'counts': [3, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [15.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.15, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3333333333333335, 'translation_length': 20, 'reference_length': 6} Rouge: {'rouge1': 0.23999999999999996, 'rouge2': 0.08695652173913045, 'rougeL': 0.23999999999999996, 'rougeLsum': 0.23999999999999996} Sari: {'sari': 29.96031746031746} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Deshalb wurde sie als „Rock“ bezeichnet, das englische Wort für „Felsen“.'] Prediction: ['Deshalb wurde als "Rock“ bezeichnet, das englische Wort für die neue Single "Felsen" zu sein.\nDie Musikerin wurde als "Rock" bezeichnet, das englische Wort für die neue Single für "Felsen" bezeichnet.'] Label: [['Die Bezeichnung „Rock“ kommt aus dem Englischen und heißt „Felsen“.']] Sacrebleu: {'score': 1.038539619163422, 'counts': [2, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [4.761904761904762, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.047619047619047616, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8181818181818183, 'translation_length': 42, 'reference_length': 11} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 28.596866096866098} Flesh Reading Ease: 70.9 ---------------------------------------- Source: ['Hip-Hop entstand in den 70er Jahren und hat seine Wurzeln in der schwarzen Funk- und Soul-Musik.'] Prediction: ['Hip-Hop entstand in den 70er Jahren und hat seine Wurzeln in der schwarzen Funk und Soul-Musik.\nIn der neuen Folge wurde der Zürcher Rapper "Hip-Hop" über die Welt geschickt.'] Label: [['Hip-Hop entstand in den 70er Jahren.']] Sacrebleu: {'score': 14.380553624999498, 'counts': [7, 5, 4, 3], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 15.625, 12.903225806451612, 10.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 7} Bleu: {'bleu': 0.14380553624999498, 'precisions': [0.21212121212121213, 0.15625, 0.12903225806451613, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 4.714285714285714, 'translation_length': 33, 'reference_length': 7} Rouge: {'rouge1': 0.35, 'rouge2': 0.3157894736842105, 'rougeL': 0.35, 'rougeLsum': 0.35} Sari: {'sari': 51.016671603963005} Flesh Reading Ease: 71.9 ---------------------------------------- Source: ['Über 1.000 Betriebe ernten in der Region etwa 250.000 Tonnen pro Jahr.'] Prediction: ['In der Schweiz sind über 1.000 Betriebe in der Region etwa 250.000 Tonnen pro Jahr.\nDie Betriebe ernten etwa 250.000 Tonnen pro Jahr.'] Label: [['Es gibt über 1.000 Apfelbauern in der Region.\nSie ernten jedes Jahr im Herbst ungefähr 250.000 Tonnen Äpfel.']] Sacrebleu: {'score': 9.22635643555325, 'counts': [11, 4, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [44.0, 16.666666666666668, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.44, 0.16666666666666666, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 25, 'reference_length': 20} Rouge: {'rouge1': 0.4680851063829788, 'rouge2': 0.2666666666666666, 'rougeL': 0.42553191489361697, 'rougeLsum': 0.42553191489361697} Sari: {'sari': 46.876006441223836} Flesh Reading Ease: 87.65 ---------------------------------------- Source: ['Im Jahr 2017 war es im Frühling zur Zeit der Apfelblüte sehr kalt und feucht, weshalb in jenem Jahr deutlich weniger Äpfel an den Bäumen wuchsen.'] Prediction: ['Im Frühling 2017 wurde der Schweizer Apfel-Blüte sehr kalt und feucht.\nIm Jahr 2017 war es sehr kalt und feucht, weshalb in jenem Jahr deutlich weniger Äpfel an den Bäumen wuchsen.'] Label: [['Im Jahr 2017 gab es leider eine schlechte Ernte.\nIm Frühling zur Zeit der Apfelblüte war es sehr kalt.\nAußerdem hat es viel geregnet.\nDeshalb gab es in jenem Jahr deutlich weniger Äpfel.']] Sacrebleu: {'score': 24.857457869588828, 'counts': [18, 12, 7, 4], 'totals': [34, 33, 32, 31], 'precisions': [52.94117647058823, 36.36363636363637, 21.875, 12.903225806451612], 'bp': 0.9155454289236553, 'sys_len': 34, 'ref_len': 37} Bleu: {'bleu': 0.24857457869588825, 'precisions': [0.5294117647058824, 0.36363636363636365, 0.21875, 0.12903225806451613], 'brevity_penalty': 0.9155454289236553, 'length_ratio': 0.918918918918919, 'translation_length': 34, 'reference_length': 37} Rouge: {'rouge1': 0.5070422535211268, 'rouge2': 0.3478260869565218, 'rougeL': 0.4225352112676056, 'rougeLsum': 0.5070422535211268} Sari: {'sari': 31.156687790412118} Flesh Reading Ease: 76.75 ---------------------------------------- Source: ['Das milde Klima sorgt normalerweise für eine reiche Ernte im Herbst.'] Prediction: ['Das milde Klima sorgt für eine reiche Ernte im Herbst.\nDie Ernte sorgen normalerweise für eine reiche Ernte im Herbst.'] Label: [['Das milde Klima sorgt normalerweise für eine reiche Ernte.']] Sacrebleu: {'score': 27.809355999594505, 'counts': [10, 7, 5, 3], 'totals': [22, 21, 20, 19], 'precisions': [45.45454545454545, 33.333333333333336, 25.0, 15.789473684210526], 'bp': 1.0, 'sys_len': 22, 'ref_len': 10} Bleu: {'bleu': 0.278093559995945, 'precisions': [0.45454545454545453, 0.3333333333333333, 0.25, 0.15789473684210525], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 22, 'reference_length': 10} Rouge: {'rouge1': 0.625, 'rouge2': 0.5333333333333333, 'rougeL': 0.625, 'rougeLsum': 0.625} Sari: {'sari': 32.11279461279461} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Die Erdbeerzeit beginnt je nach Witterung normalerweise im Mai und endet im Juni. Eltern gehen gern mit ihren Kindern auf die Erdbeerfelder.'] Prediction: ['Die Erdbeerzeit beginnt je nach Witterung normalerweise im Mai und endet im Juni.\nEltern gehen gern mit ihren Kindern auf die Erdbeerfelder.'] Label: [['Während der Erdbeerzeit im Frühjahr gehen Eltern gern mit ihren Kindern auf die Erdbeerfelder.']] Sacrebleu: {'score': 31.52861344254502, 'counts': [12, 7, 6, 5], 'totals': [24, 23, 22, 21], 'precisions': [50.0, 30.434782608695652, 27.272727272727273, 23.80952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 15} Bleu: {'bleu': 0.3152861344254501, 'precisions': [0.5, 0.30434782608695654, 0.2727272727272727, 0.23809523809523808], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 24, 'reference_length': 15} Rouge: {'rouge1': 0.5789473684210527, 'rouge2': 0.3333333333333333, 'rougeL': 0.5263157894736842, 'rougeLsum': 0.5263157894736842} Sari: {'sari': 49.55433455433456} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Zu den beliebtesten heimischen Früchten gehören Erdbeeren, die allerdings nur relativ kurze Zeit geerntet werden.'] Prediction: ['Erdbeeren gehören nur relativ kurze Zeit geerntet werden.\nZu den beliebtesten heimischen Früchten gehören Erdbeeren, die allerdings nur relativ kurze Zeit geerntet werden.'] Label: [['Zu den beliebtesten heimischen Früchten gehören Erdbeeren.\nMan kann sie leider nur für kurze Zeit ernten.']] Sacrebleu: {'score': 26.15858282579582, 'counts': [12, 7, 5, 4], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 28.0, 20.833333333333332, 17.391304347826086], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.26158582825795834, 'precisions': [0.46153846153846156, 0.28, 0.20833333333333334, 0.17391304347826086], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.5333333333333333, 'rouge2': 0.41860465116279066, 'rougeL': 0.5333333333333333, 'rougeLsum': 0.5333333333333333} Sari: {'sari': 52.8237865194387} Flesh Reading Ease: 39.8 ---------------------------------------- Source: ['2014 war Frau Merkel an Rosenmontag als „intergalaktische Kanzlerin“ auf einem Mottowagen in Köln unterwegs, in Mainz tippte sie eine Textnachricht in ihr Mobiltelefon - Uncle Sam schaute ihr dabei über die Schulter.'] Prediction: ['Frau Merkel hat 2014 als "intergalaktische Kanzlerin" auf einem Mottowagen in Köln unterwegs.\nUnter anderem war sie in einem Mottowagen in Mainz unterwegs.\nUnsere Cousin Sam schaute ihr dabei über die Schulter.'] Label: [['2014 war Frau Merkel an Rosenmontag als „intergalaktische Kanzlerin“ auf einem Mottowagen in Köln unterwegs, in Mainz tippte sie eine Textnachricht in ihr Mobiltelefon - Uncle Sam stand natürlich dabei.']] Sacrebleu: {'score': 17.813342785603034, 'counts': [19, 7, 4, 3], 'totals': [37, 36, 35, 34], 'precisions': [51.351351351351354, 19.444444444444443, 11.428571428571429, 8.823529411764707], 'bp': 1.0, 'sys_len': 37, 'ref_len': 32} Bleu: {'bleu': 0.1781334278560303, 'precisions': [0.5135135135135135, 0.19444444444444445, 0.11428571428571428, 0.08823529411764706], 'brevity_penalty': 1.0, 'length_ratio': 1.15625, 'translation_length': 37, 'reference_length': 32} Rouge: {'rouge1': 0.65625, 'rouge2': 0.3548387096774193, 'rougeL': 0.5, 'rougeLsum': 0.46874999999999994} Sari: {'sari': 13.191553999867997} Flesh Reading Ease: 58.15 ---------------------------------------- Source: ['40 Tage vor Ostern geht es in vielen Städten von Weiberfastnacht bis Aschermittwoch vor allem am Rosenmontag bunt und laut zu.'] Prediction: ['In Weiberfastnacht geht es in vielen Städten bis Aschermittwoch bunt und laut zu.\nDie Tage vor Ostern geht es in vielen Städten bis Aschermittwoch bunt und laut zu.'] Label: [['40 Tage vor Ostern geht es in vielen Städten vor allem am Rosenmontag bunt und laut zu.']] Sacrebleu: {'score': 34.2104577056443, 'counts': [13, 11, 9, 7], 'totals': [30, 29, 28, 27], 'precisions': [43.333333333333336, 37.93103448275862, 32.142857142857146, 25.925925925925927], 'bp': 1.0, 'sys_len': 30, 'ref_len': 18} Bleu: {'bleu': 0.342104577056443, 'precisions': [0.43333333333333335, 0.3793103448275862, 0.32142857142857145, 0.25925925925925924], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 30, 'reference_length': 18} Rouge: {'rouge1': 0.5416666666666666, 'rouge2': 0.4782608695652174, 'rougeL': 0.5416666666666666, 'rougeLsum': 0.5416666666666666} Sari: {'sari': 40.081416324012906} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Aber auch in vielen anderen Städten gibt es Veranstaltungen mit „Büttenreden“, bei denen die Obrigkeit bissige Seitenhiebe abbekommt.'] Prediction: ['In der Obrigkeit gibt es in vielen Städten bissige Seitenhiebe.\nAuch in vielen anderen Städten gibt es Veranstaltungen mit "Büttenreden".'] Label: [['In vielen Städten gibt es „Büttenreden“ mit Seitenhieben auf die Obrigkeit.']] Sacrebleu: {'score': 8.282282660969603, 'counts': [8, 3, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [33.333333333333336, 13.043478260869565, 4.545454545454546, 2.380952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.13043478260869565, 0.045454545454545456, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 24, 'reference_length': 12} Rouge: {'rouge1': 0.5555555555555555, 'rouge2': 0.3529411764705882, 'rougeL': 0.4444444444444444, 'rougeLsum': 0.4444444444444444} Sari: {'sari': 43.41727367471075} Flesh Reading Ease: 53.0 ---------------------------------------- Source: ['Doch die Preußen waren den Kölnern nicht sehr sympathisch und daher schnell ein Ziel von Spott und Spaß.'] Prediction: ['Die Preußen von Spaß und Spott sind schnell sympathisch.\nDoch die Preußen waren den Kölnern nicht sehr sympathisch.'] Label: [['Doch die Preußen waren den Kölnern nicht sehr sympathisch und daher schnell ein Ziel von Spott.']] Sacrebleu: {'score': 44.847741016646616, 'counts': [14, 8, 7, 6], 'totals': [20, 19, 18, 17], 'precisions': [70.0, 42.10526315789474, 38.888888888888886, 35.294117647058826], 'bp': 1.0, 'sys_len': 20, 'ref_len': 17} Bleu: {'bleu': 0.44847741016646603, 'precisions': [0.7, 0.42105263157894735, 0.3888888888888889, 0.35294117647058826], 'brevity_penalty': 1.0, 'length_ratio': 1.1764705882352942, 'translation_length': 20, 'reference_length': 17} Rouge: {'rouge1': 0.7692307692307692, 'rouge2': 0.5405405405405405, 'rougeL': 0.5641025641025642, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 31.407481566234424} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Viele Karnevalsgruppen tragen in den Straßenumzügen Fantasieuniformen, die an die preußischen Uniformen erinnern, dazu Holzgewehre, in deren Lauf Blumen stecken.'] Prediction: ['Karnevalsgruppen tragen in den Straßenumzügen Fantasieuniformen.\nHolzgewehre, in deren Lauf Blumen stecken.'] Label: [['Viele Karnevalsgruppen tragen in den Straßenumzügen Fantasieuniformen, die an die preußischen Uniformen erinnern.\nDazu tragen sie Holzgewehre, die mit Blumen geschmückt sind.']] Sacrebleu: {'score': 18.939246740092713, 'counts': [11, 6, 4, 3], 'totals': [15, 14, 13, 12], 'precisions': [73.33333333333333, 42.857142857142854, 30.76923076923077, 25.0], 'bp': 0.48030530108979935, 'sys_len': 15, 'ref_len': 26} Bleu: {'bleu': 0.18939246740092702, 'precisions': [0.7333333333333333, 0.42857142857142855, 0.3076923076923077, 0.25], 'brevity_penalty': 0.48030530108979935, 'length_ratio': 0.5769230769230769, 'translation_length': 15, 'reference_length': 26} Rouge: {'rouge1': 0.5, 'rouge2': 0.3684210526315789, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 22.86297128021003} Flesh Reading Ease: 10.2 ---------------------------------------- Source: ['Berlin, Hamburg, München und Köln sind Millionenstädte, d. h. hier wohnen mehr als eine Million Einwohner.'] Prediction: ['Die Millionenstädte in der Schweiz sind in der Schweiz mehr als eine Million Einwohner.\nDie Millionen Städte in der Schweiz sind in mehreren europäischen Ländern.'] Label: [['Berlin, Hamburg, München und Köln sind Millionenstädte.\nHier wohnen mehr als eine Million Einwohner.']] Sacrebleu: {'score': 18.92240568795935, 'counts': [9, 5, 4, 3], 'totals': [27, 26, 25, 24], 'precisions': [33.333333333333336, 19.23076923076923, 16.0, 12.5], 'bp': 1.0, 'sys_len': 27, 'ref_len': 18} Bleu: {'bleu': 0.1892240568795935, 'precisions': [0.3333333333333333, 0.19230769230769232, 0.16, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 27, 'reference_length': 18} Rouge: {'rouge1': 0.34782608695652173, 'rouge2': 0.22727272727272727, 'rougeL': 0.3043478260869565, 'rougeLsum': 0.34782608695652173} Sari: {'sari': 27.703523328523328} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Sie entstanden aus alten römischen Siedlungen wie Köln, wurden um eine Burg oder ein Kloster gebaut wie etwa München oder sie entstanden als größere Siedlungen von Kaufleuten wie Hamburg.'] Prediction: ['In der Schweiz entstanden mehrere grössere Siedlungen.\nSie entstanden aus alten römischen Siedlungen wie Köln, wurden um eine Burg oder ein Kloster gebaut wie etwa München oder sie entstanden als größere Siedlungen von Kaufleuten wie Hamburg.'] Label: [['Sie entstanden aus alten römischen Siedlungen wie Köln.\nAndere wurden um eine Burg oder ein Kloster gebaut wie München oder sie entstanden als größere Siedlungen von Kaufleuten wie Hamburg.']] Sacrebleu: {'score': 65.29425958294773, 'counts': [30, 26, 23, 20], 'totals': [39, 38, 37, 36], 'precisions': [76.92307692307692, 68.42105263157895, 62.16216216216216, 55.55555555555556], 'bp': 1.0, 'sys_len': 39, 'ref_len': 31} Bleu: {'bleu': 0.6529425958294773, 'precisions': [0.7692307692307693, 0.6842105263157895, 0.6216216216216216, 0.5555555555555556], 'brevity_penalty': 1.0, 'length_ratio': 1.2580645161290323, 'translation_length': 39, 'reference_length': 31} Rouge: {'rouge1': 0.8648648648648648, 'rouge2': 0.8055555555555555, 'rougeL': 0.8648648648648648, 'rougeLsum': 0.8648648648648648} Sari: {'sari': 63.351733143399805} Flesh Reading Ease: 56.7 ---------------------------------------- Source: ['Hier siedelten sich auch viele Handwerker an, es kamen immer mehr Kaufleute hinzu, und so wuchsen die Städte, große wie kleine.'] Prediction: ['Einige Handwerker siedeln sich an, es kamen immer mehr Kaufleute hinzu.\nSie wuchsen die Städte, große wie kleine.'] Label: [['Hier siedelten sich auch viele Handwerker an.\nEs kamen immer mehr Kaufleute hinzu, und so wuchsen die Städte.']] Sacrebleu: {'score': 24.87344417023396, 'counts': [14, 6, 4, 2], 'totals': [22, 21, 20, 19], 'precisions': [63.63636363636363, 28.571428571428573, 20.0, 10.526315789473685], 'bp': 1.0, 'sys_len': 22, 'ref_len': 21} Bleu: {'bleu': 0.2487344417023396, 'precisions': [0.6363636363636364, 0.2857142857142857, 0.2, 0.10526315789473684], 'brevity_penalty': 1.0, 'length_ratio': 1.0476190476190477, 'translation_length': 22, 'reference_length': 21} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.4864864864864865, 'rougeL': 0.6153846153846154, 'rougeLsum': 0.6153846153846154} Sari: {'sari': 17.371025704819186} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Und gerade die Kleinstädte – sie haben zwischen 5.000 und 20.000 Einwohner – sind oft die schönsten mit viel mittelalterlichem Flair und tollen historischen Gebäuden.'] Prediction: ['Die Kleinstädte der Schweiz sind oft mit mittelalterlichem Flair und tollen historischen Gebäuden.\nDie Kleinstädte sind oft die schönsten mit viel mittelalterlichem Flair und tollen historischen Gebäuden.'] Label: [['Und gerade die Kleinstädte – sie haben zwischen 5.000 und 20.000 Einwohner – sind oft die schönsten.']] Sacrebleu: {'score': 9.264863757089694, 'counts': [7, 3, 2, 1], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 10.714285714285714, 7.407407407407407, 3.8461538461538463], 'bp': 1.0, 'sys_len': 29, 'ref_len': 18} Bleu: {'bleu': 0.09264863757089695, 'precisions': [0.2413793103448276, 0.10714285714285714, 0.07407407407407407, 0.038461538461538464], 'brevity_penalty': 1.0, 'length_ratio': 1.6111111111111112, 'translation_length': 29, 'reference_length': 18} Rouge: {'rouge1': 0.39215686274509803, 'rouge2': 0.24489795918367346, 'rougeL': 0.35294117647058826, 'rougeLsum': 0.3137254901960784} Sari: {'sari': 8.442012967875035} Flesh Reading Ease: 49.5 ---------------------------------------- Source: ['Mit dem Osterfest feiern Christen die Auferstehung Jesu.'] Prediction: ['Mit dem Osterfest feiern Christen die Auferstehung Jesu.\nSie feiern die Auferstehung Jesu.'] Label: [['Mit dem Osterfest feiern Christen die Auferstehung von Jesus.']] Sacrebleu: {'score': 41.374412020518825, 'counts': [8, 6, 5, 4], 'totals': [15, 14, 13, 12], 'precisions': [53.333333333333336, 42.857142857142854, 38.46153846153846, 33.333333333333336], 'bp': 1.0, 'sys_len': 15, 'ref_len': 10} Bleu: {'bleu': 0.41374412020518814, 'precisions': [0.5333333333333333, 0.42857142857142855, 0.38461538461538464, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 15, 'reference_length': 10} Rouge: {'rouge1': 0.6363636363636364, 'rouge2': 0.6, 'rougeL': 0.6363636363636364, 'rougeLsum': 0.6363636363636364} Sari: {'sari': 61.930438842203536} Flesh Reading Ease: 56.5 ---------------------------------------- Source: ['In Deutschland und vielen anderen Ländern ist das Osterfest von vielen Bräuchen und Traditionen geprägt.'] Prediction: ['In Deutschland ist das Osterfest von vielen Bräuchen und Traditionen geprägt.\nIn vielen anderen Ländern ist das Osterfest von vielen Bräuchen und Traditionen geprägt.\nIn Deutschland und vielen anderen Ländern ist das Osterfest von vielen Bräuchen und Traditionen geprägt.'] Label: [['In Deutschland und vielen anderen Ländern hat das Osterfest viele Bräuche und Traditionen.']] Sacrebleu: {'score': 13.618477462666483, 'counts': [11, 7, 4, 3], 'totals': [42, 41, 40, 39], 'precisions': [26.19047619047619, 17.073170731707318, 10.0, 7.6923076923076925], 'bp': 1.0, 'sys_len': 42, 'ref_len': 14} Bleu: {'bleu': 0.1361847746266649, 'precisions': [0.2619047619047619, 0.17073170731707318, 0.1, 0.07692307692307693], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 42, 'reference_length': 14} Rouge: {'rouge1': 0.3870967741935484, 'rouge2': 0.26666666666666666, 'rougeL': 0.3870967741935484, 'rougeLsum': 0.3870967741935484} Sari: {'sari': 52.20265599254961} Flesh Reading Ease: 50.0 ---------------------------------------- Source: ['Der OsterhaseIn den deutschsprachigen Ländern suchen Kinder am Ostersonntag bunt bemalte Eier, Süßigkeiten und auch kleine Geschenke, die vom Osterhasen versteckt werden.'] Prediction: ['In den deutschsprachigen Ländern suchen Kinder am Ostersonntag bemalte Eier, Süßigkeiten und auch kleine Geschenke, die vom Osterhasen versteckt werden.\nDie deutsche Kinder suchen Kinder am Ostersonntag bemalte Eier, Süßigkeiten und auch kleine Geschenke, die vom Osterhasen versteckt werden.'] Label: [['In den deutschsprachigen Ländern suchen Kinder am Ostersonntag bunt bemalte Eier, Süßigkeiten und auch kleine Geschenke, die der Osterhase versteckt.']] Sacrebleu: {'score': 35.01620538633326, 'counts': [20, 16, 14, 12], 'totals': [45, 44, 43, 42], 'precisions': [44.44444444444444, 36.36363636363637, 32.55813953488372, 28.571428571428573], 'bp': 1.0, 'sys_len': 45, 'ref_len': 23} Bleu: {'bleu': 0.3501620538633326, 'precisions': [0.4444444444444444, 0.36363636363636365, 0.32558139534883723, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.9565217391304348, 'translation_length': 45, 'reference_length': 23} Rouge: {'rouge1': 0.59375, 'rouge2': 0.5161290322580646, 'rougeL': 0.59375, 'rougeLsum': 0.59375} Sari: {'sari': 47.50972773743172} Flesh Reading Ease: 37.65 ---------------------------------------- Source: ['In Westfalen oder Hannover war es lange Zeit der Fuchs, in der Schweiz der Kuckuck, in Schleswig-Holstein, Oberbayern und Österreich der Hahn, in Thüringen der Storch.'] Prediction: ['In Westfalen oder Hannover war es lange Zeit der Fuchs, in der Schweiz der Kuckuck, in Schleswig-Holstein, Oberbayern und Österreich der Hahn, in Thüringen der Storch.\nIn der Schweiz der Kuckuck war es lange Zeit der Fuchs, in der Schweiz der Kuckuck, in Schleswig-Holstein, Oberbayern und Österreich der Hahn, in Thüringen der Storch.'] Label: [['In Westfalen oder Hannover war es lange Zeit der Fuchs, in der Schweiz der Kuckuck, in Schleswig-Holstein, Oberbayern und Österreich der Hahn.']] Sacrebleu: {'score': 38.550538197799845, 'counts': [26, 24, 23, 22], 'totals': [63, 62, 61, 60], 'precisions': [41.26984126984127, 38.70967741935484, 37.704918032786885, 36.666666666666664], 'bp': 1.0, 'sys_len': 63, 'ref_len': 26} Bleu: {'bleu': 0.3855053819779985, 'precisions': [0.4126984126984127, 0.3870967741935484, 0.3770491803278688, 0.36666666666666664], 'brevity_penalty': 1.0, 'length_ratio': 2.423076923076923, 'translation_length': 63, 'reference_length': 26} Rouge: {'rouge1': 0.575, 'rouge2': 0.5641025641025641, 'rougeL': 0.575, 'rougeLsum': 0.575} Sari: {'sari': 71.58874947203593} Flesh Reading Ease: 65.75 ---------------------------------------- Source: ['Für Kinder verstecken die Eltern diese Eier und natürlich auch Schokoladeneier im Haus und im Garten. Das Ostereiersuchen ist ein großer Spaß für Alt und Jung.'] Prediction: ['Im Ostereiersuchen ist ein großer Spaß für Alt und Jung.\nDas ist ein großer Spaß für Alt und Jung.'] Label: [['Für Kinder verstecken die Eltern diese Eier und natürlich auch Schokoladeneier im Haus und im Garten, das Ostereiersuchen ist ein großer Spaß für alle.']] Sacrebleu: {'score': 19.515340931293586, 'counts': [9, 5, 4, 3], 'totals': [21, 20, 19, 18], 'precisions': [42.857142857142854, 25.0, 21.05263157894737, 16.666666666666668], 'bp': 0.788127627745311, 'sys_len': 21, 'ref_len': 26} Bleu: {'bleu': 0.1951534093129359, 'precisions': [0.42857142857142855, 0.25, 0.21052631578947367, 0.16666666666666666], 'brevity_penalty': 0.788127627745311, 'length_ratio': 0.8076923076923077, 'translation_length': 21, 'reference_length': 26} Rouge: {'rouge1': 0.5490196078431373, 'rouge2': 0.32653061224489793, 'rougeL': 0.4313725490196078, 'rougeLsum': 0.39215686274509803} Sari: {'sari': 16.079104879705767} Flesh Reading Ease: 88.6 ---------------------------------------- Source: ['Klassische Unternehmen streben danach, ihren Gewinn zu vergrößern und zu expandieren.'] Prediction: ['Klassische Unternehmen streben einen Gewinn zu vergrößern und zu expandieren.\nDas ist ein grosser Unternehmen, die ihren Gewinn zu vergrößern und zu expandieren.'] Label: [['Klassische Unternehmen wollen ihren Gewinn vergrößern und expandieren.']] Sacrebleu: {'score': 5.7783239927083425, 'counts': [8, 4, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [30.76923076923077, 16.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.3076923076923077, 0.16, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.888888888888889, 'translation_length': 26, 'reference_length': 9} Rouge: {'rouge1': 0.47058823529411764, 'rouge2': 0.25, 'rougeL': 0.47058823529411764, 'rougeLsum': 0.47058823529411764} Sari: {'sari': 45.47908232118758} Flesh Reading Ease: 51.5 ---------------------------------------- Source: ['Geschäftsmodell mit sozialem Bezug ist die Ausstellung „Dialog im Dunkeln“.'] Prediction: ['Die Ausstellung des sozialen Bezugs "Dialog im Dunkeln" ist derzeit auf die Welt.\nDie Ausstellung ist mit sozialem Bezug auf die Ausstellung "Dialog im Dunkeln" zu sehen.'] Label: [['Ein Geschäftsmodell mit sozialem Bezug ist die Ausstellung „Dialog im Dunkeln“.']] Sacrebleu: {'score': 5.912329024877923, 'counts': [8, 3, 1, 0], 'totals': [33, 32, 31, 30], 'precisions': [24.242424242424242, 9.375, 3.225806451612903, 1.6666666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.24242424242424243, 0.09375, 0.03225806451612903, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.75, 'translation_length': 33, 'reference_length': 12} Rouge: {'rouge1': 0.46153846153846156, 'rouge2': 0.3243243243243243, 'rougeL': 0.41025641025641024, 'rougeLsum': 0.41025641025641024} Sari: {'sari': 12.530364372469634} Flesh Reading Ease: 67.05 ---------------------------------------- Source: ['In komplett abgedunkelten Räumen führen blinde Menschen das Publikum zum Beispiel durch einen Park oder eine Stadt.'] Prediction: ['In komplett abgedunkelten Räumen führen blinde Menschen das Publikum zum Beispiel durch einen Park oder eine Stadt.\nIn komplett abgedunkelten Räumen führen blinde Menschen das Publikum zum Beispiel durch einen Park oder eine Stadt.'] Label: [['In komplett dunklen Räumen führen blinde Menschen das Publikum zum Beispiel durch einen Park oder eine Stadt.']] Sacrebleu: {'score': 40.956736513065295, 'counts': [17, 15, 13, 12], 'totals': [36, 35, 34, 33], 'precisions': [47.22222222222222, 42.857142857142854, 38.23529411764706, 36.36363636363637], 'bp': 1.0, 'sys_len': 36, 'ref_len': 18} Bleu: {'bleu': 0.4095673651306528, 'precisions': [0.4722222222222222, 0.42857142857142855, 0.38235294117647056, 0.36363636363636365], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 36, 'reference_length': 18} Rouge: {'rouge1': 0.631578947368421, 'rouge2': 0.5818181818181818, 'rougeL': 0.631578947368421, 'rougeLsum': 0.631578947368421} Sari: {'sari': 64.11974320379493} Flesh Reading Ease: 57.7 ---------------------------------------- Source: ['Blind erleben die Besucher die Alltagssituationen von Blinden, die geprägt ist von Geräuschen, Gerüchen und Tasten.'] Prediction: ['Die Alltagssituationen von Blinden sind geprägt von Geräuschen, Gerüchen und Tasten.\nDie Besucher erleben die Alltagssituationen von Blinden, die geprägt ist von Geräuschen, Gerüchen und Tasten.'] Label: [['Blind erleben die Besucher die Alltagssituationen von Blinden.']] Sacrebleu: {'score': 9.594785034023696, 'counts': [8, 4, 2, 1], 'totals': [31, 30, 29, 28], 'precisions': [25.806451612903224, 13.333333333333334, 6.896551724137931, 3.5714285714285716], 'bp': 1.0, 'sys_len': 31, 'ref_len': 9} Bleu: {'bleu': 0.09594785034023696, 'precisions': [0.25806451612903225, 0.13333333333333333, 0.06896551724137931, 0.03571428571428571], 'brevity_penalty': 1.0, 'length_ratio': 3.4444444444444446, 'translation_length': 31, 'reference_length': 9} Rouge: {'rouge1': 0.35, 'rouge2': 0.2631578947368421, 'rougeL': 0.3, 'rougeLsum': 0.3} Sari: {'sari': 11.266755913973453} Flesh Reading Ease: 38.3 ---------------------------------------- Source: ['Das soziale Geschäftsmodell veranstaltet jetzt zahlreiche Ausstellungen in 32 Ländern.'] Prediction: ['Das soziale Geschäftsmodell veranstaltet zahlreiche Ausstellungen in 32 Ländern.\nDie sozialen Geschäftsmodell veranstaltet zahlreiche Ausstellungen in 32 Ländern.'] Label: [['Das Geschäftsmodell hat jetzt zahlreiche Ausstellungen in 32 Ländern.']] Sacrebleu: {'score': 25.34743707366162, 'counts': [8, 5, 4, 3], 'totals': [20, 19, 18, 17], 'precisions': [40.0, 26.31578947368421, 22.22222222222222, 17.647058823529413], 'bp': 1.0, 'sys_len': 20, 'ref_len': 10} Bleu: {'bleu': 0.2534743707366162, 'precisions': [0.4, 0.2631578947368421, 0.2222222222222222, 0.17647058823529413], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 20, 'reference_length': 10} Rouge: {'rouge1': 0.5454545454545455, 'rouge2': 0.3870967741935483, 'rougeL': 0.5454545454545455, 'rougeLsum': 0.5454545454545455} Sari: {'sari': 41.252753094858356} Flesh Reading Ease: 18.9 ---------------------------------------- Source: ['Viele Sozialunternehmen finden sich im Bereich der Bildung (Wikipedia) oder der Kultur, einige in der Pflege oder in der Jugendhilfe, aber auch im Bankenwesen (Grameen Bank in Bangladesh).Inzwischen ist jedes vierte in der Europäischen Union neu gegründete Unternehmen ein Sozialunternehmen.'] Prediction: ['Inzwischen ist jedes vierte in der Europäischen Union neu gegründete Unternehmen ein Sozialunternehmen.\nInzwischen ist jedes vierte in der Europäischen Union neu gegründete Unternehmen ein Sozialunternehmen.'] Label: [['Inzwischen ist jedes vierte in der Europäischen Union neu gegründete Unternehmen ein soziales Unternehmen.']] Sacrebleu: {'score': 40.980949787910745, 'counts': [14, 11, 10, 9], 'totals': [28, 27, 26, 25], 'precisions': [50.0, 40.74074074074074, 38.46153846153846, 36.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 15} Bleu: {'bleu': 0.40980949787910764, 'precisions': [0.5, 0.4074074074074074, 0.38461538461538464, 0.36], 'brevity_penalty': 1.0, 'length_ratio': 1.8666666666666667, 'translation_length': 28, 'reference_length': 15} Rouge: {'rouge1': 0.6521739130434783, 'rouge2': 0.5909090909090909, 'rougeL': 0.6521739130434783, 'rougeLsum': 0.608695652173913} Sari: {'sari': 61.827306680247865} Flesh Reading Ease: 20.75 ---------------------------------------- Source: ['Kinder, das wissen mehrsprachige Eltern und das ist wissenschaftlich erwiesen, können mehrere Sprachen gleichzeitig erwerben.'] Prediction: ['Kinder, das wissen mehrsprachige Eltern und das ist wissenschaftlich erwiesen, können mehrere Sprachen gleichzeitig erwerben.\nDas ist wissenschaftlich erwiesen und kann mehrere Sprachen gleichzeitig erwerben.'] Label: [['Kinder, können mehrere Sprachen gleichzeitig erwerben, das können mehrsprachige Eltern bestätigen.']] Sacrebleu: {'score': 21.202634869562416, 'counts': [12, 8, 4, 3], 'totals': [29, 28, 27, 26], 'precisions': [41.37931034482759, 28.571428571428573, 14.814814814814815, 11.538461538461538], 'bp': 1.0, 'sys_len': 29, 'ref_len': 14} Bleu: {'bleu': 0.21202634869562414, 'precisions': [0.41379310344827586, 0.2857142857142857, 0.14814814814814814, 0.11538461538461539], 'brevity_penalty': 1.0, 'length_ratio': 2.0714285714285716, 'translation_length': 29, 'reference_length': 14} Rouge: {'rouge1': 0.5, 'rouge2': 0.3684210526315789, 'rougeL': 0.4, 'rougeLsum': 0.35000000000000003} Sari: {'sari': 51.38155136268344} Flesh Reading Ease: 38.8 ---------------------------------------- Source: ['Auch wenn Bildung Sache der Bundesländer ist, gibt es doch seit einigen Jahren das deutschlandweite Programm „Schwerpunkt Kitas Sprache & Integration“.'] Prediction: ['Das deutsche Programm "Schwerpunkt Kitas Sprache & Integration" ist seit einigen Jahren das deutschlandweite Programm "Schwerpunkt Kitas Sprache & Integration".\nDie Bildung Sache der Bundesländer ist auch wenn Bildung Sache der Bundesländer ist, gibt es doch seit einigen Jahren das deutschlandweite Programm "Schwerpunkt Kitas Sprache & Integration".'] Label: [['Seit einigen Jahren gibt es das Programm „Schwerpunkt Kitas Sprache & Integration “.']] Sacrebleu: {'score': 5.943511191482253, 'counts': [11, 5, 2, 1], 'totals': [56, 55, 54, 53], 'precisions': [19.642857142857142, 9.090909090909092, 3.7037037037037037, 1.8867924528301887], 'bp': 1.0, 'sys_len': 56, 'ref_len': 14} Bleu: {'bleu': 0.05943511191482251, 'precisions': [0.19642857142857142, 0.09090909090909091, 0.037037037037037035, 0.018867924528301886], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 56, 'reference_length': 14} Rouge: {'rouge1': 0.3859649122807018, 'rouge2': 0.2545454545454545, 'rougeL': 0.3859649122807018, 'rougeLsum': 0.3157894736842105} Sari: {'sari': 33.92481203007519} Flesh Reading Ease: 35.15 ---------------------------------------- Source: ['Damit werden Programme gefördert wie das Kooperationsprojekt „Sprachförderung in Kindertagesstätten unter der Mitwirkung von Grundschullehrkräften“ der Hamburger Schulbehörde.'] Prediction: ['Das Kooperationsprojekt "Sprachförderung in Kindertagesstätten unter der Mitwirkung von Grundschullehrkräften" der Hamburger Schulbehörde hat eine Programme gefördert.\nDamit werden Programme gefördert wie das Kooperationsprojekt "Sprachförderung in Kindertagesstätten unter der Mitwirkung von Grundschullehrkräften".'] Label: [['Damit werden Projekte wie das Kooperationsprojekt „Sprachförderung in Kindertagesstätten unter der Mitwirkung von Grundschullehrkräften“ gefördert, zum Beispiel in Hamburg.']] Sacrebleu: {'score': 17.548433488411252, 'counts': [14, 8, 5, 3], 'totals': [38, 37, 36, 35], 'precisions': [36.8421052631579, 21.62162162162162, 13.88888888888889, 8.571428571428571], 'bp': 1.0, 'sys_len': 38, 'ref_len': 21} Bleu: {'bleu': 0.1754843348841125, 'precisions': [0.3684210526315789, 0.21621621621621623, 0.1388888888888889, 0.08571428571428572], 'brevity_penalty': 1.0, 'length_ratio': 1.8095238095238095, 'translation_length': 38, 'reference_length': 21} Rouge: {'rouge1': 0.59375, 'rouge2': 0.48387096774193555, 'rougeL': 0.5000000000000001, 'rougeLsum': 0.5625} Sari: {'sari': 30.73119130175488} Flesh Reading Ease: 0.2 ---------------------------------------- Source: ['Neben dem Spitzenreiter Kaffee sind dies vor allem Reis, Bananen, Zucker und Blumen.'] Prediction: ['Neben dem Spitzenreiter Kaffee sind Reis, Bananen, Zucker und Blumen gekommen.\nDie Reis, Bananen, Zucker und Blumen sind vor allem Reis, Bananen, Zucker und Blumen.'] Label: [['Neben Kaffee sind dies vor allem Reis, Bananen, Zucker und Blumen.']] Sacrebleu: {'score': 29.3424334421968, 'counts': [13, 10, 8, 7], 'totals': [33, 32, 31, 30], 'precisions': [39.39393939393939, 31.25, 25.806451612903224, 23.333333333333332], 'bp': 1.0, 'sys_len': 33, 'ref_len': 14} Bleu: {'bleu': 0.29342433442196797, 'precisions': [0.3939393939393939, 0.3125, 0.25806451612903225, 0.23333333333333334], 'brevity_penalty': 1.0, 'length_ratio': 2.357142857142857, 'translation_length': 33, 'reference_length': 14} Rouge: {'rouge1': 0.5555555555555556, 'rouge2': 0.4117647058823529, 'rougeL': 0.5555555555555556, 'rougeLsum': 0.5555555555555556} Sari: {'sari': 28.379528366370472} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Das jedenfalls belegt eine Studie, die „Fairtrade“-Deutschland zusammen mit „Fairtrade“-Schweiz in Auftrag gegeben hat.'] Prediction: ['Eine Studie belegt eine Studie, die "Fairtrade“-Deutschland zusammen mit "Fairtrade“-Schweiz in Auftrag gegeben hat.\nSie belegt eine Studie, die "Fairtrade“-Deutschland zusammen mit "Fairtrade“-Schweiz in Auftrag gegeben hat.'] Label: [['Das belegt eine Studie, die „Fairtrade“-Deutschland zusammen mit „Fairtrade“-Schweiz in Auftrag gegeben hat.']] Sacrebleu: {'score': 21.31110797092058, 'counts': [12, 9, 6, 4], 'totals': [35, 34, 33, 32], 'precisions': [34.285714285714285, 26.470588235294116, 18.181818181818183, 12.5], 'bp': 1.0, 'sys_len': 35, 'ref_len': 15} Bleu: {'bleu': 0.21311107970920584, 'precisions': [0.34285714285714286, 0.2647058823529412, 0.18181818181818182, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 35, 'reference_length': 15} Rouge: {'rouge1': 0.608695652173913, 'rouge2': 0.5909090909090909, 'rougeL': 0.608695652173913, 'rougeLsum': 0.608695652173913} Sari: {'sari': 33.02188552188552} Flesh Reading Ease: 31.95 ---------------------------------------- Source: ['Sie verlangt, dass die Produkte auch zu 100 Prozent fair verarbeitet werden.'] Prediction: ['Die Produkte der Schweizer Produkte werden auch zu 100 Prozent fair verarbeitet.\nSie verlangt, dass die Produkte auch zu 100 Prozent verarbeitet werden.'] Label: [['Sie will, dass die Produkte auch zu 100 Prozent fair verarbeitet werden.']] Sacrebleu: {'score': 39.80668738240056, 'counts': [13, 11, 9, 7], 'totals': [26, 25, 24, 23], 'precisions': [50.0, 44.0, 37.5, 30.434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.3980668738240055, 'precisions': [0.5, 0.44, 0.375, 0.30434782608695654], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.6285714285714286, 'rouge2': 0.5454545454545455, 'rougeL': 0.5714285714285714, 'rougeLsum': 0.6285714285714286} Sari: {'sari': 45.95458553791887} Flesh Reading Ease: 57.35 ---------------------------------------- Source: ['Ökologischer Tourismus, kurz Ökotourismus ist umweltfreundlicher oder umweltverträglicher Tourismus.'] Prediction: ['Ökologischer Tourismus hat einen neuen Tourismus-Konzern.\nDer Grund: Ökologische Tourismus ist umweltfreundlicher oder umweltverträglicher Tourismus.'] Label: [['Ökologischer Tourismus, kurz Ökotourismus, ist ein umweltfreundlicher Tourismus.']] Sacrebleu: {'score': 6.722636787666482, 'counts': [6, 2, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [33.333333333333336, 11.764705882352942, 3.125, 1.6666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.11764705882352941, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 18, 'reference_length': 11} Rouge: {'rouge1': 0.4, 'rouge2': 0.08695652173913043, 'rougeL': 0.4, 'rougeLsum': 0.4} Sari: {'sari': 19.194096133751305} Flesh Reading Ease: 14.55 ---------------------------------------- Source: ['Der Massentourismus, so heißt es im Lexikon der Nachhaltigkeit, wird seit Ende der 1980er Jahre von den Umwelt- und Naturschutzverbänden kritisiert, denn er verursacht Umweltbelastungen.'] Prediction: ['Der Massentourismus wird seit Ende der 1980er Jahre von den Umwelt und Naturschutzverbänden kritisiert, denn er verursacht Umweltbelastungen.\nDer Massentourismus wird seit Ende der 1980er Jahre von den Umwelt und Naturschutzverbänden kritisiert, denn er verursacht Umweltbelastungen.'] Label: [['Der Massentourismus, so heißt es im Lexikon der Nachhaltigkeit, wird seit Anfang der 1980er Jahre von den Umwelt- und Naturschutzverbänden kritisiert, denn er verursacht Umweltbelastungen.']] Sacrebleu: {'score': 31.78956058171238, 'counts': [20, 14, 10, 8], 'totals': [40, 39, 38, 37], 'precisions': [50.0, 35.8974358974359, 26.31578947368421, 21.62162162162162], 'bp': 1.0, 'sys_len': 40, 'ref_len': 29} Bleu: {'bleu': 0.3178956058171238, 'precisions': [0.5, 0.358974358974359, 0.2631578947368421, 0.21621621621621623], 'brevity_penalty': 1.0, 'length_ratio': 1.3793103448275863, 'translation_length': 40, 'reference_length': 29} Rouge: {'rouge1': 0.5846153846153846, 'rouge2': 0.47619047619047616, 'rougeL': 0.5846153846153846, 'rougeLsum': 0.5538461538461538} Sari: {'sari': 21.434329065908017} Flesh Reading Ease: 33.3 ---------------------------------------- Source: ['Der „sanfte“ Tourismus plant beispielsweise schon die umweltfreundliche Anreise mit der Bahn ein. Beim ersten Bundeswettbewerb Nachhaltige Tourismusregionen 2012/13 war die Uckermark, im Nordosten Brandenburgs gelegen, die Siegerregion.'] Prediction: ['Der Bundeswettbewerb Nachhaltige Tourismusregionen 2012/13 war die Uckermark, im Nordosten Brandenburgs gelegen, die Siegerregion.\nDer Tourismus plant beispielsweise schon die umweltfreundliche Anreise mit der Bahn ein.'] Label: [['Beim ersten Bundeswettbewerb Nachhaltige Tourismusregionen 2012/13 war die Uckermark im Nordosten Brandenburgs die Siegerregion.']] Sacrebleu: {'score': 32.576831014269956, 'counts': [15, 12, 9, 6], 'totals': [32, 31, 30, 29], 'precisions': [46.875, 38.70967741935484, 30.0, 20.689655172413794], 'bp': 1.0, 'sys_len': 32, 'ref_len': 17} Bleu: {'bleu': 0.3257683101426995, 'precisions': [0.46875, 0.3870967741935484, 0.3, 0.20689655172413793], 'brevity_penalty': 1.0, 'length_ratio': 1.8823529411764706, 'translation_length': 32, 'reference_length': 17} Rouge: {'rouge1': 0.6190476190476191, 'rouge2': 0.55, 'rougeL': 0.6190476190476191, 'rougeLsum': 0.6190476190476191} Sari: {'sari': 44.9224826772003} Flesh Reading Ease: 32.45 ---------------------------------------- Source: ['Im Ökotourismus kooperieren Tourismus und Naturschutz.'] Prediction: ['Im Ökotourismus kooperieren Tourismus und Naturschutz.\nDie Ökotourismus kooperieren Tourismus und Naturschutz.'] Label: [['Im Ökotourismus arbeiten Tourismus und Naturschutz zusammen.']] Sacrebleu: {'score': 13.912311644176565, 'counts': [6, 3, 1, 0], 'totals': [14, 13, 12, 11], 'precisions': [42.857142857142854, 23.076923076923077, 8.333333333333334, 4.545454545454546], 'bp': 1.0, 'sys_len': 14, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.42857142857142855, 0.23076923076923078, 0.08333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 14, 'reference_length': 8} Rouge: {'rouge1': 0.5263157894736842, 'rouge2': 0.3529411764705882, 'rougeL': 0.5263157894736842, 'rougeLsum': 0.5263157894736842} Sari: {'sari': 49.358974358974365} Flesh Reading Ease: 16.05 ---------------------------------------- Source: ['Der Alpenraum ist eine der größten Tourismusregionen der Welt. Vor allem die Skiregionen mit ihren riesigen Liftanlagen und den Autokolonnen sind schlimme Nebenerscheinungen des Massentourismus.'] Prediction: ['Der Alpenraum ist eine der größten Tourismusregionen der Welt.\nVor allem die Skiregionen mit ihren riesigen Liftanlagen und den Autokolonnen sind schlimme Nebenerscheinungen des Massentourismus.'] Label: [['Im Alpenraum als eine der größten Tourismusregionen der Welt sind vor allem die Skiregionen mit ihren riesigen Liftanlagen typisch für den Massentourismus.']] Sacrebleu: {'score': 42.396156294478345, 'counts': [18, 12, 9, 7], 'totals': [27, 26, 25, 24], 'precisions': [66.66666666666667, 46.15384615384615, 36.0, 29.166666666666668], 'bp': 1.0, 'sys_len': 27, 'ref_len': 23} Bleu: {'bleu': 0.42396156294478327, 'precisions': [0.6666666666666666, 0.46153846153846156, 0.36, 0.2916666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.173913043478261, 'translation_length': 27, 'reference_length': 23} Rouge: {'rouge1': 0.76, 'rouge2': 0.5416666666666667, 'rougeL': 0.7199999999999999, 'rougeLsum': 0.7199999999999999} Sari: {'sari': 54.767527793843584} Flesh Reading Ease: 27.1 ---------------------------------------- Source: ['Doch die Einnahmen garantieren den Alpenbewohnern ein wichtiges Einkommen, ohne das zum Beispiel viele Bauern gar nicht überleben würden.'] Prediction: ['Alpenbewohner wollen ein wichtiges Einkommen garantieren.\nDas wird nicht nur ein wichtiges Einkommen garantiert, sondern ein wichtiges Einkommen.'] Label: [['Doch die Einnahmen garantieren den Alpenbewohnern ein wichtiges Einkommen.']] Sacrebleu: {'score': 12.021577610863728, 'counts': [5, 3, 2, 1], 'totals': [21, 20, 19, 18], 'precisions': [23.80952380952381, 15.0, 10.526315789473685, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 10} Bleu: {'bleu': 0.12021577610863723, 'precisions': [0.23809523809523808, 0.15, 0.10526315789473684, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 21, 'reference_length': 10} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.15999999999999998, 'rougeL': 0.2962962962962963, 'rougeLsum': 0.2222222222222222} Sari: {'sari': 34.80986434159809} Flesh Reading Ease: 36.45 ---------------------------------------- Source: ['Hier sind sinnvolle Konzepte gefragt. So gibt es viele Angebote wie Shuttle-Services, damit man aufs Auto verzichten kann.'] Prediction: ['Einige Shuttle-Services sind in der Schweiz aufs Auto verzichten.\nDie Konzepte sind sinnvolle Konzepte gefragt.\nSo gibt es viele Angebote wie Shuttle-Services, damit man aufs Auto verzichten kann.'] Label: [['Hier sind sinnvolle Konzepte gefragt, etwa wie Shuttle-Services, damit man auf das Auto verzichten kann.']] Sacrebleu: {'score': 25.484001074358844, 'counts': [13, 10, 7, 4], 'totals': [32, 31, 30, 29], 'precisions': [40.625, 32.25806451612903, 23.333333333333332, 13.793103448275861], 'bp': 1.0, 'sys_len': 32, 'ref_len': 18} Bleu: {'bleu': 0.2548400107435885, 'precisions': [0.40625, 0.3225806451612903, 0.23333333333333334, 0.13793103448275862], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 32, 'reference_length': 18} Rouge: {'rouge1': 0.5217391304347827, 'rouge2': 0.4090909090909091, 'rougeL': 0.5217391304347827, 'rougeLsum': 0.5217391304347827} Sari: {'sari': 19.490889573827964} Flesh Reading Ease: 59.55 ---------------------------------------- Source: ['Die Einsätze und Initiativen sind soziale Hilfsprojekte, Aktionen im Umweltschutz, Ehrenämter in Sportvereinen, Schulen, Kirchen oder ein Engagement in der Politik.'] Prediction: ['Die Einsätze und Initiativen sind soziale Hilfsprojekte, Aktionen im Umweltschutz, Ehrenämter in Sportvereinen, Schulen, Kirchen oder ein Engagement in der Politik.\nDie Einsätze und Initiativen sind soziale Hilfsprojekte, Aktionen im Umweltschutz, Ehrenämter in Sportvereinen, Schulen, Kirchen oder ein Engagement in der Politik.'] Label: [['Die Einsätze und Initiativen sind soziale Hilfsprojekte, Aktionen im Umweltschutz, Ehrenämter in Sportvereinen oder ein Engagement in der Politik.']] Sacrebleu: {'score': 37.37028328591446, 'counts': [22, 20, 18, 16], 'totals': [52, 51, 50, 49], 'precisions': [42.30769230769231, 39.21568627450981, 36.0, 32.6530612244898], 'bp': 1.0, 'sys_len': 52, 'ref_len': 22} Bleu: {'bleu': 0.37370283285914463, 'precisions': [0.4230769230769231, 0.39215686274509803, 0.36, 0.32653061224489793], 'brevity_penalty': 1.0, 'length_ratio': 2.3636363636363638, 'translation_length': 52, 'reference_length': 22} Rouge: {'rouge1': 0.626865671641791, 'rouge2': 0.5846153846153845, 'rougeL': 0.626865671641791, 'rougeLsum': 0.626865671641791} Sari: {'sari': 70.88586335574286} Flesh Reading Ease: 18.6 ---------------------------------------- Source: ['Motive, sich zu engagieren, sind nicht immer altruistisch.'] Prediction: ['Motive, sich zu engagieren, sind nicht immer altruistisch.\nDas sind nicht immer altruistisch.'] Label: [['Motive, sich zu engagieren, gibt es viele.']] Sacrebleu: {'score': 29.28298013714698, 'counts': [7, 5, 4, 3], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 31.25, 26.666666666666668, 21.428571428571427], 'bp': 1.0, 'sys_len': 17, 'ref_len': 10} Bleu: {'bleu': 0.2928298013714697, 'precisions': [0.4117647058823529, 0.3125, 0.26666666666666666, 0.21428571428571427], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 17, 'reference_length': 10} Rouge: {'rouge1': 0.4, 'rouge2': 0.3333333333333333, 'rougeL': 0.4, 'rougeLsum': 0.4} Sari: {'sari': 54.81254856254857} Flesh Reading Ease: 56.5 ---------------------------------------- Source: ['Manche wollen auf diesem Weg auch Berufserfahrungen sammeln, sozial eingebunden werden, oder ihr Selbstwertgefühl steigern, andere danken so für selbst erfahrene Hilfe, bauen Schuldgefühle ab oder lenken von eigenen Problemen ab.'] Prediction: ['Manche wollen auf diesem Weg auch Berufserfahrungen sammeln, sozial eingebunden werden, oder ihr Selbstwertgefühl steigern.\nDiese wollen auch Berufserfahrungen sammeln, sozial eingebunden werden, oder ihr Selbstwertgefühl steigern.'] Label: [['Manche wollen auf diesem Weg Berufserfahrungen sammeln, sozial eingebunden werden, andere danken so für selbst erfahrene Hilfe oder lenken von eigenen Problemen ab.']] Sacrebleu: {'score': 28.761107249998986, 'counts': [14, 10, 8, 6], 'totals': [33, 32, 31, 30], 'precisions': [42.42424242424242, 31.25, 25.806451612903224, 20.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 26} Bleu: {'bleu': 0.28761107249998985, 'precisions': [0.42424242424242425, 0.3125, 0.25806451612903225, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.2692307692307692, 'translation_length': 33, 'reference_length': 26} Rouge: {'rouge1': 0.4150943396226415, 'rouge2': 0.3137254901960784, 'rougeL': 0.4150943396226415, 'rougeLsum': 0.4150943396226415} Sari: {'sari': 28.748668881502233} Flesh Reading Ease: 26.1 ---------------------------------------- Source: ['Äpfel und Kartoffeln sind im Herbst baum- oder feldfrisch, Erdbeeren und Spargel gibt es im Frühjahr oder Frühsommer.'] Prediction: ['Der Herbst ist baum und feldfrisch.\nEs gibt es im Frühjahr oder Frühsommer.'] Label: [['Äpfel und Kartoffeln sind im Herbst ganz frisch, Erdbeeren und Spargel gibt es im Frühjahr oder Frühsommer.']] Sacrebleu: {'score': 32.636840103640736, 'counts': [9, 6, 5, 4], 'totals': [15, 14, 13, 12], 'precisions': [60.0, 42.857142857142854, 38.46153846153846, 33.333333333333336], 'bp': 0.7659283383646487, 'sys_len': 15, 'ref_len': 19} Bleu: {'bleu': 0.32636840103640724, 'precisions': [0.6, 0.42857142857142855, 0.38461538461538464, 0.3333333333333333], 'brevity_penalty': 0.7659283383646487, 'length_ratio': 0.7894736842105263, 'translation_length': 15, 'reference_length': 19} Rouge: {'rouge1': 0.5882352941176471, 'rouge2': 0.43750000000000006, 'rougeL': 0.5882352941176471, 'rougeLsum': 0.5882352941176471} Sari: {'sari': 29.840252340252345} Flesh Reading Ease: 97.45 ---------------------------------------- Source: ['Umweltbewusste Verbraucher achten inzwischen sehr genau darauf, wo ihre Nahrungsmittel herkommen, am liebsten nämlich aus ihrer Region.'] Prediction: ['Umweltbewusste Verbraucher achten inzwischen sehr genau darauf, wo ihre Nahrungsmittel herkommen, am liebsten nämlich aus ihrer Region.\nDie Umweltbewusste achten inzwischen sehr genau darauf, wo ihre Nahrungsmittel herkommen, am liebsten nämlich aus ihrer Region.'] Label: [['Umweltbewusste Verbraucher achten inzwischen sehr genau darauf, wo ihre Nahrungsmittel herkommen, am liebsten aus ihrer Region.']] Sacrebleu: {'score': 41.165349184859494, 'counts': [19, 17, 15, 13], 'totals': [40, 39, 38, 37], 'precisions': [47.5, 43.58974358974359, 39.473684210526315, 35.13513513513514], 'bp': 1.0, 'sys_len': 40, 'ref_len': 19} Bleu: {'bleu': 0.411653491848595, 'precisions': [0.475, 0.4358974358974359, 0.39473684210526316, 0.35135135135135137], 'brevity_penalty': 1.0, 'length_ratio': 2.1052631578947367, 'translation_length': 40, 'reference_length': 19} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.5599999999999999, 'rougeL': 0.6153846153846153, 'rougeLsum': 0.6153846153846153} Sari: {'sari': 64.10979160979161} Flesh Reading Ease: 34.3 ---------------------------------------- Source: ['Doch nicht alles wächst in Deutschland:'] Prediction: ['Deutschland ist nicht alles wächst in Deutschland.\nDoch nicht alles wächst in Deutschland.'] Label: [['Denn nicht alles wächst in Deutschland:']] Sacrebleu: {'score': 24.601372576927535, 'counts': [5, 4, 3, 2], 'totals': [15, 14, 13, 12], 'precisions': [33.333333333333336, 28.571428571428573, 23.076923076923077, 16.666666666666668], 'bp': 1.0, 'sys_len': 15, 'ref_len': 7} Bleu: {'bleu': 0.24601372576927535, 'precisions': [0.3333333333333333, 0.2857142857142857, 0.23076923076923078, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 15, 'reference_length': 7} Rouge: {'rouge1': 0.5454545454545455, 'rouge2': 0.5, 'rougeL': 0.5454545454545455, 'rougeLsum': 0.5454545454545455} Sari: {'sari': 25.41666666666667} Flesh Reading Ease: 79.9 ---------------------------------------- Source: ['Aufgrund der Globalisierung landet auch der beliebte Spargel schon ab Februar aus Südeuropa in den deutschen Märkten.'] Prediction: ['Der beliebte Spargel aus Südeuropa landet aufgrund der Globalisierung aus den deutschen Märkten.\nAuch der beliebte Spargel aus Südeuropa landet aus den deutschen Märkten.'] Label: [['Mit vielen Flugzeugen landet auch der beliebte Spargel schon ab Februar aus Südeuropa in den deutschen Märkten.']] Sacrebleu: {'score': 14.965975078050626, 'counts': [10, 6, 3, 1], 'totals': [26, 25, 24, 23], 'precisions': [38.46153846153846, 24.0, 12.5, 4.3478260869565215], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.14965975078050625, 'precisions': [0.38461538461538464, 0.24, 0.125, 0.043478260869565216], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.5106382978723404, 'rouge2': 0.3555555555555555, 'rougeL': 0.5106382978723404, 'rougeLsum': 0.46808510638297873} Sari: {'sari': 22.04300497430607} Flesh Reading Ease: 51.0 ---------------------------------------- Source: ['Weniger als 20 Prozent des Obstes, das die Deutschen verzehren, stammt aus Deutschland, der Rest wird aufwändig importiert, weil er hier nicht wächst.'] Prediction: ['Der Rest des Obstes wird aufwändig importiert.\nDas wird aufwändig importiert.'] Label: [['Weniger als 20 Prozent des Obstes, das die Deutschen konsumieren, stammt aus Deutschland.\nDer Rest muss importiert werden.']] Sacrebleu: {'score': 5.028804829373186, 'counts': [7, 2, 0, 0], 'totals': [13, 12, 11, 10], 'precisions': [53.84615384615385, 16.666666666666668, 4.545454545454546, 2.5], 'bp': 0.50041992036057, 'sys_len': 13, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.5384615384615384, 0.16666666666666666, 0.0, 0.0], 'brevity_penalty': 0.50041992036057, 'length_ratio': 0.5909090909090909, 'translation_length': 13, 'reference_length': 22} Rouge: {'rouge1': 0.3870967741935484, 'rouge2': 0.13793103448275862, 'rougeL': 0.2580645161290323, 'rougeLsum': 0.3870967741935484} Sari: {'sari': 24.68168138833633} Flesh Reading Ease: 69.2 ---------------------------------------- Source: ['Auch beim Gemüse müssen immerhin noch rund zwei Drittel importiert werden.'] Prediction: ['Zwei Drittel sind beim Gemüse in der Schweiz importiert.\nDie Gemüse müssen noch rund zwei Drittel importiert werden.'] Label: [['Beim Gemüse sieht es etwas besser aus, aber auch hier werden etwa zwei Drittel importiert.']] Sacrebleu: {'score': 9.379601158083608, 'counts': [6, 3, 1, 0], 'totals': [20, 19, 18, 17], 'precisions': [30.0, 15.789473684210526, 5.555555555555555, 2.9411764705882355], 'bp': 1.0, 'sys_len': 20, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.15789473684210525, 0.05555555555555555, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1764705882352942, 'translation_length': 20, 'reference_length': 17} Rouge: {'rouge1': 0.37837837837837834, 'rouge2': 0.2285714285714286, 'rougeL': 0.3243243243243243, 'rougeLsum': 0.3243243243243243} Sari: {'sari': 43.69601815253989} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Ein Grund für die vielen Streiks ist ein Prestigewandel, denn Erzieher und Lehrer kämpfen um ein besseres Ansehen.'] Prediction: ['Ein Prestigewandel für die vielen Streiks ist ein besseres Ansehen.\nErzieher und Lehrer kämpfen um ein besseres Ansehen.'] Label: [['Ein Grund für die vielen Streiks ist ein Wandel des Ansehens, für das Erzieher und Lehrer kämpfen.']] Sacrebleu: {'score': 37.51840463233444, 'counts': [12, 8, 6, 4], 'totals': [20, 19, 18, 17], 'precisions': [60.0, 42.10526315789474, 33.333333333333336, 23.529411764705884], 'bp': 1.0, 'sys_len': 20, 'ref_len': 19} Bleu: {'bleu': 0.3751840463233443, 'precisions': [0.6, 0.42105263157894735, 0.3333333333333333, 0.23529411764705882], 'brevity_penalty': 1.0, 'length_ratio': 1.0526315789473684, 'translation_length': 20, 'reference_length': 19} Rouge: {'rouge1': 0.65, 'rouge2': 0.5263157894736842, 'rougeL': 0.65, 'rougeLsum': 0.65} Sari: {'sari': 41.721049418417834} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['So werden beispielsweise für den sehr verantwortungsvollen Beruf des Erziehers sogar Hochschulabschlüsse von den Gewerkschaften gefordert.'] Prediction: ['Der Erzieher des Erziehers wird von den Gewerkschaften gefordert.\nSo werden beispielsweise Hochschulabschlüsse von den Gewerkschaften gefordert.'] Label: [['So werden beispielsweise für den Beruf des Erziehers sogar Hochschulabschlüsse gefordert von den Gewerkschaften, da Pädagogen grundsätzlich sehr viel Verantwortung tragen.']] Sacrebleu: {'score': 12.910963187201073, 'counts': [12, 5, 2, 0], 'totals': [19, 18, 17, 16], 'precisions': [63.1578947368421, 27.77777777777778, 11.764705882352942, 3.125], 'bp': 0.8101577349324267, 'sys_len': 19, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.631578947368421, 0.2777777777777778, 0.11764705882352941, 0.0], 'brevity_penalty': 0.8101577349324267, 'length_ratio': 0.8260869565217391, 'translation_length': 19, 'reference_length': 23} Rouge: {'rouge1': 0.5581395348837209, 'rouge2': 0.2926829268292683, 'rougeL': 0.37209302325581395, 'rougeLsum': 0.46511627906976744} Sari: {'sari': 28.811628186628184} Flesh Reading Ease: 31.1 ---------------------------------------- Source: ['Ein Mittel zur Durchsetzung von Forderungen der Beschäftigten, nachdem alle anderen Strategien zur Konfliktbewältigung gescheitert sind.'] Prediction: ['Der Konfliktbewältigungs-Mittel ist ein Mittel zur Durchsetzung von Forderungen der Beschäftigten.\nDer Mittel wird von Forderungen der Beschäftigten gescheitert.'] Label: [['Damit werden Forderungen der Beschäftigten durchgesetzt, nachdem alle anderen Strategien zur Konfliktbewältigung gescheitert sind.']] Sacrebleu: {'score': 8.039313477786735, 'counts': [6, 2, 1, 0], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 10.0, 5.2631578947368425, 2.7777777777777777], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.1, 0.05263157894736842, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.358974358974359, 'rouge2': 0.16216216216216214, 'rougeL': 0.2564102564102564, 'rougeLsum': 0.2564102564102564} Sari: {'sari': 12.310789049919485} Flesh Reading Ease: 35.95 ---------------------------------------- Source: ['“ Das Streikrecht ist ein im Grundgesetz verankertes Recht (GG Art. 9) der abhängig Beschäftigten.'] Prediction: ['Ein Grundgesetz verankertes Recht ist der abhängig Beschäftigten.\nDas Streikrecht ist ein im Grundgesetz verankertes Recht.'] Label: [['Das Streikrecht ist ein im Grundgesetz verankertes Recht (GG Art 9) der abhängig Beschäftigten.']] Sacrebleu: {'score': 52.92031904718659, 'counts': [12, 10, 8, 6], 'totals': [18, 17, 16, 15], 'precisions': [66.66666666666667, 58.8235294117647, 50.0, 40.0], 'bp': 1.0, 'sys_len': 18, 'ref_len': 17} Bleu: {'bleu': 0.5292031904718658, 'precisions': [0.6666666666666666, 0.5882352941176471, 0.5, 0.4], 'brevity_penalty': 1.0, 'length_ratio': 1.0588235294117647, 'translation_length': 18, 'reference_length': 17} Rouge: {'rouge1': 0.7647058823529411, 'rouge2': 0.6875, 'rougeL': 0.5294117647058824, 'rougeLsum': 0.7647058823529411} Sari: {'sari': 46.3904871799808} Flesh Reading Ease: 55.0 ---------------------------------------- Source: ['Rein statistisch gesehen sind vier Stunden pro Tag viel Zeit, um sich sportlich zu betätigen.'] Prediction: ['Vier Stunden pro Tag sind vier Stunden pro Tag viel Zeit, um sich sportlich zu betätigen.\nDie Schweizer Nationalmannschaft hatte sich vor dem Jahr 2020 einen statistischen statistischen statistischen Tag gesehen.'] Label: [['Vier Stunden pro Tag sind viel Zeit, um sich sportlich zu betätigen.']] Sacrebleu: {'score': 33.14924831681213, 'counts': [14, 12, 10, 8], 'totals': [34, 33, 32, 31], 'precisions': [41.1764705882353, 36.36363636363637, 31.25, 25.806451612903224], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.3314924831681213, 'precisions': [0.4117647058823529, 0.36363636363636365, 0.3125, 0.25806451612903225], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.5777777777777777, 'rouge2': 0.5116279069767442, 'rougeL': 0.5777777777777777, 'rougeLsum': 0.5777777777777777} Sari: {'sari': 65.08675225879124} Flesh Reading Ease: 59.2 ---------------------------------------- Source: ['Dank immer neuer Trendsportarten und der entsprechenden Angebote können sich die Deutschen sportlich in jeder Hinsicht betätigen.'] Prediction: ['Die Deutschen sind in der Schweiz ein neues Sport-Trend.\nDank neuer Trendsportarten und der entsprechenden Angebote können sich die Deutschen in jeder Hinsicht betätigen.'] Label: [['Dank immer neuer Trendsportarten können sich die Deutschen sportlich vielseitig betätigen.']] Sacrebleu: {'score': 12.5848347939092, 'counts': [9, 5, 2, 1], 'totals': [26, 25, 24, 23], 'precisions': [34.61538461538461, 20.0, 8.333333333333334, 4.3478260869565215], 'bp': 1.0, 'sys_len': 26, 'ref_len': 12} Bleu: {'bleu': 0.12584834793909203, 'precisions': [0.34615384615384615, 0.2, 0.08333333333333333, 0.043478260869565216], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 26, 'reference_length': 12} Rouge: {'rouge1': 0.5, 'rouge2': 0.3157894736842105, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 23.96825396825397} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['Der Fachverband für künstliche Kletteranlagen und Indoor-Klettern (Klever) informiert, dass in Deutschland jährlich rund zehn neue Kletterhallen eröffnen.'] Prediction: ['Deutschland hat in der Nacht auf Sonntag mehrere neue Kletterhallen eröffnet.\nIn den letzten Tagen wurden rund zehn neue Kletterhallen eröffnet.\nDie Fachverband für künstliche Kletteranlagen und Indoor-Klettern (Klever) informiert, dass jährlich rund zehn neue Kletterhallen eröffnen.'] Label: [['Der Fachverband für künstliche Kletteranlagen und Indoor-Klettern (Klever) informiert, dass in Deutschland jährlich rund zehn neue Kletterhallen eröffnen –']] Sacrebleu: {'score': 36.70493138101402, 'counts': [20, 16, 14, 12], 'totals': [43, 42, 41, 40], 'precisions': [46.51162790697674, 38.095238095238095, 34.146341463414636, 30.0], 'bp': 1.0, 'sys_len': 43, 'ref_len': 22} Bleu: {'bleu': 0.3670493138101402, 'precisions': [0.46511627906976744, 0.38095238095238093, 0.34146341463414637, 0.3], 'brevity_penalty': 1.0, 'length_ratio': 1.9545454545454546, 'translation_length': 43, 'reference_length': 22} Rouge: {'rouge1': 0.6865671641791045, 'rouge2': 0.5538461538461539, 'rougeL': 0.6268656716417911, 'rougeLsum': 0.6567164179104478} Sari: {'sari': 36.99443342552649} Flesh Reading Ease: 50.7 ---------------------------------------- Source: ['Bis zum Ende des Jahres 2014 gab es deutschlandweit circa 24.900 Windenergieanlagen, die zusammen auf eine Leistung von rund 38.000 MW kommen.'] Prediction: ['Deutschland hat seinen Winden von rund 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 Mio.\nWert von einer Leistung von 38.000 M'] Label: [['Bis zum Ende des Jahres 2014 gab es in ganz Deutschland rund 24.900 Windenergieanlagen, die zusammen rund 38.000 MW leisten.']] Sacrebleu: {'score': 0.3525809873849665, 'counts': [4, 1, 0, 0], 'totals': [240, 239, 238, 237], 'precisions': [1.6666666666666667, 0.41841004184100417, 0.21008403361344538, 0.10548523206751055], 'bp': 1.0, 'sys_len': 240, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.016666666666666666, 0.0041841004184100415, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 10.909090909090908, 'translation_length': 240, 'reference_length': 22} Rouge: {'rouge1': 0.030418250950570342, 'rouge2': 0.01532567049808429, 'rougeL': 0.030418250950570342, 'rougeLsum': 0.030418250950570342} Sari: {'sari': 20.15023353839143} Flesh Reading Ease: 96.95 ---------------------------------------- Source: ['Ein großer Teil der Windkraftanlagen befindet sich dort, wo am meisten Wind weht – auf dem flachen Land und auf dem offenen Meer der Nord- und Ostsee - in sogenannten Offshore-Windenergieanlagen.'] Prediction: ['Ein großer Teil der Windkraftanlagen befindet sich dort, wo am meisten Wind weht.\nEs ist ein großer Teil der Windkraftanlagen, wo am meisten Wind weht.'] Label: [['Ein großer Teil der Anlagen befindet sich dort, wo am meisten Wind weht – auf dem flachen Land.\nImmer mehr Anlagen entstehen auf dem Meer in der Nord- und Ostsee - sogenannte Offshore-Windenergieanlagen.']] Sacrebleu: {'score': 29.336636280825118, 'counts': [16, 11, 9, 7], 'totals': [29, 28, 27, 26], 'precisions': [55.172413793103445, 39.285714285714285, 33.333333333333336, 26.923076923076923], 'bp': 0.7855436050549208, 'sys_len': 29, 'ref_len': 36} Bleu: {'bleu': 0.2933663628082511, 'precisions': [0.5517241379310345, 0.39285714285714285, 0.3333333333333333, 0.2692307692307692], 'brevity_penalty': 0.7855436050549208, 'length_ratio': 0.8055555555555556, 'translation_length': 29, 'reference_length': 36} Rouge: {'rouge1': 0.4666666666666667, 'rouge2': 0.3793103448275862, 'rougeL': 0.4666666666666667, 'rougeLsum': 0.4666666666666667} Sari: {'sari': 35.90344512649945} Flesh Reading Ease: 73.9 ---------------------------------------- Source: ['Das gilt auch für die zahlreichen Spiele-Apps. Sie sind nach Informationen der „gamescom“ der wichtigste Treiber des App- und Smartphone-Marktes.'] Prediction: ['Die zahlreichen Spiele-Apps sind der wichtigste Treiber des App und Smartphone-Marktes.\nDas gilt auch für die zahlreichen Spiele-Apps.\nSie sind nach Informationen der "gamescom" der wichtigste Treiber des App und Smartphone-Marktes.'] Label: [['Besonders die Spiele-Apps sind nach Informationen der „gamescom“ der wichtigste Treiber des App- und Smartphone-Marktes.']] Sacrebleu: {'score': 16.961162496305445, 'counts': [13, 9, 5, 2], 'totals': [36, 35, 34, 33], 'precisions': [36.111111111111114, 25.714285714285715, 14.705882352941176, 6.0606060606060606], 'bp': 1.0, 'sys_len': 36, 'ref_len': 16} Bleu: {'bleu': 0.16961162496305443, 'precisions': [0.3611111111111111, 0.2571428571428571, 0.14705882352941177, 0.06060606060606061], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 36, 'reference_length': 16} Rouge: {'rouge1': 0.6037735849056604, 'rouge2': 0.5490196078431373, 'rougeL': 0.6037735849056604, 'rougeLsum': 0.6037735849056604} Sari: {'sari': 17.036786254562053} Flesh Reading Ease: 58.55 ---------------------------------------- Source: ['Laut dem Verein für Spieleverlage erreichten die klassischen Familienspiele im Jahr 2014 eine Steigerung von 8,6 Prozent gegenüber dem Vorjahr.'] Prediction: ['Die klassische Familienspiele erreichten im Jahr 2014 eine Steigerung von 8,6 Prozent gegenüber dem Vorjahr.\nLaut dem Verein für Spieleverlage erreichten die klassischen Familienspiele im Jahr 2014 eine Steigerung von 8,6 Prozent.'] Label: [['Laut dem Verein für Spieleverlage erreichten die klassischen Familienspiele im Jahr 2015 eine Steigerung von 12,6 Prozent gegenüber dem Vorjahr.']] Sacrebleu: {'score': 43.40883212610016, 'counts': [19, 16, 13, 10], 'totals': [34, 33, 32, 31], 'precisions': [55.88235294117647, 48.484848484848484, 40.625, 32.25806451612903], 'bp': 1.0, 'sys_len': 34, 'ref_len': 21} Bleu: {'bleu': 0.4340883212610015, 'precisions': [0.5588235294117647, 0.48484848484848486, 0.40625, 0.3225806451612903], 'brevity_penalty': 1.0, 'length_ratio': 1.619047619047619, 'translation_length': 34, 'reference_length': 21} Rouge: {'rouge1': 0.7118644067796611, 'rouge2': 0.6315789473684209, 'rougeL': 0.5762711864406781, 'rougeLsum': 0.7118644067796611} Sari: {'sari': 61.358691868560285} Flesh Reading Ease: 41.15 ---------------------------------------- Source: ['Das bekannteste und vielleicht deutscheste aller Gesellschaftsspiele namens „Mensch ärgere Dich nicht“ fehlt in wohl keinem deutschen Haushalt.'] Prediction: ['Der deutsche Gesellschaftsspieler und deutscher Chef wurde in einem Interview mit der 20-Minuten-App veröffentlicht.\nEr hatte sich in einem deutschen Haushalt bekannt und wurde dabei von der Gesellschaft namens "Mensch ärgere Dich nicht" gesprochen.'] Label: [['Das bekannteste und vielleicht deutscheste aller Gesellschaftsspiele namens „Mensch ärgere Dich nicht“ fehlt in keinem deutschen Haushalt.']] Sacrebleu: {'score': 3.0901532587310254, 'counts': [8, 2, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [20.0, 5.128205128205129, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.05128205128205128, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2222222222222223, 'translation_length': 40, 'reference_length': 18} Rouge: {'rouge1': 0.33333333333333337, 'rouge2': 0.1923076923076923, 'rougeL': 0.22222222222222227, 'rougeLsum': 0.2592592592592593} Sari: {'sari': 12.333220972926854} Flesh Reading Ease: 51.85 ---------------------------------------- Source: ['Yoga, Rhetorik, Acrylmalerei, Computerprogramme, Spanisch, Kochen, Naturheilkunde, Existenzgründung, Goldschmieden … die Liste der Kurse lässt sich fast endlos lange fortsetzen – beinahe alles, was sich zur Weiterbildung eignet, bieten die Volkshochschulen – kurz VHS – an.'] Prediction: ['Die Kurse der Kurse ist fast endlos lange fortsetzen.\nDas ist der erste Mal, was sich zur Weiterbildung eignet, bieten die Volkshochschulen an.'] Label: [['Yoga, Rhetorik, Acrylmalerei, Computerprogramme, Spanisch, Kochen, Naturheilkunde, Existenzgründung, Goldschmieden … die Liste der Kurse ist lang, denn fast alles, was sich zur Weiterbildung eignet, bieten die Volkshochschulen – kurz VHS – an.']] Sacrebleu: {'score': 21.932779885322173, 'counts': [16, 12, 9, 7], 'totals': [27, 26, 25, 24], 'precisions': [59.25925925925926, 46.15384615384615, 36.0, 29.166666666666668], 'bp': 0.5327890937629327, 'sys_len': 27, 'ref_len': 44} Bleu: {'bleu': 0.21932779885322168, 'precisions': [0.5925925925925926, 0.46153846153846156, 0.36, 0.2916666666666667], 'brevity_penalty': 0.5327890937629327, 'length_ratio': 0.6136363636363636, 'translation_length': 27, 'reference_length': 44} Rouge: {'rouge1': 0.5283018867924527, 'rouge2': 0.35294117647058826, 'rougeL': 0.5283018867924527, 'rougeLsum': 0.5283018867924527} Sari: {'sari': 24.76036474415335} Flesh Reading Ease: 69.05 ---------------------------------------- Source: ['Hinzu kommen spezielle Integrationskurse, zum Beispiel für Frauen, Jugendliche, Migrantinnen und Migranten mit „Alphabetisierungsbedarf“, wie es offiziell heißt.'] Prediction: ['Die Integrationskurse für Frauen, Jugendliche, Migrantinnen und Migranten kommt zum Beispiel für Frauen, Jugendliche, Migrantinnen und Migranten mit „Alphabetisierungsbedarf“.\nDie Integrationskurse kommt zum Beispiel für Frauen, Jugendliche, Migrantinnen und Migranten mit „Alphabetisierungsbedarf“.'] Label: [['Es gibt spezielle Integrationskurse, zum Beispiel für Frauen, Jugendliche, Migrantinnen und Migranten mit „Alphabetisierungsbedarf“, wie es offiziell heißt.']] Sacrebleu: {'score': 29.15152739449587, 'counts': [16, 11, 10, 9], 'totals': [40, 39, 38, 37], 'precisions': [40.0, 28.205128205128204, 26.31578947368421, 24.324324324324323], 'bp': 1.0, 'sys_len': 40, 'ref_len': 23} Bleu: {'bleu': 0.29151527394495874, 'precisions': [0.4, 0.28205128205128205, 0.2631578947368421, 0.24324324324324326], 'brevity_penalty': 1.0, 'length_ratio': 1.7391304347826086, 'translation_length': 40, 'reference_length': 23} Rouge: {'rouge1': 0.43636363636363634, 'rouge2': 0.3773584905660377, 'rougeL': 0.43636363636363634, 'rougeLsum': 0.43636363636363634} Sari: {'sari': 31.350274620574954} Flesh Reading Ease: 0.2 ---------------------------------------- Source: ['So absolvierte im Juni 2015 eine Gruppe bei der Volkshochschule Osnabrücker Land erfolgreich eine zusätzliche „Qualifikation zur Betreuungskraft für Demenzerkrankte in Pflegeheimen“.'] Prediction: ['Eine Gruppe bei der Volkshochschule Osnabrücker Land hat eine zusätzliche Qualifikation zur Betreuungskraft für Demenzerkrankte in Pflegeheimen.\nDie Zahl der Demenzerkrankte in der Volkshochschule Osnabrücker Land absolvierte im Juni 2015 eine zusätzliche "Qualifikation zur Betreuungskraft für Demenzerkrankte in Pflegeheimen".'] Label: [['So absolvierte im Juni 2015 eine Gruppe bei der Volkshochschule Osnabrücker Land erfolgreich eine zusätzliche Qualifikation, um Demenzerkrankte in Pflegeheimen zu betreuen.']] Sacrebleu: {'score': 24.418371359694916, 'counts': [18, 13, 9, 5], 'totals': [43, 42, 41, 40], 'precisions': [41.86046511627907, 30.952380952380953, 21.951219512195124, 12.5], 'bp': 1.0, 'sys_len': 43, 'ref_len': 24} Bleu: {'bleu': 0.24418371359694915, 'precisions': [0.4186046511627907, 0.30952380952380953, 0.21951219512195122, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 1.7916666666666667, 'translation_length': 43, 'reference_length': 24} Rouge: {'rouge1': 0.5507246376811594, 'rouge2': 0.4776119402985074, 'rougeL': 0.43478260869565216, 'rougeLsum': 0.43478260869565216} Sari: {'sari': 46.86091909882233} Flesh Reading Ease: 8.4 ---------------------------------------- Source: ['So bieten sie auch denen eine zweite Chance, die sozial benachteiligt sind.'] Prediction: ['Die sozialen Menschen sind eine zweite Chance, die sozial benachteiligt sind.\nDie sozialen Menschen bieten sie auch denen eine zweite Chance, die sozial benachteiligt sind.'] Label: [['So bieten die VHS auch denen eine zweite Chance, die sozial benachteiligt sind.']] Sacrebleu: {'score': 35.796921293096545, 'counts': [13, 10, 9, 8], 'totals': [29, 28, 27, 26], 'precisions': [44.827586206896555, 35.714285714285715, 33.333333333333336, 30.76923076923077], 'bp': 1.0, 'sys_len': 29, 'ref_len': 15} Bleu: {'bleu': 0.3579692129309655, 'precisions': [0.4482758620689655, 0.35714285714285715, 0.3333333333333333, 0.3076923076923077], 'brevity_penalty': 1.0, 'length_ratio': 1.9333333333333333, 'translation_length': 29, 'reference_length': 15} Rouge: {'rouge1': 0.5789473684210525, 'rouge2': 0.4444444444444444, 'rougeL': 0.5263157894736842, 'rougeLsum': 0.5789473684210525} Sari: {'sari': 46.512758577975966} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Streetfood geht weit über das hinaus, was die Deutschen seit Jahrzehnten als „Pommesbude“ kennen. Der mobile Imbisswagen heißt inzwischen Food Truck und das Konzept heißt: Kochen, wozu man Lust hat, etwas Neues auf den Markt bringen und Menschen begeistern.'] Prediction: ['Die Deutschen kennen als "Pommesbude" kennen.\nFood Truck heißt inzwischen Food Truck und das Konzept.\nKochen, wozu man Lust hat, etwas Neues auf den Markt bringen und Menschen begeistern.'] Label: [['Streetfood geht weit über das hinaus, was die Deutschen als „Pommesbude“ kennen.\nDer mobile Imbisswagen heißt jetzt Food Truck und das Konzept heißt: Kochen, wozu man Lust hat, etwas Neues auf den Markt bringen und Menschen begeistern.']] Sacrebleu: {'score': 47.99620359468284, 'counts': [27, 21, 18, 16], 'totals': [36, 35, 34, 33], 'precisions': [75.0, 60.0, 52.94117647058823, 48.484848484848484], 'bp': 0.8232919154257804, 'sys_len': 36, 'ref_len': 43} Bleu: {'bleu': 0.4799620359468282, 'precisions': [0.75, 0.6, 0.5294117647058824, 0.48484848484848486], 'brevity_penalty': 0.8232919154257804, 'length_ratio': 0.8372093023255814, 'translation_length': 36, 'reference_length': 43} Rouge: {'rouge1': 0.7536231884057971, 'rouge2': 0.6268656716417911, 'rougeL': 0.7536231884057971, 'rougeLsum': 0.7536231884057971} Sari: {'sari': 29.501503062330332} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['Alles ist ganz frisch und bewegt sich zwischen preiswert und teuer.'] Prediction: ['Der frischste Schweizer ist seit seinem Jahr 2020 in der Schweiz.\nErstmals wird erstmals seit seinem Jahr 2020 geschlossen.\nNun ist erstmals seit seinem Jahr 2020 geschlossen.'] Label: [['Hier ist alles ganz frisch und bewegt sich zwischen preiswert und teuer.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.05128205128205128, 'rouge2': 0.0, 'rougeL': 0.05128205128205128, 'rougeLsum': 0.05128205128205128} Sari: {'sari': 7.414622414622414} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Streetfood bezeichnet Speisen und Getränke, die als Zwischenmahlzeit unterwegs auf der Straße, aber auch auf einem Markt oder Jahrmarkt angeboten werden.'] Prediction: ['Auf der Straße in Zürich werden Speisen und Getränke auf der Markt oder Jahrmarkt angeboten.\nDie Zwischenmahlzeit wird auch auf einem Markt oder Jahrmarkt angeboten.\nDie Zwischenmahlzeit wird auch auf einem Markt oder Jahrmarkt angeboten.'] Label: [['Streetfood bezeichnet Speisen und Getränke, die als Mahlzeit unterwegs auf der Straße, aber auch auf einem Markt oder Jahrmarkt angeboten werden.']] Sacrebleu: {'score': 21.23179238242231, 'counts': [15, 10, 6, 4], 'totals': [38, 37, 36, 35], 'precisions': [39.473684210526315, 27.027027027027028, 16.666666666666668, 11.428571428571429], 'bp': 1.0, 'sys_len': 38, 'ref_len': 24} Bleu: {'bleu': 0.2123179238242231, 'precisions': [0.39473684210526316, 0.2702702702702703, 0.16666666666666666, 0.11428571428571428], 'brevity_penalty': 1.0, 'length_ratio': 1.5833333333333333, 'translation_length': 38, 'reference_length': 24} Rouge: {'rouge1': 0.5573770491803278, 'rouge2': 0.4067796610169491, 'rougeL': 0.4262295081967213, 'rougeLsum': 0.4590163934426229} Sari: {'sari': 24.60320305350884} Flesh Reading Ease: 68.85 ---------------------------------------- Source: ['Der Vorteil der Trucks: Sie kommen auch an Standorte, an denen es keine Kantinen oder Restaurants gibt, sie zahlen keine hohen Mieten in den Innenstädten und können sich sehr flexibel auf die Wünsche ihrer Kunden einstellen.'] Prediction: ['Die Trucks kommen auch an Standorte, an denen es keine Kantinen oder Restaurants gibt, sie zahlen keine hohen Mieten in den Innenstädten und können sich sehr flexibel auf die Wünsche ihrer Kunden einstellen.\nDie Trucks kommen auch an Standorte, an denen es keine Kantinen oder Restaurants gibt, sie zahlen keine hohen Mieten in den Innenstädten und können sich sehr flexibel auf die Wünsche ihrer Kunden einstellen.'] Label: [['Der Vorteil der Trucks: Sie kommen auch an Standorte, an denen es keine Kantinen oder Restaurants gibt und können sich sehr flexibel auf die Wünsche ihrer Kunden einstellen.']] Sacrebleu: {'score': 31.353355442878602, 'counts': [26, 23, 21, 19], 'totals': [72, 71, 70, 69], 'precisions': [36.111111111111114, 32.394366197183096, 30.0, 27.536231884057973], 'bp': 1.0, 'sys_len': 72, 'ref_len': 31} Bleu: {'bleu': 0.313533554428786, 'precisions': [0.3611111111111111, 0.323943661971831, 0.3, 0.2753623188405797], 'brevity_penalty': 1.0, 'length_ratio': 2.3225806451612905, 'translation_length': 72, 'reference_length': 31} Rouge: {'rouge1': 0.5294117647058825, 'rouge2': 0.46, 'rougeL': 0.5294117647058825, 'rougeLsum': 0.5098039215686274} Sari: {'sari': 32.89397821967462} Flesh Reading Ease: 47.55 ---------------------------------------- Source: ['“.Oder der „Kleiderkreisel“: Hinter dieser Plattform (www.kleiderkreisel.de) steckt die Tauschbörse für Kleidung, Accessoires und Selbstgemachtes.'] Prediction: ['Im Internet steckt eine neue Plattform für Kleiderkreisel.\nDie Tauschbörse für Selbstgemachtes und Selbstgemachtes.\nDie Tauschbörse steckt für Kleidung, Accessoires und Selbstgemachtes.'] Label: [['Oder der „Kleiderkreisel“: Hinter dieser Plattform (www.kleiderkreisel.de) steckt die Tauschbörse für Kleidung, Accessoires und Selbstgemachtes.']] Sacrebleu: {'score': 26.15858282579582, 'counts': [12, 7, 5, 4], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 28.0, 20.833333333333332, 17.391304347826086], 'bp': 1.0, 'sys_len': 26, 'ref_len': 24} Bleu: {'bleu': 0.26158582825795834, 'precisions': [0.46153846153846156, 0.28, 0.20833333333333334, 0.17391304347826086], 'brevity_penalty': 1.0, 'length_ratio': 1.0833333333333333, 'translation_length': 26, 'reference_length': 24} Rouge: {'rouge1': 0.5217391304347826, 'rouge2': 0.3636363636363637, 'rougeL': 0.47826086956521735, 'rougeLsum': 0.43478260869565216} Sari: {'sari': 20.6051761347814} Flesh Reading Ease: 55.7 ---------------------------------------- Source: ['Das Ganze funktioniert auch mit Büchern wie auf wie bei „Bookelo.com“:'] Prediction: ['Die Bücher sind mit Büchern wie auf wie bei "Bookelo.com" aufgezeichnet.\nDas Ganze funktioniert auch mit Büchern.'] Label: [['Das Ganze funktioniert auch mit Büchern wie bei „Bookelo.com“:']] Sacrebleu: {'score': 25.823077599534503, 'counts': [9, 7, 5, 3], 'totals': [23, 22, 21, 20], 'precisions': [39.130434782608695, 31.818181818181817, 23.80952380952381, 15.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 12} Bleu: {'bleu': 0.25823077599534505, 'precisions': [0.391304347826087, 0.3181818181818182, 0.23809523809523808, 0.15], 'brevity_penalty': 1.0, 'length_ratio': 1.9166666666666667, 'translation_length': 23, 'reference_length': 12} Rouge: {'rouge1': 0.6875000000000001, 'rouge2': 0.6666666666666666, 'rougeL': 0.43749999999999994, 'rougeLsum': 0.6875000000000001} Sari: {'sari': 22.888739630467573} Flesh Reading Ease: 77.9 ---------------------------------------- Source: ['hier dankt die Gemeinde für eine reiche Ernte und sehr häufig gibt es eine Sammelaktion gegen den Hunger in der Welt.'] Prediction: ['Die Gemeinde Zürich hat eine Sammelaktion gegen den Hunger in der Welt.\nDie Gemeinde hat eine Sammelaktion für eine reiche Ernte und sehr häufig gibt es eine Sammelaktion gegen den Hunger in der Welt.'] Label: [['hier dankt die Gemeinde für eine reiche Ernte.']] Sacrebleu: {'score': 7.103702656973528, 'counts': [6, 3, 2, 1], 'totals': [36, 35, 34, 33], 'precisions': [16.666666666666668, 8.571428571428571, 5.882352941176471, 3.0303030303030303], 'bp': 1.0, 'sys_len': 36, 'ref_len': 9} Bleu: {'bleu': 0.07103702656973529, 'precisions': [0.16666666666666666, 0.08571428571428572, 0.058823529411764705, 0.030303030303030304], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 36, 'reference_length': 9} Rouge: {'rouge1': 0.30434782608695654, 'rouge2': 0.2272727272727273, 'rougeL': 0.30434782608695654, 'rougeLsum': 0.30434782608695654} Sari: {'sari': 8.975116702270752} Flesh Reading Ease: 51.85 ---------------------------------------- Source: ['Hier erntet man um diese Zeit den beliebten Kürbis, den man wunderbar als Laterne mit grimmigem Gesicht schnitzen kann.'] Prediction: ['Der Kürbis sind wunderbar als Laterne mit grimmigem Gesicht schnitzen.\nDerzeit erntet man den beliebten Kürbis, den man wunderbar als Laterne mit grimmigem Gesicht schnitzen kann.'] Label: [['Hier erntet man um diese Zeit den beliebten Kürbis, den man als Laterne mit grimmigem Gesicht schnitzen kann.']] Sacrebleu: {'score': 41.334724289458286, 'counts': [16, 13, 10, 8], 'totals': [29, 28, 27, 26], 'precisions': [55.172413793103445, 46.42857142857143, 37.03703703703704, 30.76923076923077], 'bp': 1.0, 'sys_len': 29, 'ref_len': 20} Bleu: {'bleu': 0.41334724289458274, 'precisions': [0.5517241379310345, 0.4642857142857143, 0.37037037037037035, 0.3076923076923077], 'brevity_penalty': 1.0, 'length_ratio': 1.45, 'translation_length': 29, 'reference_length': 20} Rouge: {'rouge1': 0.6382978723404255, 'rouge2': 0.5333333333333333, 'rougeL': 0.6382978723404255, 'rougeLsum': 0.6382978723404255} Sari: {'sari': 24.620475310130484} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Rund 200 Millionen Euro sollen nach ihren Schätzungen inzwischen in der Zeit um Halloween umgesetzt werden.'] Prediction: ['Derzeit sollen rund 200 Millionen Euro nach ihren Schätzungen um Halloween umgesetzt werden.\nDie Schätzungen sollen inzwischen in der Zeit umgeetzt werden.'] Label: [['Rund 200 Millionen Euro werden im Deutschen Verband der Spielwaren-Industrie (DVSI) inzwischen in der Zeit um Halloween umgesetzt.']] Sacrebleu: {'score': 19.05195539361547, 'counts': [12, 7, 4, 1], 'totals': [24, 23, 22, 21], 'precisions': [50.0, 30.434782608695652, 18.181818181818183, 4.761904761904762], 'bp': 1.0, 'sys_len': 24, 'ref_len': 21} Bleu: {'bleu': 0.1905195539361548, 'precisions': [0.5, 0.30434782608695654, 0.18181818181818182, 0.047619047619047616], 'brevity_penalty': 1.0, 'length_ratio': 1.1428571428571428, 'translation_length': 24, 'reference_length': 21} Rouge: {'rouge1': 0.5581395348837209, 'rouge2': 0.3902439024390244, 'rougeL': 0.4186046511627907, 'rougeLsum': 0.5116279069767442} Sari: {'sari': 49.199735449735456} Flesh Reading Ease: 52.0 ---------------------------------------- Source: ['Für sie ist Halloween das drittwichtigste Ereignis des Jahres nach Weihnachten und Ostern.'] Prediction: ['Die drittwichtigste Halloween ist das drittwichtigste Ereignis des Jahres nach Weihnachten und Ostern.\nDas drittwichtigste Ereignis des Jahres ist nach Weihnachten und Ostern.'] Label: [['Für die Süßwarenindustrie ist Halloween das drittwichtigste Ereignis des Jahres nach Weihnachten und Ostern.']] Sacrebleu: {'score': 37.56881561469425, 'counts': [12, 9, 8, 7], 'totals': [25, 24, 23, 22], 'precisions': [48.0, 37.5, 34.78260869565217, 31.818181818181817], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.37568815614694245, 'precisions': [0.48, 0.375, 0.34782608695652173, 0.3181818181818182], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.43243243243243246, 'rougeL': 0.5641025641025642, 'rougeLsum': 0.5641025641025642} Sari: {'sari': 52.42129629629629} Flesh Reading Ease: 51.5 ---------------------------------------- Source: ['Von Halloween profitieren zahlreiche Wirtschaftszweige - nicht zuletzt die Süßwarenindustrie.'] Prediction: ['Die Süßwarenindustrie profitieren zahlreiche Wirtschaftszweige.\nDie Wirtschaftszweige profitieren zuletzt nicht zuletzt die Süßwarenindustrie.'] Label: [['So backt der Bäcker Plätzchen in Gespensterform, es gibt Kostüme aller Art und Süßigkeiten in Monsterform.']] Sacrebleu: {'score': 2.1515930702228068, 'counts': [1, 0, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [6.666666666666667, 3.5714285714285716, 1.9230769230769231, 1.0416666666666667], 'bp': 0.8187307530779819, 'sys_len': 15, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8187307530779819, 'length_ratio': 0.8333333333333334, 'translation_length': 15, 'reference_length': 18} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 35.18518518518518} Flesh Reading Ease: -2.01 ---------------------------------------- Source: ['Bunt umhäkelte Bäume, provozierende Graffitis wie Angela Merkel und Mario Draghi in einer Anspielung auf James Bonds „Casino Royale“, grotesk veränderte Werbeposter, Skulpturen aus Müll – all das ist Streetart.'] Prediction: ['Die Werbeposter von James Bonds "Casino Royale" wurden von der EU und der EU veröffentlicht.\nDie Werbeposter wie Angela Merkel und Mario Draghi sind von der Politik aus Müll geschickt.\nDie Werbeposter wurden von der Politik aus Müll geschickt.'] Label: [['Bunt umhäkelte Bäume, provozierende Graffitis wie Angela Merkel und Mario Draghi in einer Anspielung auf James Bonds „Casino Royale“, veränderte Werbeposter, Skulpturen aus Müll – all das ist Streetart.']] Sacrebleu: {'score': 13.262535617233528, 'counts': [12, 7, 4, 3], 'totals': [44, 43, 42, 41], 'precisions': [27.272727272727273, 16.27906976744186, 9.523809523809524, 7.317073170731708], 'bp': 1.0, 'sys_len': 44, 'ref_len': 33} Bleu: {'bleu': 0.13262535617233528, 'precisions': [0.2727272727272727, 0.16279069767441862, 0.09523809523809523, 0.07317073170731707], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 44, 'reference_length': 33} Rouge: {'rouge1': 0.40540540540540543, 'rouge2': 0.2777777777777778, 'rougeL': 0.27027027027027023, 'rougeLsum': 0.40540540540540543} Sari: {'sari': 14.342514210935262} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Häufig ist Streetart kritisch und lenkt den Blick auf aktuelle politische und gesellschaftliche Ereignisse.'] Prediction: ['Streetart ist ein neues Blick auf aktuelle politische und gesellschaftliche Ereignisse.\nDie Welt ist aktuelle politische und gesellschaftliche Ereignisse.\nDie Welt ist auf der Suche der Schweiz.'] Label: [['Oft ist Streetart kritisch und lenkt den Blick auf aktuelle politische und gesellschaftliche Ereignisse.']] Sacrebleu: {'score': 24.34404448420529, 'counts': [11, 7, 6, 5], 'totals': [30, 29, 28, 27], 'precisions': [36.666666666666664, 24.137931034482758, 21.428571428571427, 18.51851851851852], 'bp': 1.0, 'sys_len': 30, 'ref_len': 15} Bleu: {'bleu': 0.24344044484205296, 'precisions': [0.36666666666666664, 0.2413793103448276, 0.21428571428571427, 0.18518518518518517], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 30, 'reference_length': 15} Rouge: {'rouge1': 0.4878048780487805, 'rouge2': 0.30769230769230776, 'rougeL': 0.3902439024390244, 'rougeLsum': 0.3902439024390244} Sari: {'sari': 29.585317460317455} Flesh Reading Ease: 54.0 ---------------------------------------- Source: ['Die einen wollen alten und ungenutzten Kram entrümpeln und verkaufen und hoffen auf ein wenig Geld. Die anderen aber, die Käufer, Jäger und Stöberer, wollen das besondere Schnäppchen, das lang gesuchte Sammlerstück, und dabei spielt auch ein bisschen Abenteuer mit.'] Prediction: ['Einige Käufer, Jäger und Stöberer wollen einen wollen alten und ungenutzten Kram entrümpeln und verkaufen.\nDas besondere Schnäppchen, das lang gesuchte Sammlerstück, spielt auch ein bisschen Abenteuer mit.'] Label: [['Die einen wollen alten und ungenutzten Trödel entrümpeln und verkaufen und hoffen auf ein bisschen Geld.\nDie anderen aber, die Käufer und Stöberer, wollen das Schnäppchen.']] Sacrebleu: {'score': 19.000532642952976, 'counts': [20, 8, 4, 2], 'totals': [33, 32, 31, 30], 'precisions': [60.60606060606061, 25.0, 12.903225806451612, 6.666666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 30} Bleu: {'bleu': 0.19000532642952978, 'precisions': [0.6060606060606061, 0.25, 0.12903225806451613, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 33, 'reference_length': 30} Rouge: {'rouge1': 0.6153846153846154, 'rouge2': 0.4126984126984127, 'rougeL': 0.36923076923076925, 'rougeLsum': 0.6153846153846154} Sari: {'sari': 21.960463141379392} Flesh Reading Ease: 49.0 ---------------------------------------- Source: ['Im Gegensatz zu Frankreich und Belgien, wo es Flohmärkte seit dem späten 19. Jahrhundert gibt, fand der erste offizielle Flohmarkt in Deutschland 1976 in Hannover statt – so berichten es zumindest die Internetquellen. Private Flohmärkte, Garagenverkäufe und Tauschaktionen dürfte es aber schon viel länger geben - und sie gibt es seit neuestem wieder mehr.'] Prediction: ['In Frankreich und Belgien gibt es seit dem 19.\nJahrhundert mehr Internetquellen.\nPrivate Flohmärkte, Garagenverkäufe und Tauschaktionen dürfte es aber schon viel länger geben.'] Label: [['Im Gegensatz zu Frankreich und Belgien, wo es Flohmärkte seit dem späten 19.\nJahrhundert gibt, fand der erste offizielle Flohmarkt in Deutschland 1976 in Hannover statt – so berichten es zumindest die Internetquellen.\nPrivate Flohmärkte, Garagenverkäufe, Trödelmärkte und Tauschaktionen dürfte es aber schon viel länger geben.']] Sacrebleu: {'score': 25.080837122880126, 'counts': [26, 19, 14, 10], 'totals': [28, 27, 26, 25], 'precisions': [92.85714285714286, 70.37037037037037, 53.84615384615385, 40.0], 'bp': 0.40948412515236426, 'sys_len': 28, 'ref_len': 53} Bleu: {'bleu': 0.2508083712288012, 'precisions': [0.9285714285714286, 0.7037037037037037, 0.5384615384615384, 0.4], 'brevity_penalty': 0.40948412515236426, 'length_ratio': 0.5283018867924528, 'translation_length': 28, 'reference_length': 53} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.48101265822784806, 'rougeL': 0.617283950617284, 'rougeLsum': 0.6419753086419753} Sari: {'sari': 26.362745425331273} Flesh Reading Ease: 55.0 ---------------------------------------- Source: ['Eigentlich ist ein Flohmarkt privat, aber in den vergangenen Jahren haben sie sich sehr zum Leidwesen vieler Flohmarktliebhaber kommerzialisiert. Auch sind manche Standgebühren recht hoch, was den Gewinn dann empfindlich schmälert.'] Prediction: ['Viele Leidwesen haben sich in den vergangenen Jahren zum Leidwesen vieler Flohmarktliebhaber kommerzialisiert.\nIn den vergangenen Jahren haben sie sich sehr zum Leidwesen vieler Flohmarktliebhaber kommerzialisiert.'] Label: [['Eigentlich ist ein Flohmarkt für Privatleute, aber in den vergangenen Jahren sind immer mehr professionelle Händler dazu gekommen.\nAuch sind manche Standgebühren ziemlich hoch, was den Gewinn dann deutlich schmälert.']] Sacrebleu: {'score': 7.760513009688372, 'counts': [7, 3, 2, 1], 'totals': [28, 27, 26, 25], 'precisions': [25.0, 11.11111111111111, 7.6923076923076925, 4.0], 'bp': 0.8071177470053894, 'sys_len': 28, 'ref_len': 34} Bleu: {'bleu': 0.0776051300968837, 'precisions': [0.25, 0.1111111111111111, 0.07692307692307693, 0.04], 'brevity_penalty': 0.8071177470053892, 'length_ratio': 0.8235294117647058, 'translation_length': 28, 'reference_length': 34} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.10344827586206896, 'rougeL': 0.16666666666666669, 'rougeLsum': 0.16666666666666669} Sari: {'sari': 19.415049436403365} Flesh Reading Ease: 26.6 ---------------------------------------- Source: ['Da geht es nicht mehr um‘s Feilschen, sondern nur noch um‘s Geld.'] Prediction: ['Der Feilschen ist nicht mehr um den Geld.\nDas geht es nicht mehr um den Feilschen, sondern nur noch um den Geld.'] Label: [['Da geht es dann nicht mehr um‘s Feilschen, sondern nur noch um‘s Geld.']] Sacrebleu: {'score': 19.750816408512, 'counts': [11, 7, 3, 2], 'totals': [25, 24, 23, 22], 'precisions': [44.0, 29.166666666666668, 13.043478260869565, 9.090909090909092], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.19750816408512, 'precisions': [0.44, 0.2916666666666667, 0.13043478260869565, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.5945945945945945, 'rouge2': 0.4, 'rougeL': 0.5945945945945945, 'rougeLsum': 0.5945945945945945} Sari: {'sari': 21.613636363636367} Flesh Reading Ease: 104.65 ---------------------------------------- Source: ['Doch auch dafür gibt es eine Gegenbewegung.'] Prediction: ['Die Schweizer Schweizer Schweizerinnen und Schweizer verlierten sich am Freitagabend eine Gegenbewegung.\nDas sind die erste Schweizerinnen und Schweizerinnen und Schweizer.\nDie Schweizer Schweizer Schweizer Schweizerinnen und Schweizer Schweizerinnen und Schweizer verlierten auf eine Gegenbewegung.'] Label: [['Doch dafür gibt es eine Gegenbewegung.']] Sacrebleu: {'score': 3.60737546551436, 'counts': [3, 2, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 5.405405405405405, 2.7777777777777777, 1.4285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.05405405405405406, 0.027777777777777776, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.428571428571429, 'translation_length': 38, 'reference_length': 7} Rouge: {'rouge1': 0.09523809523809522, 'rouge2': 0.05, 'rougeL': 0.09523809523809522, 'rougeLsum': 0.09523809523809522} Sari: {'sari': 24.761904761904763} Flesh Reading Ease: 39.6 ---------------------------------------- Source: ['Immer häufiger gibt es Flohmärkte für einen guten Zweck und Spezialmärkte etwa für Babysachen und Spielzeug, Bücher oder Antiquitäten.'] Prediction: ['Flohmärkte sind für einen guten Zweck und Spezialmärkte etwa für Babysachen und Spielzeug, Bücher oder Antiquitäten.\nImmer häufiger gibt es Flohmärkte für einen guten Zweck und Spezialmärkte etwa für Babysachen und Spielzeug, Bücher oder Antiquitäten.'] Label: [['Immer öfter gibt es Flohmärkte für einen guten Zweck und Spezialmärkte etwa für Babysachen und Spielzeug, Bücher oder Antiquitäten.']] Sacrebleu: {'score': 47.1932345345523, 'counts': [20, 18, 17, 16], 'totals': [39, 38, 37, 36], 'precisions': [51.282051282051285, 47.36842105263158, 45.945945945945944, 44.44444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 21} Bleu: {'bleu': 0.471932345345523, 'precisions': [0.5128205128205128, 0.47368421052631576, 0.4594594594594595, 0.4444444444444444], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 39, 'reference_length': 21} Rouge: {'rouge1': 0.6575342465753424, 'rouge2': 0.619718309859155, 'rougeL': 0.6575342465753424, 'rougeLsum': 0.6575342465753424} Sari: {'sari': 65.04968590881904} Flesh Reading Ease: 39.65 ---------------------------------------- Source: ['Und es gibt die Mädchenflohmärkte: Nur für Frauen!'] Prediction: ['Frauen sind nicht mehr für Frauen.\nSie sind nur für Frauen, sondern auch für Frauen.'] Label: [['Und es gibt die Mädchenflohmärkte - nur für Frauen!']] Sacrebleu: {'score': 7.994607499472017, 'counts': [3, 2, 1, 0], 'totals': [18, 17, 16, 15], 'precisions': [16.666666666666668, 11.764705882352942, 6.25, 3.3333333333333335], 'bp': 1.0, 'sys_len': 18, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.11764705882352941, 0.0625, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 18, 'reference_length': 10} Rouge: {'rouge1': 0.27586206896551724, 'rouge2': 0.22222222222222224, 'rougeL': 0.27586206896551724, 'rougeLsum': 0.27586206896551724} Sari: {'sari': 22.55291005291005} Flesh Reading Ease: 96.45 ---------------------------------------- Source: ['Hier werden auch topmoderne Kleidungsstücke, Schuhe und Accessoires gehandelt.'] Prediction: ['Topmoderne Kleidungsstücke, Schuhe und Accessoires gehandelt werden.\nAuch topmoderne Kleidungsstücke, Schuhe und Accessoires werden gehandelt.'] Label: [['Hier werden auch ganz modische Kleidungsstücke, Schuhe und Accessoires gehandelt.']] Sacrebleu: {'score': 28.05155032016294, 'counts': [8, 6, 4, 3], 'totals': [19, 18, 17, 16], 'precisions': [42.10526315789474, 33.333333333333336, 23.529411764705884, 18.75], 'bp': 1.0, 'sys_len': 19, 'ref_len': 12} Bleu: {'bleu': 0.2805155032016294, 'precisions': [0.42105263157894735, 0.3333333333333333, 0.23529411764705882, 0.1875], 'brevity_penalty': 1.0, 'length_ratio': 1.5833333333333333, 'translation_length': 19, 'reference_length': 12} Rouge: {'rouge1': 0.5714285714285714, 'rouge2': 0.4615384615384615, 'rougeL': 0.5714285714285714, 'rougeLsum': 0.5} Sari: {'sari': 33.19444444444444} Flesh Reading Ease: 20.4 ---------------------------------------- Source: ['Der typische Duft in Deutschland um die Weihnachtszeit – spätestens mit Beginn der Weihnachtsmärkte – enthält garantiert die Noten Vanille, Zimt, Mandel, vielleicht etwas Nelke und Kardamom.'] Prediction: ['Deutschland hat eine neue Weihnachtszeit enthält.\nDie Noten Vanille, Zimt, Mandel, vielleicht etwas Nelke und Kardamom enthält das Duft.'] Label: [['Der typische Duft in Deutschland um die Weihnachtszeit enthält Vanille, Zimt, Mandel, vielleicht etwas Nelke und Kardamom.']] Sacrebleu: {'score': 47.21348165832945, 'counts': [16, 11, 9, 8], 'totals': [24, 23, 22, 21], 'precisions': [66.66666666666667, 47.82608695652174, 40.90909090909091, 38.095238095238095], 'bp': 1.0, 'sys_len': 24, 'ref_len': 21} Bleu: {'bleu': 0.4721348165832944, 'precisions': [0.6666666666666666, 0.4782608695652174, 0.4090909090909091, 0.38095238095238093], 'brevity_penalty': 1.0, 'length_ratio': 1.1428571428571428, 'translation_length': 24, 'reference_length': 21} Rouge: {'rouge1': 0.717948717948718, 'rouge2': 0.48648648648648646, 'rougeL': 0.6153846153846153, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 45.390942580039685} Flesh Reading Ease: 65.2 ---------------------------------------- Source: ['Spekulatius, Printen, Stollen und Plätzchen haben alle ihren ganz typischen Geschmack.'] Prediction: ['Im Text der Geschmack von Spekulatius, Printen, Stollen und Plätzchen haben alle ihren ganz typischen Geschmack geschmackt.\nIm Text sind Spekulatius, Printen, Stollen und Plätzchen zu sehen.'] Label: [['Spekulatius, Printen, Stollen und andere Weihnachtsplätzchen haben alle ihren ganz typischen Geschmack.']] Sacrebleu: {'score': 28.23315619049318, 'counts': [13, 10, 8, 6], 'totals': [33, 32, 31, 30], 'precisions': [39.39393939393939, 31.25, 25.806451612903224, 20.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 15} Bleu: {'bleu': 0.28233156190493186, 'precisions': [0.3939393939393939, 0.3125, 0.25806451612903225, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 33, 'reference_length': 15} Rouge: {'rouge1': 0.5238095238095238, 'rouge2': 0.45000000000000007, 'rougeL': 0.5238095238095238, 'rougeLsum': 0.5238095238095238} Sari: {'sari': 36.128729752770674} Flesh Reading Ease: 55.35 ---------------------------------------- Source: ['Eine davon sind die Frankfurter Bethmännchen, ein Naschwerk aus Marzipan.'] Prediction: ['Eine Frau aus Frankfurien hat ein Naschwerk aus Marzipan gefunden.\nSie wurde dabei dabei aufgefunden.\nDie Frau war eine Frau aus der Schweiz.'] Label: [['Eine davon sind die Frankfurter Bethmännchen.']] Sacrebleu: {'score': 1.7179060012299232, 'counts': [2, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [7.6923076923076925, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.7142857142857144, 'translation_length': 26, 'reference_length': 7} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.06666666666666667} Sari: {'sari': 17.738095238095237} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['Ihr Erfinder ist allerdings ein Franzose, der für die Bankiersfamilie Bethmann gekocht und gebacken hat.'] Prediction: ['Ein Franzose hat für die Bankiersfamilie Bethmann gekocht und gebacken.\nIhr Erfinder ist ein Franzose, der für die Bankiersfamilie gekocht und gebacken hat.'] Label: [['Ihr Erfinder ist allerdings ein Franzose, der für die Bankiersfamilie Bethmann gekocht hat.']] Sacrebleu: {'score': 37.88588014103526, 'counts': [14, 11, 8, 6], 'totals': [26, 25, 24, 23], 'precisions': [53.84615384615385, 44.0, 33.333333333333336, 26.08695652173913], 'bp': 1.0, 'sys_len': 26, 'ref_len': 15} Bleu: {'bleu': 0.37885880141035255, 'precisions': [0.5384615384615384, 0.44, 0.3333333333333333, 0.2608695652173913], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 26, 'reference_length': 15} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.5405405405405406, 'rougeL': 0.6153846153846153, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 33.44743995982893} Flesh Reading Ease: 51.5 ---------------------------------------- Source: ['Marzipan, sehr feiner Zucker und Eiweiß werden vermischt, abgerundet mit Zitrone.'] Prediction: ['Marzipan, sehr feiner Zucker und Eiweiß werden vermischt, abgerundet mit Zitrone.\nMit Zitrone wird der 20-Minuten-Radio-Host Marzipan sehr feine Zucker und Eiweiß werden vermischt.'] Label: [['Sie bestehen aus Marzipan, Zucker und Eiweiß und etwas Zitrone.']] Sacrebleu: {'score': 7.022952541634667, 'counts': [8, 4, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 13.793103448275861, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.13793103448275862, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 30, 'reference_length': 12} Rouge: {'rouge1': 0.32432432432432434, 'rouge2': 0.1142857142857143, 'rougeL': 0.2702702702702703, 'rougeLsum': 0.2702702702702703} Sari: {'sari': 44.09250879839115} Flesh Reading Ease: 39.3 ---------------------------------------- Source: ['Sie enthalten die Gewürze Kardamom, Gewürznelke und Zimt und viel Butter.'] Prediction: ['Die Schweizer Welt hat einen neuen Wissen-Wissen-Wissen-Wissen-Wissen-Wissen-Wissenschaftler aufgefunden.\nDie Wissenschaftler sind mit dem Wissenschaftler auf der Suche.'] Label: [['Sie enthalten die Gewürze Kardamom, Gewürznelke, Zimt und viel Butter.']] Sacrebleu: {'score': 2.0244462660665508, 'counts': [1, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [5.2631578947368425, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4615384615384615, 'translation_length': 19, 'reference_length': 13} Rouge: {'rouge1': 0.057142857142857134, 'rouge2': 0.0, 'rougeL': 0.057142857142857134, 'rougeLsum': 0.057142857142857134} Sari: {'sari': 9.792568542568542} Flesh Reading Ease: 19.4 ---------------------------------------- Source: ['Das Gebäck stellt traditionell die Nikolausgeschichte dar, aber es gibt heute auch belgische, niederländische oder deutsche Motive, etwa Schiffe oder Windmühlen.'] Prediction: ['Der Nikolaus-Gebäck ist traditionell, das Gebäck stellt dar.\nAuch belgische, niederländische oder deutsche Motive gibt es in der Schweiz.\nDas Gebäck stellt traditionell die Nikolausgeschichte dar.'] Label: [['Das Gebäck stellt traditionell die Nikolausgeschichte dar, aber es gibt heute auch belgische, niederländische oder deutsche Motive.']] Sacrebleu: {'score': 35.34156642122563, 'counts': [17, 11, 9, 7], 'totals': [31, 30, 29, 28], 'precisions': [54.83870967741935, 36.666666666666664, 31.03448275862069, 25.0], 'bp': 1.0, 'sys_len': 31, 'ref_len': 20} Bleu: {'bleu': 0.3534156642122564, 'precisions': [0.5483870967741935, 0.36666666666666664, 0.3103448275862069, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.55, 'translation_length': 31, 'reference_length': 20} Rouge: {'rouge1': 0.6799999999999999, 'rouge2': 0.5416666666666666, 'rougeL': 0.48000000000000004, 'rougeLsum': 0.6} Sari: {'sari': 41.44547622617798} Flesh Reading Ease: 42.6 ---------------------------------------- Source: ['Auf keinem deutschen Weihnachtsteller fehlt der Klassiker: Vanillekipferl.'] Prediction: ['Ein deutscher Weihnachtsteller fehlt in der Nacht auf Sonntag in Deutschland einen Weihnachtsteller.\nDer Weihnachtsteller wurde von der Polizei verletzt.\nDer Weihnachtsteller fehlt auf den Weihnachtsteller: Vanillekipferl.'] Label: [['Der Klassiker aber sind die Vanillekipferl.']] Sacrebleu: {'score': 2.6545937801413144, 'counts': [3, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [9.67741935483871, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.0967741935483871, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.428571428571429, 'translation_length': 31, 'reference_length': 7} Rouge: {'rouge1': 0.12121212121212122, 'rouge2': 0.0, 'rougeL': 0.12121212121212122, 'rougeLsum': 0.12121212121212122} Sari: {'sari': 45.37878787878788} Flesh Reading Ease: 54.0 ---------------------------------------- Source: ['Jeder Deutsche kennt den ausschließlich an Silvester im deutschen Fernsehen seit 1963 ausgestrahlten Sketch „Dinner for one“:'] Prediction: ['Der ausschließlich an Silvester im deutschen Fernsehen ist seit 1963 ausgestrahlte Sketch "Dinner for one“ ausgestrahlt worden.\nDer ausschließlich an Silvester im deutschen Fernsehen wurde seit 1963 ausgestrahlte Sketch ausgestrahlt.'] Label: [['Jeder Deutsche kennt den Silvester-Sketch im deutschen Fernsehen „Dinner for one“:']] Sacrebleu: {'score': 5.256886485157954, 'counts': [5, 3, 1, 0], 'totals': [33, 32, 31, 30], 'precisions': [15.151515151515152, 9.375, 3.225806451612903, 1.6666666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.15151515151515152, 0.09375, 0.03225806451612903, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.75, 'translation_length': 33, 'reference_length': 12} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.19047619047619047, 'rougeL': 0.31818181818181823, 'rougeLsum': 0.31818181818181823} Sari: {'sari': 26.830206830206834} Flesh Reading Ease: 53.85 ---------------------------------------- Source: ['Wenn man sich um Mitternacht zuprostet, heißt es „Prost Neujahr“.'] Prediction: ['Mitternacht kommt es zu einem kleinen Abstimmungsdelikt.\nDie Menschen sind sich in der Schweiz zum dritten Mal zuprostet.\nDie Menschen sind sich in der Schweiz zu tun.'] Label: [['Wenn man um Mitternacht mit Sekt anstößt, heißt es „Prost Neujahr“.']] Sacrebleu: {'score': 1.633898440122165, 'counts': [3, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [10.0, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 16.91919191919192} Flesh Reading Ease: 83.25 ---------------------------------------- Source: ['Berlin, so hat eine Umfrage von Bitkom, dem Digitalverband Deutschlands ergeben, hat unter den deutschen Städten einen sehr guten Ruf unter den Unternehmensgründern.'] Prediction: ['Der deutsche Digitalverband Bitkom hat einen sehr guten Ruf unter den Unternehmensgründern.\nDie deutsche Städte haben einen sehr guten Ruf unter den deutschen Städten ergeben.'] Label: [['Berlin, so zeigte eine Umfrage von Bitkom, dem Digitalverband Deutschlands, hat unter den deutschen Städten einen sehr guten Ruf unter den Unternehmensgründern.']] Sacrebleu: {'score': 36.15855225145535, 'counts': [15, 10, 8, 6], 'totals': [27, 26, 25, 24], 'precisions': [55.55555555555556, 38.46153846153846, 32.0, 25.0], 'bp': 1.0, 'sys_len': 27, 'ref_len': 26} Bleu: {'bleu': 0.3615855225145535, 'precisions': [0.5555555555555556, 0.38461538461538464, 0.32, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.0384615384615385, 'translation_length': 27, 'reference_length': 26} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.44000000000000006, 'rougeL': 0.4230769230769231, 'rougeLsum': 0.4230769230769231} Sari: {'sari': 29.49503934649161} Flesh Reading Ease: 56.35 ---------------------------------------- Source: ['Etwa 73 Prozent aller Gründer sagen, dass die Hauptstadt der beste Ort ist für ein Start-up.'] Prediction: ['Ein Start-Up in der Schweiz ist für ein Start-Up.\n73 Prozent aller Gründer sagen, dass die Hauptstadt der beste Ort ist für ein Start-Up.'] Label: [['Etwa 73 Prozent aller Gründer sagen, dass die Hauptstadt der beste Ort für ein Start-up ist.']] Sacrebleu: {'score': 45.00531895417842, 'counts': [16, 12, 10, 9], 'totals': [27, 26, 25, 24], 'precisions': [59.25925925925926, 46.15384615384615, 40.0, 37.5], 'bp': 1.0, 'sys_len': 27, 'ref_len': 18} Bleu: {'bleu': 0.4500531895417844, 'precisions': [0.5925925925925926, 0.46153846153846156, 0.4, 0.375], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 27, 'reference_length': 18} Rouge: {'rouge1': 0.7346938775510204, 'rouge2': 0.6382978723404256, 'rougeL': 0.6938775510204083, 'rougeLsum': 0.6938775510204083} Sari: {'sari': 28.35758377425044} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Die gute Infrastruktur und im Vergleich zu anderen Großstädten niedrige Mieten und Lebenshaltungskosten machen die Stadt attraktiv.„Outfittery“, ein Portal, das Mode für Männer anbietet, hat inzwischen 200.000 Kunden.'] Prediction: ['Die Stadt Zürich hat ein neues Mode für Männer anbietet.\nInzwischen 200.000 Kunden und Mieten in der Stadt hat es einen Portal für eine gute Infrastruktur und eine Lebenshaltungskosten gekostet.'] Label: [['Die gute Infrastruktur und im Vergleich zu anderen Großstädten niedrige Mieten und Lebenshaltungskosten machen die Stadt attraktiv.\n„Outfittery“ ist ein Portal für Männermode.\nEs hat inzwischen 200.000 Kunden.']] Sacrebleu: {'score': 7.803326225435818, 'counts': [16, 4, 1, 0], 'totals': [32, 31, 30, 29], 'precisions': [50.0, 12.903225806451612, 3.3333333333333335, 1.7241379310344827], 'bp': 1.0, 'sys_len': 32, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.5, 0.12903225806451613, 0.03333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.032258064516129, 'translation_length': 32, 'reference_length': 31} Rouge: {'rouge1': 0.5588235294117646, 'rouge2': 0.27272727272727276, 'rougeL': 0.2941176470588235, 'rougeLsum': 0.4705882352941177} Sari: {'sari': 22.157010518178343} Flesh Reading Ease: 59.7 ---------------------------------------- Source: ['Männer suchen sich ihre Sachen hier nicht einfach aus, sondern bekommen eine Stilberatung und anschließend ein Paket mit einem kompletten Outfit und mehreren Kombinationen zugestellt.'] Prediction: ['Männer suchen sich ihre Sachen hier nicht einfach aus, sondern bekommen eine Stilberatung und ein Paket mit einem kompletten Outfit.\nDas ist ein neuer Outfit mit mehreren Kombinationen zugestellt.'] Label: [['Männer suchen sich ihre Sachen hier nicht einfach aus, sondern bekommen eine Beratung.\nEin Paket mit einem kompletten Outfit und mehreren Kombinationen wird nach Hause geliefert.']] Sacrebleu: {'score': 52.52472394880208, 'counts': [23, 17, 14, 12], 'totals': [32, 31, 30, 29], 'precisions': [71.875, 54.83870967741935, 46.666666666666664, 41.37931034482759], 'bp': 1.0, 'sys_len': 32, 'ref_len': 29} Bleu: {'bleu': 0.525247239488021, 'precisions': [0.71875, 0.5483870967741935, 0.4666666666666667, 0.41379310344827586], 'brevity_penalty': 1.0, 'length_ratio': 1.103448275862069, 'translation_length': 32, 'reference_length': 29} Rouge: {'rouge1': 0.7719298245614035, 'rouge2': 0.6545454545454545, 'rougeL': 0.7368421052631577, 'rougeLsum': 0.7368421052631577} Sari: {'sari': 46.36489167739168} Flesh Reading Ease: 48.5 ---------------------------------------- Source: ['Kaufen müssen sie nur, was gefällt.'] Prediction: ['Eine Frau muss sich nicht nur gefällt werden, sondern auch auch auf den Kaufstuhl.\nDie Frau muss sich nur nur gefällt werden, sondern nur auf den Kaufstuhl.'] Label: [['Gekauft werden muss nur das, was einem gefällt.']] Sacrebleu: {'score': 1.877081263233555, 'counts': [6, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [19.35483870967742, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1, 'translation_length': 31, 'reference_length': 10} Rouge: {'rouge1': 0.26315789473684215, 'rouge2': 0.05555555555555556, 'rougeL': 0.26315789473684215, 'rougeLsum': 0.21052631578947367} Sari: {'sari': 54.90390600684718} Flesh Reading Ease: 90.45 ---------------------------------------- Source: ['Dies sind die zentralen Ergebnisse einer Studie von McKinsey & Company mit dem Titel "Berlin gründet – Fünf Initiativen für die Start-up-Metropole Europas".Berlin hat ein großes Interesse daran, dass sich Unternehmensgründer hier ansiedeln – denn das bringt Steuereinnahmen und zieht Menschen an.'] Prediction: ['Eine Studie von McKinsey & Company hat Berlin gründet, dass Unternehmensgründer hier ansiedeln.\nDas bringt Steuereinnahmen und zieht Menschen an.\nDas zeigt eine Studie von McKinsey & Company.'] Label: [['Berlin hat ein großes Interesse daran, dass sich Unternehmensgründer hier ansiedeln.']] Sacrebleu: {'score': 9.279771067975602, 'counts': [8, 4, 2, 1], 'totals': [32, 31, 30, 29], 'precisions': [25.0, 12.903225806451612, 6.666666666666667, 3.4482758620689653], 'bp': 1.0, 'sys_len': 32, 'ref_len': 13} Bleu: {'bleu': 0.09279771067975602, 'precisions': [0.25, 0.12903225806451613, 0.06666666666666667, 0.034482758620689655], 'brevity_penalty': 1.0, 'length_ratio': 2.4615384615384617, 'translation_length': 32, 'reference_length': 13} Rouge: {'rouge1': 0.3414634146341463, 'rouge2': 0.15384615384615383, 'rougeL': 0.2926829268292683, 'rougeLsum': 0.2926829268292683} Sari: {'sari': 34.87083501716947} Flesh Reading Ease: 60.15 ---------------------------------------- Source: ['Gründer bekommen Unterstützung und Förderung seitens der Stadt, etwa über Initiativen wie „Gründen und Fördern“.'] Prediction: ['In der Stadt Bern sind Gründer unterstützt und Förderung.\nSie bekommen Unterstützung und Förderung seitens der Stadt.'] Label: [['Gründer bekommen Unterstützung und Förderung von der Stadt, etwa über Initiativen wie „Gründen und Fördern“.']] Sacrebleu: {'score': 16.67955161379731, 'counts': [9, 4, 2, 1], 'totals': [19, 18, 17, 16], 'precisions': [47.36842105263158, 22.22222222222222, 11.764705882352942, 6.25], 'bp': 1.0, 'sys_len': 19, 'ref_len': 17} Bleu: {'bleu': 0.1667955161379731, 'precisions': [0.47368421052631576, 0.2222222222222222, 0.11764705882352941, 0.0625], 'brevity_penalty': 1.0, 'length_ratio': 1.1176470588235294, 'translation_length': 19, 'reference_length': 17} Rouge: {'rouge1': 0.5714285714285713, 'rouge2': 0.4, 'rougeL': 0.47619047619047616, 'rougeLsum': 0.47619047619047616} Sari: {'sari': 13.059553965126721} Flesh Reading Ease: 66.2 ---------------------------------------- Source: ['213 Kilo Verpackungsmüll kommen auf jeden einzelnen Deutschen.'] Prediction: ['Das Coronavirus hat eine Million Franken verloren.\nDie Verpackungsmüllen von 213 Kilo verloren wurden auf jeden einzelnen Deutschen.'] Label: [['213 Kilo Verpackungsmüll erzeugt jeder einzelne Deutsche.']] Sacrebleu: {'score': 4.237713199752784, 'counts': [3, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [15.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.15, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 20, 'reference_length': 8} Rouge: {'rouge1': 0.22222222222222218, 'rouge2': 0.08, 'rougeL': 0.14814814814814814, 'rougeLsum': 0.14814814814814814} Sari: {'sari': 31.231962481962476} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['Hier werden Leichtverpackungen von privaten Verbrauchern gesammelt, sortiert und wiederverwertet.'] Prediction: ['Der Bundesrat will die Leichtverpackungen von privaten Verbrauchern wiederverwertet werden.\nDer Bundesrat will die Leichtverpackungen von privaten Verbrauchern nicht nur sortieren.'] Label: [['Hier werden Leichtverpackungen gesammelt, sortiert und wiederverwertet.']] Sacrebleu: {'score': 2.328734903585348, 'counts': [4, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [17.391304347826086, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.17391304347826086, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5555555555555554, 'translation_length': 23, 'reference_length': 9} Rouge: {'rouge1': 0.21428571428571427, 'rouge2': 0.0, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 13.541666666666666} Flesh Reading Ease: 34.95 ---------------------------------------- Source: ['Schon 1991 hat die deutsche Bundesregierung die Verpackungsverordnung erlassen. Danach sind die Hersteller zur Rücknahme ihrer Verpackungen verpflichtet.'] Prediction: ['Die deutsche Bundesregierung hat die Verpackungsverordnung erlassen.\nSie hat die Verpackungsverordnung erlassen.\nDanach sind die Hersteller zur Rücknahme ihrer Verpackungen verpflichtet.'] Label: [['Schon im Jahr 1991 ist die Verpackungsverordnung entstanden.\nDanach müssen die Hersteller ihre Verpackungen zurücknehmen.']] Sacrebleu: {'score': 5.856458233275369, 'counts': [8, 3, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [33.333333333333336, 13.043478260869565, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.13043478260869565, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.411764705882353, 'translation_length': 24, 'reference_length': 17} Rouge: {'rouge1': 0.358974358974359, 'rouge2': 0.1081081081081081, 'rougeL': 0.30769230769230765, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 31.90830850711685} Flesh Reading Ease: 26.75 ---------------------------------------- Source: ['Integration ist das Wort, das im Zusammenhang mit dem Thema Flüchtlinge die wichtigste Bedeutung hat.'] Prediction: ['Die Wichtigste Bedeutung des Thema Flüchtlinge hat eine wichtigste Bedeutung.\nDas Wort ist das Wort, das im Zusammenhang mit dem Thema Flüchtlinge die wichtigste Bedeutung hat.'] Label: [['Integration hat im Zusammenhang mit dem Thema Flüchtlinge eine große Bedeutung.']] Sacrebleu: {'score': 18.852104513558075, 'counts': [10, 6, 4, 3], 'totals': [29, 28, 27, 26], 'precisions': [34.48275862068966, 21.428571428571427, 14.814814814814815, 11.538461538461538], 'bp': 1.0, 'sys_len': 29, 'ref_len': 12} Bleu: {'bleu': 0.18852104513558068, 'precisions': [0.3448275862068966, 0.21428571428571427, 0.14814814814814814, 0.11538461538461539], 'brevity_penalty': 1.0, 'length_ratio': 2.4166666666666665, 'translation_length': 29, 'reference_length': 12} Rouge: {'rouge1': 0.48780487804878053, 'rouge2': 0.30769230769230765, 'rougeL': 0.4390243902439025, 'rougeLsum': 0.4390243902439025} Sari: {'sari': 47.352513227513235} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Wie kommt man in einem fremden Land an einer fremden Universität zurecht? Denn ohne Deutschkenntnisse und Wissen, wie was warum funktioniert, wird es mit der Integration schwierig.'] Prediction: ['In einem fremden Land kommt man in einer fremden Universität zurecht.\nDenn ohne Deutschkenntnisse und Wissen, wie was warum funktioniert, wird es mit der Integration schwierig.'] Label: [['Wie kommt man in einem fremden Land an einer fremden Universität zurecht?\nDenn ohne Deutschkenntnisse und Wissen, wie was warum funktioniert, wird Integration schwierig.']] Sacrebleu: {'score': 58.11055908327919, 'counts': [25, 20, 15, 10], 'totals': [30, 29, 28, 27], 'precisions': [83.33333333333333, 68.96551724137932, 53.57142857142857, 37.03703703703704], 'bp': 1.0, 'sys_len': 30, 'ref_len': 28} Bleu: {'bleu': 0.5811055908327919, 'precisions': [0.8333333333333334, 0.6896551724137931, 0.5357142857142857, 0.37037037037037035], 'brevity_penalty': 1.0, 'length_ratio': 1.0714285714285714, 'translation_length': 30, 'reference_length': 28} Rouge: {'rouge1': 0.8846153846153846, 'rouge2': 0.8, 'rougeL': 0.8076923076923077, 'rougeLsum': 0.8076923076923077} Sari: {'sari': 33.22883535902901} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Das trifft natürlich auf alle ausländischen Studierenden zu, in besonderem Maße aber auf Flüchtlinge.'] Prediction: ['Eine ausländische Studierende trifft auf Maße auf Flüchtlinge.\nDie ausländische Studierende trifft natürlich auf Flüchtlinge.'] Label: [['Das trifft natürlich auf alle ausländischen Studierenden zu, besonders aber auf Flüchtlinge.']] Sacrebleu: {'score': 14.317123154555068, 'counts': [6, 4, 2, 0], 'totals': [17, 16, 15, 14], 'precisions': [35.294117647058826, 25.0, 13.333333333333334, 3.5714285714285716], 'bp': 1.0, 'sys_len': 17, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.35294117647058826, 0.25, 0.13333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2142857142857142, 'translation_length': 17, 'reference_length': 14} Rouge: {'rouge1': 0.4444444444444444, 'rouge2': 0.2941176470588235, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3888888888888889} Sari: {'sari': 24.625773474783376} Flesh Reading Ease: 37.95 ---------------------------------------- Source: ['An der Universität zu Köln unterstützen internationale Medizinstudierende der Association of International Students (AIMS) andere internationale Studierende.'] Prediction: ['Die Universität zu Köln unterstützen internationale Medizinstudierende der Association of International Students (AIMS) andere internationale Studierende.\nDie AIMS unterstützt internationale Studierende.'] Label: [['An der Universität zu Köln unterstützen internationale Medizinstudenten von der Association of International Students (AIMS) andere internationale Studierende.']] Sacrebleu: {'score': 58.869942641609505, 'counts': [17, 15, 13, 11], 'totals': [25, 24, 23, 22], 'precisions': [68.0, 62.5, 56.52173913043478, 50.0], 'bp': 1.0, 'sys_len': 25, 'ref_len': 21} Bleu: {'bleu': 0.5886994264160949, 'precisions': [0.68, 0.625, 0.5652173913043478, 0.5], 'brevity_penalty': 1.0, 'length_ratio': 1.1904761904761905, 'translation_length': 25, 'reference_length': 21} Rouge: {'rouge1': 0.7391304347826089, 'rouge2': 0.6818181818181818, 'rougeL': 0.7391304347826089, 'rougeLsum': 0.7391304347826089} Sari: {'sari': 28.534551774253735} Flesh Reading Ease: -29.41 ---------------------------------------- Source: ['Und das bedeutet vor allem: Sie unterstützen im Alltag, begleiten sie beim Studium.'] Prediction: ['Die Schweizer Schweizerinnen und Schweizer haben sich im Alltag unterstützt.\nDas bedeutet vor allem: Sie unterstützen im Alltag, begleiten sie beim Studium.'] Label: [['Und das bedeutet vor allem: Sie bieten Unterstützung im Alltag und beim Studium.']] Sacrebleu: {'score': 20.355513820113572, 'counts': [11, 7, 4, 2], 'totals': [26, 25, 24, 23], 'precisions': [42.30769230769231, 28.0, 16.666666666666668, 8.695652173913043], 'bp': 1.0, 'sys_len': 26, 'ref_len': 15} Bleu: {'bleu': 0.20355513820113572, 'precisions': [0.4230769230769231, 0.28, 0.16666666666666666, 0.08695652173913043], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 26, 'reference_length': 15} Rouge: {'rouge1': 0.5789473684210527, 'rouge2': 0.33333333333333337, 'rougeL': 0.5789473684210527, 'rougeLsum': 0.5789473684210527} Sari: {'sari': 28.874104097405123} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Die Friedrich-Ebert-Stiftung hat ausgerechnet, dass bis zu 50.000 studierwillige Flüchtlinge an die deutschen Universitäten kommen.'] Prediction: ['Bis zu 50.000 studierwillige Flüchtlinge an die deutschen Universitäten kommen in der Friedrich-Ebert-Stiftung.\nDie Friedrich-Ebert-Stiftung hat ausgerechnet, dass bis zu 50.000 studierwillige Flüchtlinge an die deutschen Universitäten kommen.'] Label: [['Die Friedrich-Ebert-Stiftung hat ausgerechnet, dass bis zu 50.000 Flüchtlinge an die deutschen Universitäten kommen.']] Sacrebleu: {'score': 43.43577468569327, 'counts': [16, 14, 12, 10], 'totals': [31, 30, 29, 28], 'precisions': [51.61290322580645, 46.666666666666664, 41.37931034482759, 35.714285714285715], 'bp': 1.0, 'sys_len': 31, 'ref_len': 16} Bleu: {'bleu': 0.43435774685693274, 'precisions': [0.5161290322580645, 0.4666666666666667, 0.41379310344827586, 0.35714285714285715], 'brevity_penalty': 1.0, 'length_ratio': 1.9375, 'translation_length': 31, 'reference_length': 16} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.6181818181818182, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 63.52747909199522} Flesh Reading Ease: 38.45 ---------------------------------------- Source: ['Da viele Flüchtlinge nicht immer alle Papiere haben, wird es schon bald nach Angaben der Kultusministerkonferenz ein „dreistufiges Verfahren zur Studierfähigkeit" geben.'] Prediction: ['Viele Flüchtlinge haben nicht immer alle Papiere haben, wird es schon bald nach Angaben der Kultusministerkonferenz ein "dreistufiges Verfahren zur Studierfähigkeit" geben.\nDie Flüchtlinge haben nicht immer alle Papiere haben, wird es schon bald nach Angaben der Kultusministerkonferenz ein "dreistufiges Verfahren zur Studierfähigkeit" geben.'] Label: [['Da viele Flüchtlinge nicht immer alle Papiere haben, wird es schon bald ein „dreistufiges Verfahren zur Studierfähigkeit" geben.']] Sacrebleu: {'score': 26.119240583587466, 'counts': [18, 14, 12, 10], 'totals': [52, 51, 50, 49], 'precisions': [34.61538461538461, 27.45098039215686, 24.0, 20.408163265306122], 'bp': 1.0, 'sys_len': 52, 'ref_len': 21} Bleu: {'bleu': 0.2611924058358747, 'precisions': [0.34615384615384615, 0.27450980392156865, 0.24, 0.20408163265306123], 'brevity_penalty': 1.0, 'length_ratio': 2.4761904761904763, 'translation_length': 52, 'reference_length': 21} Rouge: {'rouge1': 0.5588235294117647, 'rouge2': 0.48484848484848486, 'rougeL': 0.5588235294117647, 'rougeLsum': 0.5588235294117647} Sari: {'sari': 28.814975873799405} Flesh Reading Ease: 23.45 ---------------------------------------- Source: ['Köln entwickelte sich im 2. und 3. Jahrhundert nach Christus zu einer der bedeutendsten Städte des römischen Reiches und lockte Händler und Handwerker von weit her an.'] Prediction: ['Im Jahr 2020 entwickelte sich Christus in Köln eine bedeutendste Städte des römischen Reiches.\nDer Händler und Handwerker wurden von der bedeutendsten Städte entwickelt.\nDie Städte war zu einer bedeutendsten Städte des römischen Reiches.'] Label: [['Die Stadt entwickelte sich im 2. und 3.\nJahrhundert nach Christus zu einer der bedeutendsten Städte des römischen Reiches.\nSie lockte Händler und Handwerker aus allen Ländern an.']] Sacrebleu: {'score': 21.26294696713847, 'counts': [18, 10, 6, 3], 'totals': [37, 36, 35, 34], 'precisions': [48.648648648648646, 27.77777777777778, 17.142857142857142, 8.823529411764707], 'bp': 1.0, 'sys_len': 37, 'ref_len': 32} Bleu: {'bleu': 0.21262946967138469, 'precisions': [0.4864864864864865, 0.2777777777777778, 0.17142857142857143, 0.08823529411764706], 'brevity_penalty': 1.0, 'length_ratio': 1.15625, 'translation_length': 37, 'reference_length': 32} Rouge: {'rouge1': 0.5135135135135135, 'rouge2': 0.3333333333333333, 'rougeL': 0.3513513513513513, 'rougeLsum': 0.4864864864864864} Sari: {'sari': 30.54204094353348} Flesh Reading Ease: 57.55 ---------------------------------------- Source: ['Typisch heute für Köln: Sobald eine Baustelle entsteht, finden sich in den Tiefen der Erde Reste von Römerbauwerken.'] Prediction: ['Die Kölner Bauwerken sind in den Tiefen der Erde Reste von Römerbauwerken.\nSobald eine Baustelle entsteht, finden sich in den Tiefen der Erde Reste von Römerbauwerken.'] Label: [['Noch immer finden sich in den Tiefen der Erde Reste von Römerbauwerken.']] Sacrebleu: {'score': 34.33270406340893, 'counts': [11, 10, 9, 8], 'totals': [29, 28, 27, 26], 'precisions': [37.93103448275862, 35.714285714285715, 33.333333333333336, 30.76923076923077], 'bp': 1.0, 'sys_len': 29, 'ref_len': 13} Bleu: {'bleu': 0.34332704063408953, 'precisions': [0.3793103448275862, 0.35714285714285715, 0.3333333333333333, 0.3076923076923077], 'brevity_penalty': 1.0, 'length_ratio': 2.230769230769231, 'translation_length': 29, 'reference_length': 13} Rouge: {'rouge1': 0.5238095238095238, 'rouge2': 0.5, 'rougeL': 0.5238095238095238, 'rougeLsum': 0.5238095238095238} Sari: {'sari': 59.66106893643125} Flesh Reading Ease: 55.85 ---------------------------------------- Source: ['Seine lange Geschichte begann schon im Jahr 800, das erste Kirchengebäude war eine wichtige Wallfahrtskirche. 1238 wurde der Grundstein des gotischen Baus gelegt, offiziell fertig war er dann 1880 – gebaut wird am Dom aber bis heute.'] Prediction: ['Das erste Kirchengebäude in der Wallfahrtskirche ist im Jahr 800.\nSeine lange Geschichte begann schon im Jahr 800.\nDer Grundstein des gotischen Baus wurde von dem Grundstein des gotischen Baus gelegt.'] Label: [['Seine lange Geschichte begann schon im Jahr 800.\n1238 wurde der Grundstein des gotischen Baus gelegt, offiziell fertig war er dann 1880.\nGebaut wird am Dom aber bis heute.']] Sacrebleu: {'score': 35.298788676449334, 'counts': [18, 12, 10, 8], 'totals': [34, 33, 32, 31], 'precisions': [52.94117647058823, 36.36363636363637, 31.25, 25.806451612903224], 'bp': 1.0, 'sys_len': 34, 'ref_len': 33} Bleu: {'bleu': 0.35298788676449344, 'precisions': [0.5294117647058824, 0.36363636363636365, 0.3125, 0.25806451612903225], 'brevity_penalty': 1.0, 'length_ratio': 1.0303030303030303, 'translation_length': 34, 'reference_length': 33} Rouge: {'rouge1': 0.4918032786885246, 'rouge2': 0.4067796610169491, 'rougeL': 0.4590163934426229, 'rougeLsum': 0.4918032786885246} Sari: {'sari': 33.64659932958037} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Vom „Triangle, ein 103,20 Meter hohes Gebäude, hat man einen tollen Rundblick.'] Prediction: ['Triangle ist ein 103,20 Meter hohes Gebäude.\nDer 103,20 Meter hohes Gebäude hat einen tollen Rundblick.\nDer Rundblick hat man einen tollen Rundblick.'] Label: [['Vom „Triangle", ein 103,20 Meter hohes Gebäude, hat man einen tollen Rundblick über die ganze Stadt.']] Sacrebleu: {'score': 27.698762715990963, 'counts': [11, 8, 6, 4], 'totals': [26, 25, 24, 23], 'precisions': [42.30769230769231, 32.0, 25.0, 17.391304347826086], 'bp': 1.0, 'sys_len': 26, 'ref_len': 20} Bleu: {'bleu': 0.27698762715990977, 'precisions': [0.4230769230769231, 0.32, 0.25, 0.17391304347826086], 'brevity_penalty': 1.0, 'length_ratio': 1.3, 'translation_length': 26, 'reference_length': 20} Rouge: {'rouge1': 0.5777777777777777, 'rouge2': 0.5116279069767442, 'rougeL': 0.5777777777777777, 'rougeLsum': 0.5777777777777777} Sari: {'sari': 30.870142928966455} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['Allein der Rosenmontagsumzug ist 7,5 Kilometer lang und dauert rund fünf Stunden.'] Prediction: ['Der Rosenmontagsumzug ist 7,5 Kilometer lang und dauert fünf Stunden.\nAllein der Rosenmontagsumzug ist 7,5 Kilometer lang und dauert rund fünf Stunden.'] Label: [['Allein der Rosenmontagsumzug an Karneval ist 7,5 Kilometer lang und dauert rund fünf Stunden.']] Sacrebleu: {'score': 43.353471935824025, 'counts': [13, 11, 9, 7], 'totals': [24, 23, 22, 21], 'precisions': [54.166666666666664, 47.82608695652174, 40.90909090909091, 33.333333333333336], 'bp': 1.0, 'sys_len': 24, 'ref_len': 15} Bleu: {'bleu': 0.4335347193582402, 'precisions': [0.5416666666666666, 0.4782608695652174, 0.4090909090909091, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 24, 'reference_length': 15} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.6, 'rougeL': 0.6666666666666667, 'rougeLsum': 0.6666666666666667} Sari: {'sari': 64.00042625745951} Flesh Reading Ease: 52.0 ---------------------------------------- Source: ['In den Kneipen allerdings fließen rund 30 Millionen Liter Kölsch nur an Karneval durch die Kehlen der Karnevalisten.'] Prediction: ['In den Kneipen fließen 30 Millionen Liter Kölsch nur an Karneval durch die Kehlen der Karnevalisten.\nIn den Kneipen fließen rund 30 Millionen Liter Kölsch nur an Karneval durch die Kehlen der Karnevalisten.'] Label: [['In den Kneipen werden rund 30 Millionen Liter Kölsch nur an Karneval verbraucht.']] Sacrebleu: {'score': 23.419101564649054, 'counts': [12, 9, 7, 5], 'totals': [35, 34, 33, 32], 'precisions': [34.285714285714285, 26.470588235294116, 21.21212121212121, 15.625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 14} Bleu: {'bleu': 0.23419101564649053, 'precisions': [0.34285714285714286, 0.2647058823529412, 0.21212121212121213, 0.15625], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 35, 'reference_length': 14} Rouge: {'rouge1': 0.4705882352941177, 'rouge2': 0.40816326530612246, 'rougeL': 0.4705882352941177, 'rougeLsum': 0.4705882352941177} Sari: {'sari': 56.45751633986929} Flesh Reading Ease: 58.2 ---------------------------------------- Source: ['Die Hänge an den deutschen Flüssen wie Rhein, Mosel, Saar, Ahr, Nahe und in den Regionen Rheinhessen, Rheingau, Mittelrhein, Baden, Pfalz, Saale-Unstrut und Sachsen liegen etwa um den 50. Breitengrad oder weiter südlich und sind damit bis auf ganz wenige Ausnahmen die nördlichste Weinbauregion der Welt.'] Prediction: ['Die Hänge an den deutschen Flüssen wie Rhein, Mosel, Saar, Ahr, Nahe und in den Regionen Rheinhessen, Rheingau, Mittelrhein, Baden, Pfalz, Saale-Unstrut und Sachsen liegen etwa um den 50.\nBreitengrad oder weiter südlich.\nDie Hänge an den deutschen Flüssen wie Rhein, Mosel, Saar, Ahr, Nahe und in den Regionen Rheinhessen, Rheingau, Mittelrhein, Baden, Mittelrhein, Baden, Pfalz, Saale-Unstrut und Sachsen liegen etwa um den 50.\nBreitengrad oder weiter südlich.'] Label: [['Die Hänge an den deutschen Flüssen wie Rhein, Mosel, Saar, Ahr und in den Regionen Rheinhessen, Rheingau, Mittelrhein, Baden und Sachsen liegen etwa auf dem 50.\nBreitengrad oder weiter südlich.']] Sacrebleu: {'score': 32.77857007613531, 'counts': [36, 32, 28, 24], 'totals': [92, 91, 90, 89], 'precisions': [39.130434782608695, 35.16483516483517, 31.11111111111111, 26.96629213483146], 'bp': 1.0, 'sys_len': 92, 'ref_len': 38} Bleu: {'bleu': 0.327785700761353, 'precisions': [0.391304347826087, 0.3516483516483517, 0.3111111111111111, 0.2696629213483146], 'brevity_penalty': 1.0, 'length_ratio': 2.4210526315789473, 'translation_length': 92, 'reference_length': 38} Rouge: {'rouge1': 0.5688073394495412, 'rouge2': 0.5046728971962616, 'rougeL': 0.5688073394495412, 'rougeLsum': 0.5688073394495412} Sari: {'sari': 64.10303434597814} Flesh Reading Ease: 57.7 ---------------------------------------- Source: ['Was sie hier bekommen: besonders geschützte Stellen in Flussnähe.'] Prediction: ['Die Schweizer Stelle hat sich in der Schweiz besonders geschützt.\nSie wurde besonders geschützt.'] Label: [['Was die Trauben hier bekommen: besonders geschützte Stellen in Flussnähe.']] Sacrebleu: {'score': 3.21858262703621, 'counts': [3, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 16, 'reference_length': 12} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.07692307692307691, 'rougeL': 0.21428571428571427, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 10.68843193843194} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Sie sind teilweise steil nach Süden oder Westen, also optimal zur Sonneneinstrahlung ausgerichtet.'] Prediction: ['Sonneneinstrahlungen sind teilweise steil nach Süden oder Westen.\nDas sind teilweise teilweise steil nach Süden oder Westen.'] Label: [['Sie liegen teilweise steil nach Süden oder Westen, also optimal zur Sonneneinstrahlung.']] Sacrebleu: {'score': 25.921705371356865, 'counts': [7, 5, 4, 3], 'totals': [19, 18, 17, 16], 'precisions': [36.8421052631579, 27.77777777777778, 23.529411764705884, 18.75], 'bp': 1.0, 'sys_len': 19, 'ref_len': 14} Bleu: {'bleu': 0.2592170537135687, 'precisions': [0.3684210526315789, 0.2777777777777778, 0.23529411764705882, 0.1875], 'brevity_penalty': 1.0, 'length_ratio': 1.3571428571428572, 'translation_length': 19, 'reference_length': 14} Rouge: {'rouge1': 0.4375, 'rouge2': 0.4, 'rougeL': 0.4375, 'rougeLsum': 0.4375} Sari: {'sari': 30.257936507936506} Flesh Reading Ease: 60.35 ---------------------------------------- Source: ['Die Böden speichern im Laufe des Tages Wärme, die sie auch noch weit nach Sonnenuntergang abgeben.'] Prediction: ['Die Böden in der Nähe des Sonnen wurden wegen Sonnenuntergang gestorben.\nSie sind noch weit nach Sonnenuntergang abgeben.'] Label: [['Die Böden speichern im Laufe des Tages Wärme, die sie lange nachdem die Sonne untergegangen ist wieder abgeben.']] Sacrebleu: {'score': 5.7259987315337755, 'counts': [5, 2, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 10.526315789473685, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.10526315789473684, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 20, 'reference_length': 20} Rouge: {'rouge1': 0.3, 'rouge2': 0.10526315789473684, 'rougeL': 0.3, 'rougeLsum': 0.3} Sari: {'sari': 13.726539693611306} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Deutschland hat eine sehr unterschiedliche Bodenstruktur je nach Region.'] Prediction: ['Deutschland hat eine sehr unterschiedliche Bodenstruktur.\nDie Unterschiedlichen sind in der Schweiz nach Region.'] Label: [['Deutschland hat sehr unterschiedliche Böden.']] Sacrebleu: {'score': 7.3140318268287645, 'counts': [5, 2, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [31.25, 13.333333333333334, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.3125, 0.13333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 16, 'reference_length': 6} Rouge: {'rouge1': 0.4, 'rouge2': 0.2222222222222222, 'rougeL': 0.4, 'rougeLsum': 0.4} Sari: {'sari': 42.989417989417994} Flesh Reading Ease: 50.15 ---------------------------------------- Source: ['Wenn der Boden zum Beispiel Schiefer oder Kalk enthält, sind diese Komponenten auch im Wein enthalten.'] Prediction: ['Der Beispiel Schiefer oder Kalk ist im Wein enthalten.\nDie Komponenten sind auch im Wein enthalten.'] Label: [['Zum Beispiel Schiefer oder Kalk sind Komponenten, die auch im Wein stecken.']] Sacrebleu: {'score': 21.258844131063825, 'counts': [10, 5, 3, 1], 'totals': [18, 17, 16, 15], 'precisions': [55.55555555555556, 29.41176470588235, 18.75, 6.666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 14} Bleu: {'bleu': 0.21258844131063828, 'precisions': [0.5555555555555556, 0.29411764705882354, 0.1875, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.2857142857142858, 'translation_length': 18, 'reference_length': 14} Rouge: {'rouge1': 0.7142857142857143, 'rouge2': 0.3846153846153846, 'rougeL': 0.5714285714285715, 'rougeLsum': 0.5714285714285715} Sari: {'sari': 54.68045843045842} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Deutscher Wein hat eine lange Vegetationszeit und eine eher geringe Sommerhitze, daher enthält er nicht so viel Alkohol.'] Prediction: ['Deutscher Wein hat eine lange Vegetationszeit und eine eher geringe Sommerhitze.\nDer Chef enthält nicht so viel Alkohol.'] Label: [['Deutscher Wein hat eine lange Vegetationszeit und eine eher geringe Sommerhitze, daher weniger Alkohol.']] Sacrebleu: {'score': 54.549512999400925, 'counts': [13, 11, 9, 8], 'totals': [20, 19, 18, 17], 'precisions': [65.0, 57.89473684210526, 50.0, 47.05882352941177], 'bp': 1.0, 'sys_len': 20, 'ref_len': 16} Bleu: {'bleu': 0.5454951299940093, 'precisions': [0.65, 0.5789473684210527, 0.5, 0.47058823529411764], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 20, 'reference_length': 16} Rouge: {'rouge1': 0.7272727272727273, 'rouge2': 0.6451612903225806, 'rougeL': 0.7272727272727273, 'rougeLsum': 0.7272727272727273} Sari: {'sari': 45.96527446744091} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Sie erzielen im Durchschnitt etwa 9 Millionen Hektoliter Weinmost.'] Prediction: ['Der Durchschnitt von Weinmost hat einen Durchschnitt von 9 Millionen Hektoliter Weinmost erzielt.\nDie Schweizer Hektoliter erzielten 9 Millionen Hektoliter Weinmost.'] Label: [['Sie produzieren daraus etwa 9 Millionen Hektoliter Weinmost.']] Sacrebleu: {'score': 15.415064977510763, 'counts': [5, 4, 3, 2], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 18.181818181818183, 14.285714285714286, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 9} Bleu: {'bleu': 0.15415064977510756, 'precisions': [0.21739130434782608, 0.18181818181818182, 0.14285714285714285, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.5555555555555554, 'translation_length': 23, 'reference_length': 9} Rouge: {'rouge1': 0.27586206896551724, 'rouge2': 0.2222222222222222, 'rougeL': 0.27586206896551724, 'rougeLsum': 0.27586206896551724} Sari: {'sari': 51.79385429385429} Flesh Reading Ease: 46.65 ---------------------------------------- Source: ['Zu verdanken ist dies dem Mut der neuen Winzergeneration, die trockene und mineralische Geschmacksrichtungen zulässt und Süße reduziert.'] Prediction: ['Die trockene und mineralische Geschmacksrichtungen von Süße reduziert.\nDas ist der Mut der neuen Winzergeneration, die trockene und mineralische Geschmacksrichtungen zulässt und Süße reduziert.'] Label: [['Zu verdanken ist dies dem Mut der neuen Winzergeneration, die trockene und mineralische Geschmäcker zulässt und Süße reduziert.']] Sacrebleu: {'score': 43.00000760562836, 'counts': [15, 12, 10, 8], 'totals': [27, 26, 25, 24], 'precisions': [55.55555555555556, 46.15384615384615, 40.0, 33.333333333333336], 'bp': 1.0, 'sys_len': 27, 'ref_len': 20} Bleu: {'bleu': 0.43000007605628365, 'precisions': [0.5555555555555556, 0.46153846153846156, 0.4, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.35, 'translation_length': 27, 'reference_length': 20} Rouge: {'rouge1': 0.6250000000000001, 'rouge2': 0.5217391304347826, 'rougeL': 0.6250000000000001, 'rougeLsum': 0.6250000000000001} Sari: {'sari': 24.865636761241518} Flesh Reading Ease: 33.45 ---------------------------------------- Source: ['Als Konrad Duden im Jahr 1880 sein Vollständiges Orthographisches Wörterbuch der deutschen Sprache veröffentlichte, enthielt dieser Band gerade einmal 27.000 Wörter.'] Prediction: ['Der deutsche Wörterbuch enthielt einmal 27.000 Wörter.\nKonrad Duden enthielt dieser Band gerade einmal 27.000 Wörter.'] Label: [['Konrad Duden veröffentlichte im Jahr 1880 sein Vollständiges Orthographisches Wörterbuch der deutschen Sprache.\nDamals enthielt dieser Band nur 27.000 Wörter.']] Sacrebleu: {'score': 12.934494162932582, 'counts': [10, 5, 2, 0], 'totals': [18, 17, 16, 15], 'precisions': [55.55555555555556, 29.41176470588235, 12.5, 3.3333333333333335], 'bp': 0.800737402916808, 'sys_len': 18, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.5555555555555556, 0.29411764705882354, 0.125, 0.0], 'brevity_penalty': 0.8007374029168082, 'length_ratio': 0.8181818181818182, 'translation_length': 18, 'reference_length': 22} Rouge: {'rouge1': 0.5217391304347826, 'rouge2': 0.31818181818181823, 'rougeL': 0.391304347826087, 'rougeLsum': 0.4782608695652174} Sari: {'sari': 24.07223153190895} Flesh Reading Ease: 60.85 ---------------------------------------- Source: ['Der Duden ist die Grundlage einer einheitlichen deutschen Rechtschreibung.'] Prediction: ['Der Duden ist eine einheitliche deutschen Rechtschreibung.\nDie Grundlage ist einer einheitlichen deutschen Rechtschreibung.'] Label: [['Der Duden ist die Grundlage der deutschen Rechtschreibung.']] Sacrebleu: {'score': 15.911783110981522, 'counts': [7, 4, 2, 0], 'totals': [16, 15, 14, 13], 'precisions': [43.75, 26.666666666666668, 14.285714285714286, 3.8461538461538463], 'bp': 1.0, 'sys_len': 16, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.4375, 0.26666666666666666, 0.14285714285714285, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 16, 'reference_length': 9} Rouge: {'rouge1': 0.6363636363636364, 'rouge2': 0.4, 'rougeL': 0.6363636363636364, 'rougeLsum': 0.6363636363636364} Sari: {'sari': 39.65099715099715} Flesh Reading Ease: 44.3 ---------------------------------------- Source: ['Hinzu kommen zahlreiche Anglizismen, die eingedeutscht wurden, wie etwa der „Honk“ – ein Dummkopf.'] Prediction: ['Der "Honk" wurde ein Dummkopf eingedeutscht.\nDer "Honk" kommt zahlreiche Anglizismen, die eingedeutscht wurden.'] Label: [['Hinzu kommen zahlreiche neue Wörter aus Anglizismen, die eingedeutscht wurden.\nDarunter zum Beispiel der „Honk“ – ein Dummkopf.']] Sacrebleu: {'score': 26.60812517643414, 'counts': [10, 6, 4, 3], 'totals': [21, 20, 19, 18], 'precisions': [47.61904761904762, 30.0, 21.05263157894737, 16.666666666666668], 'bp': 1.0, 'sys_len': 21, 'ref_len': 21} Bleu: {'bleu': 0.26608125176434144, 'precisions': [0.47619047619047616, 0.3, 0.21052631578947367, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 21, 'reference_length': 21} Rouge: {'rouge1': 0.5625000000000001, 'rouge2': 0.33333333333333337, 'rougeL': 0.31250000000000006, 'rougeLsum': 0.5625000000000001} Sari: {'sari': 38.64514661083289} Flesh Reading Ease: 61.85 ---------------------------------------- Source: ['Im Deutschen bedeutet „chillen“ „sich entspannen“ mit Wortformen wie „chillig“, „gechillt“ usw..'] Prediction: ['Im Deutschen bedeutet eine Woche mit Wortformen wie "chillen“, „chillig“, „gechillt“ und „chillt“.\nIm Deutschen bedeutet die Wortformen wie „chillen“, „chillig“ und „gechillt“.'] Label: [['Im Deutschen bedeutet „chillen“ „sich entspannen“ mit Wortformen wie chillig oder gechillt.']] Sacrebleu: {'score': 8.65593943882835, 'counts': [8, 4, 2, 0], 'totals': [29, 28, 27, 26], 'precisions': [27.586206896551722, 14.285714285714286, 7.407407407407407, 1.9230769230769231], 'bp': 1.0, 'sys_len': 29, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.27586206896551724, 0.14285714285714285, 0.07407407407407407, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.230769230769231, 'translation_length': 29, 'reference_length': 13} Rouge: {'rouge1': 0.5142857142857143, 'rouge2': 0.24242424242424246, 'rougeL': 0.4571428571428571, 'rougeLsum': 0.4571428571428571} Sari: {'sari': 29.507985198169244} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['Es wird auch in die Grammatik integriert und so alltagstauglich.'] Prediction: ['In der Grammatik wird es alltagstauglich.\nEs wird auch in die Grammatik integriert.'] Label: [['Es wird auch in die Grammatik integriert und für den Alltag nutzbar.']] Sacrebleu: {'score': 41.374412020518825, 'counts': [8, 6, 5, 4], 'totals': [15, 14, 13, 12], 'precisions': [53.333333333333336, 42.857142857142854, 38.46153846153846, 33.333333333333336], 'bp': 1.0, 'sys_len': 15, 'ref_len': 13} Bleu: {'bleu': 0.41374412020518814, 'precisions': [0.5333333333333333, 0.42857142857142855, 0.38461538461538464, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.1538461538461537, 'translation_length': 15, 'reference_length': 13} Rouge: {'rouge1': 0.5384615384615384, 'rouge2': 0.5, 'rougeL': 0.5384615384615384, 'rougeLsum': 0.5384615384615384} Sari: {'sari': 51.755651755651755} Flesh Reading Ease: 74.05 ---------------------------------------- Source: ['Das Wort „Willkommenskultur“ ist nun auch dabei, denn es wurde in politischen Debatten und in den Medien gebräuchlich.'] Prediction: ['Der Willkommenskultur hat einen neuen Wort entwickelt.\nDas Wort wurde in politischen Debatten und in den Medien gebräuchlich.\nDas Wort wurde in den Politischen Debatten und in den Medien gebräuchlich.'] Label: [['Das Wort „Willkommenskultur“ ist nun auch dabei, denn es wurde in politischen Debatten und in den Medien viel gebraucht.']] Sacrebleu: {'score': 22.770064720268408, 'counts': [11, 8, 6, 5], 'totals': [33, 32, 31, 30], 'precisions': [33.333333333333336, 25.0, 19.35483870967742, 16.666666666666668], 'bp': 1.0, 'sys_len': 33, 'ref_len': 21} Bleu: {'bleu': 0.22770064720268418, 'precisions': [0.3333333333333333, 0.25, 0.1935483870967742, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 1.5714285714285714, 'translation_length': 33, 'reference_length': 21} Rouge: {'rouge1': 0.4313725490196078, 'rouge2': 0.32653061224489793, 'rougeL': 0.39215686274509803, 'rougeLsum': 0.39215686274509803} Sari: {'sari': 18.787779546086085} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Dazu gehören auch „Fake News“, „Brexit“, „Drohnenangriff“ oder „Wutbürger“. Abgebildet werden alle Wörter, die etwa drei Generationen umfassen.„Die Wörter spiegeln die Entwicklungen in den Bereichen Technik, Mode, Sport, Politik und Verwaltung wider“, schreibt der Duden-Verlag.'] Prediction: ['Das Duden-Verlag will den Entwicklungen in den Bereichen Technik, Mode, Sport, Politik und Verwaltung wider sein.\nAbgebildet werden alle Wörter, die etwa drei Generationen umfassen.'] Label: [['Dazu gehören auch „Fake News“, „Brexit“, „Drohnenangriff“ oder „Wutbürger“.„Die Wörter spiegeln die Entwicklungen in den Bereichen Technik, Mode, Sport, Politik und Verwaltung wider“, schreibt der Duden-Verlag.']] Sacrebleu: {'score': 37.521841185155104, 'counts': [19, 12, 11, 10], 'totals': [31, 30, 29, 28], 'precisions': [61.29032258064516, 40.0, 37.93103448275862, 35.714285714285715], 'bp': 0.8789456120040121, 'sys_len': 31, 'ref_len': 35} Bleu: {'bleu': 0.375218411851551, 'precisions': [0.6129032258064516, 0.4, 0.3793103448275862, 0.35714285714285715], 'brevity_penalty': 0.8789456120040121, 'length_ratio': 0.8857142857142857, 'translation_length': 31, 'reference_length': 35} Rouge: {'rouge1': 0.5517241379310345, 'rouge2': 0.42857142857142855, 'rougeL': 0.3793103448275862, 'rougeLsum': 0.48275862068965514} Sari: {'sari': 17.519894129493093} Flesh Reading Ease: 38.8 ---------------------------------------- Source: ['Der Duden greift Veränderungen in der Gesellschaft auf, etwa die Verwendung der digitalen Medien: Messaging, Snapchat, Selfie, Twitter, WhatsApp, facebooken oder tindern.'] Prediction: ['Der Duden greift Veränderungen in der Gesellschaft auf, etwa die Verwendung der digitalen Medien: Messaging, Snapchat, Selfie, Twitter, WhatsApp, facebooken oder tindern.\nDas ist der Duden in der Gesellschaft aufgeführt worden.'] Label: [['Der Duden greift Veränderungen in der Gesellschaft auf, etwa die Verwendung der digitalen Medien.\nUnd so finden sich auch diese Wörter wieder: Messaging, Snapchat, Selfie, facebooken, Twitter oder WhatsApp.']] Sacrebleu: {'score': 53.799199275648746, 'counts': [29, 22, 18, 16], 'totals': [40, 39, 38, 37], 'precisions': [72.5, 56.41025641025641, 47.36842105263158, 43.24324324324324], 'bp': 1.0, 'sys_len': 40, 'ref_len': 37} Bleu: {'bleu': 0.5379919927564877, 'precisions': [0.725, 0.5641025641025641, 0.47368421052631576, 0.43243243243243246], 'brevity_penalty': 1.0, 'length_ratio': 1.0810810810810811, 'translation_length': 40, 'reference_length': 37} Rouge: {'rouge1': 0.6875, 'rouge2': 0.5161290322580646, 'rougeL': 0.625, 'rougeLsum': 0.625} Sari: {'sari': 61.36264612808586} Flesh Reading Ease: 47.5 ---------------------------------------- Source: ['Erster Weltkrieg, Holocaust, das Leben in der DDR ab 1961, Einwanderung nach Deutschland oder der Mauerfall 1989: Die Seite Zeitzeugenportal.de macht die deutsche Geschichte lebendig.'] Prediction: ['Der deutsche Zeitzeugenportal.de hat eine deutsche Geschichte lebendig entdeckt.\nDie deutsche Geschichte hat einen Weltkrieg, Holocaust und Einwanderung nach Deutschland oder der Mauerfall 1989.\nDie deutsche Geschichte macht die deutsche Geschichte lebendig.'] Label: [['Erster Weltkrieg, Holocaust, das Leben in der DDR ab 1961, der Mauerfall 1989: Die Seite Zeitzeugenportal.de macht die deutsche Geschichte lebendig.']] Sacrebleu: {'score': 21.371943834541725, 'counts': [16, 11, 7, 3], 'totals': [38, 37, 36, 35], 'precisions': [42.10526315789474, 29.72972972972973, 19.444444444444443, 8.571428571428571], 'bp': 1.0, 'sys_len': 38, 'ref_len': 28} Bleu: {'bleu': 0.2137194383454172, 'precisions': [0.42105263157894735, 0.2972972972972973, 0.19444444444444445, 0.08571428571428572], 'brevity_penalty': 1.0, 'length_ratio': 1.3571428571428572, 'translation_length': 38, 'reference_length': 28} Rouge: {'rouge1': 0.5090909090909091, 'rouge2': 0.3396226415094339, 'rougeL': 0.4, 'rougeLsum': 0.5090909090909091} Sari: {'sari': 17.746309465874475} Flesh Reading Ease: 49.15 ---------------------------------------- Source: ['In Videos hört und erlebt man Menschen, die ihre Geschichte erzählen.'] Prediction: ['In der Schweiz sind Videos zu den Menschen, die ihre Geschichte erzählen.\nDie Videos sind viral.\nDie Videos sind auf Social Media viral.'] Label: [['In Videos hört und erlebt man Menschen.\nSie erzählen ihre Geschichte.']] Sacrebleu: {'score': 3.9253456897493937, 'counts': [8, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [29.62962962962963, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2962962962962963, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.076923076923077, 'translation_length': 27, 'reference_length': 13} Rouge: {'rouge1': 0.3783783783783784, 'rouge2': 0.11428571428571427, 'rougeL': 0.2702702702702703, 'rougeLsum': 0.2702702702702703} Sari: {'sari': 11.282051282051283} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['Einzelne Themen der deutschen Geschichte werden aus unterschiedlichen Perspektiven beleuchtet.'] Prediction: ['Die deutsche Geschichte wird aus unterschiedlichen Perspektiven beleuchtet.\nEinzelne Themen der deutschen Geschichte werden aus unterschiedlichen Perspektiven beleuchtet.'] Label: [['In den Erzählungen der Menschen erfährt man einzelne Themen der deutschen Geschichte.']] Sacrebleu: {'score': 12.673718536830808, 'counts': [5, 3, 2, 1], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 15.789473684210526, 11.11111111111111, 5.882352941176471], 'bp': 1.0, 'sys_len': 20, 'ref_len': 13} Bleu: {'bleu': 0.12673718536830808, 'precisions': [0.25, 0.15789473684210525, 0.1111111111111111, 0.058823529411764705], 'brevity_penalty': 1.0, 'length_ratio': 1.5384615384615385, 'translation_length': 20, 'reference_length': 13} Rouge: {'rouge1': 0.31250000000000006, 'rouge2': 0.26666666666666666, 'rougeL': 0.31250000000000006, 'rougeLsum': 0.31250000000000006} Sari: {'sari': 51.47759103641456} Flesh Reading Ease: 18.9 ---------------------------------------- Source: ['So hört man, wie Renate Weißkopf, die als Kind den Nationalsozialismus erlebte, von den stets präsenten Nationalsozialisten auf der Straße und in den Schulen Münchens erzählt.'] Prediction: ['Der stets präsente Nationalsozialisten auf der Straße und in den Schulen Münchens erzählt Renate Weißkopf, die als Kind den Nationalsozialismus erlebte, von den stets präsenten Nationalsozialisten auf der Straße und in den Schulen Münchens erzählt.\nRenate Weißkopf, die als Kind den Nationalsozialismus erlebte, wie als Kind den Nationalsozialismus erlebte, von den stets präsenten Nationalsozialisten auf der Straße und in den Schulen Münchens erzählt.'] Label: [['Etwa Renate Weißkopf, die als Kind den Nationalsozialismus erlebte.\nSie berichtet von den Nationalsozialisten auf der Straße und in den Schulen Münchens.']] Sacrebleu: {'score': 23.11599061337064, 'counts': [22, 17, 14, 12], 'totals': [70, 69, 68, 67], 'precisions': [31.428571428571427, 24.63768115942029, 20.58823529411765, 17.91044776119403], 'bp': 1.0, 'sys_len': 70, 'ref_len': 25} Bleu: {'bleu': 0.2311599061337065, 'precisions': [0.3142857142857143, 0.2463768115942029, 0.20588235294117646, 0.1791044776119403], 'brevity_penalty': 1.0, 'length_ratio': 2.8, 'translation_length': 70, 'reference_length': 25} Rouge: {'rouge1': 0.43137254901960775, 'rouge2': 0.38000000000000006, 'rougeL': 0.43137254901960775, 'rougeLsum': 0.43137254901960775} Sari: {'sari': 59.660497445127426} Flesh Reading Ease: 19.8 ---------------------------------------- Source: ['Hier werden Alltagserfahrungen und historisch bedeutsame Geschehnisse miteinander verbunden. „Das Portal richtet sich an eine breite Zielgruppe: an Geschichtsinteressierte, an Schülerinnen und Schüler sowie ihre Lehrer, an Multiplikatoren, Studierende und Wissenschaftler“, schreibt das Zeitzeugenportal.'] Prediction: ['Das Zeitzeugenportal richtet sich an eine breite Zielgruppe: an Geschichtsinteressierte, an Schülerinnen und Schüler sowie ihre Lehrer, an Multiplikatoren, Studierende und Wissenschaftler.\nDie Alltagserfahrungen und historisch bedeutsame Geschehnisse werden miteinander verbunden.'] Label: [['Hier werden Alltagserfahrungen und historisch bedeutsame Geschehnisse miteinander verbunden.„Das Portal richtet sich an eine breite Zielgruppe: an Schülerinnen und Schüler sowie ihre Lehrer, an Multiplikatoren, Studierende und Wissenschaftler“, schreibt das Zeitzeugenportal.']] Sacrebleu: {'score': 63.4145719820342, 'counts': [32, 25, 21, 17], 'totals': [37, 36, 35, 34], 'precisions': [86.48648648648648, 69.44444444444444, 60.0, 50.0], 'bp': 0.9733349348192527, 'sys_len': 37, 'ref_len': 38} Bleu: {'bleu': 0.6341457198203423, 'precisions': [0.8648648648648649, 0.6944444444444444, 0.6, 0.5], 'brevity_penalty': 0.9733349348192527, 'length_ratio': 0.9736842105263158, 'translation_length': 37, 'reference_length': 38} Rouge: {'rouge1': 0.8955223880597014, 'rouge2': 0.7692307692307692, 'rougeL': 0.6268656716417911, 'rougeLsum': 0.8358208955223881} Sari: {'sari': 25.171232043136566} Flesh Reading Ease: 6.55 ---------------------------------------- Source: ['Es kommen aber auch unbekannte Menschen zu Wort, die als Zeitzeugen ihre sehr persönliche Sicht auf die Ereignisse schildern.'] Prediction: ['Unbekannte kommen zu Wort, die als Zeitzeugen ihre sehr persönliche Sicht auf die Ereignisse schildern.\nDie unbekannte Menschen kommen aber zu Wort, die als Zeitzeugen ihre sehr persönliche Sicht auf die Ereignisse schildern.'] Label: [['Es kommen aber auch unbekannte Menschen zu Wort, die ihre sehr persönliche Sicht auf die Ereignisse schildern.']] Sacrebleu: {'score': 30.614023358320075, 'counts': [17, 13, 9, 7], 'totals': [37, 36, 35, 34], 'precisions': [45.945945945945944, 36.111111111111114, 25.714285714285715, 20.58823529411765], 'bp': 1.0, 'sys_len': 37, 'ref_len': 19} Bleu: {'bleu': 0.30614023358320086, 'precisions': [0.4594594594594595, 0.3611111111111111, 0.2571428571428571, 0.20588235294117646], 'brevity_penalty': 1.0, 'length_ratio': 1.9473684210526316, 'translation_length': 37, 'reference_length': 19} Rouge: {'rouge1': 0.6037735849056604, 'rouge2': 0.4705882352941177, 'rougeL': 0.5660377358490566, 'rougeLsum': 0.5283018867924528} Sari: {'sari': 32.35449341187046} Flesh Reading Ease: 52.35 ---------------------------------------- Source: ['Das Schöne an dem Portal ist, dass man dank der vielen Interviews historisch bedeutsame Ereignisse aus vielen Perspektiven subjektiv und emotional erleben kann.'] Prediction: ['Ein Interview mit dem Portal ist auf dem Wissenschaftlern veröffentlicht.\nDas Schöne an dem Portal ist, dass man dank der vielen Ereignisse aus vielen Perspektiven subjektiv und emotional erleben kann.'] Label: [['Das Schöne an dem Portal ist: Man erlebt historisch bedeutsame Ereignisse aus vielen Perspektiven – subjektiv und emotional.']] Sacrebleu: {'score': 25.135342075509193, 'counts': [14, 10, 7, 4], 'totals': [33, 32, 31, 30], 'precisions': [42.42424242424242, 31.25, 22.580645161290324, 13.333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 20} Bleu: {'bleu': 0.2513534207550919, 'precisions': [0.42424242424242425, 0.3125, 0.22580645161290322, 0.13333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.65, 'translation_length': 33, 'reference_length': 20} Rouge: {'rouge1': 0.6, 'rouge2': 0.5, 'rougeL': 0.6, 'rougeLsum': 0.6} Sari: {'sari': 36.515545656425736} Flesh Reading Ease: 53.85 ---------------------------------------- Source: ['100 Einführungsfilme ergänzen die Interviews.'] Prediction: ['Einige Schweizer Film-Folge eröffneten sich in den letzten Tagen zu ihren neuen Erfolg.\nDie Welt ist auf die Welt, die Schweiz und die Schweiz verzeichnen.'] Label: [['100 Filme mit Erklärungen ergänzen die Interviews.']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 28, 'reference_length': 8} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 19.90079365079365} Flesh Reading Ease: 73.9 ---------------------------------------- Source: ['Noch vor Jahren summte und brummte es in der Luft, wenn man auf einer Wiese stand.'] Prediction: ['Ein Mann hat sich in der Luft auf einer Wiese gefunden.\nEr wurde dabei verletzt.\nDas war der erste Mal.'] Label: [['Noch vor einigen Jahren summte und brummte es in der Luft, wenn man auf einer Wiese stand.']] Sacrebleu: {'score': 10.71370184351315, 'counts': [7, 4, 2, 0], 'totals': [23, 22, 21, 20], 'precisions': [30.434782608695652, 18.181818181818183, 9.523809523809524, 2.5], 'bp': 1.0, 'sys_len': 23, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.30434782608695654, 0.18181818181818182, 0.09523809523809523, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2105263157894737, 'translation_length': 23, 'reference_length': 19} Rouge: {'rouge1': 0.3243243243243243, 'rouge2': 0.22857142857142856, 'rougeL': 0.3243243243243243, 'rougeLsum': 0.3243243243243243} Sari: {'sari': 13.025946275946277} Flesh Reading Ease: 91.4 ---------------------------------------- Source: ['Viele ehrenamtliche Entomologen – das sind Insektenforscher – haben 27 Jahre lang Insekten gesammelt.'] Prediction: ['Einige Entomologen haben 27 Jahre lang Insekten gesammelt.\nSie haben 27 Jahre lang Insekten gesammelt.'] Label: [['Entomologen – das sind Insektenforscher – haben 27 Jahre lang Insekten gesammelt.']] Sacrebleu: {'score': 36.005658542850306, 'counts': [8, 6, 5, 4], 'totals': [17, 16, 15, 14], 'precisions': [47.05882352941177, 37.5, 33.333333333333336, 28.571428571428573], 'bp': 1.0, 'sys_len': 17, 'ref_len': 13} Bleu: {'bleu': 0.360056585428503, 'precisions': [0.47058823529411764, 0.375, 0.3333333333333333, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.3076923076923077, 'translation_length': 17, 'reference_length': 13} Rouge: {'rouge1': 0.56, 'rouge2': 0.43478260869565216, 'rougeL': 0.56, 'rougeLsum': 0.56} Sari: {'sari': 30.902777777777786} Flesh Reading Ease: 43.8 ---------------------------------------- Source: ['Das Ergebnis: Die Biomasse von fliegenden Insekten ist insgesamt um über 75 Prozent zurückgegangen.'] Prediction: ['Die Biomasse von fliegenden Insekten ist insgesamt um über 75 Prozent zurückgegangen.\nDas Ergebnis: Die Biomasse von fliegenden Insekten ist insgesamt um über 75 Prozent zurückgegangen.'] Label: [['Das Ergebnis: Der Bestand an fliegenden Insekten ist um über 75 Prozent zurückgegangen.']] Sacrebleu: {'score': 24.16577790560148, 'counts': [12, 9, 6, 3], 'totals': [29, 28, 27, 26], 'precisions': [41.37931034482759, 32.142857142857146, 22.22222222222222, 11.538461538461538], 'bp': 1.0, 'sys_len': 29, 'ref_len': 15} Bleu: {'bleu': 0.24165777905601482, 'precisions': [0.41379310344827586, 0.32142857142857145, 0.2222222222222222, 0.11538461538461539], 'brevity_penalty': 1.0, 'length_ratio': 1.9333333333333333, 'translation_length': 29, 'reference_length': 15} Rouge: {'rouge1': 0.5238095238095237, 'rouge2': 0.4, 'rougeL': 0.5238095238095237, 'rougeLsum': 0.5238095238095237} Sari: {'sari': 54.85119047619048} Flesh Reading Ease: 44.15 ---------------------------------------- Source: ['Die Daten stammen aus 63 Standorten in Naturschutzgebieten in Nordrhein-Westfalen, Rheinland-Pfalz und Brandenburg.'] Prediction: ['In Nordrhein-Westfalen und Rheinland-Pfalz sind 63 Standorten in der Nacht auf Sonntag gestorben.\nDie Daten stammen aus 63 Standorten in Nordrhein-Westfalen, Rheinland-Pfalz und Brandenburg.'] Label: [['Die Daten stammen aus 63 Standorten in Naturschutzgebieten in den Bundesländern Nordrhein-Westfalen, Rheinland-Pfalz und Brandenburg.']] Sacrebleu: {'score': 38.957692646921224, 'counts': [14, 11, 9, 7], 'totals': [27, 26, 25, 24], 'precisions': [51.851851851851855, 42.30769230769231, 36.0, 29.166666666666668], 'bp': 1.0, 'sys_len': 27, 'ref_len': 17} Bleu: {'bleu': 0.3895769264692121, 'precisions': [0.5185185185185185, 0.4230769230769231, 0.36, 0.2916666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.588235294117647, 'translation_length': 27, 'reference_length': 17} Rouge: {'rouge1': 0.6086956521739131, 'rouge2': 0.5, 'rougeL': 0.5652173913043479, 'rougeLsum': 0.5652173913043479} Sari: {'sari': 36.32935703016839} Flesh Reading Ease: 51.0 ---------------------------------------- Source: ['Das Bundesumweltministerium und Forscher vermuten, dass die intensive Landwirtschaft in vielen Teilen Deutschlands der Grund sei.'] Prediction: ['Die intensive Landwirtschaft in vielen Teilen Deutschlands sei in der Grund.\nDas Bundesumweltministerium und Forscher vermuten, dass die intensive Landwirtschaft in vielen Teilen Deutschlands der Grund sei.'] Label: [['Das Bundesumweltministerium und Forscher glauben, dass die intensive Landwirtschaft der Grund ist.']] Sacrebleu: {'score': 21.631187459215713, 'counts': [12, 8, 5, 3], 'totals': [30, 29, 28, 27], 'precisions': [40.0, 27.586206896551722, 17.857142857142858, 11.11111111111111], 'bp': 1.0, 'sys_len': 30, 'ref_len': 14} Bleu: {'bleu': 0.21631187459215712, 'precisions': [0.4, 0.27586206896551724, 0.17857142857142858, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 30, 'reference_length': 14} Rouge: {'rouge1': 0.5128205128205128, 'rouge2': 0.37837837837837834, 'rougeL': 0.5128205128205128, 'rougeLsum': 0.5128205128205128} Sari: {'sari': 52.07936507936508} Flesh Reading Ease: 43.65 ---------------------------------------- Source: ['Denn hier werden große Mengen von Pestiziden eingesetzt.'] Prediction: ['In Pestiziden werden große Mengen von Pestiziden eingesetzt.\nDie Mengen werden in der Schweiz eingesetzt.'] Label: [['Hier werden große Mengen von Pestiziden eingesetzt.']] Sacrebleu: {'score': 34.82352832757854, 'counts': [7, 6, 5, 4], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 37.5, 33.333333333333336, 28.571428571428573], 'bp': 1.0, 'sys_len': 17, 'ref_len': 8} Bleu: {'bleu': 0.34823528327578535, 'precisions': [0.4117647058823529, 0.375, 0.3333333333333333, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 2.125, 'translation_length': 17, 'reference_length': 8} Rouge: {'rouge1': 0.5833333333333334, 'rouge2': 0.5454545454545455, 'rougeL': 0.5833333333333334, 'rougeLsum': 0.5833333333333334} Sari: {'sari': 47.11991711991712} Flesh Reading Ease: 55.5 ---------------------------------------- Source: ['Das Insektensterben beeinflusst die Nahrungskette, denn so verschwinden auch viele Vögel oder Fledermäuse.'] Prediction: ['In der Nähe des Insektensterben werden viele Vögel oder Fledermäuse verschwinden.\nDas Insektensterben beeinflusst die Nahrungskette, denn so verschwinden auch viele Vögel oder Fledermäuse.'] Label: [['Weniger Insekten bedeutet weniger Nahrung für Vögel und Fledermäuse.\nSo verschwinden auch diese Arten.']] Sacrebleu: {'score': 4.344109103419242, 'counts': [6, 2, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [22.22222222222222, 7.6923076923076925, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6875, 'translation_length': 27, 'reference_length': 16} Rouge: {'rouge1': 0.3043478260869565, 'rouge2': 0.18181818181818182, 'rougeL': 0.3043478260869565, 'rougeLsum': 0.3043478260869565} Sari: {'sari': 42.226890756302524} Flesh Reading Ease: 39.3 ---------------------------------------- Source: ['Sie leiden häufig unter Milben, Viren und Bakterien.'] Prediction: ['Die Schweizer Milben und Bakterien leiden häufig unter Milben, Viren und Bakterien.\nSie leiden häufig unter Milben, Viren und Bakterien.'] Label: [['Daneben leiden sie häufig unter Milben, Viren und Bakterien.']] Sacrebleu: {'score': 29.340680870384166, 'counts': [9, 7, 6, 5], 'totals': [24, 23, 22, 21], 'precisions': [37.5, 30.434782608695652, 27.272727272727273, 23.80952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 11} Bleu: {'bleu': 0.29340680870384167, 'precisions': [0.375, 0.30434782608695654, 0.2727272727272727, 0.23809523809523808], 'brevity_penalty': 1.0, 'length_ratio': 2.1818181818181817, 'translation_length': 24, 'reference_length': 11} Rouge: {'rouge1': 0.5625000000000001, 'rouge2': 0.4, 'rougeL': 0.5625000000000001, 'rougeLsum': 0.5000000000000001} Sari: {'sari': 63.04563492063492} Flesh Reading Ease: 47.15 ---------------------------------------- Source: ['Und die Pestizide aus der Landwirtschaft schaden ihnen noch mehr.'] Prediction: ['Die Pestizide aus der Landwirtschaft schaden ihnen noch mehr.\nDie Pestizide aus der Landwirtschaft schaden ihnen noch mehr.'] Label: [['Die Pestizide aus der Landwirtschaft schaden ihnen erheblich.']] Sacrebleu: {'score': 30.143352515082135, 'counts': [8, 6, 5, 4], 'totals': [20, 19, 18, 17], 'precisions': [40.0, 31.57894736842105, 27.77777777777778, 23.529411764705884], 'bp': 1.0, 'sys_len': 20, 'ref_len': 9} Bleu: {'bleu': 0.3014335251508215, 'precisions': [0.4, 0.3157894736842105, 0.2777777777777778, 0.23529411764705882], 'brevity_penalty': 1.0, 'length_ratio': 2.2222222222222223, 'translation_length': 20, 'reference_length': 9} Rouge: {'rouge1': 0.5384615384615385, 'rouge2': 0.5, 'rougeL': 0.5384615384615385, 'rougeLsum': 0.5384615384615385} Sari: {'sari': 59.87826987826988} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Daher werden sie stark von ihrer Umgebung, also der Landwirtschaft, aber auch vom Verkehr beeinflusst.'] Prediction: ['Die Landwirtschaft hat sich auf ihre Umgebung aufgeboten.\nSie werden stark von ihrer Umgebung, also der Landwirtschaft, aber auch vom Verkehr beeinflusst.'] Label: [['Daher werden sie stark von der Landwirtschaft beeinflusst.']] Sacrebleu: {'score': 5.200788806845978, 'counts': [7, 3, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [26.923076923076923, 12.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.2692307692307692, 0.12, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.888888888888889, 'translation_length': 26, 'reference_length': 9} Rouge: {'rouge1': 0.4666666666666667, 'rouge2': 0.14285714285714285, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.39999999999999997} Sari: {'sari': 10.61111111111111} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['In Deutschland gibt es etwa 33.000 Insektenarten.'] Prediction: ['Deutschland hat 33.000 Insektenarten.\nIn Deutschland gibt es etwa 33.000 Insektenarten.'] Label: [['In Deutschland gibt es rund 33.000 Insektenarten.']] Sacrebleu: {'score': 27.968424579665367, 'counts': [7, 5, 3, 1], 'totals': [13, 12, 11, 10], 'precisions': [53.84615384615385, 41.666666666666664, 27.272727272727273, 10.0], 'bp': 1.0, 'sys_len': 13, 'ref_len': 8} Bleu: {'bleu': 0.2796842457966537, 'precisions': [0.5384615384615384, 0.4166666666666667, 0.2727272727272727, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 1.625, 'translation_length': 13, 'reference_length': 8} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.5263157894736842, 'rougeL': 0.6666666666666667, 'rougeLsum': 0.6666666666666667} Sari: {'sari': 56.388888888888886} Flesh Reading Ease: 45.8 ---------------------------------------- Source: ['7.800 Arten stehen in der Roten Liste. Das bedeutet: Fast 40 Prozent dieser Arten sind mindestens bestandsgefährdet, viele sind bereits ausgestorben.'] Prediction: ['7.800 Arten stehen in der Roten Liste.\nFast 40 Prozent dieser Arten sind mindestens bestandsgefährdet.'] Label: [['7.800 Arten sind gefährdet, viele sind bereits ausgestorben.']] Sacrebleu: {'score': 6.468490584192431, 'counts': [4, 2, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [23.529411764705884, 12.5, 3.3333333333333335, 1.7857142857142858], 'bp': 1.0, 'sys_len': 17, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 17, 'reference_length': 10} Rouge: {'rouge1': 0.37037037037037035, 'rouge2': 0.24000000000000005, 'rougeL': 0.37037037037037035, 'rougeLsum': 0.37037037037037035} Sari: {'sari': 22.7308491317112} Flesh Reading Ease: 61.35 ---------------------------------------- Source: ['Es weinte, lief zur Stiefmutter und erzählte ihr das Unglück.'] Prediction: ['Ein Stiefmutter hat einen Stieflück verloren.\nDer Stiefmutter lief zur Stiefmutter und erzählte ihr das Unglück.'] Label: [['Stief∙mutter: Die Spule ist mir in den Brunnen gefallen.\nUnd sagt: Liebe Am Abend geht Marie zur Stief∙mutter.\nJetzt weint Marie viele Tränen:']] Sacrebleu: {'score': 1.621725856092832, 'counts': [3, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [16.666666666666668, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 0.5737534207374327, 'sys_len': 18, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 0.573753420737433, 'length_ratio': 0.6428571428571429, 'translation_length': 18, 'reference_length': 28} Rouge: {'rouge1': 0.08888888888888889, 'rouge2': 0.0, 'rougeL': 0.044444444444444446, 'rougeLsum': 0.044444444444444446} Sari: {'sari': 37.5} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Das Pech aber blieb fest an ihr hängen und wollte, solange sie lebte, nicht abgehen.'] Prediction: ['Ein Pech blieb fest an ihr hängen und wollte, solange sie lebte, nicht abgehen.\nDas Pech blieb fest an ihr hängen und wollte, solange sie lebte, nicht abgehen.'] Label: [['Und das Pech geht nie mehr ab.']] Sacrebleu: {'score': 1.2944532586971997, 'counts': [2, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [5.882352941176471, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.058823529411764705, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.25, 'translation_length': 34, 'reference_length': 8} Rouge: {'rouge1': 0.16216216216216217, 'rouge2': 0.05714285714285715, 'rougeL': 0.16216216216216217, 'rougeLsum': 0.16216216216216217} Sari: {'sari': 37.708333333333336} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['»Kikeriki, unsere schmutzige Jungfrau ist wieder hie.« Da kam die Faule heim, aber sie war ganz mit Pech bedeckt, und der Hahn auf dem Brunnen, als er sie sah, rief:'] Prediction: ['Im Alter von 99 Jahren ist eine schmutzige Jungfrau in der Schweiz gestorben.\nDie Frau war mit Pech bedeckt und war mit Pech bedeckt.\nDie Frau war mit Pech bedeckt und rief auf dem Brunnen, als er sie sah, als er sie sah.'] Label: [['Unsere Pech-Marie ist zurück.\nSo ein Glück.\nUnd ruft: So ein Glück.\nAuf dem Brunnen sitzt der Hahn.\nUnd plötzlich ist die faule Marie wieder am Brunnen.\nDann geht die faule Marie durch das Tor.']] Sacrebleu: {'score': 2.0805332126841956, 'counts': [7, 1, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [14.583333333333334, 2.127659574468085, 1.0869565217391304, 0.5555555555555556], 'bp': 1.0, 'sys_len': 48, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.14583333333333334, 0.02127659574468085, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1428571428571428, 'translation_length': 48, 'reference_length': 42} Rouge: {'rouge1': 0.24096385542168675, 'rouge2': 0.049382716049382706, 'rougeL': 0.12048192771084337, 'rougeLsum': 0.21686746987951808} Sari: {'sari': 37.83059533059534} Flesh Reading Ease: 89.65 ---------------------------------------- Source: ['»Das ist zur Belohnung deiner Dienste,« sagte die Frau Holle und schloß das Thor zu.'] Prediction: ['Im Alter von 99 Jahren ist ein Thor auf der Kippe gekommen.\nDie Frau Holle schloß das Thor zu.'] Label: [['Deshalb ist das Pech deine Belohnung.\nUnd Frau Holle sagt: Du warst faul.']] Sacrebleu: {'score': 4.780204393760627, 'counts': [6, 1, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 5.0, 2.6315789473684212, 1.3888888888888888], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.05, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.25, 'rouge2': 0.06666666666666667, 'rougeL': 0.18749999999999997, 'rougeLsum': 0.25} Sari: {'sari': 39.07076719576719} Flesh Reading Ease: 94.45 ---------------------------------------- Source: ['die Frau Holle führte sie auch zu dem Thor, als sie aber darunter stand, ward statt des Goldes ein großer Kessel voll Pech ausgeschüttet.'] Prediction: ['Eine Frau wurde von einem großer Kessel voll Pech ausgeschüttet.\nSie führte sie auch zu dem Thor, als sie aber darunter stand, wie sie darunter stand.\nSie wurde dabei von einem großer Kessel voll Pech ausgeschüttet.'] Label: [['Der Regen ist aus Pech.\nAber der Regen ist nicht aus Gold.\nPlötzlich regnet es.\nUnd Frau Holle geht mit der faulen Marie zu dem Tor.\nFrau Holle nimmt die faule Marie an die Hand.']] Sacrebleu: {'score': 2.4495087791876022, 'counts': [7, 1, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [17.073170731707318, 2.5, 1.2820512820512822, 0.6578947368421053], 'bp': 1.0, 'sys_len': 41, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.17073170731707318, 0.025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.025, 'translation_length': 41, 'reference_length': 40} Rouge: {'rouge1': 0.12987012987012989, 'rouge2': 0.026666666666666665, 'rougeL': 0.07792207792207792, 'rougeLsum': 0.12987012987012989} Sari: {'sari': 34.749801855065016} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['Die Faule war das wohl zufrieden und meinte, nun würde der Goldregen kommen;'] Prediction: ['Die Faule der Goldregen wurden wohl zufrieden und meinte.\nNun würde der Goldregen kommen.'] Label: [['Und denkt: Jetzt bekomme ich mein Gold.\nDie faule Marie ist zufrieden.']] Sacrebleu: {'score': 3.4585921141027365, 'counts': [4, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [25.0, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0666666666666667, 'translation_length': 16, 'reference_length': 15} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.08, 'rougeL': 0.22222222222222224, 'rougeLsum': 0.2962962962962963} Sari: {'sari': 41.01851851851852} Flesh Reading Ease: 67.7 ---------------------------------------- Source: ['Das ward die Frau Holle bald müde und sagte ihr den Dienst auf.'] Prediction: ['Eine Frau wurde in einem ward von einem psychischen Dienst aufgefunden.\nSie muss bald ein Dienst aufgefunden werden.\nDie Frau muss den Dienst aufgefunden werden.'] Label: [['Du brauchst nicht mehr für mich arbeiten.\nUnd sagt: Du kannst zurück nach Hause gehen.']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5555555555555556, 'translation_length': 28, 'reference_length': 18} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 50.661375661375665} Flesh Reading Ease: 72.25 ---------------------------------------- Source: ["Sie machte auch der Frau Holle das Bett nicht, wie sich's gebührte, und schüttelte es nicht, daß die Federn aufflogen."] Prediction: ["Eine Frau hat das Bett nicht, wie sich's gebührte, und schüttelte es nicht.\nDas Bett war nicht, wie sich's gebührte, daß die Federn aufflogen."] Label: [['So fallen die Bett·federn auf die Erde.\nUnd schüttelt die Bett·decke aus.\nDie faule Marie macht nur das Bett von Frau Holle.']] Sacrebleu: {'score': 3.2677968802443296, 'counts': [6, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [20.0, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 30, 'reference_length': 25} Rouge: {'rouge1': 0.29629629629629634, 'rouge2': 0.07692307692307691, 'rougeL': 0.1851851851851852, 'rougeLsum': 0.25925925925925924} Sari: {'sari': 35.551529790660226} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ['am zweiten Tage aber fing sie schon an zu faulenzen, am dritten noch mehr, da wollte sie morgens gar nicht aufstehen.'] Prediction: ['Eine Frau wollte sich am dritten Tage nicht aufstehen, da sie nicht aufstehen wollte.\nDie Frau fing sie schon an zu faulenzen, da sie noch mehr wollte.\nDie Frau wollte sie morgens gar nicht aufstehen, da sie nicht aufstehen wollte.'] Label: [['Aber schon am 2.\nTag hat die faule Marie keine Lust zu arbeiten:']] Sacrebleu: {'score': 1.1239503708631486, 'counts': [4, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [8.695652173913043, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.08695652173913043, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.066666666666667, 'translation_length': 46, 'reference_length': 15} Rouge: {'rouge1': 0.15094339622641512, 'rouge2': 0.0, 'rougeL': 0.11320754716981132, 'rougeLsum': 0.15094339622641512} Sari: {'sari': 31.746031746031743} Flesh Reading Ease: 78.95 ---------------------------------------- Source: ['Am ersten Tage that sie sich Gewalt an, war fleißig und folgte der Frau Holle, wenn sie ihr etwas sagte, denn sie dachte an das viele Gold, das sie ihr schenken würde;'] Prediction: ['Eine Frau war mit Gewalt an, das sie ihr schenken würde.\nDie Frau war fleißig und folgte ihr etwas, denn sie dachte an das viele Gold, das sie ihr schenken würde.'] Label: [['Am 1.\nTag ist die faule Marie noch sehr fleißig:']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 36, 'reference_length': 12} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.04651162790697675, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 35.8531746031746} Flesh Reading Ease: 82.6 ---------------------------------------- Source: ['Als sie vor der Frau Holle Haus kam, fürchtete sie sich nicht, weil sie von ihren großen Zähnen schon gehört hatte und verdingte sich gleich zu ihr.'] Prediction: ['Eine Frau hatte vor der Frau Holle Haus einen großen Zähnen schon gehört.\nAls sie sich nicht verdingte, verdingte sie sich gleich zu ihr.'] Label: [['Das weiß die faule Marie von ihrer fleißigen Stief·schwester.\nUnd die Frau am Fenster hat sehr große Zähne.\nEs ist das Haus von Frau Holle.\nNach einer Weile kommt die faule Marie zu einem Haus.']] Sacrebleu: {'score': 2.434221830292446, 'counts': [7, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [25.925925925925927, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 0.6411803884299546, 'sys_len': 27, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.25925925925925924, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 0.6411803884299546, 'length_ratio': 0.6923076923076923, 'translation_length': 27, 'reference_length': 39} Rouge: {'rouge1': 0.21212121212121213, 'rouge2': 0.03125, 'rougeL': 0.12121212121212123, 'rougeLsum': 0.21212121212121213} Sari: {'sari': 35.44753086419753} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ['« Sie antwortete aber: »Du kommst mir recht, es könnte mir einer auf den Kopf fallen,« und ging damit weiter.'] Prediction: ['Eine Frau war auf den Kopf gefallen, dass sie einen Mann auf den Kopf fallen könnte.\nDie Frau war dabei recht, dass sie ihn recht kommst.'] Label: [['Dann geht die faule Marie weiter.\nDie Äpfel können mir auf den Kopf fallen.\nAber die faule Marie antwortet: Nein.']] Sacrebleu: {'score': 9.605870881551784, 'counts': [7, 4, 2, 1], 'totals': [30, 29, 28, 27], 'precisions': [23.333333333333332, 13.793103448275861, 7.142857142857143, 3.7037037037037037], 'bp': 1.0, 'sys_len': 30, 'ref_len': 24} Bleu: {'bleu': 0.0960587088155178, 'precisions': [0.23333333333333334, 0.13793103448275862, 0.07142857142857142, 0.037037037037037035], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 30, 'reference_length': 24} Rouge: {'rouge1': 0.25, 'rouge2': 0.13043478260869565, 'rougeL': 0.20833333333333334, 'rougeLsum': 0.20833333333333334} Sari: {'sari': 59.11638612296507} Flesh Reading Ease: 96.8 ---------------------------------------- Source: ['Bald kam sie zu dem Apfelbaum, der rief: »Ach schüttle mich, schüttle mich, wir Äpfel sind alle miteinander reif.'] Prediction: ['Eine Frau aus der Nacht auf Sonntag hat sich Äpfel zu einem Apfelbaum geschüttet.\nDer Apfelbaum rief, dass sie Äpfel sind.\nDer Apfelbaum rief, wie sie Äpfel sind.'] Label: [['Meine Äpfel sind alle reif.\nSchüttel mich.\nUnd der Baum ruft: Schüttel mich. Nach einer Weile kommt die faule Marie zu dem Apfel∙baum.']] Sacrebleu: {'score': 3.072311854373273, 'counts': [7, 1, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 3.125, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.21212121212121213, 0.03125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1785714285714286, 'translation_length': 33, 'reference_length': 28} Rouge: {'rouge1': 0.14545454545454548, 'rouge2': 0.03773584905660378, 'rougeL': 0.10909090909090909, 'rougeLsum': 0.14545454545454548} Sari: {'sari': 44.047619047619044} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['« Die Faule aber antwortete: »Da hätt ich Lust, mich schmutzig zu machen,« und ging fort.'] Prediction: ['Die 20-Minuten-Radio-Host Andrea äussert sich über ihre Leistung zurück, wie sie ihn auf ihre Leistungen auf ihrem Podcast "Unchained" diskutiert.\nIn der Folge wurde Andrea über ihre Leistungen auf ihre Leistungen auf ihrem Podcast veröffentlicht.'] Label: [['Dann geht die faule Marie weiter.\nIch mache mich nicht schmutzig.\nAber die faule Marie antwortet: Nein.']] Sacrebleu: {'score': 1.038539619163422, 'counts': [2, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [4.761904761904762, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.047619047619047616, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 42, 'reference_length': 21} Rouge: {'rouge1': 0.03508771929824561, 'rouge2': 0.0, 'rougeL': 0.03508771929824561, 'rougeLsum': 0.03508771929824561} Sari: {'sari': 49.672459893048135} Flesh Reading Ease: 45.5 ---------------------------------------- Source: ['»Ach, zieh mich raus, zieh mich raus, sonst verbrenn ich, ich bin schon längst ausgebacken. Als sie zu dem Backofen gelangte, schrie das Brot wieder:'] Prediction: ['Eine Frau wurde zu einem Backofen geschickt, dass sie zu einem Brot ausgebacken hatte.\nAls sie zu dem Backofen gelangte, schrie das Brot wieder.'] Label: [['Sonst verbrenne ich.\nZieh mich heraus.\nUnd hört das Brot rufen: Zieh mich heraus.\nDie faule Marie sieht den Backofen.']] Sacrebleu: {'score': 3.3582360261774293, 'counts': [5, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.17857142857142858, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.12, 'translation_length': 28, 'reference_length': 25} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.046511627906976744, 'rougeL': 0.08888888888888889, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 33.65575396825397} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['Sie kam, wie die andere, auf die schöne Wiese und ging auf demselben Pfade weiter.'] Prediction: ['Eine Frau wurde auf demselben Pfade weitergebracht.\nSie ging auf demselben Pfade weiter.\nDie Frau war auf die schöne Wiese und ging auf demselben Pfade weiter.'] Label: [['Die faule Marie liegt auf einer Wiese.']] Sacrebleu: {'score': 1.8196871111910016, 'counts': [4, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [13.793103448275861, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.13793103448275862, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.625, 'translation_length': 29, 'reference_length': 8} Rouge: {'rouge1': 0.17647058823529413, 'rouge2': 0.0, 'rougeL': 0.17647058823529413, 'rougeLsum': 0.17647058823529413} Sari: {'sari': 36.904761904761905} Flesh Reading Ease: 71.85 ---------------------------------------- Source: ['Dann warf sie die Spule in den Brunnen und sprang selber hinein.'] Prediction: ['Eine Frau warf in den Brunnen in den Brunnen eine Spule.\nSie sprang selber hinein.'] Label: [['Und springt dann selbst in den Brunnen hinein.\nDie faule Marie wirft die blutige Spule in den Brunnen.']] Sacrebleu: {'score': 14.41800755321847, 'counts': [10, 5, 2, 0], 'totals': [17, 16, 15, 14], 'precisions': [58.8235294117647, 31.25, 13.333333333333334, 3.5714285714285716], 'bp': 0.8382234324229999, 'sys_len': 17, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.5882352941176471, 0.3125, 0.13333333333333333, 0.0], 'brevity_penalty': 0.8382234324229999, 'length_ratio': 0.85, 'translation_length': 17, 'reference_length': 20} Rouge: {'rouge1': 0.4848484848484848, 'rouge2': 0.2580645161290323, 'rougeL': 0.3636363636363636, 'rougeLsum': 0.42424242424242425} Sari: {'sari': 35.99397800055695} Flesh Reading Ease: 84.75 ---------------------------------------- Source: ['und damit ihre Spule blutig ward, stach sie sich in den Finger und stieß sich die Hand in die Dornhecke.'] Prediction: ['Eine Spule hat sich in den Finger geschickt.\nDie Hand stieg sich in die Dornhecke.\nDie Spule blutig ward, stach sie sich in den Finger und stieß sich die Hand in die Dornhecke.'] Label: [['Und stich dir in den Finger.']] Sacrebleu: {'score': 3.985677924984254, 'counts': [4, 2, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [10.81081081081081, 5.555555555555555, 2.857142857142857, 1.4705882352941178], 'bp': 1.0, 'sys_len': 37, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.10810810810810811, 0.05555555555555555, 0.02857142857142857, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.285714285714286, 'translation_length': 37, 'reference_length': 7} Rouge: {'rouge1': 0.20512820512820512, 'rouge2': 0.10810810810810811, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 36.806684733514} Flesh Reading Ease: 92.95 ---------------------------------------- Source: ['Sie mußte sich an den Brunnen setzen und spinnen;'] Prediction: ['Eine Frau (27) wurde in den Brunnen setzen und spinnen.\nSie war auf der Suche nach der Brunnen-Pandemie geworden.\nSie war dabei auf der Suche nach der Brunnen-Pandemie.'] Label: [['Mach es so wie deine fleißige Stief∙schwester: Setz dich mit der Spule an den Brunnen.']] Sacrebleu: {'score': 2.6711961764401657, 'counts': [4, 1, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [12.121212121212121, 3.125, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.12121212121212122, 0.03125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9411764705882353, 'translation_length': 33, 'reference_length': 17} Rouge: {'rouge1': 0.12765957446808512, 'rouge2': 0.044444444444444446, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.12765957446808512} Sari: {'sari': 35.50925925925927} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['Das Mädchen erzählte alles was ihm begegnet war, und als die Mutter hörte, wie es zu dem großen Reichtum gekommen war, wollte sie der anderen häßlichen und faulen Tochter gern dasselbe Glück verschaffen.'] Prediction: ['Ein Mädchen wollte eine Mutter gern dasselbe Glück verschaffen.\nDer anderen häßlichen Tochter wollte sie der anderen häßlichen und faulen Tochter gern dasselbe Glück verschaffen.'] Label: [['Und denkt: Meine faule Tochter Marie soll auch so viel Glück haben.\nDa wird die Stief∙mutter neidisch.\nMarie erzählt von Frau Holle.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0384615384615385, 'translation_length': 27, 'reference_length': 26} Rouge: {'rouge1': 0.1818181818181818, 'rouge2': 0.03773584905660377, 'rougeL': 0.14545454545454545, 'rougeLsum': 0.1818181818181818} Sari: {'sari': 35.78947368421053} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Da ging es hinein zu seiner Mutter, und weil es so mit Gold bedeckt ankam, ward es von ihr und der Schwester gut aufgenommen.'] Prediction: ['Weil es so mit Gold bedeckt ankam, wurde es von ihr und der Schwester gut aufgenommen.\nDas ging es hinein zu seiner Mutter, und weil es so mit Gold bedeckt ankam, wurde es von ihr und der Schwester gut aufgenommen.'] Label: [['Und auch die faule Stief∙schwester ist plötzlich sehr nett zu Marie.\nJetzt ist die Stief∙mutter plötzlich sehr nett zu Marie.\nDie Stief∙mutter sieht Marie.\nMarie geht zum Haus von der Stief∙mutter.']] Sacrebleu: {'score': 1.2157709822493183, 'counts': [5, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [11.11111111111111, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2857142857142858, 'translation_length': 45, 'reference_length': 35} Rouge: {'rouge1': 0.15584415584415584, 'rouge2': 0.0, 'rougeL': 0.15584415584415584, 'rougeLsum': 0.12987012987012989} Sari: {'sari': 36.27450980392157} Flesh Reading Ease: 78.1 ---------------------------------------- Source: ['»Kikeriki, unsere goldene Jungfrau ist wieder hie.«'] Prediction: ['Kikeriki, die goldene Jungfrau, ist wieder hie.\nDie jungen Jungfrau ist wieder hie.\nDie jungen Jungfrau ist wieder hie.'] Label: [['Unsere Gold-Marie ist zurück.\nSo ein Glück.\nSo ein Glück.']] Sacrebleu: {'score': 2.224972978585352, 'counts': [4, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 33.888888888888886} Flesh Reading Ease: 74.25 ---------------------------------------- Source: ['Darauf ward das Thor verschlossen, und das Mädchen befand sich oben auf der Welt, nicht weit von seiner Mutter Haus: und als es in den Hof kam, saß der Hahn auf dem Brunnen und rief:'] Prediction: ['Im Alter von 99 Jahren ist das Thor auf der Welt geschlossen.\nDer Mädchen wurde von seiner Mutter Haus geschlossen.\nDer Thor wurde von seiner Mutter Haus auf dem Brunnen geschlossen.'] Label: [['Der Hahn ruft: Auf dem Brunnen sitzt ein Hahn.\nJetzt ist Marie zu Hause.\nUnd plötzlich ist Marie wieder am Brunnen.\nDann geht Marie durch das Tor.']] Sacrebleu: {'score': 3.0787460505623363, 'counts': [8, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0625, 'translation_length': 34, 'reference_length': 32} Rouge: {'rouge1': 0.19999999999999998, 'rouge2': 0.06896551724137931, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.19999999999999998} Sari: {'sari': 43.31589116301599} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['»Das sollst du haben, weil du so fleißig gewesen bist,« sprach die Frau Holle und gab ihm auch die Spule wieder, die ihm in den Brunnen gefallen war.'] Prediction: ['Eine Frau wurde in den Brunnen in den Brunnen gefallen.\nSie sprach ihm auch auch auch das Spital, die ihm in den Brunnen gefallen war.\nDie Frau war auch in den Brunnen gefallen und sprach ihm auch das Spital, die ihm in den Brunnen gefallen war.'] Label: [['Und Frau Holle gibt der fleißigen Marie die Spule aus dem Brunnen.\nDu warst sehr fleißig.\nDas Gold ist für dich.\nFrau Holle sagt:']] Sacrebleu: {'score': 1.1620776325474167, 'counts': [7, 0, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [13.72549019607843, 1.0, 0.5102040816326531, 0.2604166666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.13725490196078433, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8214285714285714, 'translation_length': 51, 'reference_length': 28} Rouge: {'rouge1': 0.16438356164383558, 'rouge2': 0.0, 'rougeL': 0.1095890410958904, 'rougeLsum': 0.16438356164383558} Sari: {'sari': 34.936868686868685} Flesh Reading Ease: 82.8 ---------------------------------------- Source: ['Das Thor ward aufgethan, und wie das Mädchen gerade darunter stand, fiel ein gewaltiger Goldregen, und alles Gold blieb an ihm hängen, sodaß es über und über davon bedeckt war.'] Prediction: ['Das Mädchen, der aufgethan, fiel ein gewaltiger Goldregen, und alles Gold blieb an ihm hängen, sodaß es über und über davon bedeckt war.\nDas Mädchen war aufgethan, wie das Mädchen gerade darunter stand, und alles Gold blieb an ihm hängen, sodaß es über und über davon bedeckt war.'] Label: [['Und das Gold bleibt an Marie kleben.\nDer Regen ist aus Gold.\nAber der Regen ist kein normaler Regen.\nPlötzlich regnet es.']] Sacrebleu: {'score': 1.0715752402052876, 'counts': [8, 0, 0, 0], 'totals': [57, 56, 55, 54], 'precisions': [14.035087719298245, 0.8928571428571429, 0.45454545454545453, 0.23148148148148148], 'bp': 1.0, 'sys_len': 57, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.14035087719298245, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1923076923076925, 'translation_length': 57, 'reference_length': 26} Rouge: {'rouge1': 0.1842105263157895, 'rouge2': 0.0, 'rougeL': 0.13157894736842107, 'rougeLsum': 0.15789473684210525} Sari: {'sari': 37.227997227997236} Flesh Reading Ease: 68.25 ---------------------------------------- Source: ['« Sie nahm es darauf bei der Hand und führte es vor ein großes Thor.'] Prediction: ['Immer wieder war ein Thor, der ein großes Thor nahm.\nDer Grund: Der Hand war ein großes Thor.'] Label: [['Und Frau Holle geht mit Marie zu einem Tor.\nFrau Holle nimmt Marie an die Hand.']] Sacrebleu: {'score': 2.2731543567022867, 'counts': [3, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [13.636363636363637, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2222222222222223, 'translation_length': 22, 'reference_length': 18} Rouge: {'rouge1': 0.05555555555555556, 'rouge2': 0.0, 'rougeL': 0.05555555555555556, 'rougeLsum': 0.05555555555555556} Sari: {'sari': 35.625} Flesh Reading Ease: 100.8 ---------------------------------------- Source: ['« Die Frau Holle sagte: »Es gefällt mir, daß du wieder nach Hause verlangst, und weil du mir so treu gedient hast, so will ich dich selbst wieder hinaufbringen.'] Prediction: ['Eine Frau aus der Schweiz wurde von ihrem Mann aufgefunden.\nSie warnt, dass ihn wieder nach Hause verlangst und weil ihn so treu gedient hast, so will ich dich selbst wieder hinaufbringen.'] Label: [['Aber Frau Holle versteht das.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.0, 'translation_length': 36, 'reference_length': 6} Rouge: {'rouge1': 0.05405405405405406, 'rouge2': 0.0, 'rougeL': 0.05405405405405406, 'rougeLsum': 0.05405405405405406} Sari: {'sari': 33.672863084627785} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Endlich sagte es zu ihr: »Ich habe den Jammer nach Hause kriegt, und wenn es mir auch noch so gut hier unten geht, so kann ich doch nicht länger bleiben, ich muß wieder hinauf zu den Meinigen.'] Prediction: ['Ein Jammer hat seinen Jammer nach Hause kriegt, wenn es mir auch noch so gut unten geht, so kann ich doch nicht länger bleiben, ich muß wieder hinauf zu den Meinigen.\nDer Jammer war selbst nach Hause kriegt, wenn es ihr noch so gut unten geht, so kann ich doch nicht länger bleiben, so kann ich muß wieder hinauf zu den Meinigen.'] Label: [['Und meine Stief∙schwester.\nIch vermisse nämlich meine Stief∙mutter.\nIch will nach Hause.\nAber ich kann nicht länger bei dir bleiben.\nEs geht mir sehr gut bei dir.\nUnd sagt: Liebe Frau Holle: Also geht Marie zu Frau Holle.']] Sacrebleu: {'score': 1.9970286688878234, 'counts': [14, 2, 0, 0], 'totals': [70, 69, 68, 67], 'precisions': [20.0, 2.898550724637681, 0.7352941176470589, 0.373134328358209], 'bp': 1.0, 'sys_len': 70, 'ref_len': 46} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.028985507246376812, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5217391304347827, 'translation_length': 70, 'reference_length': 46} Rouge: {'rouge1': 0.3018867924528302, 'rouge2': 0.05769230769230769, 'rougeL': 0.20754716981132074, 'rougeLsum': 0.2641509433962264} Sari: {'sari': 36.85801261143727} Flesh Reading Ease: 72.95 ---------------------------------------- Source: ['ob es ihm hier gleich viel tausendmal besser ging als zu Hause, so hatte es doch ein Verlangen dahin.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich (D) gefunden.\nEr hatte sich dabei tausendmal besser ging als zu Hause.\nOb es ihm gleich viel tausendmal besser ging als zu Hause, hatte es doch ein Verlangen dahin.'] Label: [['Und meine Stief∙schwester.\nUnd trotzdem vermisse ich meine Stief∙mutter.\nZu Hause ist mein Leben nicht so schön.\nMarie denkt:']] Sacrebleu: {'score': 1.0103588033775688, 'counts': [4, 0, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [7.8431372549019605, 1.0, 0.5102040816326531, 0.2604166666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.0784313725490196, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.217391304347826, 'translation_length': 51, 'reference_length': 23} Rouge: {'rouge1': 0.0588235294117647, 'rouge2': 0.030303030303030304, 'rougeL': 0.0588235294117647, 'rougeLsum': 0.0588235294117647} Sari: {'sari': 32.419786096256686} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['Nun war es eine Zeitlang bei der Frau Holle, da ward es traurig und wußte anfangs selbst nicht, was ihm fehle, endlich merkte es, daß es Heimweh war;'] Prediction: ['Eine Frau war in der Nacht auf Sonntag mit ihrem Heimweh gefundenen Familienkonzept geworden.\nDie Frau war auf der Suche nach der Zeit, was ihm fehle, endlich merkte es, daß es Heimweh war.'] Label: [['Marie hat Heimweh.\nUnd denkt: Warum bin ich traurig?\nAber dann wird Marie traurig.\nUnd die Wochen vergehen.']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6521739130434783, 'translation_length': 38, 'reference_length': 23} Rouge: {'rouge1': 0.0784313725490196, 'rouge2': 0.0, 'rougeL': 0.0784313725490196, 'rougeLsum': 0.0784313725490196} Sari: {'sari': 34.41331417624521} Flesh Reading Ease: 69.9 ---------------------------------------- Source: ['Es besorgte auch alles nach ihrer Zufriedenheit und schüttelte ihr das Bett immer gewaltig auf, daß die Federn wie Schneeflocken umherflogen;'] Prediction: ['Ein Bett wurde immer gewaltig aufgefunden.\nDas Bett schüttelte ihr immer gewaltig auf.\nDie Federn wie Schneeflocken umherflogen ihr Bett.'] Label: [['Und werden zu Schnee.\nDann fliegen nämlich die Bett∙federn auf die Erde.\nJeden Tag muss Marie die Bett∙decke von Frau Holle gut ausschütteln.\nUnd Marie macht das Bett von Frau Holle.\nUnd Marie hilft Frau Holle bei der Arbeit im Haus.']] Sacrebleu: {'score': 0.9058432946292563, 'counts': [5, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 0.36787944117144233, 'sys_len': 23, 'ref_len': 46} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.0, 0.0, 0.0], 'brevity_penalty': 0.36787944117144233, 'length_ratio': 0.5, 'translation_length': 23, 'reference_length': 46} Rouge: {'rouge1': 0.21212121212121213, 'rouge2': 0.06250000000000001, 'rougeL': 0.12121212121212122, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 38.90473361061596} Flesh Reading Ease: 62.15 ---------------------------------------- Source: ['« Weil die Alte ihm so gut zusprach, so faßte sich das Mädchen ein Herz, willigte ein und begab sich in ihren Dienst.'] Prediction: ['Ein Mädchen, der in ihren Dienst ein Herz entdeckte, soll ein Herz zusprach.\nDie Alte ihm so gut zusprach, so ein Herz.\nDie Alte ihm so gut zusprach, so ein Mädchen.'] Label: [['Und so bleibt Marie bei Frau Holle.\nUnd ich will für Frau Holle arbeiten.\nIch will bei Frau Holle bleiben.\nFrau Holle ist nett.\nMarie denkt:']] Sacrebleu: {'score': 1.3705063051209185, 'counts': [4, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2258064516129032, 'translation_length': 38, 'reference_length': 31} Rouge: {'rouge1': 0.03333333333333333, 'rouge2': 0.0, 'rougeL': 0.03333333333333333, 'rougeLsum': 0.03333333333333333} Sari: {'sari': 33.830128205128204} Flesh Reading Ease: 93.65 ---------------------------------------- Source: ['ich bin die Frau Holle.'] Prediction: ['Im Alter von 99 Jahren ist eine Frau gestorben.\nSie war mit ihrem Partner Christian über die Frau Holle.\nSie war mit ihrem Partner Christian über die Frau, die sich mit ihrem Partner Christian über die Frau Holle geschickt hat.'] Label: [['Ich bin Frau Holle.']] Sacrebleu: {'score': 3.0977170338913482, 'counts': [3, 2, 1, 0], 'totals': [44, 43, 42, 41], 'precisions': [6.818181818181818, 4.651162790697675, 2.380952380952381, 1.2195121951219512], 'bp': 1.0, 'sys_len': 44, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.06818181818181818, 0.046511627906976744, 0.023809523809523808, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.8, 'translation_length': 44, 'reference_length': 5} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.047619047619047616, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 37.5} Flesh Reading Ease: 78.95 ---------------------------------------- Source: ["bleib bei mir, wenn du alle Arbeit im Hause ordentlich thun willst, so soll dir's gut gehen."] Prediction: ['Der Schweizer Arbeiter hat sich in der Schweiz zu einem Jahr 2020 verlassen.\nEr warnt, warum er sich in der Schweiz zu sehen ist.\nNun ist erstmals zu sehen, wenn er sich in der Schweiz zu sehen ist.'] Label: [['Ich werde mich gut um dich kümmern.\nUnd du kannst mir bei der Arbeit im Haus helfen.\nDu kannst bei mir bleiben.']] Sacrebleu: {'score': 1.205256842736819, 'counts': [4, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [9.30232558139535, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.09302325581395349, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.72, 'translation_length': 43, 'reference_length': 25} Rouge: {'rouge1': 0.03278688524590164, 'rouge2': 0.0, 'rougeL': 0.03278688524590164, 'rougeLsum': 0.03278688524590164} Sari: {'sari': 48.153375149342885} Flesh Reading Ease: 91.25 ---------------------------------------- Source: ['Was fürchtest du dich, liebes Kind?'] Prediction: ['Der Schweizer Musiker hat einen neuen Kind ausgebrochen.\nDer Kind war ein Jahr nach dem ersten Mal, der sich in der Schweiz verstorben hatte.\nNun hat er sich zu sehen, dass er sich nicht mehr geschickt hatte.'] Label: [['Hab keine Angst.']] Sacrebleu: {'score': 0.8733042428534794, 'counts': [1, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [2.380952380952381, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.023809523809523808, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 10.5, 'translation_length': 42, 'reference_length': 4} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 58.854166666666664} Flesh Reading Ease: 85.8 ---------------------------------------- Source: ['Die alte Frau aber rief ihm nach: »'] Prediction: ['Eine Frau rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach: Sie rief ihm nach:'] Label: [['Aber die alte Frau mit den großen Zähnen ruft:']] Sacrebleu: {'score': 0.7067604405306844, 'counts': [2, 0, 0, 0], 'totals': [61, 60, 59, 58], 'precisions': [3.278688524590164, 0.8333333333333334, 0.423728813559322, 0.21551724137931033], 'bp': 1.0, 'sys_len': 61, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.03278688524590164, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.1, 'translation_length': 61, 'reference_length': 10} Rouge: {'rouge1': 0.03333333333333333, 'rouge2': 0.0, 'rougeL': 0.03333333333333333, 'rougeLsum': 0.03333333333333333} Sari: {'sari': 25.416666666666664} Flesh Reading Ease: 72.5 ---------------------------------------- Source: ['Endlich kam es zu einem kleinen Hause, daraus guckte eine alte Frau, weil sie aber so große Zähne hatte, ward ihm angst, und es wollte fortlaufen.'] Prediction: ['Eine alte Frau wollte in einem kleinen Hause fortlaufen, weil sie aber so große Zähne hatte, wollte ihm angst, und es wollte fortlaufen.\nDie Frau wollte fortlaufen, weil sie aber so große Zähne hatte, wollte ihm angst, und es wollte fortlaufen.'] Label: [['Und will weglaufen.\nDeshalb hat Marie Angst.\nUnd die Frau hat sehr große Zähne.\nDie Frau ist alt.\nDie Frau schaut aus dem Fenster.\nUnd in dem Haus wohnt eine Frau.\nDas Haus ist klein.\nNach einer Weile kommt Marie zu einem Haus.']] Sacrebleu: {'score': 3.8751086612077703, 'counts': [9, 3, 1, 0], 'totals': [49, 48, 47, 46], 'precisions': [18.367346938775512, 6.25, 2.127659574468085, 1.0869565217391304], 'bp': 0.9600054412854777, 'sys_len': 49, 'ref_len': 51} Bleu: {'bleu': 0.0, 'precisions': [0.1836734693877551, 0.0625, 0.02127659574468085, 0.0], 'brevity_penalty': 0.9600054412854777, 'length_ratio': 0.9607843137254902, 'translation_length': 49, 'reference_length': 51} Rouge: {'rouge1': 0.28888888888888886, 'rouge2': 0.11363636363636363, 'rougeL': 0.20000000000000004, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 38.70733389601313} Flesh Reading Ease: 65.9 ---------------------------------------- Source: ['« Da schüttelte es den Baum, daß die Äpfel fielen als regneten sie, und schüttelte bis keiner mehr oben war; und als es alle in einen Haufen zusammengelegt hatte, ging es wieder weiter.'] Prediction: ['Ein Baum in einen Haufen in der Nähe von Äpfel (D) ging wieder weiter.\nDer Baum war als regnete sie, als sie in einen Haufen zusammengelegt hatte.\nDer Baum war als regnete sie, als sie in einen Haufen zusammengelegt hatte.'] Label: [['Dann geht Marie weiter.\nMarie legt die Äpfel auf einen Haufen.\nUnd die Äpfel fallen auf den Boden.\nMarie schüttelt den Baum.']] Sacrebleu: {'score': 2.614431568998956, 'counts': [8, 2, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [17.02127659574468, 4.3478260869565215, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.1702127659574468, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8076923076923077, 'translation_length': 47, 'reference_length': 26} Rouge: {'rouge1': 0.15625, 'rouge2': 0.03225806451612903, 'rougeL': 0.12500000000000003, 'rougeLsum': 0.15625} Sari: {'sari': 38.74925727866904} Flesh Reading Ease: 78.95 ---------------------------------------- Source: ['Danach ging es weiter und kam zu einem Baum, der hing voll Äpfel, und rief ihm zu: »Ach schüttle mich, schüttle mich, wir Äpfel sind alle miteinander reif.'] Prediction: ['Ein Baum rief einen Baum, der Äpfel hing voll Äpfel, und rief ihm zu.\nDer Baum war schüttle mich, schüttle mich, wir Äpfel sind alle miteinander reif.'] Label: [['Meine Äpfel sind alle reif.\nSchüttel mich. Da ruft der Baum: Schüttel mich.\nDie Äpfel sind alle rot.\nAm Baum sind viele Äpfel.\nNach einer Weile kommt Marie zu einem Baum.\nDann geht Marie weiter.']] Sacrebleu: {'score': 5.109807323118126, 'counts': [15, 3, 1, 0], 'totals': [33, 32, 31, 30], 'precisions': [45.45454545454545, 9.375, 3.225806451612903, 1.6666666666666667], 'bp': 0.7385767149187981, 'sys_len': 33, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.45454545454545453, 0.09375, 0.03225806451612903, 0.0], 'brevity_penalty': 0.7385767149187981, 'length_ratio': 0.7674418604651163, 'translation_length': 33, 'reference_length': 43} Rouge: {'rouge1': 0.4545454545454546, 'rouge2': 0.09375, 'rougeL': 0.24242424242424243, 'rougeLsum': 0.42424242424242425} Sari: {'sari': 36.44777980304297} Flesh Reading Ease: 90.45 ---------------------------------------- Source: ['« Da trat es herzu und holte mit dem Brotschieber alles nacheinander heraus.'] Prediction: ['Im Video eines Brotschiebers wurde eine Frau von einem Brotschutz gefunden.\nDie Frau trat sie sich dabei auf, ihn war nicht mehr gefunden.\nDie Frau war mit ihrem Brotschutz gefunden und war mit ihrem Brotschutz gefunden.'] Label: [['Und holt das Brot heraus.\nAber Marie geht zu dem Backofen.']] Sacrebleu: {'score': 1.092534162077208, 'counts': [2, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [5.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.076923076923077, 'translation_length': 40, 'reference_length': 13} Rouge: {'rouge1': 0.0425531914893617, 'rouge2': 0.0, 'rougeL': 0.0425531914893617, 'rougeLsum': 0.0425531914893617} Sari: {'sari': 51.858974358974365} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['das Brot aber rief: »Ach, zieh mich raus, zieh mich raus, sonst verbrenn ich: ich bin schon längst ausgebacken.'] Prediction: ['Im Interview mit 20 Minuten spricht der 20-Minuten-Radio-Host Andrea über ihre Frage, die sich über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage und ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage und ihre Frage über ihre Frage über ihre Frage'] Label: [['Sonst verbrenne ich.\nZieh mich heraus.\nDa ruft das Brot: Zieh mich heraus.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [182, 181, 180, 179], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 182, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 10.705882352941176, 'translation_length': 182, 'reference_length': 17} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 45.925925925925924} Flesh Reading Ease: -98.46 ---------------------------------------- Source: ['Auf dieser Wiese ging es fort und kam zu einem Backofen, der war voller Brot;'] Prediction: ['Ein Backofen war in einem Wiese von einem Brot.\nDer Brot war voller Brot.'] Label: [['Das Brot ist fertig gebacken.\nIm Backofen ist nämlich Brot.\nDer Backofen dampft.\nAuf der Wiese steht ein alter Backofen.\nUnd geht über die Wiese.\nDann steht Marie auf.']] Sacrebleu: {'score': 3.4314616953424153, 'counts': [7, 2, 1, 0], 'totals': [16, 15, 14, 13], 'precisions': [43.75, 13.333333333333334, 7.142857142857143, 3.8461538461538463], 'bp': 0.3049827687110593, 'sys_len': 16, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.4375, 0.13333333333333333, 0.07142857142857142, 0.0], 'brevity_penalty': 0.3049827687110593, 'length_ratio': 0.45714285714285713, 'translation_length': 16, 'reference_length': 35} Rouge: {'rouge1': 0.27272727272727276, 'rouge2': 0.04761904761904762, 'rougeL': 0.13636363636363638, 'rougeLsum': 0.27272727272727276} Sari: {'sari': 47.88182831661093} Flesh Reading Ease: 91.1 ---------------------------------------- Source: ['Es verlor die Besinnung, und als es erwachte und wieder zu sich selber kam, war es auf einer schönen Wiese, wo die Sonne schien und viel tausend Blumen standen.'] Prediction: ['Eine schönen Wiese, wo die Sonne schien und viel tausend Blumen standen, verlor die Besinnung.\nEs verlor die Besinnung, als es erwachte und wieder zu sich selber kam, war es auf einer schönen Wiese, wo die Sonne schien und viel tausend Blumen standen.'] Label: [['Die Sonne scheint.\nMarie liegt auf einer Wiese.\nUnd plötzlich ist der Brunnen weg.\nDabei dreht sich alles.\nMarie fällt immer tiefer in den Brunnen.']] Sacrebleu: {'score': 1.994691414228073, 'counts': [7, 1, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [14.0, 2.0408163265306123, 1.0416666666666667, 0.5319148936170213], 'bp': 1.0, 'sys_len': 50, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.14, 0.02040816326530612, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 50, 'reference_length': 30} Rouge: {'rouge1': 0.19444444444444445, 'rouge2': 0.05714285714285715, 'rougeL': 0.16666666666666669, 'rougeLsum': 0.19444444444444445} Sari: {'sari': 37.843697123519455} Flesh Reading Ease: 64.9 ---------------------------------------- Source: ['« Da ging das Mädchen zu dem Brunnen zurück und wußte nicht, was es anfangen sollte, und in seiner Herzensangst sprang es in den Brunnen hinein, um die Spule zu holen.'] Prediction: ['In einer Herzensangst in den Brunnen in den Brunnen wurde ein Mädchen von einem Mädchen zurückgebracht.\nDas Mädchen wurde von einem Brunnen in seiner Herzensangst geschickt.\nDie Spule war nicht in den Brunnen geschickt.'] Label: [['Deshalb springt Marie in den Brunnen.\nMarie denkt: Was soll ich jetzt tun?\nMarie muss die Spule aus dem Brunnen holen.\nAber Marie geht zurück zum Brunnen.']] Sacrebleu: {'score': 4.881438597643135, 'counts': [9, 2, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [24.324324324324323, 5.555555555555555, 2.857142857142857, 1.4705882352941178], 'bp': 1.0, 'sys_len': 37, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.24324324324324326, 0.05555555555555555, 0.02857142857142857, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.15625, 'translation_length': 37, 'reference_length': 32} Rouge: {'rouge1': 0.24242424242424243, 'rouge2': 0.09375, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.24242424242424243} Sari: {'sari': 53.87832102537985} Flesh Reading Ease: 69.25 ---------------------------------------- Source: ['»Hast du die Spule hinunterfallen lassen, so hol sie auch wieder herauf.'] Prediction: ['Eine Spule in der Nähe von St. Gallen wurde von einem Auto aufgefunden.\nDie Spule wurde von der Polizei aufgefunden.\nDie Spule wurde von der Polizei aufgefunden.'] Label: [['Und hol die Spule wieder heraus.\nDann geh zurück zum Brunnen.\nDu hast die Spule in den Brunnen fallen lassen?']] Sacrebleu: {'score': 3.016200863100729, 'counts': [5, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3478260869565217, 'translation_length': 31, 'reference_length': 23} Rouge: {'rouge1': 0.20408163265306123, 'rouge2': 0.12765957446808512, 'rougeL': 0.16326530612244897, 'rougeLsum': 0.20408163265306123} Sari: {'sari': 61.42482517482518} Flesh Reading Ease: 62.05 ---------------------------------------- Source: ['Sie schalt es aber so heftig und war so unbarmherzig, daß sie sprach:'] Prediction: ['Eine Frau wurde in der Nacht auf Sonntag von ihrem Mann aufgefunden.\nSie war so unbarmherzig, da sie sprach.\nDie Frau schalt es aber so heftig und war so unbarmherzig, da sie sprach.'] Label: [['Und sagt: Du dummes Kind.\nDa wird die Stief∙mutter sehr böse.']] Sacrebleu: {'score': 1.1524538390587937, 'counts': [2, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [5.2631578947368425, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7142857142857144, 'translation_length': 38, 'reference_length': 14} Rouge: {'rouge1': 0.13043478260869568, 'rouge2': 0.0, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 32.371794871794876} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['sie sprang ihm aber aus der Hand und fiel hinab.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag auf Sonntag aus der Hand gefunden.\nDas war ein Jahr nach dem ersten Mal.\nDas war ein Jahr nach dem Mann, der sich aus der Hand fiel hinab.'] Label: [['Und versinkt.\nDeshalb fällt die blutige Spule in den Brunnen.\nAber Marie passt nicht auf.']] Sacrebleu: {'score': 1.3389812472744242, 'counts': [5, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [12.195121951219512, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.12195121951219512, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2777777777777777, 'translation_length': 41, 'reference_length': 18} Rouge: {'rouge1': 0.07547169811320754, 'rouge2': 0.0, 'rougeL': 0.07547169811320754, 'rougeLsum': 0.07547169811320754} Sari: {'sari': 41.296296296296305} Flesh Reading Ease: 97.5 ---------------------------------------- Source: ['Nun trug es sich zu, daß die Spule einmal ganz blutig war, da bückte es sich damit in den Brunnen und wollte sie abwaschen;'] Prediction: ['Eine Spule in den Brunnen wollte abwaschen.\nDie Spule war einmal ganz blutig und wollte sie abwaschen.'] Label: [['Marie will die blutige Spule im Brunnen waschen.\nUnd auch die Spule mit der Wolle wird dabei blutig.']] Sacrebleu: {'score': 3.0059825993305433, 'counts': [6, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [31.57894736842105, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 0.9487294800164372, 'sys_len': 19, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.3157894736842105, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9487294800164372, 'length_ratio': 0.95, 'translation_length': 19, 'reference_length': 20} Rouge: {'rouge1': 0.34285714285714286, 'rouge2': 0.06060606060606061, 'rougeL': 0.28571428571428575, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 41.00529100529101} Flesh Reading Ease: 72.05 ---------------------------------------- Source: ['Das arme Mädchen mußte sich täglich auf die große Straße bei einem Brunnen setzen, und mußte soviel spinnen, daß ihm das Blut aus den Fingern sprang.'] Prediction: ['Ein arme Mädchen ist in einem Brunnen in einem Fingern gefunden.\nDabei sprang ihm das Blut aus den Fingern.\nDie Frau war täglich auf die große Straße bei einem Brunnen setzen.'] Label: [['An einem Tag sticht sich die fleißige Marie bei der Arbeit in den Finger.\nUnd mit einem Spinn∙rad Wolle zu einem Faden machen.\nJeden Tag muss die fleißige Marie am Brunnen sitzen.']] Sacrebleu: {'score': 1.9248800811638527, 'counts': [11, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [32.35294117647059, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 0.9710165517924373, 'sys_len': 34, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.3235294117647059, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9710165517924371, 'length_ratio': 0.9714285714285714, 'translation_length': 34, 'reference_length': 35} Rouge: {'rouge1': 0.2571428571428571, 'rouge2': 0.0, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.2571428571428571} Sari: {'sari': 35.594729344729345} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['Sie hatte aber die häßliche und faule, weil sie ihre rechte Tochter war, viel lieber, und die andere mußte alle Arbeit thun und der Aschenputtel im Hause sein.'] Prediction: ['Eine Frau war im Alter von 99 Jahren gestorben, weil sie ihre rechte Tochter war, viel lieber, und ihre Arbeit thun und der Aschenputtel im Hause sein.\nDie Frau war häßliche und faule, weil sie ihre rechte Tochter war, viel lieber, und die andere mußte alle Arbeit thun und der Aschenputtel im Hause sein.'] Label: [['Deshalb muss die fleißige Marie die ganze Arbeit allein machen: Die Frau hat die faule Marie viel lieber.\nDie faule Marie ist nämlich ihr eigenes Kind.\nDie Frau hat aber die faule Marie viel lieber.']] Sacrebleu: {'score': 3.659077548575382, 'counts': [12, 4, 1, 0], 'totals': [62, 61, 60, 59], 'precisions': [19.35483870967742, 6.557377049180328, 1.6666666666666667, 0.847457627118644], 'bp': 1.0, 'sys_len': 62, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.06557377049180328, 0.016666666666666666, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5897435897435896, 'translation_length': 62, 'reference_length': 39} Rouge: {'rouge1': 0.2150537634408602, 'rouge2': 0.06593406593406594, 'rougeL': 0.17204301075268819, 'rougeLsum': 0.1935483870967742} Sari: {'sari': 32.83691803088355} Flesh Reading Ease: 65.25 ---------------------------------------- Source: ['Eine Wittwe hatte zwei Töchter, davon war die eine schön und fleißig, die andere häßlich und faul.'] Prediction: ['Eine Wittwe hatte zwei Töchter, die andere häßlich und faul.\nSie faulen zwei Töchter.\nSie wurden von einem Mann aufgefunden.'] Label: [['Und faul.\nAber die andere Tochter ist hässlich.\nUnd fleißig.\nDie eine Tochter ist schön.\nEine Frau hat 2 Töchter.']] Sacrebleu: {'score': 5.617452993357744, 'counts': [8, 3, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [33.333333333333336, 13.043478260869565, 2.272727272727273, 1.1904761904761905], 'bp': 0.9591894571091382, 'sys_len': 24, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.13043478260869565, 0.0, 0.0], 'brevity_penalty': 0.9591894571091382, 'length_ratio': 0.96, 'translation_length': 24, 'reference_length': 25} Rouge: {'rouge1': 0.3404255319148936, 'rouge2': 0.1333333333333333, 'rougeL': 0.2553191489361702, 'rougeLsum': 0.3404255319148936} Sari: {'sari': 36.28968253968254} Flesh Reading Ease: 73.85 ---------------------------------------- Source: ['Und da wurde die Hochzeit des Königssohns mit dem Dornröschen in aller Pracht gefeiert, und sie lebten vergnügt bis an ihr Ende.'] Prediction: ['Am Dornröschen wurde die Hochzeit des Königssohns mit dem Dornröschen in aller Pracht gefeiert.\nDie Hochzeit wurde mit dem Dornröschen in aller Pracht gefeiert.\nDie Hochzeit wurde in aller Pracht gefeiert.'] Label: [['Und Dorn∙röschen und der Prinz leben für immer glücklich zusammen.\nUnd alle Menschen im Land feiern ein großes Fest.\nDorn∙röschen und der Prinz heiraten.']] Sacrebleu: {'score': 1.432548017297354, 'counts': [3, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2592592592592593, 'translation_length': 34, 'reference_length': 27} Rouge: {'rouge1': 0.060606060606060615, 'rouge2': 0.0, 'rougeL': 0.060606060606060615, 'rougeLsum': 0.060606060606060615} Sari: {'sari': 33.54166666666667} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['die Fliegen an den Wänden krochen weiter:'] Prediction: ['Die Fliegen an den Wänden krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter: Sie krochen weiter:'] Label: [['Und die Fliegen an der Wand.']] Sacrebleu: {'score': 0.27784424540219166, 'counts': [2, 1, 0, 0], 'totals': [256, 255, 254, 253], 'precisions': [0.78125, 0.39215686274509803, 0.1968503937007874, 0.09881422924901186], 'bp': 1.0, 'sys_len': 256, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.0078125, 0.00392156862745098, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 36.57142857142857, 'translation_length': 256, 'reference_length': 7} Rouge: {'rouge1': 0.030000000000000006, 'rouge2': 0.020202020202020204, 'rougeL': 0.030000000000000006, 'rougeLsum': 0.030000000000000006} Sari: {'sari': 43.963443963443964} Flesh Reading Ease: -112.46 ---------------------------------------- Source: ['die Tauben auf dem Dache zogen das Köpfchen unterm Flügel hervor, sahen umher und flogen ins Feld;'] Prediction: ['Eine Tauben auf dem Dache zogen das Köpfchen unterm Flügel hervor.\nDie Tauben flogen ins Feld und flogen ins Feld.'] Label: [['Die Tauben auf dem Dach.']] Sacrebleu: {'score': 8.084607176727898, 'counts': [5, 3, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [22.727272727272727, 14.285714285714286, 5.0, 2.6315789473684212], 'bp': 1.0, 'sys_len': 22, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.22727272727272727, 0.14285714285714285, 0.05, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6666666666666665, 'translation_length': 22, 'reference_length': 6} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.24, 'rougeL': 0.22222222222222218, 'rougeLsum': 0.2962962962962963} Sari: {'sari': 43.29051796157059} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Und die Pferde im Hof standen auf und rüttelten sich;'] Prediction: ['Im Hof in Zürich wurde eine Pferde von einem Hof gefunden.\nDie Pferde rüttelten sich und rüttelten sich.\nDie Pferde im Hof standen auf und rüttelten sich.'] Label: [['Die Pferde im Stall.\nUnd auch die Tiere erwachen:']] Sacrebleu: {'score': 4.965977366141172, 'counts': [4, 2, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 6.896551724137931, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.06896551724137931, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.727272727272727, 'translation_length': 30, 'reference_length': 11} Rouge: {'rouge1': 0.25, 'rouge2': 0.10526315789473685, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.19999999999999998} Sari: {'sari': 44.60714285714286} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Da gingen sie zusammen herab, und der König erwachte und die Königin, und der ganze Hofstaat, und sahen einander mit großen Augen an.'] Prediction: ['Der Hofstaat hat einen Geburtstag zusammen mit großen Augen angegriffen.\nDie Königin und der Hofstaat sahen einander mit großen Augen an.'] Label: [['Die Diener.\nDer Koch.\nDer König und die Königin.\nJetzt erwachen auch die Menschen im Schloss:']] Sacrebleu: {'score': 2.5771688135729764, 'counts': [6, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [26.08695652173913, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.2608695652173913, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.15, 'translation_length': 23, 'reference_length': 20} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.09999999999999999, 'rougeL': 0.1904761904761905, 'rougeLsum': 0.2380952380952381} Sari: {'sari': 36.55843255041749} Flesh Reading Ease: 58.35 ---------------------------------------- Source: ['Wie er es mit dem Kuß berührt hatte, schlug Dornröschen die Augen auf, erwachte und blickte ihn ganz freundlich an.'] Prediction: ['Ein Kuß hatte einen Kuß auf, das das auf dem Kuß berührt hatte.\nDornröschen blickte ihn ganz freundlich an.\nDas Kuß schlug Dornröschen die Augen auf, erwachte und blickte ihn ganz freundlich an.'] Label: [['Und Dorn∙röschen lächelt den Prinzen an.\nPlötzlich öffnet Dorn∙röschen die Augen.']] Sacrebleu: {'score': 2.89826796679793, 'counts': [5, 2, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 5.405405405405405, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.05405405405405406, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.923076923076923, 'translation_length': 38, 'reference_length': 13} Rouge: {'rouge1': 0.22641509433962262, 'rouge2': 0.0784313725490196, 'rougeL': 0.18867924528301885, 'rougeLsum': 0.22641509433962262} Sari: {'sari': 38.808373590982285} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Da lag es und war so schön, daß er die Augen nicht abwenden konnte, und er bückte sich und gab ihm einen Kuß.'] Prediction: ['Ein Kuß hatte sich in einem Kuß einen Kuß gebückt.\nDas konnte nicht abwenden, da er die Augen nicht abwenden konnte.\nDas konnte nicht abwenden, da er die Augen nicht abwenden konnte.'] Label: [['Und der Prinz küsst Dorn∙röschen.\nDer Prinz bückt sich zu Dorn∙röschen herunter.\nUnd der Prinz denkt: Dorn∙röschen ist sehr schön.']] Sacrebleu: {'score': 1.4091499441909465, 'counts': [4, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [10.81081081081081, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.10810810810810811, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5416666666666667, 'translation_length': 37, 'reference_length': 24} Rouge: {'rouge1': 0.06451612903225808, 'rouge2': 0.0, 'rougeL': 0.03225806451612904, 'rougeLsum': 0.03225806451612904} Sari: {'sari': 33.90522875816993} Flesh Reading Ease: 81.55 ---------------------------------------- Source: ['Da ging er noch weiter, und alles war so still, daß einer seinen Atem hören konnte, und endlich kam er zu dem Turm und öffnete die Thür zu der kleinen Stube, in welcher Dornröschen schlief.'] Prediction: ['Ein Mann hat einen Atem hören und öffnete die Thür zu der kleinen Stube.\nDer Atem war so still, daß einer seinen Atem hören konnte, und endlich kam er zu dem Turm und öffnete die Thür zu der kleinen Stube.'] Label: [['Und schläft.\nIm Turm liegt Dorn∙röschen auf einem Bett.\nUnd der Prinz findet den alten Turm.\nDer Prinz geht durch das Schloss.']] Sacrebleu: {'score': 2.092817867871188, 'counts': [5, 1, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [11.363636363636363, 2.3255813953488373, 1.1904761904761905, 0.6097560975609756], 'bp': 1.0, 'sys_len': 44, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.11363636363636363, 0.023255813953488372, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6923076923076923, 'translation_length': 44, 'reference_length': 26} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.14492753623188406, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 36.0472191797493} Flesh Reading Ease: 78.1 ---------------------------------------- Source: ['Da ging er weiter und sah im Saale den ganzen Hofstaat liegen und schlafen, und oben bei dem Throne lag der König und die Königin. Und als er ins Haus kam, schliefen die Fliegen an der Wand, der Koch, in der Küche hielt noch die Hand, als wollte er den Jungen anpacken, und die Magd saß vor dem schwarzen Huhn, das sollte gerupft werden. Im Schloßhof sah er die Pferde und scheckigen Jagdhunde liegen und schlafen, auf dem Dache saßen die Tauben und hatten das Köpfchen unter den Flügel gesteckt.'] Prediction: ['Ein Hofstaat sah den ganzen Hofstaat liegen und schlafen.\nDer Koch sah die Pferde und scheckigen Jagdhunde liegen und schlafen.\nDer Magd sah die Pferde und scheckigen Jagdhunde liegen und schlafen.'] Label: [['Alle schlafen nämlich.\nIm Schloss ist es ganz still.']] Sacrebleu: {'score': 1.432548017297354, 'counts': [3, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.090909090909091, 'translation_length': 34, 'reference_length': 11} Rouge: {'rouge1': 0.04878048780487805, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 34.32849542329408} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['Als der Königssohn sich der Dornenhecke näherte, waren es lauter schöne große Blumen, die thaten sich von selbst auseinander und ließen ihn unbeschädigt hindurch, und hinter ihm thaten sie sich wieder als eine Hecke zusammen.'] Prediction: ['Der Königssohn hat sich der Dornenhecke näherte.\nAls er sich der Dornenhecke näherte, waren es lauter schöne große Blumen, die das sich von selbst auseinander ließen.'] Label: [['So kommt der Prinz bis ins Schloss.\nUnd der Prinz sticht sich nicht an den Dornen.\nDer Prinz geht den Weg entlang.\nDieser Weg führt durch die Dornen∙hecke.\nDer Prinz entdeckt einen geheimen Weg.\nUnd der Prinz sieht die Dornen∙hecke.\nDer Prinz kommt zu dem Schloss von Dorn∙röschen.']] Sacrebleu: {'score': 0.9074133679425194, 'counts': [8, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 0.43459820850707825, 'sys_len': 30, 'ref_len': 55} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 0.43459820850707814, 'length_ratio': 0.5454545454545454, 'translation_length': 30, 'reference_length': 55} Rouge: {'rouge1': 0.14117647058823532, 'rouge2': 0.0, 'rougeL': 0.14117647058823532, 'rougeLsum': 0.14117647058823532} Sari: {'sari': 35.65289344437326} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Da sprach der Jüngling: »Ich fürchte mich nicht, ich will hinaus und das schöne Dornröschen sehen.'] Prediction: ['Der Jüngling ist ein schönes Dornröschen.\nDer Jüngling will das schöne Dornröschen sehen.'] Label: [['Ich werde Dorn∙röschen wecken.\nAber ich habe keine Angst.\nDer Prinz denkt:']] Sacrebleu: {'score': 5.816635421147513, 'counts': [3, 1, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [20.0, 7.142857142857143, 3.8461538461538463, 2.0833333333333335], 'bp': 1.0, 'sys_len': 15, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 15, 'reference_length': 15} Rouge: {'rouge1': 0.12121212121212122, 'rouge2': 0.0, 'rougeL': 0.12121212121212122, 'rougeLsum': 0.12121212121212122} Sari: {'sari': 35.35353535353536} Flesh Reading Ease: 74.05 ---------------------------------------- Source: ['Nach langen langen Jahren kam wieder einmal ein Königssohn in das Land und hörte wie ein alter Mann von der Dornenhecke erzählte, es sollte ein Schloß dahinter stehen, in welchem eine wunderschöne Königstochter, Dornröschen genannt, schon seit hundert Jahren schliefe, und mit ihr schliefe der König und die Königin und der ganze Hofstaat.'] Prediction: ['Ein Mann hat in einem Schloß in Dornen einen Schloß dahinter stehen.\nEr sollte eine wunderschöne Königstochter, Dornröschen genannt, schliefe.\nDer Mann schliefe der König und die Königin und der ganze Hofstaat.'] Label: [['Der Prinz hört die Geschichte von Dorn∙röschen.\nDa kommt ein besonderer Prinz in das Land.']] Sacrebleu: {'score': 1.4899946568663818, 'counts': [5, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [13.513513513513514, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.13513513513513514, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.176470588235294, 'translation_length': 37, 'reference_length': 17} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.0, 'rougeL': 0.07272727272727272, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 33.82251937109757} Flesh Reading Ease: 69.85 ---------------------------------------- Source: ['Es war ihnen aber nicht möglich, denn die Dornen, als hätten sie Hände, hielten fest zusammen, und die Jünglinge blieben darin hängen, konnten sich nicht wieder los machen und starben eines jämmerlichen Todes.'] Prediction: ['Einige Jünglinge blieben darin hängen, wie sie sich nicht wieder los machen und starben eines jämmerlichen Todes.\nDie Dornen, als hätten sie Hände, hielten fest zusammen, konnten sich nicht wieder los machen und starben eines jämmerlichen Todes.'] Label: [['Und viele Prinzen sterben.\nViele Prinzen stechen sich an den Dornen.\nUnd die Dornen sind sehr gefährlich.\nAber die Dornen∙hecke bedeckt das ganze Schloss.']] Sacrebleu: {'score': 1.205256842736819, 'counts': [4, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [9.30232558139535, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.09302325581395349, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5357142857142858, 'translation_length': 43, 'reference_length': 28} Rouge: {'rouge1': 0.14492753623188406, 'rouge2': 0.029850746268656712, 'rougeL': 0.11594202898550725, 'rougeLsum': 0.14492753623188406} Sari: {'sari': 33.61815729426567} Flesh Reading Ease: 50.35 ---------------------------------------- Source: ['Es ging aber die Sage in dem Land von dem schönen schlafenden Dornröschen, denn so ward die Königstochter genannt, also daß von Zeit zu Zeit Königssöhne kamen und durch die Hecke in das Schloß dringen wollten.'] Prediction: ['Die Sage ging in einem schönen schlafenden Dornröschen, denn die Sage wollte durch die Hecke in das Schloß dringen.\nDas ging aber auch die Sage, dass die Königstochter genannt wurden.'] Label: [['Und viele Prinzen wollen in das Schloss.\nDie Menschen im Land erzählen sich die Geschichte von Dorn∙röschen.']] Sacrebleu: {'score': 2.8650960345947087, 'counts': [6, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [17.647058823529413, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7894736842105263, 'translation_length': 34, 'reference_length': 19} Rouge: {'rouge1': 0.18867924528301888, 'rouge2': 0.0392156862745098, 'rougeL': 0.15094339622641512, 'rougeLsum': 0.15094339622641512} Sari: {'sari': 35.244403156252865} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Rings um das Schloß aber begann eine Dornenhecke zu wachsen, die jedes Jahr höher ward, und endlich das ganze Schloß umzog, und darüber hinaus wuchs, daß gar nichts mehr davon zu sehen war, selbst nicht die Fahne auf dem Dach.'] Prediction: ['Jedes Jahr wurde das ganze Schloß umzog, darüber hinaus wuchs.\nDas ganze Schloß wurde selbst nicht mehr davon zu sehen.\nDas Schloß war selbst nicht die Fahne auf dem Dach.'] Label: [['Bis das ganze Schloss von der Dornen∙hecke bedeckt ist.\nDie Dornen∙hecke wird jedes Jahr größer.\nUnd eine Dornen∙hecke wächst um das Schloss.']] Sacrebleu: {'score': 2.8650960345947087, 'counts': [6, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [17.647058823529413, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.36, 'translation_length': 34, 'reference_length': 25} Rouge: {'rouge1': 0.20689655172413793, 'rouge2': 0.07142857142857144, 'rougeL': 0.10344827586206896, 'rougeLsum': 0.20689655172413793} Sari: {'sari': 36.051856640091934} Flesh Reading Ease: 88.1 ---------------------------------------- Source: ['Da schliefen auch die Pferde im Stall, die Hunde im Hofe, die Tauben auf dem Dache, die Fliegen an der Wand, ja, das Feuer, das auf dem Herde flackerte, ward still und schlief ein, und der Braten hörte auf zu brutzeln, und der Koch, der den Küchenjungen, weil er etwas versehen hatte, in den Haaren ziehen wollte, ließ ihn los und schlief.'] Prediction: ['Ein Feuer, das auf dem Herde flackerte, flackerte auf zu brutzeln, ließ ihn los und schlief ein.\nDas Feuer, das auf dem Herde flackerte, hörte auf zu brutzeln, ließ ihn los und schlief ein.'] Label: [['Und die Fliegen an der Wand.\nDie Tauben auf dem Dach.\nDie Pferde im Stall.\nUnd sogar die Tiere schlafen ein:']] Sacrebleu: {'score': 2.1962438984958195, 'counts': [5, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [11.904761904761905, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.11904761904761904, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.68, 'translation_length': 42, 'reference_length': 25} Rouge: {'rouge1': 0.17857142857142855, 'rouge2': 0.03703703703703704, 'rougeL': 0.17857142857142855, 'rougeLsum': 0.17857142857142855} Sari: {'sari': 30.684390078888285} Flesh Reading Ease: 81.1 ---------------------------------------- Source: ['der König und die Königin, die eben heimgekommen waren und in den Saal getreten waren, fingen an einzuschlafen und der ganze Hofstaat mit ihnen.'] Prediction: ['Der ganze Hofstaat in Bern hat einen heimgekommenen Hofstaat mit ihnen gegeben.\nDie Königin fingen an einzuschlafen und der ganze Hofstaat mit ihnen fingen an einzuschlafen.'] Label: [['Die Diener.\nDer Koch.\nDer König und die Königin.']] Sacrebleu: {'score': 2.0899410246084282, 'counts': [6, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [21.428571428571427, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 28, 'reference_length': 12} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.1111111111111111, 'rougeL': 0.21052631578947367, 'rougeLsum': 0.2631578947368421} Sari: {'sari': 32.98393636753556} Flesh Reading Ease: 55.85 ---------------------------------------- Source: ['Und dieser Schlaf verbreitete sich über das ganze Schloß:'] Prediction: ['Einige Frauen verbreitete sich über das ganze Schloß in der Nähe von Schloß.\nSie verbreitete sich über das ganze Schloß.'] Label: [['Auch die Menschen im Schloss schlafen ein: Aber nicht nur Dorn·röschen schläft ein.']] Sacrebleu: {'score': 1.727223799216787, 'counts': [1, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [4.545454545454546, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.045454545454545456, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4666666666666666, 'translation_length': 22, 'reference_length': 15} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 32.0436507936508} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['In dem Augenblick aber, wo sie den Stich empfand, fiel sie auf das Bett nieder, das da stand, und lag in einem tiefen Schlaf.'] Prediction: ['Eine Frau hat sich in einem tiefen Schlaf einen Stich empfand.\nSie lag in einem tiefen Schlaf.'] Label: [['Und Dorn∙röschen fällt in einen tiefen Schlaf.']] Sacrebleu: {'score': 8.562365224473284, 'counts': [5, 2, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [26.31578947368421, 11.11111111111111, 5.882352941176471, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.1111111111111111, 0.058823529411764705, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 19, 'reference_length': 8} Rouge: {'rouge1': 0.29629629629629634, 'rouge2': 0.08, 'rougeL': 0.29629629629629634, 'rougeLsum': 0.22222222222222224} Sari: {'sari': 46.72248182762201} Flesh Reading Ease: 89.6 ---------------------------------------- Source: ['Kaum hatte sie aber die Spindel angerührt, so ging der Zauberspruch in Erfüllung, und sie stach sich damit in den Finger.'] Prediction: ['Eine Frau hatte sich in den Finger eine Spindel angerührt.\nDas hatte sie aber die Spindel angerührt.\nDie Spindel stach sich damit in den Finger.'] Label: [['Dorn∙röschen sticht sich an der Spindel.\nPlötzlich geht der böse Wunsch von der 13.\nFee in Erfüllung:']] Sacrebleu: {'score': 1.996819088094332, 'counts': [5, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.17857142857142858, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 28, 'reference_length': 20} Rouge: {'rouge1': 0.12244897959183673, 'rouge2': 0.0, 'rougeL': 0.12244897959183673, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 33.98338406900051} Flesh Reading Ease: 78.1 ---------------------------------------- Source: ['»Was ist das für ein Ding, das so lustig herumspringt?« sprach das Mädchen, nahm die Spindel und wollte auch spinnen.'] Prediction: ['Ein Mädchen wollte auch spinnen, wie sie sich einen Spindel spinnen.\nDas Ding ist für ein Ding, das so lustig herumspringt.\nDas Ding ist für ein Ding, das so lustig herumspringt ist.'] Label: [['Dorn∙röschen nimmt die Spindel in die Hand.\nDorn∙röschen hat noch nie eine Spindel gesehen.\nDorn∙röschen ist neugierig.']] Sacrebleu: {'score': 1.4491339833989647, 'counts': [5, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 38, 'reference_length': 20} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.0, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 34.17919799498747} Flesh Reading Ease: 93.25 ---------------------------------------- Source: ['»Ich spinne,« sagte die Alte und nickte mit dem Kopf.'] Prediction: ['Die Alte hatte einen Kopf mit dem Kopf geschickt.\nDer Mann hatte sich mit dem Kopf einen Rücktritt geschickt.\nDer Mann hatte sich mit dem Kopf einen Rücktritt geschickt.'] Label: [['Die alte Frau antwortet: Ich mache Wolle zu einem Faden.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 32, 'reference_length': 12} Rouge: {'rouge1': 0.0975609756097561, 'rouge2': 0.05128205128205128, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.0975609756097561} Sari: {'sari': 51.388888888888886} Flesh Reading Ease: 94.25 ---------------------------------------- Source: ['»Guten Tag, du altes Mütterchen,« sprach die Königstochter, »was machst du da?«'] Prediction: ['Der Schweizer Mütterling ist seit einigen Tagen in der Schweiz.\nDer Mann sprach von einem ähnlichen Schlagzeilen in der Schweiz.\nDer Mann war zuvor auf der Königstochter, der sich als Mütterchen ausgelöst hatte.'] Label: [['Was machst du da?\nDorn∙röschen fragt die alte Frau:']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 37, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3636363636363638, 'translation_length': 37, 'reference_length': 11} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 26.764520202020204} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['In dem Schloß steckte ein verrosteter Schlüssel, und als es umdrehte, sprang die Thür auf, und saß da in einem kleinen Stübchen eine alte Frau mit einer Spindel und spann emsig ihren Flachs.'] Prediction: ['In einem Schloß in der Nähe von Schloß TG wurde eine Frau mit einer Spindel verstorben.\nSie sprang die Thür auf und spann emsig ihren Flachs.\nDie Frau wurde dabei von einem verrosteter Schlüssel verletzt.'] Label: [['Die alte Frau arbeitet mit einer Spindel.\nEine alte Frau sitzt an einem Spinn∙rad.']] Sacrebleu: {'score': 4.747573105125849, 'counts': [9, 2, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [23.68421052631579, 5.405405405405405, 2.7777777777777777, 1.4285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.23684210526315788, 0.05405405405405406, 0.027777777777777776, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 38, 'reference_length': 16} Rouge: {'rouge1': 0.3018867924528302, 'rouge2': 0.0784313725490196, 'rougeL': 0.22641509433962267, 'rougeLsum': 0.3018867924528302} Sari: {'sari': 39.851242089240735} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['Da ging es allerorten herum, besah Stuben und Kammern, wie es Lust hatte, und kam endlich auch an einen alten Turm.'] Prediction: ['Immer mehr Menschen gingen auf einen alten Turm, wie es Lust hatte.\nDer Mann ging auch an einen alten Turm.\nDer Mann ging auch an einen alten Turm.'] Label: [['Dorn∙röschen kommt zu einem alten Turm.\nUnd Dorn∙röschen erkundet das Schloss.']] Sacrebleu: {'score': 4.6398855339878, 'counts': [4, 2, 1, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 6.451612903225806, 3.3333333333333335, 1.7241379310344827], 'bp': 1.0, 'sys_len': 32, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.06451612903225806, 0.03333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4615384615384617, 'translation_length': 32, 'reference_length': 13} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.04878048780487805, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.09302325581395349} Sari: {'sari': 41.19318181818182} Flesh Reading Ease: 94.65 ---------------------------------------- Source: ['Es geschah, daß an dem Tage, wo es gerade fünfzehn Jahre alt ward, der König und die Königin nicht zu Hause waren, und das Mädchen ganz allein im Schloß zurückblieb.'] Prediction: ['Ein Mädchen ist in der Nacht auf Sonntag im Schloß zurückblieb.\nDas Mädchen war fünfzehn Jahre alt, der König und die Königin nicht zu Hause waren.\nDas Mädchen war fünfzehn Jahre alt, der König und die Königin nicht zu Hause waren, und das Mädchen ganz allein im Schloß zurückblieb.'] Label: [['Dorn∙röschen ist allein.\nEs ist der 15.\nGeburts∙tag von Dorn∙röschen:']] Sacrebleu: {'score': 0.9884133258387924, 'counts': [5, 0, 0, 0], 'totals': [55, 54, 53, 52], 'precisions': [9.090909090909092, 0.9259259259259259, 0.4716981132075472, 0.2403846153846154], 'bp': 1.0, 'sys_len': 55, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.230769230769231, 'translation_length': 55, 'reference_length': 13} Rouge: {'rouge1': 0.07894736842105264, 'rouge2': 0.0, 'rougeL': 0.05263157894736842, 'rougeLsum': 0.07894736842105264} Sari: {'sari': 36.198717948717956} Flesh Reading Ease: 75.95 ---------------------------------------- Source: ['An dem Mädchen aber würden die Gaben der weisen Frauen sämtlich erfüllt, denn es war so schön, sittsam, freundlich und verständig, daß es jedermann, der es ansah, lieb haben mußte.'] Prediction: ['Eine Frau wurde in der Schweiz wegen ihrer Frauen sämtlich erfüllt.\nSie war so schön, sittsam, freundlich und verständig, daß es jedermann, der es ansah, lieb haben mußte.\nDie Gaben der weisen Frauen würden sämtlich erfüllt, denn es war so schön, sittsam, freundlich und verständig, daß es jedermann, der es ansah, lieb haben mußte.'] Label: [['Und alle mögen Dorn∙röschen.\nUnd Dorn∙röschen ist sehr freundlich.\nDorn∙röschen ist sehr schön.\nAlle guten Wünsche von den 12 Feen gehen in Erfüllung: Und Dorn∙röschen wird älter.']] Sacrebleu: {'score': 0.8322093046856479, 'counts': [6, 0, 0, 0], 'totals': [68, 67, 66, 65], 'precisions': [8.823529411764707, 0.746268656716418, 0.3787878787878788, 0.19230769230769232], 'bp': 1.0, 'sys_len': 68, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.125, 'translation_length': 68, 'reference_length': 32} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.0196078431372549, 'rougeL': 0.09615384615384616, 'rougeLsum': 0.13461538461538464} Sari: {'sari': 36.298850574712645} Flesh Reading Ease: 68.4 ---------------------------------------- Source: ['Der König, der sein liebes Kind vor dem Unglück gern bewahren wollte, ließ den Befehl ausgehen, daß alle Spindeln im ganzen Königreiche sollten verbrannt werden.'] Prediction: ['Der König, der sein liebes Kind vor dem Unglück gern bewahren wollte, ließ den Befehl aus.\nDer Befehl soll alle Spindeln im ganzen Königreiche verbrannt werden.'] Label: [['Und sagt: Alle Spindeln im König∙reich werden verbrannt.\nJetzt hat auch der König Angst.']] Sacrebleu: {'score': 3.511476270817333, 'counts': [8, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7647058823529411, 'translation_length': 30, 'reference_length': 17} Rouge: {'rouge1': 0.391304347826087, 'rouge2': 0.18181818181818182, 'rougeL': 0.2173913043478261, 'rougeLsum': 0.34782608695652173} Sari: {'sari': 40.26502732240437} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['da trat die zwölfte hervor, die ihren Wunsch noch übrig hatte und weil sie den bösen Spruch nicht aufheben, sondern nur ihn mildern konnte, so sagte sie: »Es soll aber kein Tod sein, sondern ein hundertjähriger tiefer Schlaf, in welchen die Königstochter fällt.«'] Prediction: ['Eine Frau hatte ihren Wunsch noch übrig und weil sie den bösen Spruch nicht aufheben konnte, soll sie nur ihn mildern konnte.\nDie Frau war zwölfte hervor, die ihren Wunsch noch übrig hatte.'] Label: [['Aber Dorn∙röschen wird 100 Jahre schlafen.\nDorn∙röschen wird an ihrem 15.\nGeburts∙tag nicht sterben.\nSo sagt die 12.\nFee: Aber die 12.\nFee kann den bösen Wunsch verwandeln.\nDie 12.\nFee kann den bösen Wunsch nicht rückgängig machen.\nAber zum Glück hat die 12.\nFee ihren Wunsch noch nicht gesprochen:']] Sacrebleu: {'score': 3.1907174305756505, 'counts': [11, 4, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [29.72972972972973, 11.11111111111111, 2.857142857142857, 1.4705882352941178], 'bp': 0.5227517209087683, 'sys_len': 37, 'ref_len': 61} Bleu: {'bleu': 0.0, 'precisions': [0.2972972972972973, 0.1111111111111111, 0.02857142857142857, 0.0], 'brevity_penalty': 0.5227517209087683, 'length_ratio': 0.6065573770491803, 'translation_length': 37, 'reference_length': 61} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.08602150537634408, 'rougeL': 0.1894736842105263, 'rougeLsum': 0.2105263157894737} Sari: {'sari': 39.28349431871601} Flesh Reading Ease: 75.75 ---------------------------------------- Source: ['Alle waren erschrocken;'] Prediction: ['Die Schweizerin hat sich mit einem Mann aufgefunden.\nSie waren erschrocken.'] Label: [['Die Gäste sind erschrocken.']] Sacrebleu: {'score': 6.837203339116283, 'counts': [3, 1, 0, 0], 'totals': [13, 12, 11, 10], 'precisions': [23.076923076923077, 8.333333333333334, 4.545454545454546, 2.5], 'bp': 1.0, 'sys_len': 13, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.08333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6, 'translation_length': 13, 'reference_length': 5} Rouge: {'rouge1': 0.25000000000000006, 'rouge2': 0.0, 'rougeL': 0.25000000000000006, 'rougeLsum': 0.25000000000000006} Sari: {'sari': 59.04761904761905} Flesh Reading Ease: 69.2 ---------------------------------------- Source: ['« Und ohne ein Wort weiter zu sprechen, kehrte sie sich um und verließ den Saal.'] Prediction: ['Eine Frau hat sich in der Nacht auf Sonntag in Zürich (D) geschlossen.\nSie war ohne ein Wort weiter zu sprechen, kehrte sie sich um und verließ den Saal.\nDie Frau war zuvor auf der Kippe, wie sie sich umfasst.'] Label: [['Und verschwindet.']] Sacrebleu: {'score': 0.7772751558853214, 'counts': [1, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [2.127659574468085, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 3} Bleu: {'bleu': 0.0, 'precisions': [0.02127659574468085, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 15.666666666666666, 'translation_length': 47, 'reference_length': 3} Rouge: {'rouge1': 0.046511627906976744, 'rouge2': 0.0, 'rougeL': 0.046511627906976744, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 31.01851851851852} Flesh Reading Ease: 90.65 ---------------------------------------- Source: ['»Die Königstochter soll sich in ihrem fünfzehnten Jahre an einer Spindel stechen und tot hinfallen.'] Prediction: ['Eine Königstochter soll sich in ihrem fünf Jahren an einer Spindel stechen und tot hinfallen.\nDie Todesursache ist noch unklar.'] Label: [['Und sterben.\nAn ihrem 15.\nGeburts∙tag soll sich Dorn∙röschen an einer Spindel stechen.']] Sacrebleu: {'score': 14.230715327204656, 'counts': [9, 4, 2, 1], 'totals': [22, 21, 20, 19], 'precisions': [40.90909090909091, 19.047619047619047, 10.0, 5.2631578947368425], 'bp': 1.0, 'sys_len': 22, 'ref_len': 16} Bleu: {'bleu': 0.1423071532720465, 'precisions': [0.4090909090909091, 0.19047619047619047, 0.1, 0.05263157894736842], 'brevity_penalty': 1.0, 'length_ratio': 1.375, 'translation_length': 22, 'reference_length': 16} Rouge: {'rouge1': 0.4210526315789474, 'rouge2': 0.2222222222222222, 'rougeL': 0.3157894736842105, 'rougeLsum': 0.3684210526315789} Sari: {'sari': 49.70959595959596} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['die eine mit Tugend, die andere mit Schönheit, die dritte mit Reichtum, und so mit allem, was auf der Welt zu wünschen ist. Das Fest ward mit aller Pracht gefeiert, und als es zu Ende war, beschenkten die weisen Frauen das Kind mit ihren Wundergaben:'] Prediction: ['Im Juni wurde ein Kind auf der Welt gefeiert.\nDie weisen Frauen beschenkten das Kind mit ihren Wundergaben.\nDas Kind war mit aller Pracht gefeiert, als es zu Ende war.'] Label: [['Und viele andere Dinge.\nUnd Freundlichkeit.\nDie Feen wünschen Dorn∙röschen Schönheit.\nDie Feen sprechen ihre guten Wünsche zu Dorn∙röschen:']] Sacrebleu: {'score': 2.7374353552268276, 'counts': [5, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4782608695652173, 'translation_length': 34, 'reference_length': 23} Rouge: {'rouge1': 0.07142857142857144, 'rouge2': 0.0, 'rougeL': 0.07142857142857144, 'rougeLsum': 0.07142857142857144} Sari: {'sari': 32.44804720133667} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['Es waren ihrer dreizehn in seinem Reiche, weil er aber nur zwölf goldene Teller hatte, von welchen sie essen sollten, so mußte eine von ihnen daheim bleiben.'] Prediction: ['Ein goldene Teller hatte in seinem Reiche zwölf goldene Teller.\nDas hatte er nur zwölf goldene Teller gefunden.\nDas hatte er aber nur zwölf goldene Teller, von welchen sie essen sollten, so mußte eine von ihnen daheim bleiben.'] Label: [['Das heißt: Die 13.\nFee darf nicht zu dem großen Fest kommen.\nDeshalb lädt der König nur 12 Feen ein.\nAber der König hat nur 12 goldene Teller.\nUnd die 13 Feen sollen von goldenen Tellern essen.\nDer König will auch die 13 Feen aus dem König∙reich einladen.']] Sacrebleu: {'score': 3.2427326281720514, 'counts': [10, 2, 1, 0], 'totals': [43, 42, 41, 40], 'precisions': [23.25581395348837, 4.761904761904762, 2.4390243902439024, 1.25], 'bp': 0.7564871232025193, 'sys_len': 43, 'ref_len': 55} Bleu: {'bleu': 0.0, 'precisions': [0.23255813953488372, 0.047619047619047616, 0.024390243902439025, 0.0], 'brevity_penalty': 0.7564871232025194, 'length_ratio': 0.7818181818181819, 'translation_length': 43, 'reference_length': 55} Rouge: {'rouge1': 0.1836734693877551, 'rouge2': 0.020833333333333332, 'rougeL': 0.16326530612244897, 'rougeLsum': 0.1836734693877551} Sari: {'sari': 39.26929062433344} Flesh Reading Ease: 67.85 ---------------------------------------- Source: ['Als elfe ihre Sprüche eben gethan hatten, trat plötzlich die dreizehnte herein.'] Prediction: ['Eine Sprüche, die in der Nacht auf Sonntag einmal einzelnen, wurde von einer Sprüche eben gethan.\nDie dreizehnte dreizehnte sind nicht mehr.'] Label: [['Plötzlich kommt die 13.\nFee zur Tür herein.\nSo sprechen 11 Feen ihre guten Wünsche.']] Sacrebleu: {'score': 1.9011755113058346, 'counts': [3, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [11.538461538461538, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.04761904761904762, 'rouge2': 0.0, 'rougeL': 0.04761904761904762, 'rougeLsum': 0.04761904761904762} Sari: {'sari': 40.03968253968254} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Er ladete nicht bloß seine Verwandten, Freunde und Bekannten, sondern auch die weisen Frauen dazu ein, damit sie dem Kind hold und gewogen wären.'] Prediction: ['Ein Kind wurde in der Nacht auf Sonntag in Zürich von einem Kind gewogen.\nDie Frauen laden dazu ein, damit sie dem Kind hold und gewogen wären.\nDie Frauen laden nicht blossß seine Verwandten, Freunde und Bekannten.'] Label: [['• Und viele andere Gäste.\n• Freunde.\n• Die Familie.\nZu diesem Fest lädt der König alle ein:']] Sacrebleu: {'score': 1.4204962126567007, 'counts': [7, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [16.666666666666668, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9090909090909092, 'translation_length': 42, 'reference_length': 22} Rouge: {'rouge1': 0.17543859649122806, 'rouge2': 0.0, 'rougeL': 0.07017543859649122, 'rougeLsum': 0.17543859649122806} Sari: {'sari': 37.2192671394799} Flesh Reading Ease: 74.1 ---------------------------------------- Source: ['Was der Frosch gesagt hatte, das geschah, und die Königin gebar ein Mädchen, das war so schön, daß der König vor Freude sich nicht zu lassen wußte und ein großes Fest anstellte.'] Prediction: ['Ein Mädchen hatte einen Frosch gesagt und eine Königin gebar ein Mädchen.\nDer Frosch war so schön, daß der König vor Freude sich nicht zu lassen wußte.\nDie Königin war dabei geschah, das geschah, und die Frosch gebar ein Mädchen.'] Label: [['Deshalb feiern der König und die Königin ein großes Fest.\nDer König und die Königin sind sehr glücklich.\nDie Königin bekommt noch im gleichen Jahr ein Mädchen.\nUnd der Frosch hat recht:']] Sacrebleu: {'score': 7.312765319030125, 'counts': [16, 7, 2, 0], 'totals': [46, 45, 44, 43], 'precisions': [34.78260869565217, 15.555555555555555, 4.545454545454546, 1.1627906976744187], 'bp': 1.0, 'sys_len': 46, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.34782608695652173, 0.15555555555555556, 0.045454545454545456, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2777777777777777, 'translation_length': 46, 'reference_length': 36} Rouge: {'rouge1': 0.38636363636363635, 'rouge2': 0.20930232558139536, 'rougeL': 0.31818181818181823, 'rougeLsum': 0.38636363636363635} Sari: {'sari': 36.895017693571916} Flesh Reading Ease: 78.95 ---------------------------------------- Source: ['« ehe ein Jahr vergeht, wirst du eine Tochter zur Welt bringen. »Dein Wunsch wird erfüllt werden;'] Prediction: ['Der Schweizer Wunsch-Konzern überrascht einen Jahr.\nIm Interview mit der 20-Minuten-App spricht er über seine Wunsch-Kollegen über die Welt.\nIm Interview spricht er über seine Tochter, die ihn erfüllt wird.'] Label: [['Du bekommst noch in diesem Jahr ein Kind.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 36, 'reference_length': 9} Rouge: {'rouge1': 0.04651162790697674, 'rouge2': 0.0, 'rougeL': 0.04651162790697674, 'rougeLsum': 0.04651162790697674} Sari: {'sari': 60.08158508158509} Flesh Reading Ease: 70.55 ---------------------------------------- Source: ['Da trug sich zu, als die Königin einmal im Bade saß, daß ein Frosch aus dem Wasser ans Land kroch und zu ihr sprach:'] Prediction: ['Ein Frosch aus dem Wasser ans Land sprach zu ihr und sprach zu ihr: Die Königin trug sich zu, als die Königin einmal im Bade saß.\nDie Königin trug sich zu, als sie einmal im Bade saß.'] Label: [['Der Frosch sagt zur Königin: Da kommt ein Frosch.\nAn einem Morgen badet die Königin.']] Sacrebleu: {'score': 2.3889803462089954, 'counts': [7, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [16.666666666666668, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 42, 'reference_length': 18} Rouge: {'rouge1': 0.2456140350877193, 'rouge2': 0.14545454545454548, 'rougeL': 0.21052631578947367, 'rougeLsum': 0.21052631578947367} Sari: {'sari': 36.80128351180982} Flesh Reading Ease: 85.45 ---------------------------------------- Source: ['»Ach, wenn wir doch ein Kind hätten!« und kriegten immer keins. Vor Zeiten war ein König und eine Königin, die sprachen jeden Tag:'] Prediction: ['Ein Kind hätten immer keins und kriegten immer keins.\nVor Zeiten war ein König und eine Königin, die sprachen jeden Tag.'] Label: [['Ein König und eine Königin wünschen sich ein Kind.']] Sacrebleu: {'score': 11.71291646655074, 'counts': [8, 3, 2, 1], 'totals': [24, 23, 22, 21], 'precisions': [33.333333333333336, 13.043478260869565, 9.090909090909092, 4.761904761904762], 'bp': 1.0, 'sys_len': 24, 'ref_len': 10} Bleu: {'bleu': 0.1171291646655074, 'precisions': [0.3333333333333333, 0.13043478260869565, 0.09090909090909091, 0.047619047619047616], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 24, 'reference_length': 10} Rouge: {'rouge1': 0.5, 'rouge2': 0.411764705882353, 'rougeL': 0.38888888888888895, 'rougeLsum': 0.38888888888888895} Sari: {'sari': 45.51470588235294} Flesh Reading Ease: 81.75 ---------------------------------------- Source: ["der Jäger zog dem Wolf den Pelz ab und ging damit heim, die Großmutter aß den Kuchen und trank den Wein, den Rotkäppchen gebracht hatte, und erholte sich wieder, Rotkäppchen aber dachte: »Du willst dein Lebtag nicht wieder allein vom Wege ab in den Wald laufen, wenn dir's die Mutter verboten hat.«"] Prediction: ["Du willst ein Lebtag nicht wieder allein vom Wege ab in den Wald laufen, wenn dir's die Mutter verboten hat.\nDer Wolf hatte den Rotkäppchen und den Rotkäppchen gebracht."] Label: [['Und Rot·käppchen und die Groß∙mutter essen den Kuchen.\nDer Jäger nimmt das Fell vom Wolf mit nach Hause.']] Sacrebleu: {'score': 3.2808945250121386, 'counts': [8, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [25.0, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 1.0, 'sys_len': 32, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 32, 'reference_length': 20} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.03846153846153846, 'rougeL': 0.14814814814814814, 'rougeLsum': 0.2962962962962963} Sari: {'sari': 35.09273452661134} Flesh Reading Ease: 77.75 ---------------------------------------- Source: ['Rotkäppchen aber holte geschwind große Steine, damit füllten sie dem Wolf den Leib, und wie er aufwachte, wollte er fortspringen, aber die Steine waren so schwer, daß er gleich niedersank und sich totfiel.'] Prediction: ['Ein Wolf füllte eine Steine auf, die sich totfiel.\nDer Wolf wollte die Steine fortspringen und sich totfiel.\nDer Wolf war totfiel, daß er gleich niedersank und sich totfiel.'] Label: [['Der Wolf fällt um.\nAber die Steine im Bauch vom Wolf sind sehr schwer.\nUnd will weg∙laufen.\nDer Wolf wacht auf.\nUnd der Jäger legt die Steine in den Bauch vom Wolf.\nDann holt Rot∙käppchen große Steine.']] Sacrebleu: {'score': 5.335276120309925, 'counts': [13, 4, 1, 0], 'totals': [34, 33, 32, 31], 'precisions': [38.23529411764706, 12.121212121212121, 3.125, 1.6129032258064515], 'bp': 0.767431631971574, 'sys_len': 34, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.38235294117647056, 0.12121212121212122, 0.03125, 0.0], 'brevity_penalty': 0.7674316319715739, 'length_ratio': 0.7906976744186046, 'translation_length': 34, 'reference_length': 43} Rouge: {'rouge1': 0.35616438356164387, 'rouge2': 0.11267605633802817, 'rougeL': 0.2191780821917808, 'rougeLsum': 0.32876712328767127} Sari: {'sari': 38.38696713181019} Flesh Reading Ease: 82.55 ---------------------------------------- Source: ['Und dann kam die alte Großmutter auch noch lebendig heraus und konnte kaum atmen.'] Prediction: ['Eine alte Großmutter konnte noch lebendig herausfinden.\nDas hatte sie noch lebendig herausgebracht.\nDie alte Großmutter konnte kaum atmen.'] Label: [['Und auch die Groß·mutter lebt.\nUnd dann kommt auch die Groß·mutter aus dem Bauch vom Wolf.']] Sacrebleu: {'score': 2.0540268312306345, 'counts': [2, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [9.090909090909092, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2222222222222223, 'translation_length': 22, 'reference_length': 18} Rouge: {'rouge1': 0.25641025641025644, 'rouge2': 0.1081081081081081, 'rougeL': 0.25641025641025644, 'rougeLsum': 0.25641025641025644} Sari: {'sari': 29.51388888888889} Flesh Reading Ease: 50.85 ---------------------------------------- Source: ["Wie er ein paar Schnitte gethan hatte, da sah er das rote Käppchen leuchten, und noch ein paar Schnitte, da sprang das Mädchen heraus und rief: »Ach, wie war ich erschrocken, wie war's so dunkel in dem Wolf seinem Leib!«"] Prediction: ['Ein Mädchen sprang das rote Käppchen und rief.\nDer Wolf sprang das Mädchen heraus und rief.'] Label: [['Rot·käppchen lebt.\nPlötzlich kommt Rot∙käppchen aus dem Bauch vom Wolf.']] Sacrebleu: {'score': 2.8265205879007453, 'counts': [3, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [16.666666666666668, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 18, 'reference_length': 12} Rouge: {'rouge1': 0.17647058823529413, 'rouge2': 0.0625, 'rougeL': 0.17647058823529413, 'rougeLsum': 0.17647058823529413} Sari: {'sari': 35.91686091686092} Flesh Reading Ease: 95.95 ---------------------------------------- Source: ['schoß nicht, sondern nahm eine Schere und fing an dem schlafenden Wolf den Bauch aufzuschneiden.'] Prediction: ['Ein Wolf hat einen Bauch aufgefunden.\nDas hat eine Schere gefunden.\nDas hat eine Schere aufgefunden.'] Label: [['Und schneidet mit der Schere den Bauch vom Wolf auf.\nDer Jäger nimmt eine Schere.']] Sacrebleu: {'score': 5.538003944406129, 'counts': [7, 1, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [36.8421052631579, 5.555555555555555, 2.9411764705882355, 1.5625], 'bp': 1.0, 'sys_len': 19, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.3684210526315789, 0.05555555555555555, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1176470588235294, 'translation_length': 19, 'reference_length': 17} Rouge: {'rouge1': 0.3125, 'rouge2': 0.06666666666666667, 'rougeL': 0.1875, 'rougeLsum': 0.25} Sari: {'sari': 60.55555555555555} Flesh Reading Ease: 69.4 ---------------------------------------- Source: ['« Nun wollte er seine Büchse anlegen, da fiel ihm ein, der Wolf könnte die Großmutter gefressen haben, und sie wäre noch zu retten;'] Prediction: ['Ein Wolf könnte die Großmutter gefressen haben, und sie wäre noch zu retten.\nDer Wolf wollte seine Büchse anlegen, da fiel ihm ein, der Wolf könnte die Großmutter gefressen haben, und sie wäre noch zu retten.'] Label: [['Und vielleicht kann ich die Groß∙mutter noch retten.\nVielleicht hat der Wolf die Groß∙mutter gefressen.\nAber der Jäger denkt: Der Jäger will den Wolf erschießen.']] Sacrebleu: {'score': 3.1808540108235466, 'counts': [11, 2, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [26.19047619047619, 4.878048780487805, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2619047619047619, 0.04878048780487805, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4482758620689655, 'translation_length': 42, 'reference_length': 29} Rouge: {'rouge1': 0.3835616438356165, 'rouge2': 0.16901408450704225, 'rougeL': 0.30136986301369856, 'rougeLsum': 0.35616438356164387} Sari: {'sari': 39.82699126627163} Flesh Reading Ease: 68.4 ---------------------------------------- Source: ['»Finde ich dich hier, du alter Sünder,« sagte er, »ich habe dich lange gesucht.'] Prediction: ['Ein Sünder hat sich in der Schweiz lange gesucht.\nDer Sünder hatte sich lange gesucht.\nDie Schweizerin hatte sich in der Schweiz lange gesucht.'] Label: [['Der Jäger hat den Wolf nämlich schon lange Zeit gesucht.\nDer Jäger freut sich.']] Sacrebleu: {'score': 6.384875295507791, 'counts': [7, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [25.925925925925927, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.25925925925925924, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6875, 'translation_length': 27, 'reference_length': 16} Rouge: {'rouge1': 0.2790697674418605, 'rouge2': 0.048780487804878044, 'rougeL': 0.23255813953488372, 'rougeLsum': 0.23255813953488372} Sari: {'sari': 58.11272974101921} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['Da trat er in die Stube, und wie er vor das Bett kam, so sah er, daß der Wolf darin lag.'] Prediction: ['Ein Wolf trat in die Stube, wie er vor das Bett kam, und wie er vor das Bett kam, so sah er, daß der Wolf darin lag.\nDer Wolf trat in die Stube, wie er vor das Bett kam.'] Label: [['Im Bett liegt der Wolf.\nAber im Bett liegt nicht die Groß∙mutter.\nJetzt steht der Jäger vor dem Bett von der Groß·mutter.\nDer Jäger möchte nach der Groß∙mutter sehen.\nDer Jäger geht zum Haus von der Groß·mutter.']] Sacrebleu: {'score': 2.826585539255712, 'counts': [10, 2, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [21.73913043478261, 4.444444444444445, 1.1363636363636365, 0.5813953488372093], 'bp': 1.0, 'sys_len': 46, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.044444444444444446, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0952380952380953, 'translation_length': 46, 'reference_length': 42} Rouge: {'rouge1': 0.19047619047619047, 'rouge2': 0.024390243902439025, 'rougeL': 0.14285714285714288, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 38.375659428291} Flesh Reading Ease: 96.15 ---------------------------------------- Source: ['Der Jäger ging eben an dem Hause vorbei und dachte: »Wie die alte Frau schnarcht, du mußt doch sehen, ob ihr etwas fehlt.«'] Prediction: ['Ein Jäger hatte eine Frau vorbei und dachte, ob ihr etwas fehlt.\nDer Jäger ging eben an dem Hause vorbei und dachte: "Wie die alte Frau schnarcht, du mußt doch sehen, ob ihr etwas fehlt".'] Label: [['Ich sehe lieber nach.\nVielleicht geht es der Groß∙mutter schlecht.\nDie Groß∙mutter schnarcht aber laut.\nDer Jäger denkt: Und wundert sich.\nDer Jäger kommt zum Haus von der Groß·mutter.\nEin Jäger hört das Schnarchen.']] Sacrebleu: {'score': 4.486471497267756, 'counts': [8, 3, 1, 0], 'totals': [43, 42, 41, 40], 'precisions': [18.6046511627907, 7.142857142857143, 2.4390243902439024, 1.25], 'bp': 1.0, 'sys_len': 43, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.18604651162790697, 0.07142857142857142, 0.024390243902439025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.048780487804878, 'translation_length': 43, 'reference_length': 41} Rouge: {'rouge1': 0.2278481012658228, 'rouge2': 0.1038961038961039, 'rougeL': 0.1518987341772152, 'rougeLsum': 0.2278481012658228} Sari: {'sari': 39.235808946220004} Flesh Reading Ease: 80.6 ---------------------------------------- Source: ['Wie der Wolf sein Gelüsten gestillt hatte, legte er sich wieder ins Bett, schlief ein und fing an überlaut zu schnarchen.'] Prediction: ['Ein Gelüsten hatte sich wieder ins Bett, schlief ein und fing an überlaut zu schnarchen.\nDer Wolf legte sich wieder ins Bett, schlief ein und fing an überlaut zu schnarchen.'] Label: [['Der Wolf schnarcht sehr laut.\nUnd schläft ein.\nDer Wolf legt sich wieder in das Bett von der Groß·mutter.\nUnd zufrieden.\nDann ist der Wolf satt.']] Sacrebleu: {'score': 5.730192069189417, 'counts': [8, 3, 1, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 9.090909090909092, 3.125, 1.6129032258064515], 'bp': 1.0, 'sys_len': 34, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.09090909090909091, 0.03125, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.096774193548387, 'translation_length': 34, 'reference_length': 31} Rouge: {'rouge1': 0.2711864406779661, 'rouge2': 0.07017543859649124, 'rougeL': 0.23728813559322032, 'rougeLsum': 0.23728813559322032} Sari: {'sari': 41.34302313065754} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['« Kaum hatte der Wolf das gesagt, so that er einen Satz aus dem Bett und verschlang das arme Rotkäppchen.'] Prediction: ['Der Wolf hatte einen Satz aus dem Bett und verschlang das arme Rotkäppchen.\nKaum hatte der Wolf das gesagt, so hatte er einen Satz aus dem Bett und verschlang das arme Rotkäppchen.'] Label: [['Und frisst auch Rot·käppchen.\nDa springt der Wolf aus dem Bett.']] Sacrebleu: {'score': 5.376437540689003, 'counts': [7, 3, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [20.0, 8.823529411764707, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.08823529411764706, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6923076923076925, 'translation_length': 35, 'reference_length': 13} Rouge: {'rouge1': 0.2978723404255319, 'rouge2': 0.13333333333333333, 'rougeL': 0.2978723404255319, 'rougeLsum': 0.2978723404255319} Sari: {'sari': 41.18185735832795} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Aber, Großmutter, was hast du für ein entsetzlich großes Maul!« »Daß ich dich besser fressen kann.'] Prediction: ['Ein entsetzlich großes Maul ist im Alter von 99 Jahren gestorben.\nImmer wieder war ein entsetzlich großes Maul.\nAber auch immer wieder fressen kann.'] Label: [[': So kann ich dich besser fressen.\nUnd der Wolf antwortet mit tiefer Stimme: Warum hast du so einen großen Mund?\nUnd Rot∙käppchen fragt: Liebe Groß·mutter.']] Sacrebleu: {'score': 1.692419382500933, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 0.8623033568332588, 'sys_len': 27, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8623033568332588, 'length_ratio': 0.8709677419354839, 'translation_length': 27, 'reference_length': 31} Rouge: {'rouge1': 0.14545454545454548, 'rouge2': 0.0, 'rougeL': 0.07272727272727274, 'rougeLsum': 0.10909090909090909} Sari: {'sari': 29.23202614379085} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['« »Daß ich dich besser packen kann.«'] Prediction: ['Einige Jahre nach der Nacht auf Sonntag wurde von der Polizei verhaftet.\nDie Polizei vermutet, dass sie sich besser packen kann.\nDie Polizei verhaftet, dass sie sich besser packen kann.'] Label: [['Der Wolf antwortet: So kann ich dich besser packen.']] Sacrebleu: {'score': 2.5115381601394384, 'counts': [4, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1818181818181817, 'translation_length': 35, 'reference_length': 11} Rouge: {'rouge1': 0.20512820512820512, 'rouge2': 0.05405405405405405, 'rougeL': 0.20512820512820512, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 31.035353535353533} Flesh Reading Ease: 70.55 ---------------------------------------- Source: ['« »Ei, Großmutter, was hast du für große Hände!'] Prediction: ['Ein großes Hände-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Gebünde-Geb'] Label: [['Warum hast du so große Hände?\nGroß·mutter.\nLiebe Rot∙käppchen fragt.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [3, 2, 1, 0], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 0.03567399334725241, 'sys_len': 3, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 0.03567399334725241, 'length_ratio': 0.23076923076923078, 'translation_length': 3, 'reference_length': 13} Rouge: {'rouge1': 0.03592814371257485, 'rouge2': 0.012121212121212121, 'rougeL': 0.03592814371257485, 'rougeLsum': 0.03592814371257485} Sari: {'sari': 45.45454545454546} Flesh Reading Ease: -4210.51 ---------------------------------------- Source: ['»Ei, Großmutter, was hast du für große Augen!« »Daß ich dich besser sehen kann.'] Prediction: ['Einige Tage später wurde im Alter von 99 Jahren verstorben.\nIm Alter von 99 Jahren wurde der Frau von ihrem Mann aufgefunden.\nDie Frau war zuvor nicht mehr gefragt.'] Label: [['So kann ich dich besser sehen.\nUnd der Wolf antwortet mit hoher Stimme: Warum hast du so große Augen?\nUnd Rot∙käppchen fragt: Liebe Groß·mutter.']] Sacrebleu: {'score': 1.526608193588886, 'counts': [3, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [9.375, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.09375, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.103448275862069, 'translation_length': 32, 'reference_length': 29} Rouge: {'rouge1': 0.03448275862068965, 'rouge2': 0.0, 'rougeL': 0.03448275862068965, 'rougeLsum': 0.03448275862068965} Sari: {'sari': 27.083642800554557} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['« »Daß ich dich besser hören kann.«'] Prediction: ['Der frühere Mann überrascht mit seinem ähnlichen Freund, der sich in der Nacht auf Sonntag überrascht.\nEr wurde von der Nacht auf Sonntag überrascht.\nDie Frau war zuvor auf Sonntag zu sehen.'] Label: [['So kann ich dich besser hören.\nUnd der Wolf antwortet mit hoher Stimme:']] Sacrebleu: {'score': 1.3494116947566301, 'counts': [3, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [8.333333333333334, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.08333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 36, 'reference_length': 15} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.0, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 23.908730158730158} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['»Ei, Großmutter, was hast du für große Ohren!'] Prediction: ['Eine Frau, die sich am Freitag in der Nacht auf Sonntag in die Nacht auf Sonntag geschlossen hat, ist nicht nur ganz nach dem Titel.\nIm Interview mit der 20-Minuten-App spricht sie über ihre Worte, sondern über ihre Worte, die sie sind, wie sie ihnen ihre Freunde aus dem TV-Interview mit ihrem Mann über ihren Leben geschickt hat.'] Label: [['Warum hast du so große Ohren?\nDeshalb fragt Rot∙käppchen: Liebe Groß·mutter.']] Sacrebleu: {'score': 0.5398548275054964, 'counts': [1, 0, 0, 0], 'totals': [67, 66, 65, 64], 'precisions': [1.492537313432836, 0.7575757575757576, 0.38461538461538464, 0.1953125], 'bp': 1.0, 'sys_len': 67, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.014925373134328358, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.785714285714286, 'translation_length': 67, 'reference_length': 14} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 44.93827160493828} Flesh Reading Ease: 63.25 ---------------------------------------- Source: ['da lag die Großmutter, und hatte die Haube tief ins Gesicht gesetzt und sah so wunderlich aus.'] Prediction: ['Eine Frau hatte in der Nacht auf Sonntag ihre Haube gesetzt und sah so wunderlich aus.\nDie Frau hatte die Haube tief ins Gesicht gesetzt und sah so wunderlich aus.\nDie Frau hatte die Haube tief ins Gesicht gesetzt und sah so wunderlich aus.'] Label: [['Deshalb kann Rot∙käppchen das Gesicht vom Wolf nicht sehen.\nDer Wolf hat die Haube von der Groß·mutter auf.']] Sacrebleu: {'score': 2.126286556148234, 'counts': [7, 1, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [14.893617021276595, 2.1739130434782608, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.14893617021276595, 0.021739130434782608, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.35, 'translation_length': 47, 'reference_length': 20} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.031746031746031744, 'rougeL': 0.0923076923076923, 'rougeLsum': 0.12307692307692307} Sari: {'sari': 39.73803973803974} Flesh Reading Ease: 77.55 ---------------------------------------- Source: ['Darauf ging es zum Bett und zog die Vorhänge zurück;'] Prediction: ['Am Mittwochabend ging es zum Bett und zog die Vorhänge zurück.\nDas Bett ging zum Bett und zog die Vorhänge zurück.'] Label: [['Rot∙käppchen geht zum Bett von der Groß·mutter.']] Sacrebleu: {'score': 3.644667088679882, 'counts': [3, 1, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 4.545454545454546, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.875, 'translation_length': 23, 'reference_length': 8} Rouge: {'rouge1': 0.11428571428571428, 'rouge2': 0.06060606060606061, 'rougeL': 0.11428571428571428, 'rougeLsum': 0.11428571428571428} Sari: {'sari': 39.88215488215488} Flesh Reading Ease: 81.75 ---------------------------------------- Source: ['« Es rief: »Guten Morgen,« bekam aber keine Antwort.'] Prediction: ['Der frühere Vorwurf der Schweizer Welt ist in der Nacht auf Sonntag zu Gast.\nDie Antworten sind noch unklar.'] Label: [['Aber die Groß∙mutter antwortet nicht.\nGuten Morgen.\nUnd ruft: Liebe Groß·mutter.']] Sacrebleu: {'score': 2.159701133933343, 'counts': [2, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [9.523809523809524, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 21, 'reference_length': 15} Rouge: {'rouge1': 0.060606060606060615, 'rouge2': 0.0, 'rougeL': 0.060606060606060615, 'rougeLsum': 0.060606060606060615} Sari: {'sari': 60.034965034965026} Flesh Reading Ease: 88.6 ---------------------------------------- Source: ["Es wunderte sich, daß die Thür aufstand, und wie es in die Stube trat, so kam es ihm so seltsam darin vor, daß es dachte: »Ei, du mein Gott, wie ängstlich wird mir's heute zu Mut, und bin sonst so gern bei der Großmutter!"] Prediction: ['Ein Mann hat einen ehemaligen Schlagzeilen in der Stube geschützt.\nDer Mann hatte sich seltsam darin vor und seltsam darin vor.\nDer Schlagzeilen hatte seine Thür aufstand und seltsam darin vor.'] Label: [['Rot·käppchen bekommt Angst.\nUnd Rot∙käppchen wundert sich.\nDie Tür ist offen.\nRot·käppchen kommt zum Haus von der Groß·mutter.']] Sacrebleu: {'score': 1.6276888006478718, 'counts': [5, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5454545454545454, 'translation_length': 34, 'reference_length': 22} Rouge: {'rouge1': 0.13559322033898305, 'rouge2': 0.0, 'rougeL': 0.06779661016949153, 'rougeLsum': 0.1016949152542373} Sari: {'sari': 45.33730158730159} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['Rotkäppchen aber war nach den Blumen herumgelaufen, und als es so viel zusammen hatte, daß es keine mehr tragen konnte, fiel ihm die Großmutter wieder ein und es machte sich auf den Weg zu ihr.'] Prediction: ['Ein Mann hat einen Blumen herumgelaufen, als es so viel zusammen hatte, daß es keine mehr tragen konnte.\nDer Blumen war nach den Blumen herumgelaufen.\nDer Mann fiel dabei wieder ein und machte sich auf den Weg zu ihr.'] Label: [['Und läuft jetzt schnell zum Haus von der Groß·mutter.\nRot·käppchen geht zurück zum Weg.\nNach einer Weile denkt Rot∙käppchen plötzlich wieder an die Groß∙mutter.\nRot∙käppchen hat viele Blumen gepflückt.\nRot∙käppchen ist immer noch auf der Wiese im Wald.']] Sacrebleu: {'score': 1.3995516592202837, 'counts': [8, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [18.181818181818183, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0232558139534884, 'translation_length': 44, 'reference_length': 43} Rouge: {'rouge1': 0.19780219780219782, 'rouge2': 0.0, 'rougeL': 0.08791208791208792, 'rougeLsum': 0.19780219780219782} Sari: {'sari': 35.53240740740741} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Dann that er ihre Kleider an, setzte ihre Haube auf, legte sich in ihr Bett und zog die Vorhänge vor.'] Prediction: ['Ein Mann hatte sich in einem Bett eine Haube entdeckt.\nDas Kleider wurde dabei verletzt.\nDas Kleider wurde dabei verletzt.'] Label: [['Der Wolf legt sich in das Bett von der Groß∙mutter.\nDann zieht der Wolf die Kleider von der Groß∙mutter an.']] Sacrebleu: {'score': 4.334264033674369, 'counts': [6, 1, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [26.08695652173913, 4.545454545454546, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.2608695652173913, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0454545454545454, 'translation_length': 23, 'reference_length': 22} Rouge: {'rouge1': 0.23809523809523808, 'rouge2': 0.05, 'rougeL': 0.1904761904761905, 'rougeLsum': 0.23809523809523808} Sari: {'sari': 63.59943977591036} Flesh Reading Ease: 73.85 ---------------------------------------- Source: ['« Der Wolf drückte auf die Klinke, die Thür sprang auf und er ging, ohne ein Wort zu sprechen, gerade zum Bett der Großmutter und verschluckte sie.'] Prediction: ['Eine Thür sprang auf und er ging, ohne ein Wort zu sprechen.\nDer Wolf verschluckte sie und verschluckte sie.\nDie Thür sprang auf und er ging, ohne ein Wort zu sprechen, gerade zum Bett der Großmutter.'] Label: [['Und der Wolf frisst die Groß∙mutter ganz schnell.\nDer Wolf geht zum Bett von der Groß∙mutter.']] Sacrebleu: {'score': 4.446393436963015, 'counts': [7, 3, 1, 0], 'totals': [42, 41, 40, 39], 'precisions': [16.666666666666668, 7.317073170731708, 2.5, 1.2820512820512822], 'bp': 1.0, 'sys_len': 42, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.07317073170731707, 0.025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 42, 'reference_length': 18} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.14545454545454545, 'rougeL': 0.3157894736842105, 'rougeLsum': 0.2807017543859649} Sari: {'sari': 37.85099322380024} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ['»Drück nur auf die Klinke,« rief die Großmutter, »ich bin zu schwach und kann nicht aufstehen.'] Prediction: ['Eine Frau, die sich auf der Klinke geschwach, hat sich zu schwach und kann nicht aufstehen.\nDie Frau rief die Großmutter, die ihn nicht aufstehen.'] Label: [['Ich kann nicht aufstehen.\nDie Groß∙mutter sagt: Komm nur herein.']] Sacrebleu: {'score': 12.16411062125622, 'counts': [6, 4, 3, 2], 'totals': [30, 29, 28, 27], 'precisions': [20.0, 13.793103448275861, 10.714285714285714, 7.407407407407407], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.12164110621256226, 'precisions': [0.2, 0.13793103448275862, 0.10714285714285714, 0.07407407407407407], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.3243243243243243, 'rouge2': 0.28571428571428575, 'rougeL': 0.3243243243243243, 'rougeLsum': 0.3243243243243243} Sari: {'sari': 48.144274464642514} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['»Rotkäppchen, das bringt Kuchen und Wein, mach auf.«'] Prediction: ['Einige Schweizer kämpfen mit Rotkäppchen auf.\nDie Welt ist eine neue Woche.\nDie Welt ist eine Woche nach dem Wert von 20 Minuten.'] Label: [['Ich bringe dir einen Korb von der Mutter.\nRot∙käppchen.']] Sacrebleu: {'score': 1.9011755113058346, 'counts': [3, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [11.538461538461538, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3636363636363638, 'translation_length': 26, 'reference_length': 11} Rouge: {'rouge1': 0.16666666666666666, 'rouge2': 0.0, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 56.196581196581185} Flesh Reading Ease: 84.55 ---------------------------------------- Source: ['»Wer ist draußen?«'] Prediction: ['Der frühere Weltkriegsverband hat seine Frau aufgefunden.\nDie Frau war mit ihrem Partner, der sich über ihre Frau aufgefunden hat, über ihre Frau zu sein.\nDie Frau war mit ihrem Partner aufgefunden und war auf ihre Frauen aufgefunden.'] Label: [['Die Groß·mutter fragt: Wer ist da?']] Sacrebleu: {'score': 0.8522452865706931, 'counts': [1, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [2.3255813953488373, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.023255813953488372, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.375, 'translation_length': 43, 'reference_length': 8} Rouge: {'rouge1': 0.043478260869565216, 'rouge2': 0.0, 'rougeL': 0.043478260869565216, 'rougeLsum': 0.043478260869565216} Sari: {'sari': 55.59523809523809} Flesh Reading Ease: 67.85 ---------------------------------------- Source: ['Der Wolf aber ging geradeswegs nach dem Hause der Großmutter und klopfte an die Thür.'] Prediction: ['Ein Wolf klopfte an die Thür und klopfte an die Thür.\nDer Wolf ging geradeswegs nach dem Hause der Großmutter und klopfte an die Thür.'] Label: [['Der Wolf klopft an die Tür.\nIn dieser Zeit geht der Wolf zum Haus von der Groß∙mutter.']] Sacrebleu: {'score': 4.668049023095242, 'counts': [8, 2, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [29.62962962962963, 7.6923076923076925, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2962962962962963, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4210526315789473, 'translation_length': 27, 'reference_length': 19} Rouge: {'rouge1': 0.375, 'rouge2': 0.17391304347826086, 'rougeL': 0.375, 'rougeLsum': 0.375} Sari: {'sari': 39.941520467836256} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['Und wenn es eine gebrochen hatte, meinte es, weiter hinaus stände eine schönere, und lief danach, und geriet immer tiefer in den Wald hinein.'] Prediction: ['Eine gebrochen hatte, meinte es, weiter hinaus stände eine schönere, und lief danach.\nDer Wald geriet immer tiefer in den Wald hinein.\nDas hatte eine gebrochen gebrochen, meinte es, weiter hinaus stände eine schönere, und lief danach.'] Label: [['Und dabei vergisst Rot∙käppchen die Zeit.\nRot∙käppchen möchte nämlich Blumen für die Groß∙mutter pflücken.']] Sacrebleu: {'score': 0.9451258377819046, 'counts': [2, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [4.3478260869565215, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.043478260869565216, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.875, 'translation_length': 46, 'reference_length': 16} Rouge: {'rouge1': 0.03125000000000001, 'rouge2': 0.0, 'rougeL': 0.03125000000000001, 'rougeLsum': 0.03125000000000001} Sari: {'sari': 30.277777777777775} Flesh Reading Ease: 62.4 ---------------------------------------- Source: ['es ist so früh am Tage, daß ich doch zu rechter Zeit ankomme,« lief vom Wege ab in den Wald hinein und suchte Blumen.'] Prediction: ['Immer mehr Blumen lief ein Wege ab in den Wald hinein und suchte Blumen.\nDer Wege lief vom Wege ab in den Wald hinein und suchte Blumen.'] Label: [['Und geht zu der Wiese.\nDeshalb verlässt Rot∙käppchen den Weg.']] Sacrebleu: {'score': 1.6934096677198087, 'counts': [3, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [10.344827586206897, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.10344827586206896, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4166666666666665, 'translation_length': 29, 'reference_length': 12} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.15, 'rougeLsum': 0.1} Sari: {'sari': 37.417929292929294} Flesh Reading Ease: 84.6 ---------------------------------------- Source: ['»Wenn ich der Großmutter einen frischen Strauß mitbringe, der wird ihr auch Freude machen:'] Prediction: ['Ein frischer Strauß hat eine Frau mit einem frischen Strauß mitbringen.\nDie Frau wird ihr auch Freude machen.'] Label: [['Groß∙mutter freut sich sicher über einen Blumen∙strauß.']] Sacrebleu: {'score': 1.9146030690102511, 'counts': [1, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [5.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 20, 'reference_length': 8} Rouge: {'rouge1': 0.07407407407407407, 'rouge2': 0.0, 'rougeL': 0.07407407407407407, 'rougeLsum': 0.07407407407407407} Sari: {'sari': 33.27205882352941} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Rotkäppchen schlug die Augen auf, und als es sah wie die Sonnenstrahlen durch die Bäume hin und her tanzten, und alles voll schöner Blumen stand, dachte es:'] Prediction: ['Ein Blumen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-Käppchen-'] Label: [['Rot∙käppchen denkt: Und die Vögel singen.\nDie Sonne scheint zwischen den Bäumen.\nRot∙käppchen schaut sich um.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [2, 1, 0, 0], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 0.00012340980408667956, 'sys_len': 2, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 0.00012340980408667956, 'length_ratio': 0.1, 'translation_length': 2, 'reference_length': 20} Rouge: {'rouge1': 0.039603960396039604, 'rouge2': 0.02, 'rougeL': 0.039603960396039604, 'rougeLsum': 0.039603960396039604} Sari: {'sari': 57.638888888888886} Flesh Reading Ease: -5116.26 ---------------------------------------- Source: ['»Rotkäppchen, sieh einmal die schönen Blumen, die ringsumher stehen, warum guckst du dich nicht um?'] Prediction: ['Der Schweizer Weltkonzern hat einen neuen Chef.\nEr hat sich mit dem Wohnungs-Konzern über die schönen Blumen und der ringsumher geschickt.\nWir haben die komplette Wohnungs-Konzern mit dem Chef-Konzern über die Wohnungs-Konzern überrascht.'] Label: [['Schau dich einmal um.\nAuf der Wiese hier im Wald wachsen schöne Blumen.']] Sacrebleu: {'score': 1.4500372328365223, 'counts': [4, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [11.11111111111111, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 36, 'reference_length': 15} Rouge: {'rouge1': 0.11538461538461539, 'rouge2': 0.0, 'rougeL': 0.11538461538461539, 'rougeLsum': 0.11538461538461539} Sari: {'sari': 42.74193548387097} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['ich glaube du hörst gar nicht, wie die Vöglein so lieblich singen?'] Prediction: ['Der Vater von Vöglein singt nicht.\nWie sie sich singen, glaube du hörst gar nicht.\nWie sie sich singen, glaube du hörst gar nicht.'] Label: [['Und die Vögel singen.\nEs ist so schön hier im Wald.']] Sacrebleu: {'score': 1.6934096677198087, 'counts': [3, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [10.344827586206897, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.10344827586206896, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.230769230769231, 'translation_length': 29, 'reference_length': 13} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 32.43055555555556} Flesh Reading Ease: 95.95 ---------------------------------------- Source: ['« Da ging er ein Weilchen neben Rotkäppchen her, dann sprach er:'] Prediction: ['Ein Weilchen neben Rotkäppchen ist in der Schweiz gestorben.\nDer Rotkäppchen-Konzern spricht von einem Weilchen mit einem Weilchen.\nEr wollte sich mit dem Rotkäppchen-Konzern nicht mehr ausweisen.'] Label: [['Dann sagt der Wolf zu Rot∙käppchen: Also geht der Wolf ein Stück auf dem Weg mit Rot∙käppchen mit.']] Sacrebleu: {'score': 1.8564670505078418, 'counts': [5, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [16.666666666666668, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 30, 'reference_length': 20} Rouge: {'rouge1': 0.2909090909090909, 'rouge2': 0.0, 'rougeL': 0.14545454545454545, 'rougeLsum': 0.21818181818181817} Sari: {'sari': 35.78703703703703} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['du mußt es listig anfangen, damit du beide erschnappst.'] Prediction: ['Du mußt es listig anfangen, damit du beide erschnappst.\nIm Internet gibts die besten Tweets, die sich auf Social Media bei der Liste verkündet werden.\nHier gibts die besten Tweets, die sich auf Social Media bekommen, die sich auf Social Media bekommen.'] Label: [['Aber dafür muss der Wolf schlau sein.\nUnd der Wolf will die Groß∙mutter fressen.\nDer Wolf will Rot∙käppchen fressen.\nDer Wolf hat eine Idee.']] Sacrebleu: {'score': 1.1133308819227488, 'counts': [5, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [10.204081632653061, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.10204081632653061, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 49, 'reference_length': 28} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 35.858585858585855} Flesh Reading Ease: 72.4 ---------------------------------------- Source: ['Das junge zarte Ding, das ist ein fetter Bissen, der wird noch besser schmecken als die Alte; Der Wolf dachte bei sich: »'] Prediction: ['Ein fetter Bissen, der wird noch besser schmecken als die Alte, ist im Junge zarte Ding.\nDer Wolf dachte bei sich: Der Wolf dachte bei sich:'] Label: [['Und Rot∙käppchen schmeckt sicher besser als die alte Groß∙mutter.\nRot∙käppchen schmeckt sicher gut.\nIch möchte Rot∙käppchen fressen.\nUnd zart.\nUnd denkt: Rot∙käppchen ist jung.\nDer Wolf ist sehr hungrig.']] Sacrebleu: {'score': 5.373262652255969, 'counts': [8, 3, 1, 0], 'totals': [31, 30, 29, 28], 'precisions': [25.806451612903224, 10.0, 3.4482758620689653, 1.7857142857142858], 'bp': 0.8510449576692257, 'sys_len': 31, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.25806451612903225, 0.1, 0.034482758620689655, 0.0], 'brevity_penalty': 0.8510449576692258, 'length_ratio': 0.8611111111111112, 'translation_length': 31, 'reference_length': 36} Rouge: {'rouge1': 0.2153846153846154, 'rouge2': 0.09523809523809523, 'rougeL': 0.2153846153846154, 'rougeLsum': 0.2153846153846154} Sari: {'sari': 42.98209780988419} Flesh Reading Ease: 90.95 ---------------------------------------- Source: ['»Noch eine gute Viertelstunde weiter im Wald, unter den drei großen Eichbäumen, da steht ihr Haus, unten sind die Nußhecken, das wirst du ja wissen,« sagte Rotkäppchen.'] Prediction: ['Eine Viertelstunde weiter im Wald ist eine gute Viertelstunde.\nDas wird nicht mehr durchgeführt, sondern auch eine gute Viertelstunde.\nDas Haus steht in einem großen Haus.'] Label: [['Das Haus steht unter den 3 Eichen.\nDann kommt das Haus von meiner Groß∙mutter.\nIch muss eine Viertel∙stunde gehen.\nRot∙käppchen antwortet:']] Sacrebleu: {'score': 5.905575616757554, 'counts': [8, 2, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 6.896551724137931, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.06896551724137931, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 30, 'reference_length': 25} Rouge: {'rouge1': 0.2641509433962264, 'rouge2': 0.07843137254901962, 'rougeL': 0.15094339622641512, 'rougeLsum': 0.2641509433962264} Sari: {'sari': 37.70850737956001} Flesh Reading Ease: 66.0 ---------------------------------------- Source: ['»Rotkäppchen, wo wohnt deine Großmutter?«'] Prediction: ['Am Freitagabend wurde der Schweizer Chef der Stadt Zürich (D) überrascht.\nEr hatte sich mit dem Rotkäppchen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen in der Schweiz zu Gast.\nDer Chef kam zu den Vorwürfen, dass sie sich mit dem Rotkäppchen-Kollegen-Kollegen-Kollegen-'] Label: [['Und fragt: Wo wohnt deine Groß∙mutter?\nDer Wolf ist neugierig.']] Sacrebleu: {'score': 1.1216940038341034, 'counts': [2, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [5.128205128205129, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.05128205128205128, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 39, 'reference_length': 13} Rouge: {'rouge1': 0.016129032258064516, 'rouge2': 0.0, 'rougeL': 0.016129032258064516, 'rougeLsum': 0.016129032258064516} Sari: {'sari': 34.01211361737678} Flesh Reading Ease: -299.31 ---------------------------------------- Source: ['»Kuchen und Wein, gestern haben wir gebacken, da soll sich die kranke und schwache Großmutter etwas zu gute thun und sich damit stärken.«'] Prediction: ['Eine schwache Großmutter hat sich in der Nacht auf Sonntag zu einem kranke und schwache Wohnungsdelikt gebacken.\nDie kranke und schwache Großmutter stärken etwas zu gute thun und sich damit stärken.'] Label: [['Meine Groß∙mutter soll wieder gesund werden.\nUnd schwach.\nMeine Groß∙mutter ist nämlich krank.\nBeides ist für Groß∙mutter.\nUnd Kuchen.\nRot∙käppchen antwortet: Wein.']] Sacrebleu: {'score': 1.3355980882200826, 'counts': [2, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [6.0606060606060606, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.06060606060606061, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1379310344827587, 'translation_length': 33, 'reference_length': 29} Rouge: {'rouge1': 0.1875, 'rouge2': 0.06451612903225808, 'rougeL': 0.1875, 'rougeLsum': 0.1875} Sari: {'sari': 33.137110620554324} Flesh Reading Ease: 65.05 ---------------------------------------- Source: ['« »Was trägst du unter der Schürze?«'] Prediction: ['Einige Tage nach der Schürze in der Nähe von Schützen im Alter von 99 Jahren ist gestorben.\nNun hat sich der Schürze-Kollege über die Schürze geschickt.\nEr wurde von einem ähnlichen Schutzmassnahmen verletzt.'] Label: [['Der Wolf fragt: Was hast du in deinem Korb?']] Sacrebleu: {'score': 1.0253311603116817, 'counts': [1, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [2.7777777777777777, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.027777777777777776, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.272727272727273, 'translation_length': 36, 'reference_length': 11} Rouge: {'rouge1': 0.08333333333333333, 'rouge2': 0.0, 'rougeL': 0.08333333333333333, 'rougeLsum': 0.08333333333333333} Sari: {'sari': 51.031746031746025} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['»Zur Großmutter.'] Prediction: ['Am Freitagabend wurde der Schweizer Chef der Stadt überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschend überraschende überraschend überraschend überraschende überraschende überraschend überraschende überraschend überraschende überraschende überraschende überraschend überraschende überraschende überraschende überraschende ü'] Label: [['Rot∙käppchen antwortet: Ich gehe zur Groß∙mutter.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [79, 78, 77, 76], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 79, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 9.875, 'translation_length': 79, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 55.55555555555555} Flesh Reading Ease: -74.51 ---------------------------------------- Source: ['»Wohinaus so früh, Rotkäppchen?«'] Prediction: ['Der Schweizer Sportler Thomas Müller ist ein Jahrzehnte.\nEr war mit seinem Sportler auf die Welt.\nEr war mit seinem Sportler auf die Welt geworden.'] Label: [['Wohin gehst du?\nDer Wolf fragt Rot∙käppchen:']] Sacrebleu: {'score': 1.3353534059549443, 'counts': [1, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [3.5714285714285716, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.03571428571428571, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.111111111111111, 'translation_length': 28, 'reference_length': 9} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 57.80952380952381} Flesh Reading Ease: 83.95 ---------------------------------------- Source: ['» »Guten Tag, Rotkäppchen,« sprach er.'] Prediction: ['Der Schweizer Weltcup-Konzert ist am Sonntag in der Nacht auf Sonntag gestartet.\nEr wurde von einem Sport-Konzert von einem Rotkäppchen-Konzert von über 100 Jahren gestartet.\nDer Schweizer spricht von einer Weltcup-Konzert von einem Rotkäppchen-Konzert.'] Label: [['Und sagt: Hallo Rot∙käppchen.\nDer Wolf sieht Rot·käppchen.']] Sacrebleu: {'score': 2.205438848664384, 'counts': [3, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [8.108108108108109, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.08108108108108109, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3636363636363638, 'translation_length': 37, 'reference_length': 11} Rouge: {'rouge1': 0.11320754716981131, 'rouge2': 0.0, 'rougeL': 0.11320754716981131, 'rougeLsum': 0.11320754716981131} Sari: {'sari': 64.87010559760769} Flesh Reading Ease: 57.55 ---------------------------------------- Source: ['Rotkäppchen aber wußte nicht was das für ein böses Tier war und fürchtete sich nicht vor ihm.'] Prediction: ['Ein Tier für ein böses Tier war nicht vor ihm.\nDas Tier war nicht vor ihm.'] Label: [['Deshalb hat Rot∙käppchen auch keine Angst vor dem Wolf.\nAber das weiß Rot∙käppchen nicht.\nDer Wolf ist ein böses Tier.']] Sacrebleu: {'score': 7.484348244150438, 'counts': [7, 2, 1, 0], 'totals': [18, 17, 16, 15], 'precisions': [38.888888888888886, 11.764705882352942, 6.25, 3.3333333333333335], 'bp': 0.7574651283969664, 'sys_len': 18, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.3888888888888889, 0.11764705882352941, 0.0625, 0.0], 'brevity_penalty': 0.7574651283969664, 'length_ratio': 0.782608695652174, 'translation_length': 18, 'reference_length': 23} Rouge: {'rouge1': 0.32558139534883723, 'rouge2': 0.14634146341463414, 'rougeL': 0.18604651162790697, 'rougeLsum': 0.32558139534883723} Sari: {'sari': 44.840185618874145} Flesh Reading Ease: 107.65 ---------------------------------------- Source: ['Wie nun Rotkäppchen in den Wald kam, begegnete ihm der Wolf.'] Prediction: ['Ein Wolf kam in den Wald mit Rotkäppchen in den Wald.\nDer Wolf begegnete ihm der Wolf.'] Label: [['Im Wald trifft Rot∙käppchen einen Wolf.\nDann geht Rot·käppchen in den Wald zur Groß·mutter.']] Sacrebleu: {'score': 10.307386760781874, 'counts': [7, 3, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [36.8421052631579, 16.666666666666668, 5.882352941176471, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.3684210526315789, 0.16666666666666666, 0.058823529411764705, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1875, 'translation_length': 19, 'reference_length': 16} Rouge: {'rouge1': 0.3243243243243243, 'rouge2': 0.17142857142857143, 'rougeL': 0.27027027027027023, 'rougeLsum': 0.3243243243243243} Sari: {'sari': 46.666666666666664} Flesh Reading Ease: 95.45 ---------------------------------------- Source: ['»Ich will schon alles gut machen,« sagte Rotkäppchen zur Mutter, und gab ihr die Hand darauf.'] Prediction: ['Rotkäppchen machte einen Hand darauf.\nDer Mutter gab ihr darauf, ihr darauf zu schicken.'] Label: [['Das verspreche ich dir.\nUnd ich beeile mich. Ich bleibe auf dem Weg.\nLiebe Mutter.\nRot∙käppchen antwortet:']] Sacrebleu: {'score': 2.242872568617871, 'counts': [3, 0, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [17.647058823529413, 3.125, 1.6666666666666667, 0.8928571428571429], 'bp': 0.7451888170134805, 'sys_len': 17, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7451888170134805, 'length_ratio': 0.7727272727272727, 'translation_length': 17, 'reference_length': 22} Rouge: {'rouge1': 0.11764705882352941, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 44.00252525252525} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Mach dich auf, bevor es heiß wird, und wenn du hinauskommst, so geh hübsch sittsam und lauf nicht vom Weg ab, sonst fällst du und zerbrichst das Glas und die Großmutter hat nichts.'] Prediction: ['Du findest hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier'] Label: [['Und pass gut auf die Dinge im Korb auf.\nAber bleib auf dem Weg.\nAlso beeil dich.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [449, 448, 447, 446], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 449, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 22.45, 'translation_length': 449, 'reference_length': 20} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 56.92204301075269} Flesh Reading Ease: -327.51 ---------------------------------------- Source: ['sie ist krank und schwach und wird sich daran laben.'] Prediction: ['Die Schweizerin ist krank und schwach und wird sich daran laben.\nSie wird sich daran laben.'] Label: [['Und schnell gesund werden.\nDie Groß∙mutter soll wieder zu Kräften kommen.\nDie Groß∙mutter ist krank.']] Sacrebleu: {'score': 5.401157445454033, 'counts': [5, 1, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 5.882352941176471, 3.125, 1.6666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.058823529411764705, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 18, 'reference_length': 18} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.0625, 'rougeL': 0.17647058823529413, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 40.70987654320988} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['Eines Tages sprach seine Mutter zu ihm: »Komm, Rotkäppchen, da hast du ein Stück Kuchen und eine Flasche Wein, bring das der Großmutter hinaus;'] Prediction: ['Eine Mutter hat einen Tod eines Tages zu ihm gebracht.\nDie Mutter sprach das, dass ihm Rotkäppchen und Rotkäppchen ein Stück Kuchen bringen.'] Label: [['Bring den Korb zur Groß∙mutter.\nDann sagt die Mutter zu Rot∙käppchen: Und Kuchen.\nIn dem Korb ist Wein.\nAn einem Morgen gibt die Mutter Rot∙käppchen einen Korb.']] Sacrebleu: {'score': 1.8654972123332005, 'counts': [7, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [26.923076923076923, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 0.7939226578179512, 'sys_len': 26, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.2692307692307692, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7939226578179512, 'length_ratio': 0.8125, 'translation_length': 26, 'reference_length': 32} Rouge: {'rouge1': 0.3103448275862069, 'rouge2': 0.07142857142857142, 'rougeL': 0.20689655172413793, 'rougeLsum': 0.3103448275862069} Sari: {'sari': 45.04166666666667} Flesh Reading Ease: 80.75 ---------------------------------------- Source: ['Einmal schenkte sie ihm ein Käppchen von rotem Sammet und weil ihm das so wohl stand, und es nichts anderes mehr tragen wollte, hieß es nur das Rotkäppchen.'] Prediction: ['Einige Frauen schenkten ihm ein Käppchen von rotem Sammet.\nSie schenkte ihm das so wohl, weil ihm das so wohl stand, und es nichts anderes mehr tragen wollte.\nDas Rotkäppchen ist nicht mehr das erste Mal, hieß es nur das Rotkäppchen.'] Label: [['Rot∙käppchen.\nDeshalb heißt das Mädchen: Und will das rote Käppchen immer tragen.\nDas Mädchen mag das rote Käppchen sehr.\nDie Groß∙mutter schenkt dem Mädchen ein rotes Käppchen.']] Sacrebleu: {'score': 2.324594914053299, 'counts': [10, 1, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [21.27659574468085, 2.1739130434782608, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.2127659574468085, 0.021739130434782608, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.46875, 'translation_length': 47, 'reference_length': 32} Rouge: {'rouge1': 0.2716049382716049, 'rouge2': 0.025316455696202528, 'rougeL': 0.22222222222222227, 'rougeLsum': 0.2716049382716049} Sari: {'sari': 32.75479195885928} Flesh Reading Ease: 84.4 ---------------------------------------- Source: ["Von nun an getrauten sich die Räuber nicht weiter in das Haus, den vier Bremer Musikanten gefiel's aber so wohl darin, daß sie nicht wieder heraus wollten."] Prediction: ["Die Räuberin von Bremer Musikanten hat sich in einem Haus in der Nähe des Jahres verlassen.\nDie vier Musikanten wollten sich nicht wieder heraus wollten.\nDie Räuberin hat nun nicht weiter in das Haus, den vier Bremer Musikanten gefiel's aber so wohl darin, daß sie nicht wieder heraus wollten."] Label: [['Deshalb wollen die 4 Tiere auch nicht mehr nach Bremen gehen.\nDie 4 Tiere fühlen sich sehr wohl in dem Haus.\nUnd die 4 Tiere bleiben in dem Haus.\nDer Esel und der Hund und die Katze und der Hahn sind froh.\nUnd die Räuber kommen nie mehr zu dem Haus zurück.\nDie Räuber laufen fort.\nJetzt haben auch die anderen Räuber Angst.']] Sacrebleu: {'score': 1.9020862515662926, 'counts': [13, 2, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [24.074074074074073, 3.7735849056603774, 0.9615384615384616, 0.49019607843137253], 'bp': 0.7435670792059064, 'sys_len': 54, 'ref_len': 70} Bleu: {'bleu': 0.0, 'precisions': [0.24074074074074073, 0.03773584905660377, 0.0, 0.0], 'brevity_penalty': 0.7435670792059064, 'length_ratio': 0.7714285714285715, 'translation_length': 54, 'reference_length': 70} Rouge: {'rouge1': 0.21487603305785125, 'rouge2': 0.03361344537815126, 'rougeL': 0.16528925619834714, 'rougeLsum': 0.19834710743801656} Sari: {'sari': 33.346780483344354} Flesh Reading Ease: 70.1 ---------------------------------------- Source: ['Da machte ich, daß ich fortkam.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in die Nacht auf Sonntag in die Nacht gefunden.\nEr warnt, dass er sich nicht mehr verlassen hatte.\nNun wurde er von der Nacht geschickt.'] Label: [['Deshalb bin ich fortgelaufen.']] Sacrebleu: {'score': 0.969094302009921, 'counts': [1, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [2.6315789473684212, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.02631578947368421, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.6, 'translation_length': 38, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 61.66666666666667} Flesh Reading Ease: 92.65 ---------------------------------------- Source: ['und oben auf dem Dache, da sitzt der Richter, der rief, bringt mir den Schelm her.'] Prediction: ['Der Schelm ist ein riesiger Richter.\nDer Richter bringt den Schelm her.'] Label: [['Der Polizist wollte mich fangen.\nUnd auf dem Dach sitzt ein Polizist.']] Sacrebleu: {'score': 4.016138436407654, 'counts': [4, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [28.571428571428573, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 14, 'reference_length': 14} Rouge: {'rouge1': 0.16666666666666666, 'rouge2': 0.0, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 33.470209339774556} Flesh Reading Ease: 97.95 ---------------------------------------- Source: ['und auf dem Hof liegt ein schwarzes Ungetüm, das hat mit einer Holzkeule auf mich losgeschlagen;'] Prediction: ['Ein Ungetüm hat mit einer Holzkeule auf mich losgeschlagen.\nDer Ungetüm hat mit einer Holzkeule auf mich losgeschlagen.'] Label: [['Das Monster hat mich getreten.\nUnd bei dem Mist∙haufen ist ein Monster.']] Sacrebleu: {'score': 2.7076576267554477, 'counts': [4, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [20.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 20, 'reference_length': 14} Rouge: {'rouge1': 0.18181818181818185, 'rouge2': 0.0, 'rougeL': 0.12121212121212123, 'rougeLsum': 0.18181818181818185} Sari: {'sari': 35.625} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['und vor der Thür steht ein Mann mit einem Messer, der hat mich ins Bein gestochen;'] Prediction: ['Ein Mann hat einen Messer in einem Bein gestochen.\nDer Mann hat mich ins Bein gestochen.'] Label: [['Mit dem Messer hat mir der Mann ins Bein gestochen.\nDer Mann hat ein Messer.\nUnd vor der Tür steht ein Mann.']] Sacrebleu: {'score': 24.818070689663895, 'counts': [11, 6, 5, 4], 'totals': [18, 17, 16, 15], 'precisions': [61.111111111111114, 35.294117647058826, 31.25, 26.666666666666668], 'bp': 0.6778095780054504, 'sys_len': 18, 'ref_len': 25} Bleu: {'bleu': 0.24818070689663893, 'precisions': [0.6111111111111112, 0.35294117647058826, 0.3125, 0.26666666666666666], 'brevity_penalty': 0.6778095780054504, 'length_ratio': 0.72, 'translation_length': 18, 'reference_length': 25} Rouge: {'rouge1': 0.5128205128205128, 'rouge2': 0.3243243243243243, 'rougeL': 0.30769230769230765, 'rougeLsum': 0.46153846153846156} Sari: {'sari': 46.813099340273254} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['« Da lief der Räuber, was er konnte, zu seinem Hauptmann zurück und sprach: »Ach; in dem Hause sitzt eine greuliche Hexe, die hat mich angehaucht und mit ihren langen Fingern mir das Gesicht zerkratzt;'] Prediction: ['Immer mehr als eine halbe Hexe, die in der Nähe des Hauptmannes zurückzurückzuhalten, sitzt eine greuliche Hexe.\nDer Räuber hatte sich mit ihren langen Fingern das Gesicht zerkratzt.'] Label: [['Die Hexe hat mir das Gesicht zerkratzt.\nIn dem Haus ist eine Hexe.\nDer Räuber erzählt mit einer ängstlichen Stimme: Der Räuber läuft zu den anderen Räubern.\nUnd der Räuber läuft davon.']] Sacrebleu: {'score': 13.747995359241044, 'counts': [12, 6, 4, 2], 'totals': [32, 31, 30, 29], 'precisions': [37.5, 19.35483870967742, 13.333333333333334, 6.896551724137931], 'bp': 0.8553453273074225, 'sys_len': 32, 'ref_len': 37} Bleu: {'bleu': 0.13747995359241044, 'precisions': [0.375, 0.1935483870967742, 0.13333333333333333, 0.06896551724137931], 'brevity_penalty': 0.8553453273074225, 'length_ratio': 0.8648648648648649, 'translation_length': 32, 'reference_length': 37} Rouge: {'rouge1': 0.36619718309859156, 'rouge2': 0.14492753623188406, 'rougeL': 0.22535211267605634, 'rougeLsum': 0.36619718309859156} Sari: {'sari': 43.82266433522056} Flesh Reading Ease: 54.85 ---------------------------------------- Source: ['»Kikeriki! der Hahn aber, der vom Lärmen aus dem Schlaf geweckt und munter geworden war, rief vom Balken herab:'] Prediction: ['Im Internet rief einige Männer aus dem Balken einen Mann aus dem Schlaf geweckt und munter geworden.\nDer Mann war vom Lärmen aus dem Schlaf geweckt und munter geworden.\nDie Männer sind derzeit nicht mehr gefragt.'] Label: [['Der Hahn macht Krach.\nUnd so wird auch der Hahn wach.']] Sacrebleu: {'score': 1.2413584734794654, 'counts': [3, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [7.6923076923076925, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 39, 'reference_length': 13} Rouge: {'rouge1': 0.08, 'rouge2': 0.0, 'rougeL': 0.08, 'rougeLsum': 0.08} Sari: {'sari': 33.680361033302205} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Da erschrak er gewaltig, lief und wollte zur Hinterthür hinaus, aber der Hund, der da lag, sprang auf und biß ihn ins Bein; und als er über den Hof an dem Miste vorbeirannte, gab ihm der Esel noch einen tüchtigen Schlag mit dem Hinterfuß;'] Prediction: ['Ein Hund, der über den Hof an dem Miste vorbeirannte, sprang auf und biß ihn ins Bein.\nDer Hund, der da lag, sprang auf und biß ihn ins Bein.\nDer Hund, der da lag, sprang auf und biß ihn ins Bein.'] Label: [['Der Esel tritt den Räuber.\nAm Mist∙haufen wartet schon der Esel.\nDer Räuber rennt an dem Mist∙haufen vorbei.\nDer Räuber rennt aus dem Haus.\nDer Räuber schreit noch lauter.\nDer Hund beißt den Räuber ins Bein.\nAber vor der Tür liegt noch der Hund.\nDer Räuber rennt zur Tür.\nDer Räuber will schnell aus dem Haus laufen.\nUnd der Räuber schreit.\nJetzt hat der Räuber Angst.']] Sacrebleu: {'score': 3.7018201255974437, 'counts': [15, 6, 2, 0], 'totals': [50, 49, 48, 47], 'precisions': [30.0, 12.244897959183673, 4.166666666666667, 1.0638297872340425], 'bp': 0.5827482523739896, 'sys_len': 50, 'ref_len': 77} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.12244897959183673, 0.041666666666666664, 0.0], 'brevity_penalty': 0.5827482523739896, 'length_ratio': 0.6493506493506493, 'translation_length': 50, 'reference_length': 77} Rouge: {'rouge1': 0.21487603305785125, 'rouge2': 0.08403361344537816, 'rougeL': 0.19834710743801653, 'rougeLsum': 0.19834710743801653} Sari: {'sari': 38.93074841759052} Flesh Reading Ease: 101.95 ---------------------------------------- Source: ['Aber die Katze verstand keinen Spaß, sprang ihm ins Gesicht, spie und kratzte.'] Prediction: ['Ein 20-Minuten-Podcast-Host hat am Freitag über seine Leiche diskutiert.\nIn der Folge wurde der Direktstream-Host über die Katze verlassen.\nIn der Folge wurde der Direktstream-Host über die Katze gesichtet.'] Label: [['Und die Katze zerkratzt das Gesicht vom Räuber.\nDie Katze springt den Räuber an.']] Sacrebleu: {'score': 2.7374353552268276, 'counts': [5, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.125, 'translation_length': 34, 'reference_length': 16} Rouge: {'rouge1': 0.15999999999999998, 'rouge2': 0.08333333333333333, 'rougeL': 0.15999999999999998, 'rougeLsum': 0.15999999999999998} Sari: {'sari': 63.19444444444445} Flesh Reading Ease: 53.3 ---------------------------------------- Source: ['Der Abgeschickte fand alles still, ging in die Küche, ein Licht anzuzünden, und weil er die glühenden, feurigen Augen der Katze für lebendige Kohlen ansah, hielt er ein Schwefelhölzchen daran, daß es Feuer fangen sollte.'] Prediction: ['Ein Schwefelhölzchen hat in der Küche einen Licht angezuzündet.\nDer Abgeschickte fand alles still, ging in die Küche, ein Licht anzuzünden.\nDer Abgeschickte hat sich dabei eine Feuer für lebendige Kohlen geschickt.'] Label: [['Die Augen von der Katze leuchten wie 2 Stücken Kohle.\nDie Augen von der Katze leuchten im Dunkeln.\nDer Räuber denkt: Das ist die Kohle.\nIn der Küche sieht der Räuber 2 leuchtende Punkte.\nAlso geht der Räuber in die Küche.\nDer Räuber will das Licht anmachen.\nEs geht nur 1 Räuber in das Haus.\nAber die Räuber sind vorsichtig:']] Sacrebleu: {'score': 2.777547397624327, 'counts': [12, 5, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [32.432432432432435, 13.88888888888889, 2.857142857142857, 1.4705882352941178], 'bp': 0.4211084553304749, 'sys_len': 37, 'ref_len': 69} Bleu: {'bleu': 0.0, 'precisions': [0.32432432432432434, 0.1388888888888889, 0.02857142857142857, 0.0], 'brevity_penalty': 0.42110845533047503, 'length_ratio': 0.5362318840579711, 'translation_length': 37, 'reference_length': 69} Rouge: {'rouge1': 0.22429906542056074, 'rouge2': 0.1142857142857143, 'rougeL': 0.205607476635514, 'rougeLsum': 0.22429906542056074} Sari: {'sari': 38.2768132387184} Flesh Reading Ease: 64.0 ---------------------------------------- Source: ['Als Mitternacht vorbei war und die Räuber von weitem sahen, daß kein Licht mehr im Hause brannte, auch alles ruhig schien, sprach der Hauptmann: »Wir hätten uns doch nicht sollen ins Bockshorn jagen lassen,« und hieß einen hingehen und das Haus untersuchen.'] Prediction: ['Ein Hauptmann hatte am Sonntag einen Bockshorn in einem Haus untersuchen.\nDer Räuber war von weitem sahen und wurde von der Räuber von weitem sahen.\nDer Hauptmann spricht von seinem Licht und spricht von seinem Licht.'] Label: [['Lasst uns zurück zum Haus gehen.\nVielleicht war es doch kein Gespenst.\nWir haben uns geirrt.\nDeshalb sagt der Anführer von den Räubern: Alles ist ganz still.\nDas Licht im Haus ist aus.\nDie Räuber sehen: Aber die Räuber sind noch in der Nähe vom Haus.']] Sacrebleu: {'score': 1.1693074897753668, 'counts': [11, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [28.205128205128204, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 0.6807123983233854, 'sys_len': 39, 'ref_len': 54} Bleu: {'bleu': 0.0, 'precisions': [0.28205128205128205, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6807123983233854, 'length_ratio': 0.7222222222222222, 'translation_length': 39, 'reference_length': 54} Rouge: {'rouge1': 0.24444444444444444, 'rouge2': 0.045454545454545456, 'rougeL': 0.15555555555555556, 'rougeLsum': 0.24444444444444444} Sari: {'sari': 35.483561982449636} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Der Esel legte sich auf den Mist, der Hund hinter die Thür, die Katze auf den Herd bei die warme Asche, und der Hahn setzte sich auf den Hahnenbalken, und weil sie müde waren von ihrem langen Wege, schliefen sie auch bald ein.'] Prediction: ['Ein Esel hat sich auf den Mist, der Hahn setzte sich auf den Herd.\nDer Hahn setzte sich auf den Hahnenbalken, und weil sie müde waren von ihrem langen Wege, schliefen sie auch bald ein.'] Label: [['Und die 4 Tiere schlafen ein.\nDas Licht ist aus.\nUnd der Hahn schläft auf einem Balken unter dem Dach.\nDie Katze schläft in der Küche.\nDer Hund schläft vor der Tür.\nDer Esel schläft bei dem Mist∙haufen.\nVor dem Haus ist ein Mist∙haufen.\nDer Esel geht vor das Haus.']] Sacrebleu: {'score': 2.180571427156136, 'counts': [8, 3, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [20.0, 7.6923076923076925, 1.3157894736842106, 0.6756756756756757], 'bp': 0.6376281516217733, 'sys_len': 40, 'ref_len': 58} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 0.6376281516217733, 'length_ratio': 0.6896551724137931, 'translation_length': 40, 'reference_length': 58} Rouge: {'rouge1': 0.1914893617021277, 'rouge2': 0.02173913043478261, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.1914893617021277} Sari: {'sari': 31.322767000733105} Flesh Reading Ease: 86.45 ---------------------------------------- Source: ['Wie die vier Spielleute fertig waren, löschten sie das Licht aus und suchten sich eine Schlafstätte, jeder nach seiner Natur und Bequemlichkeit.'] Prediction: ['Die vier Spielleute wurden fertig.\nSie suchten sich eine Schlafstätte.\nSie suchten sich eine Schlafstätte.'] Label: [['Die 4 Tiere suchen sich einen Schlafplatz: Und werden müde.\nDann sind die 4 Tiere satt.']] Sacrebleu: {'score': 2.8731570526769397, 'counts': [4, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [22.22222222222222, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 0.9459594689067654, 'sys_len': 18, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9459594689067654, 'length_ratio': 0.9473684210526315, 'translation_length': 18, 'reference_length': 19} Rouge: {'rouge1': 0.11764705882352941, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 36.58424908424909} Flesh Reading Ease: 63.85 ---------------------------------------- Source: ['Nun setzten sich die vier Gesellen an den Tisch, nahmen mit dem vorlieb, was übrig geblieben war, und aßen, als wenn sie vier Wochen hungern sollten.'] Prediction: ['Eine Woche spielte sich in den vergangenen Tagen in der Schweiz.\nDie vier Gesellen sind vorlieb, was übrig geblieben war, und aussen, als wenn sie vier Wochen hungern sollten.'] Label: [['Die 4 Tiere essen und trinken.\nUnd setzen sich an den Tisch.\nDie 4 Tiere gehen in das Haus.']] Sacrebleu: {'score': 2.977665307178987, 'counts': [7, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.20588235294117646, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5454545454545454, 'translation_length': 34, 'reference_length': 22} Rouge: {'rouge1': 0.20833333333333334, 'rouge2': 0.0, 'rougeL': 0.125, 'rougeLsum': 0.20833333333333334} Sari: {'sari': 34.23124633650949} Flesh Reading Ease: 71.9 ---------------------------------------- Source: ['Die Räuber fuhren bei dem entsetzlichen Geschrei in die Höhe, meinten nicht anders als ein Gespenst käme herein und flohen in größter Furcht in den Wald hinaus.'] Prediction: ['In den Walden in der Schweiz sind Räuber nicht anders als ein Gespenst käme herein.\nSie fuhren in größter Furcht in den Wald hinaus.\nDie Räuber fuhren bei einem Gespenst in die Höhe, meinten nicht anders als ein Gespenst käme herein und flohen in den Wald hinaus.'] Label: [['Und die Räuber laufen fort.\nDie Räuber bekommen Angst.\nNur Gespenster können so einen schrecklichen Lärm machen.\nDas ist ein Gespenst.\nDie Räuber denken: Und die Musik ist schrecklich.\nDie Musik von den 4 Tieren ist laut.']] Sacrebleu: {'score': 3.9767513786383106, 'counts': [10, 3, 1, 0], 'totals': [51, 50, 49, 48], 'precisions': [19.607843137254903, 6.0, 2.0408163265306123, 1.0416666666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.19607843137254902, 0.06, 0.02040816326530612, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1590909090909092, 'translation_length': 51, 'reference_length': 44} Rouge: {'rouge1': 0.23157894736842105, 'rouge2': 0.08602150537634409, 'rougeL': 0.1894736842105263, 'rougeLsum': 0.23157894736842105} Sari: {'sari': 39.11083088132268} Flesh Reading Ease: 82.4 ---------------------------------------- Source: ['der Esel schrie, der Hund bellte, die Katze miaute und der Hahn krähte;'] Prediction: ['Der Hund bellte, die Katze miaute und der Hahn krähte.\nDer Hund bellte, die Katze miaute und der Hahn krähte.\nDer Hund bellte, die Katze miaute und der Hahn krähte.'] Label: [['• Und der Hahn kräht.\n• Die Katze miaut.\n• Der Hund bellt.\n• Der Esel schreit.']] Sacrebleu: {'score': 3.551851328486764, 'counts': [9, 2, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [25.0, 5.714285714285714, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.05714285714285714, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 36, 'reference_length': 21} Rouge: {'rouge1': 0.3829787234042553, 'rouge2': 0.22222222222222224, 'rougeL': 0.3829787234042553, 'rougeLsum': 0.3829787234042553} Sari: {'sari': 43.35110163468372} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['Wie das geschehen war, fingen sie auf ein Zeichen insgesamt an ihre Musik zu machen:'] Prediction: ['Eine Musikerin hat einen Zeichen insgesamt an ihre Musik zu machen.\nDie Musikerin fingen sie auf ein Zeichen insgesamt an ihre Musik zu machen.'] Label: [['Dann machen die 4 Tiere zusammen Musik:']] Sacrebleu: {'score': 1.7179060012299232, 'counts': [2, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [7.6923076923076925, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.25, 'translation_length': 26, 'reference_length': 8} Rouge: {'rouge1': 0.19354838709677416, 'rouge2': 0.06896551724137931, 'rougeL': 0.19354838709677416, 'rougeLsum': 0.19354838709677416} Sari: {'sari': 35.840548340548345} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['Der Esel mußte sich mit den Vorderfüßen auf das Fenster stellen, der Hund auf des Esels Rücken springen, die Katze auf den Hund klettern, und endlich flog der Hahn hinauf und setzte sich der Katze auf den Kopf.'] Prediction: ['Der Esel mußte sich mit den Vorderfüßen auf das Fenster stellen, der Hund auf des Esels Rücken springte, die Katze auf den Hund klettern.\nDer Hahn flog der Katze hinauf und setzte sich der Katze auf den Kopf.'] Label: [['Und der Hahn fliegt auf den Rücken von der Katze.\nDie Katze klettert auf den Rücken vom Hund.\nDer Hund springt auf den Rücken vom Esel.\nDer Esel stellt sich vor das Fenster.']] Sacrebleu: {'score': 4.978305563804202, 'counts': [22, 6, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [52.38095238095238, 14.634146341463415, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 37} Bleu: {'bleu': 0.0, 'precisions': [0.5238095238095238, 0.14634146341463414, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.135135135135135, 'translation_length': 42, 'reference_length': 37} Rouge: {'rouge1': 0.5974025974025975, 'rouge2': 0.24, 'rougeL': 0.3116883116883117, 'rougeLsum': 0.5454545454545454} Sari: {'sari': 40.442492599037735} Flesh Reading Ease: 79.1 ---------------------------------------- Source: ['Da ratschlagten die Tiere wie sie es anfangen müßten, um die Räuber hinauszujagen und fanden endlich ein Mittel.'] Prediction: ['Ein Räuber fand in der Nacht auf Sonntag ein Mittel.\nDie Tiere ratschlagten die Tiere wie sie es anfangen müßten, um die Räuber hinauszujagen.\nDie Tiere fanden endlich ein Mittel.'] Label: [['Dann haben die Tiere eine Idee: Die Tiere überlegen.']] Sacrebleu: {'score': 3.2553776012957436, 'counts': [5, 2, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 6.0606060606060606, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.06060606060606061, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.090909090909091, 'translation_length': 34, 'reference_length': 11} Rouge: {'rouge1': 0.19047619047619047, 'rouge2': 0.1, 'rougeL': 0.19047619047619047, 'rougeLsum': 0.19047619047619047} Sari: {'sari': 36.81372549019608} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['»Ja, ja, ach, wären wir da!« sagte der Esel.'] Prediction: ['Ein Esel hat einen ähnlichen Schritt aufgefunden.\nDer Esel war mit seinem ähnlichen Schritt aufgefunden.\nDer Esel war mit seinem ähnlichen Schritt aufgefunden.'] Label: [['Der Esel stimmt zu.']] Sacrebleu: {'score': 3.197383344450448, 'counts': [3, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [11.538461538461538, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.2, 'translation_length': 26, 'reference_length': 5} Rouge: {'rouge1': 0.14814814814814817, 'rouge2': 0.08, 'rougeL': 0.14814814814814817, 'rougeLsum': 0.14814814814814817} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['»Das wäre was für uns,« sprach der Hahn.'] Prediction: ['Einige Jahre nach dem Tod des jungen Mannes wäre für uns geschickt.\nDer Mann wurde dabei von einem ähnlichen Verletzungsdelikt verletzt.\nNun spricht der Mann über die Ähnliche und die Ähnliche.'] Label: [['Wir wollen auch an dem Tisch sitzen.\nDer Hahn sagt zum Esel:']] Sacrebleu: {'score': 2.4092489848483223, 'counts': [3, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.08888888888888888, 'rouge2': 0.0, 'rougeL': 0.08888888888888888, 'rougeLsum': 0.08888888888888888} Sari: {'sari': 52.738873327108614} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ["»Was ich sehe?« antwortete der Esel, »einen gedeckten Tisch mit schönem Essen und Trinken, und Räuber sitzen daran und lassen's sich wohl sein.«"] Prediction: ['Der Esel, der einen gedeckten Tisch mit schönem Essen und Trinken, hat seine Tisch-Sängerin überrascht.\nDer Esel hatte sich mit seinem gedeckten Tisch mit schönem Essen und Trinken geschickt.\nDer Esel warnt vor einem Jahr, warum er sich wohl sein könnte.'] Label: [['Die Räuber essen und trinken.\nAn dem Tisch sitzen Räuber.\nDer Esel antwortet: Ich sehe einen großen Tisch.']] Sacrebleu: {'score': 3.8078550433225806, 'counts': [9, 2, 1, 0], 'totals': [47, 46, 45, 44], 'precisions': [19.148936170212767, 4.3478260869565215, 2.2222222222222223, 1.1363636363636365], 'bp': 1.0, 'sys_len': 47, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.19148936170212766, 0.043478260869565216, 0.022222222222222223, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1363636363636362, 'translation_length': 47, 'reference_length': 22} Rouge: {'rouge1': 0.2388059701492537, 'rouge2': 0.09230769230769231, 'rougeL': 0.20895522388059704, 'rougeLsum': 0.2388059701492537} Sari: {'sari': 40.508549177517004} Flesh Reading Ease: 78.55 ---------------------------------------- Source: ['»Was siehst du, Grauschimmel?« fragte der Hahn.'] Prediction: ['Der Schweizer Grauschimmel ist ein Jahrzehntel.\nDer Hahn war mit einem französischen Aufruf von einem Jahr 2020 verstorben.\nDer Hahn war mit einem französischen Aufruf von einem Jahrzehntel auf dem Königshaus.'] Label: [['Was siehst du?\nDer Hahn fragt den Esel:']] Sacrebleu: {'score': 2.177002209903929, 'counts': [2, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [5.882352941176471, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.058823529411764705, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4, 'translation_length': 34, 'reference_length': 10} Rouge: {'rouge1': 0.09523809523809523, 'rouge2': 0.05, 'rougeL': 0.09523809523809523, 'rougeLsum': 0.09523809523809523} Sari: {'sari': 54.76190476190476} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Der Esel, als der größte, näherte sich dem Fenster und schaute hinein.'] Prediction: ['Der Fenster näherte sich dem Fenster und schaute hinein.\nDer Esel näherte sich dem Fenster und schaute hinein.\nDer Esel näherte sich dem Fenster und schaute hinein.'] Label: [['Und der Esel schaut durch ein Fenster in das Haus.']] Sacrebleu: {'score': 1.633898440122165, 'counts': [3, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [10.0, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.727272727272727, 'translation_length': 30, 'reference_length': 11} Rouge: {'rouge1': 0.2, 'rouge2': 0.05263157894736842, 'rougeL': 0.2, 'rougeLsum': 0.15} Sari: {'sari': 40.357598978288635} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Also machten sie sich auf den Weg nach der Gegend, wo das Licht war, und sahen es bald heller schimmern, und es ward immer größer, bis sie vor ein hell erleuchtetes Räuberhaus kamen.'] Prediction: ['Eine Frau wurde vor einem hell erleuchteten Räuberhaus in der Nähe des Kantons Bern geraten.\nSie sahen es bald heller schimmern, bis sie vor ein hell erleuchtetes Räuberhaus kamen.\nDie Frau war auf den Weg nach der Gegend, wo das Licht war, und sahen es bald heller schimmern, bis sie vor ein hell erleuchtetes Räuberhaus kamen.'] Label: [['Die Tiere kommen zu dem Haus.\nDas Licht wird immer heller.\nDie Tiere folgen dem Licht.\nDie Tiere machen sich auf den Weg zum Haus.']] Sacrebleu: {'score': 3.11731084930335, 'counts': [9, 3, 1, 0], 'totals': [63, 62, 61, 60], 'precisions': [14.285714285714286, 4.838709677419355, 1.639344262295082, 0.8333333333333334], 'bp': 1.0, 'sys_len': 63, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.04838709677419355, 0.01639344262295082, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1724137931034484, 'translation_length': 63, 'reference_length': 29} Rouge: {'rouge1': 0.16470588235294117, 'rouge2': 0.07228915662650602, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.16470588235294117} Sari: {'sari': 35.39462774940089} Flesh Reading Ease: 67.7 ---------------------------------------- Source: ['Ehe er einschlief, sah er sich noch einmal nach allen vier Winden um, da däuchte ihn, er sähe in der Ferne ein Fünkchen brennen und rief seinen Gesellen zu, es müßte nicht gar weit ein Haus sein, denn es scheine ein Licht.'] Prediction: ['Ein Mann hat in der Ferne einen Fünkchen brennen und rief seinen Gesellen zu.\nEr wurde dabei einschlief, dass er sich noch einmal nach allen vier Winden umsteht.\nDer Mann muss sich nicht gar weit ein Haus sein, denn es scheine ein Licht.'] Label: [['Lasst uns zu dem Haus gehen.\nIch kann ein Haus sehen.\nDer Hahn sagt zu den anderen Tieren: Das Licht kommt von einem Haus.\nDer Hahn denkt: In der Nähe sieht der Hahn ein helles Licht brennen.\nDann schaut sich der Hahn um:']] Sacrebleu: {'score': 2.715547163964001, 'counts': [12, 2, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [25.0, 4.25531914893617, 1.0869565217391304, 0.5555555555555556], 'bp': 0.9591894571091382, 'sys_len': 48, 'ref_len': 50} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0425531914893617, 0.0, 0.0], 'brevity_penalty': 0.9591894571091382, 'length_ratio': 0.96, 'translation_length': 48, 'reference_length': 50} Rouge: {'rouge1': 0.22727272727272727, 'rouge2': 0.04651162790697674, 'rougeL': 0.13636363636363635, 'rougeLsum': 0.22727272727272727} Sari: {'sari': 37.51928238239783} Flesh Reading Ease: 89.65 ---------------------------------------- Source: ['Der Esel und der Hund legten sich unter einen großen Baum, die Katze und der Hahn machten sich in die Äste, der Hahn aber flog bis in die Spitze, wo es am sichersten für ihn war.'] Prediction: ['Ein Esel und der Hund flog in die Spitze, wo es am sichersten für ihn war.\nDer Esel und der Hund legten sich unter einen großen Baum, die Katze und der Hahn machten sich in die Äste, der Hahn aber flog bis in die Spitze.'] Label: [['Der Hahn fliegt bis auf die Spitze vom Baum.\nUnd legt sich auf einen Ast.\nDie Katze klettert auf den Baum.\nDer Esel und der Hund legen sich unter einen großen Baum.']] Sacrebleu: {'score': 18.374217056918592, 'counts': [18, 10, 7, 5], 'totals': [50, 49, 48, 47], 'precisions': [36.0, 20.408163265306122, 14.583333333333334, 10.638297872340425], 'bp': 1.0, 'sys_len': 50, 'ref_len': 36} Bleu: {'bleu': 0.18374217056918582, 'precisions': [0.36, 0.20408163265306123, 0.14583333333333334, 0.10638297872340426], 'brevity_penalty': 1.0, 'length_ratio': 1.3888888888888888, 'translation_length': 50, 'reference_length': 36} Rouge: {'rouge1': 0.5, 'rouge2': 0.30769230769230765, 'rougeL': 0.35, 'rougeLsum': 0.5} Sari: {'sari': 47.79186693439271} Flesh Reading Ease: 87.3 ---------------------------------------- Source: ['Sie konnten aber die Stadt Bremen in einem Tage nicht erreichen und kamen abends in einen Wald, wo sie übernachten wollten.'] Prediction: ['Eine Frau konnte in einem Wald in Bremen übernachten wollten.\nSie konnte aber nicht erreichen, wo sie übernachten wollten.\nSie konnte aber nicht erreichen, wo sie übernachten wollten.'] Label: [['Die Tiere wollen im Wald schlafen.\nDie Tiere sind sehr müde.\nDie Tiere kommen in einen Wald.\nLangsam wird es dunkel.\nDie Tiere gehen den ganzen Tag.\nAber der Weg nach Bremen ist sehr weit:']] Sacrebleu: {'score': 1.379344004962577, 'counts': [6, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [18.181818181818183, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.7847231940537559, 'sys_len': 33, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7847231940537559, 'length_ratio': 0.8048780487804879, 'translation_length': 33, 'reference_length': 41} Rouge: {'rouge1': 0.125, 'rouge2': 0.0, 'rougeL': 0.09375, 'rougeLsum': 0.125} Sari: {'sari': 33.53470317315181} Flesh Reading Ease: 71.25 ---------------------------------------- Source: ['« Der Hahn ließ sich den Vorschlag gefallen, und sie gingen alle viere zusammen fort.'] Prediction: ['Ein Mann wurde in der Nacht auf Sonntag von einem Vorschlag gefallen.\nDie Polizei verhaftete den Vorschlag und gingen alle viere zusammen.'] Label: [['• Und der Hahn.\n• Die Katze.\n• Der Hund.\n• Der Esel.\nZusammen gehen die 4 Tiere nach Bremen: Und auch der Hahn kommt gerne mit.']] Sacrebleu: {'score': 1.5292000737813278, 'counts': [4, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 0.6872892787909722, 'sys_len': 24, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6872892787909722, 'length_ratio': 0.7272727272727273, 'translation_length': 24, 'reference_length': 33} Rouge: {'rouge1': 0.17777777777777776, 'rouge2': 0.0, 'rougeL': 0.1333333333333333, 'rougeLsum': 0.1333333333333333} Sari: {'sari': 36.447009780343116} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['»Ei was, du Rotkopf,« sagte der Esel, »zieh lieber mit uns fort, wir gehen nach Bremen, etwas Besseres als den Tod findest du überall;'] Prediction: ['Der Rotkopf ist nach Bremen aufgefunden.\nDer Esel warnt mit seinem Besseres als den Tod.\nDer Esel warnt mit seinem Besseres als den Tod.'] Label: [['Willst du mitkommen?\nIn Bremen werden wir Stadt∙musikanten.\nWir gehen nach Bremen.\nDer Esel sagt zum Hahn.']] Sacrebleu: {'score': 7.066026049079721, 'counts': [7, 3, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [25.925925925925927, 11.538461538461538, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.25925925925925924, 0.11538461538461539, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2857142857142858, 'translation_length': 27, 'reference_length': 21} Rouge: {'rouge1': 0.1904761904761905, 'rouge2': 0.09999999999999999, 'rougeL': 0.1904761904761905, 'rougeLsum': 0.1904761904761905} Sari: {'sari': 40.32995920889263} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['Nun schrei ich aus vollem Hals, solange ich noch kann.«'] Prediction: ['Der Schweizer Nati hat seinen ähnlichen Aufruf mit dem Aufruf geschlossen.\nEr schreibt aus vollem Hals, solange ich noch kann.'] Label: [['Deshalb schreie ich so laut.\nAber ich will nicht sterben.']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9166666666666667, 'translation_length': 23, 'reference_length': 12} Rouge: {'rouge1': 0.06666666666666667, 'rouge2': 0.0, 'rougeL': 0.06666666666666667, 'rougeLsum': 0.06666666666666667} Sari: {'sari': 34.02777777777777} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['aber weil morgen zum Sonntag Gäste kommen, so hat die Hausfrau doch kein Erbarmen, und hat der Köchin gesagt, sie wollte mich morgen in der Suppe essen, und da soll ich mir heute abend den Kopf abschneiden lassen.'] Prediction: ['Im Köchin wollte sich eine Hausfrau morgen in der Suppe essen.\nDer Köchin hatte sie gesagt, dass sie morgen in der Suppe essen hatte.\nDie Hausfrau wollte ihr heute abend den Kopf abschneiden lassen.'] Label: [['Und essen.\nDann will mich meine Herrin braten.\nDer Hahn antwortet: Morgen ist ein großes Fest.']] Sacrebleu: {'score': 2.89826796679793, 'counts': [5, 2, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 5.405405405405405, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.05405405405405406, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 38, 'reference_length': 20} Rouge: {'rouge1': 0.11320754716981131, 'rouge2': 0.0, 'rougeL': 0.11320754716981131, 'rougeLsum': 0.11320754716981131} Sari: {'sari': 35.62124931805783} Flesh Reading Ease: 75.1 ---------------------------------------- Source: ['»Du schreist einem durch Mark und Bein,« sprach der Esel »was hast du vor?«'] Prediction: ['Im Interview mit 20 Minuten mit dem Radio-Host Andrea spricht der 20-Minuten-App über die Woche über die Schweizer Radio-Hosts Andrea und Andrea über ihre Leute, die sich mit ihrem Mann auf der Radio-App übertragen.\nIm Interview spricht Andrea über ihre Worte, die sich mit ihrem Mann übertragen hatte.'] Label: [['Warum schreist du so laut?\nDer Esel fragt den Hahn:']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 54, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.5, 'translation_length': 54, 'reference_length': 12} Rouge: {'rouge1': 0.031746031746031744, 'rouge2': 0.0, 'rougeL': 0.031746031746031744, 'rougeLsum': 0.031746031746031744} Sari: {'sari': 49.212184873949575} Flesh Reading Ease: 56.55 ---------------------------------------- Source: ['Darauf kamen die drei Landesflüchtigen an einem Hof vorbei, da saß auf dem Thor der Haushahn und schrie aus Leibeskräften.'] Prediction: ['Drei Landesflüchtige wurden in einem Hof in der Nähe von Leibeskräften gefunden.\nSie wurden auf dem Thor der Haushahn schrieben.\nSie wurden aus Leibeskräften geborgen.'] Label: [['Der Hahn schreit sehr laut.\nAuf dem Bauern∙hof treffen die Tiere einen Hahn.\nAuf ihrem Weg kommen die Tiere zu einem Bauern∙hof.\nUnd so gehen der Esel und der Hund und die Katze zusammen nach Bremen.']] Sacrebleu: {'score': 1.4149611700717548, 'counts': [7, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [25.0, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 0.6514390575310556, 'sys_len': 28, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6514390575310556, 'length_ratio': 0.7, 'translation_length': 28, 'reference_length': 40} Rouge: {'rouge1': 0.17910447761194026, 'rouge2': 0.03076923076923077, 'rougeL': 0.11940298507462686, 'rougeLsum': 0.17910447761194026} Sari: {'sari': 38.828763828763826} Flesh Reading Ease: 66.4 ---------------------------------------- Source: ['« Die Katze hielt das für gut und ging mit.'] Prediction: ['Die Katze ist eine Katze, die sich für gut ging.\nDie Katze hielt das für gut und ging mit.'] Label: [['Die Katze kommt gerne mit.']] Sacrebleu: {'score': 4.885326644211927, 'counts': [4, 2, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [18.181818181818183, 9.523809523809524, 2.5, 1.3157894736842106], 'bp': 1.0, 'sys_len': 22, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.09523809523809523, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6666666666666665, 'translation_length': 22, 'reference_length': 6} Rouge: {'rouge1': 0.23076923076923073, 'rouge2': 0.08333333333333334, 'rougeL': 0.23076923076923073, 'rougeLsum': 0.23076923076923073} Sari: {'sari': 41.125541125541126} Flesh Reading Ease: 100.3 ---------------------------------------- Source: ['»Geh mit uns nach Bremen, du verstehst dich doch auf die Nachtmusik, da kannst du ein Stadtmusikant werden.'] Prediction: ['Der Schweizer Musiker Thomas Müller hat einen neuen Stadtmusik-Profi.\nEr verstehst dich auf die Nachtmusik und wird ein Stadtmusikant werden.'] Label: [['Willst du mitkommen?\nIn Bremen werden wir Stadt∙musikanten.\nWir gehen nach Bremen.\nDer Esel sagt zur Katze:']] Sacrebleu: {'score': 2.4426633221059637, 'counts': [4, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [18.181818181818183, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0476190476190477, 'translation_length': 22, 'reference_length': 21} Rouge: {'rouge1': 0.09999999999999999, 'rouge2': 0.0, 'rougeL': 0.049999999999999996, 'rougeLsum': 0.09999999999999999} Sari: {'sari': 33.702380952380956} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ["»Wer kann da lustig sein, wenn's einem an den Kragen geht,« antwortete die Katze, »weil ich nun zu Jahren komme, meine Zähne stumpf werden, und ich lieber hinter dem Ofen sitze und spinne, als nach Mäusen herumjage, hat mich meine Frau ersäufen wollen;"] Prediction: ['Eine Katze hat sich nun zu Jahren ersäufen, als sie ihnen in den Kragen geht.\nSie hat ihnen zu Jahren, meine Zähne stumpf werden.\nIst das nicht mehr, wenn sie ihnen lustig sein kann, wenn sie ihnen lustig sein kann, hat mich meine Frau ersäufen wollen.'] Label: [['Deshalb will mein Herr mich töten.\nIch kann keine Mäuse mehr jagen.\nUnd ich bin schwach.\nDie Katze sagt: Ich bin alt.']] Sacrebleu: {'score': 1.0956421443241475, 'counts': [7, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [12.962962962962964, 0.9433962264150944, 0.4807692307692308, 0.24509803921568626], 'bp': 1.0, 'sys_len': 54, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.12962962962962962, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 54, 'reference_length': 27} Rouge: {'rouge1': 0.10958904109589039, 'rouge2': 0.0, 'rougeL': 0.027397260273972598, 'rougeLsum': 0.0821917808219178} Sari: {'sari': 35.01911132345916} Flesh Reading Ease: 82.8 ---------------------------------------- Source: ['»Nun, was ist dir in die Quere gekommen, alter Bartputzer?« sprach der Esel.'] Prediction: ['Der frühere Bartputzer ist in der Quere gekommen.\nEr wurde in einem Interview mit dem "Bartputzer" veröffentlicht.\nNun sprach der Esel über die Quere.'] Label: [['Warum bist du so traurig?\nDer Esel fragt die Katze:']] Sacrebleu: {'score': 1.6934096677198087, 'counts': [3, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [10.344827586206897, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.10344827586206896, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4166666666666665, 'translation_length': 29, 'reference_length': 12} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.058823529411764705, 'rougeL': 0.16666666666666669, 'rougeLsum': 0.16666666666666669} Sari: {'sari': 47.38095238095239} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Es dauerte nicht lange, so saß da eine Katze an dem Wege und machte ein Gesicht wie drei Tage Regenwetter.'] Prediction: ['Eine Katze an dem Wege wurde dabei verletzt.\nSie war dabei nicht lange, so die Regenwetter.'] Label: [['Die Katze sieht sehr traurig aus.\nAuf ihrem Weg treffen der Esel und der Hund eine Katze.']] Sacrebleu: {'score': 2.6643211213888947, 'counts': [3, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [15.789473684210526, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 19, 'reference_length': 19} Rouge: {'rouge1': 0.1818181818181818, 'rouge2': 0.06451612903225808, 'rougeL': 0.12121212121212122, 'rougeLsum': 0.1818181818181818} Sari: {'sari': 38.686868686868685} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ["« Der Hund war's zufrieden, und sie gingen weiter."] Prediction: ["Ein Hund war's zufrieden, und sie gingen weiter.\nDer Hund war's zufrieden, und sie gingen weiter."] Label: [['Und so gehen der Esel und der Hund zusammen nach Bremen.']] Sacrebleu: {'score': 2.5197593442434796, 'counts': [3, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [15.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.15, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 20, 'reference_length': 12} Rouge: {'rouge1': 0.27586206896551724, 'rouge2': 0.07407407407407408, 'rougeL': 0.20689655172413793, 'rougeLsum': 0.20689655172413793} Sari: {'sari': 39.76190476190476} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['»Weißt du was,« sprach der Esel, »ich gehe nach Bremen und werde dort Stadtmusikant, geh mit und laß dich auch bei der Musik annehmen.'] Prediction: ['Der Stadtmusikant von Bremen hat einen neuen Fragen mit dem Esel geheiratet.\nDer Fragen hatte sich mit dem Esel und der Esel-Sängerin über die Musik geschickt.\nDie Fragen werden von der Stadt aufgezeichnet.'] Label: [['Willst du mitkommen?\nIn Bremen werde ich Stadt∙musikant.\nIch gehe nach Bremen.\nDer Esel sagt zum Hund.']] Sacrebleu: {'score': 2.6988233895132607, 'counts': [6, 1, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [16.666666666666668, 2.857142857142857, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.02857142857142857, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 36, 'reference_length': 21} Rouge: {'rouge1': 0.1509433962264151, 'rouge2': 0.03921568627450981, 'rougeL': 0.11320754716981132, 'rougeLsum': 0.1509433962264151} Sari: {'sari': 42.83553791887125} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['auch auf der Jagd nicht mehr fort kann, hat mich mein Herr wollen totschlagen, da hab ich Reißaus genommen;'] Prediction: ['Einige Tage nach der Jagd haben ihnen Reißaus genommen.\nSie haben ihnen nicht mehr fort und hat ihnen nicht mehr fort kommen.\nDie Tage nach der Jagd hatte ihn nicht mehr fort, da hab ihnen Reißaus genommen hatte.'] Label: [['Deshalb bin ich fortgelaufen.\nMein Herr wollte mich töten.\nIch kann meinem Herrn nicht mehr beim Jagen helfen.']] Sacrebleu: {'score': 2.1962438984958195, 'counts': [5, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [11.904761904761905, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.11904761904761904, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 42, 'reference_length': 21} Rouge: {'rouge1': 0.06779661016949153, 'rouge2': 0.03508771929824561, 'rougeL': 0.06779661016949153, 'rougeLsum': 0.06779661016949153} Sari: {'sari': 41.98305518957693} Flesh Reading Ease: 79.55 ---------------------------------------- Source: ['»Ach,« sagte der Hund, »weil ich alt bin und jeden Tag schwächer werde,'] Prediction: ['Der Hund, der im Alter von 99 Jahren schwächer wurde, ist immer wieder schwächer.\nDer Hund warnt vor einem Jahr, dass er sich nicht mehr schwächer wurde.\nNun wurde er von der Stadt aufgefunden, weil er sich nicht mehr schwächer wurde.'] Label: [['Und ich bin schwach.\nDer Hund antwortet: Ich bin alt.']] Sacrebleu: {'score': 3.0421991288759425, 'counts': [4, 2, 1, 0], 'totals': [48, 47, 46, 45], 'precisions': [8.333333333333334, 4.25531914893617, 2.1739130434782608, 1.1111111111111112], 'bp': 1.0, 'sys_len': 48, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.08333333333333333, 0.0425531914893617, 0.021739130434782608, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6923076923076925, 'translation_length': 48, 'reference_length': 13} Rouge: {'rouge1': 0.07272727272727272, 'rouge2': 0.03773584905660377, 'rougeL': 0.07272727272727272, 'rougeLsum': 0.07272727272727272} Sari: {'sari': 48.823943790568734} Flesh Reading Ease: 84.4 ---------------------------------------- Source: ['»Nun, was jappst du so, Packan?« fragte der Esel.'] Prediction: ['Die Schweizer Schweizerin und der Schweizerin Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Frau Fra'] Label: [['Warum bist du so traurig?\nDer Esel fragt den Hund:']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [226, 225, 224, 223], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 226, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 18.833333333333332, 'translation_length': 226, 'reference_length': 12} Rouge: {'rouge1': 0.008474576271186439, 'rouge2': 0.0, 'rougeL': 0.008474576271186439, 'rougeLsum': 0.008474576271186439} Sari: {'sari': 48.71794871794872} Flesh Reading Ease: -104.51 ---------------------------------------- Source: ['Als er ein Weilchen fortgegangen war, fand er einen Jagdhund auf dem Wege liegen, der jappte wie einer, der sich müde gelaufen hat.'] Prediction: ['Ein Jagdhund auf dem Wege hat einen Jagdhund auf dem Wege liegen, der sich müde gelaufen hat.\nDer Jagdhund fand einen Jagdhund auf dem Wege liegen, der sich müde gelaufen hat.\nDer Jagdhund war ein Weilchen fortgegangen, der sich müde gelaufen hat.'] Label: [['Der Hund sieht sehr traurig aus.\nNach einer Weile trifft der Esel einen Hund.']] Sacrebleu: {'score': 1.137287189899225, 'counts': [5, 0, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [10.416666666666666, 1.0638297872340425, 0.5434782608695652, 0.2777777777777778], 'bp': 1.0, 'sys_len': 48, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.10416666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 48, 'reference_length': 16} Rouge: {'rouge1': 0.10169491525423728, 'rouge2': 0.0, 'rougeL': 0.10169491525423728, 'rougeLsum': 0.10169491525423728} Sari: {'sari': 33.9655172413793} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Da dachte der Herr daran, ihn aus dem Futter zu schaffen, aber der Esel merkte, daß kein guter Wind wehte, lief fort und machte sich auf den Weg nach Bremen: dort, meinte er, könnte er ja Stadtmusikant werden.'] Prediction: ['Ein Esel hatte sich auf den Weg nach Bremen geschafft.\nDer Herr war Stadtmusikant.\nDer Esel merkte, daß kein guter Wind wehte, lief fort und machte sich auf den Weg nach Bremen: dort, meinte er, könnte er ja Stadtmusikant werden.'] Label: [['So läuft der Esel fort.\nIn Bremen will der Esel ein Stadt∙musikant werden.\nDer Esel will nach Bremen gehen.\nDeshalb will der Esel fortlaufen.\nDas merkt der Esel.\nDeshalb will der Mann den Esel töten.\nAber der Mann möchte keinen alten und schwachen Esel.']] Sacrebleu: {'score': 4.563232234450668, 'counts': [13, 4, 1, 0], 'totals': [48, 47, 46, 45], 'precisions': [27.083333333333332, 8.51063829787234, 2.1739130434782608, 1.1111111111111112], 'bp': 0.9394130628134758, 'sys_len': 48, 'ref_len': 51} Bleu: {'bleu': 0.0, 'precisions': [0.2708333333333333, 0.0851063829787234, 0.021739130434782608, 0.0], 'brevity_penalty': 0.9394130628134758, 'length_ratio': 0.9411764705882353, 'translation_length': 48, 'reference_length': 51} Rouge: {'rouge1': 0.2696629213483146, 'rouge2': 0.04597701149425288, 'rougeL': 0.17977528089887637, 'rougeLsum': 0.24719101123595508} Sari: {'sari': 38.63103944058646} Flesh Reading Ease: 84.8 ---------------------------------------- Source: ['Es hatte ein Mann einen Esel, der schon lange Jahre die Säcke unverdrossen zur Mühle getragen hatte, dessen Kräfte aber nun zu Ende gingen, sodaß er zur Arbeit immer untauglicher ward.'] Prediction: ['Ein Mann hatte in der Nähe des Kräfte einen Esel unverdrossen zur Mühle getragen.\nDer Mann hatte sich nun zu Ende gingen, sodass er sich zur Arbeit immer untauglicher ward gewesen hatte.'] Label: [['Und schwach.\nMit den Jahren wird der Esel alt.\nDer Esel trägt viele Jahre lang Getreide∙säcke zur Mühle.\nDer Mann hat auch einen Esel.\nEin Mann hat eine Mühle.']] Sacrebleu: {'score': 6.839596061560944, 'counts': [11, 5, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [31.428571428571427, 14.705882352941176, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.3142857142857143, 0.14705882352941177, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0294117647058822, 'translation_length': 35, 'reference_length': 34} Rouge: {'rouge1': 0.2898550724637681, 'rouge2': 0.14925373134328357, 'rougeL': 0.20289855072463767, 'rougeLsum': 0.2898550724637681} Sari: {'sari': 40.748811522676284} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['und also bekam des Teufels rußiger Bruder die Königstochter, und als der alte König gestorben war, auch das ganze Reich.'] Prediction: ['Der Teufels rußiger Bruder hat eine Königstochter, als der alte König gestorben war.\nDas ganze Reich war ein Teufels rußiger Bruder.\nDer rußiger Bruder bekam die Königstochter, als der alte König gestorben war.'] Label: [['Hans ist jetzt der neue König.\nHans wird sein Nachfolger.\nNach einigen Jahren stirbt der König.\nUnd Hans heiratet die jüngste Tochter vom König.']] Sacrebleu: {'score': 1.6298158492058863, 'counts': [8, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [21.05263157894737, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3571428571428572, 'translation_length': 38, 'reference_length': 28} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.060606060606060615, 'rougeL': 0.23529411764705882, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 35.321969696969695} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ["« Da gab ihm der König die jüngste, die wollt's ihrem Vater zuliebe gern thun;"] Prediction: ['Immer wieder wieder aufs König: Ein Vater wollte ihren Vater zuliebe gern thun.\nDer König war ein Vater, der ihm zuliebe gern thun.'] Label: [['Die jüngste Tochter vom König stimmt zu.\nDann kannst du meine jüngste Tochter heiraten.']] Sacrebleu: {'score': 1.826472886268134, 'counts': [3, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [11.11111111111111, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6875, 'translation_length': 27, 'reference_length': 16} Rouge: {'rouge1': 0.09523809523809526, 'rouge2': 0.05, 'rougeL': 0.09523809523809526, 'rougeLsum': 0.09523809523809526} Sari: {'sari': 33.46873338649654} Flesh Reading Ease: 74.9 ---------------------------------------- Source: ['Als die aber hörte, daß sie so einen gemeinen Kerl im weißen Kittel heiraten sollte, sprach sie: »Ehe ich das thät, wollt ich lieber ins tiefste Wasser gehen.'] Prediction: ['Eine Frau, die in der Nacht auf Sonntag in Kittel wurde, wollte sie einen gemeinen Kerl im Wasser gehen.\nAls sie so einen gemeinen Kerl heiraten sollte, sprach sie: "Ehe ich das thät, wollt ich lieber ins tiefste Wasser gehen".'] Label: [['Aber die älteste Tochter vom König möchte Hans nicht heiraten.']] Sacrebleu: {'score': 0.9798555761147508, 'counts': [3, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [6.122448979591836, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.061224489795918366, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.454545454545454, 'translation_length': 49, 'reference_length': 11} Rouge: {'rouge1': 0.07547169811320753, 'rouge2': 0.0, 'rougeL': 0.07547169811320753, 'rougeLsum': 0.07547169811320753} Sari: {'sari': 33.45238095238095} Flesh Reading Ease: 72.25 ---------------------------------------- Source: ['Es war aber ein alter König im Land, vor dem mußte er spielen, und der geriet darüber in solche Freude, daß er dem Hans seine älteste Tochter zur Ehe versprach.'] Prediction: ['Im Land war ein alter König im Land, vor dem mußte er spielen wurde.\nDer junge Tochter war seine älteste Tochter zur Ehe versprach.\nDer junge Tochter war seine älteste Tochter zur Ehe versprach.'] Label: [['Du kannst meine älteste Tochter heiraten.\nSo sagt der König zu Hans: Der König mag die Musik von Hans.\nUnd auf seiner Reise macht Hans sogar für den König Musik.\nIm Land gibt es einen König.']] Sacrebleu: {'score': 3.1022033079817772, 'counts': [9, 2, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [23.68421052631579, 5.405405405405405, 1.3888888888888888, 0.7142857142857143], 'bp': 0.9240885594051769, 'sys_len': 38, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.23684210526315788, 0.05405405405405406, 0.0, 0.0], 'brevity_penalty': 0.9240885594051769, 'length_ratio': 0.926829268292683, 'translation_length': 38, 'reference_length': 41} Rouge: {'rouge1': 0.2077922077922078, 'rouge2': 0.08, 'rougeL': 0.1038961038961039, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 37.15099715099715} Flesh Reading Ease: 75.1 ---------------------------------------- Source: ['Hans machte sich auf den Weg heim zu seinem Vater, kaufte sich einen schlechten Linnenkittel auf den Leib, ging herum und machte Musik, denn das hatte er beim Teufel in der Hölle gelernt.'] Prediction: ['Der Vater Hans (34) hatte sich auf den Weg heim zu seinem Vater gewonnen.\nEr machte sich einen schlechten Linnenkittel auf den Leib, ging herum und machte Musik, denn das hatte er beim Teufel in der Hölle gelernt.'] Label: [['Auf seiner Reise macht Hans Musik.\nUnd reist durch das Land.\nHans kauft sich ein Hemd für wenig Geld.']] Sacrebleu: {'score': 1.3024295746348018, 'counts': [6, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [13.636363636363637, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 44, 'reference_length': 22} Rouge: {'rouge1': 0.2033898305084746, 'rouge2': 0.0, 'rougeL': 0.1016949152542373, 'rougeLsum': 0.2033898305084746} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 73.25 ---------------------------------------- Source: ['und Hans war nun ein reicher Mann.'] Prediction: ['Im Alter von 99 Jahren ist ein Mann (68) verstorben.\nEr war ein reicher Mann.\nNun war er ein reicher Mann.'] Label: [['Jetzt ist Hans reich.']] Sacrebleu: {'score': 1.7179060012299232, 'counts': [2, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [7.6923076923076925, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.2, 'translation_length': 26, 'reference_length': 5} Rouge: {'rouge1': 0.08, 'rouge2': 0.0, 'rougeL': 0.08, 'rougeLsum': 0.08} Sari: {'sari': 32.44047619047619} Flesh Reading Ease: 96.95 ---------------------------------------- Source: ['« Da gab ihm der Wirt das Gold und noch mehr dazu, und bat ihn nur still davon zu sein;'] Prediction: ['Ein Wirt hat seinen Wirt das Gold und noch mehr dazu sein.\nDer Wirt bat ihn nur still davon zu sein.'] Label: [['So große Angst hat der Wirt.\nDer Wirt gibt Hans sogar noch mehr Gold dazu.\nUnd der Wirt gibt Hans das Gold zurück.\nDer Wirt hat Angst.']] Sacrebleu: {'score': 7.6978848729933835, 'counts': [12, 5, 1, 0], 'totals': [23, 22, 21, 20], 'precisions': [52.17391304347826, 22.727272727272727, 4.761904761904762, 2.5], 'bp': 0.7062216866978064, 'sys_len': 23, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.5217391304347826, 0.22727272727272727, 0.047619047619047616, 0.0], 'brevity_penalty': 0.7062216866978064, 'length_ratio': 0.7419354838709677, 'translation_length': 23, 'reference_length': 31} Rouge: {'rouge1': 0.44, 'rouge2': 0.16666666666666666, 'rougeL': 0.28, 'rougeLsum': 0.39999999999999997} Sari: {'sari': 45.228936894041844} Flesh Reading Ease: 105.15 ---------------------------------------- Source: ["»Du hast mein Gold gestohlen, giebst du's nicht wieder, so kommst du in die Hölle an meinen Platz, und sollst aussehen so greulich wie ich. « Hans ging hinauf und sprach zum Wirt:"] Prediction: ['Der Wirt von Hans und Hans ist auf der Suche nach der Woche gestohlen.\nHans und Hans waren zum Wirt und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hinauf und sprach zum Wirt: Hans ging hin'] Label: [['Und du wirst so schrecklich aussehen wie ich ausgesehen habe.\nSonst holt dich der Teufel.\nGib mir mein Gold zurück.\nUnd sagt: Du hast mein Gold gestohlen.\nHans geht in die Stadt zu dem Wirt.']] Sacrebleu: {'score': 0.6427519827566207, 'counts': [6, 2, 1, 0], 'totals': [245, 244, 243, 242], 'precisions': [2.4489795918367347, 0.819672131147541, 0.411522633744856, 0.2066115702479339], 'bp': 1.0, 'sys_len': 245, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.024489795918367346, 0.00819672131147541, 0.00411522633744856, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.975609756097561, 'translation_length': 245, 'reference_length': 41} Rouge: {'rouge1': 0.04761904761904762, 'rouge2': 0.008000000000000002, 'rougeL': 0.03968253968253969, 'rougeLsum': 0.04761904761904762} Sari: {'sari': 33.41835481128117} Flesh Reading Ease: 7.65 ---------------------------------------- Source: ['»Geh hin und sage dem Wirt, er sollte dir dein Gold wieder herausgeben, sonst wollt ich kommen und ihn abholen, und er sollte an deinem Platz das Feuer schüren.'] Prediction: ['Ein Wirt sollte dein Gold wieder herausgeben, sonst wollt ich kommen und ihn abholen.\nDer Wirt sollte das Feuer schüren.\nDer Wirt sollte das Feuer schüren, sonst wollte ich kommen und ihn abholen.'] Label: [['Und hole mir den Wirt.\nSonst komme ich.\nDer Wirt soll dir dein Gold zurück·geben.\nDann sagt der Teufel: Geh zu dem Wirt vom Gasthaus.']] Sacrebleu: {'score': 5.394284505764231, 'counts': [10, 3, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [26.31578947368421, 8.108108108108109, 2.7777777777777777, 1.4285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.08108108108108109, 0.027777777777777776, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2666666666666666, 'translation_length': 38, 'reference_length': 30} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.06666666666666667, 'rougeL': 0.22580645161290322, 'rougeLsum': 0.3225806451612903} Sari: {'sari': 36.98089458679959} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['Der Teufel sagte: »Setze dich, ich will dich waschen, kämmen, schnippen, die Haare und Nägel schneiden und die Augen auswischen,« und als er mit ihm fertig war, gab er ihm den Ranzen wieder voll Kehrdreck und sprach:'] Prediction: ['Im Sommer 2020 wurde ein Teufel von ihm fertig gemacht.\nDer Teufel sagte: "Ich will dich waschen, kämmen, schnippen, die Haare und Nägel schneiden und die Augen auswischen,« und sprach ihm den Ranzen wieder voll Kehrdreck.'] Label: [['Der Teufel gibt Hans wieder einen Rucksack mit Dreck.\nUnd der Teufel wischt Hans die Augen aus.\nUnd der Teufel putzt Hans die Nase.\nUnd die Nägel.\nUnd der Teufel schneidet Hans die Haare.\nUnd der Teufel kämmt Hans.\nDer Teufel wäscht Hans.']] Sacrebleu: {'score': 4.456613727817372, 'counts': [11, 4, 1, 0], 'totals': [45, 44, 43, 42], 'precisions': [24.444444444444443, 9.090909090909092, 2.3255813953488373, 1.1904761904761905], 'bp': 0.8948393168143697, 'sys_len': 45, 'ref_len': 50} Bleu: {'bleu': 0.0, 'precisions': [0.24444444444444444, 0.09090909090909091, 0.023255813953488372, 0.0], 'brevity_penalty': 0.8948393168143697, 'length_ratio': 0.9, 'translation_length': 45, 'reference_length': 50} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.14634146341463417, 'rougeL': 0.23809523809523808, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 38.69911525405145} Flesh Reading Ease: 74.25 ---------------------------------------- Source: ['Er faßte sich aber kurz, dachte: »Du bist ohne Schuld unglücklich gewesen,« und kehrte wieder um, geradezu in die Hölle, da klagte er dem alten Teufel seine Not und bat ihn um Hilfe.'] Prediction: ['Ein altes Teufel hat einen alten Teufel seine Not gefunden.\nDer alten Teufel bat ihn um Hilfe.'] Label: [['Kannst du mir helfen?\nDer Wirt vom Gasthaus hat meinen Rucksack mit dem Gold gestohlen.\nHans sagt zum Teufel: Also geht Hans wieder zum Teufel.\nHans ist traurig.']] Sacrebleu: {'score': 1.5164832097171659, 'counts': [6, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [31.57894736842105, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 0.47862297251123204, 'sys_len': 19, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.3157894736842105, 0.0, 0.0, 0.0], 'brevity_penalty': 0.47862297251123215, 'length_ratio': 0.5757575757575758, 'translation_length': 19, 'reference_length': 33} Rouge: {'rouge1': 0.17777777777777778, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.17777777777777778} Sari: {'sari': 35.943223443223445} Flesh Reading Ease: 77.9 ---------------------------------------- Source: ['Wie nun Hans am anderen Morgen aufstand, den Wirt, bezahlen und weitergehen wollte, da war sein Ranzen weg.'] Prediction: ['Im vergangenen Morgen wurde ein Mann von einem Wirt bezahlen und weitergehen.\nDas Ranzen war sein Ranzen weg.\nNun wurde er von einem Wirt bezahlen und weitergehen.'] Label: [['Aber der Rucksack mit dem Gold ist weg.\nHans will für das Zimmer bezahlen.\nAm Morgen steht Hans auf.']] Sacrebleu: {'score': 3.2677968802443296, 'counts': [6, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [20.0, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3636363636363635, 'translation_length': 30, 'reference_length': 22} Rouge: {'rouge1': 0.1702127659574468, 'rouge2': 0.0, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.1702127659574468} Sari: {'sari': 38.5415782474606} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Dem Wirt aber stand der Ranzen voll Gold vor Augen und ließ ihm keine Ruhe, bis er in der Nacht hinschlich und ihn wegstahl.'] Prediction: ['Der Ranzen-Wirt ist seit Monaten nicht mehr Trainer.\nDer Wirt liegt keine Ruhe und liegt ihn wegstahl.'] Label: [['Und klaut den Rucksack mit dem Gold.\nDer Wirt geht leise in das Zimmer von Hans.\nEs ist mitten in der Nacht.']] Sacrebleu: {'score': 6.24378762593756, 'counts': [5, 2, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [26.31578947368421, 11.11111111111111, 5.882352941176471, 3.125], 'bp': 0.729212952525235, 'sys_len': 19, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.1111111111111111, 0.058823529411764705, 0.0], 'brevity_penalty': 0.729212952525235, 'length_ratio': 0.76, 'translation_length': 19, 'reference_length': 25} Rouge: {'rouge1': 0.25, 'rouge2': 0.05263157894736842, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.25} Sari: {'sari': 44.6149047744148} Flesh Reading Ease: 83.75 ---------------------------------------- Source: ['Da ließ sich Hans die beste Stube geben und köstlich aufwarten, aß und trank sich satt, wusch sich aber nicht und kämmte sich nicht, wie ihm der Teufel geheißen hatte und legte sich endlich schlafen.'] Prediction: ['Immer wieder kam es zu einer Stube, wie Hans die beste Stube geben und köstlich aufwarten.\nDas hatte sich der Teufel geheißen und legte sich endlich schlafen.\nHans hatte sich nicht, wie ihm der Teufel geheißen hatte und legte sich endlich schlafen.'] Label: [['Dann geht Hans schlafen.\nUnd Hans kämmt sich nicht.\nAber Hans wäscht sich nicht.\nUnd trinkt.\nHans isst.\nUnd das beste Essen.\nHans bekommt das beste Zimmer.']] Sacrebleu: {'score': 3.0593389570270797, 'counts': [10, 3, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [21.27659574468085, 6.521739130434782, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.2127659574468085, 0.06521739130434782, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3823529411764706, 'translation_length': 47, 'reference_length': 34} Rouge: {'rouge1': 0.32432432432432434, 'rouge2': 0.027777777777777776, 'rougeL': 0.2162162162162162, 'rougeLsum': 0.32432432432432434} Sari: {'sari': 37.15330121385186} Flesh Reading Ease: 72.4 ---------------------------------------- Source: ['« Nun wollte der Wirt ihn nicht einlassen, wie er ihm aber das Gold zeigte, ging er und klinkte selber die Thür auf.'] Prediction: ['Ein Wirt hat selber selber die Thür aufgefunden.\nNun wollte der Wirt ihn nicht einlassen, wie er ihm aber das Gold zeigte, ging er und klinkte selber die Thür auf.'] Label: [['Und lässt Hans sehr gerne in sein Gasthaus.\nDer Wirt staunt.\nDeshalb zeigt Hans dem Wirt das Gold in seinem Rucksack.\nJetzt hat der Wirt Angst.']] Sacrebleu: {'score': 3.6612667086152575, 'counts': [8, 2, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 6.0606060606060606, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.06060606060606061, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 34, 'reference_length': 30} Rouge: {'rouge1': 0.23728813559322032, 'rouge2': 0.07017543859649122, 'rougeL': 0.13559322033898305, 'rougeLsum': 0.23728813559322032} Sari: {'sari': 38.940853459909725} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['»Dem Teufel sein rußiger Bruder und mein König auch.'] Prediction: ['Im Interview mit der 20-Minuten-App mit Host Andrea äusserte sich über ihre Lebens-Kollegen über ihre Lebens-Kollegen und ihre Frauen.\nIn der Lebenszeit gibts einen Teil der beiden auf Social Media, die sie sich über ihre Lebenszeit bekommen.\nIm Interview spricht sie über ihre Lebenszeit und ihre Lebenszeitungen, die sie sich über ihre Lebenszeit bekommen.'] Label: [['Und ich bin ein freier Mann.\nHans sagt: Ich bin des Teufels rußiger Bruder.']] Sacrebleu: {'score': 0.7067604405306844, 'counts': [2, 0, 0, 0], 'totals': [61, 60, 59, 58], 'precisions': [3.278688524590164, 0.8333333333333334, 0.423728813559322, 0.21551724137931033], 'bp': 1.0, 'sys_len': 61, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.03278688524590164, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.588235294117647, 'translation_length': 61, 'reference_length': 17} Rouge: {'rouge1': 0.027397260273972605, 'rouge2': 0.0, 'rougeL': 0.027397260273972605, 'rougeLsum': 0.027397260273972605} Sari: {'sari': 52.54629629629629} Flesh Reading Ease: 50.85 ---------------------------------------- Source: ['»Wer bist du?«'] Prediction: ['Der frühere Weltkriegs-Chef der Schweizerin ist überrascht.\nEr hatte sich mit seinem ähnlichen Schritt auf dem Kanton Bern zu Gast.\nDer Weltkriegs-Chef ist überrascht.'] Label: [['Und der Wirt fragt: Wer bist du?']] Sacrebleu: {'score': 1.387819277861591, 'counts': [1, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [3.7037037037037037, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.037037037037037035, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 27, 'reference_length': 9} Rouge: {'rouge1': 0.058823529411764705, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.058823529411764705} Sari: {'sari': 30.36324786324786} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['»Aus der Hölle.«'] Prediction: ['In der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe von der Nähe'] Label: [['Hans sagt: Ich komme aus der Hölle.']] Sacrebleu: {'score': 0.13167838203456772, 'counts': [1, 0, 0, 0], 'totals': [270, 269, 268, 267], 'precisions': [0.37037037037037035, 0.18587360594795538, 0.09328358208955224, 0.04681647940074907], 'bp': 1.0, 'sys_len': 270, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.003703703703703704, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 30.0, 'translation_length': 270, 'reference_length': 9} Rouge: {'rouge1': 0.005434782608695653, 'rouge2': 0.0, 'rougeL': 0.005434782608695653, 'rougeLsum': 0.005434782608695653} Sari: {'sari': 34.722222222222214} Flesh Reading Ease: -166.06 ---------------------------------------- Source: ['Er rief ihn an und fragte: »Woher kommst du?«'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich verkündet.\nEr rief ihn an und fragte, wie er sich nicht mehr kommst.\nDer Mann rief ihn an und fragte, wie er sich nicht mehr kommst.'] Label: [['Woher kommst du?\nDeshalb fragt der Wirt Hans:']] Sacrebleu: {'score': 0.9243411456936733, 'counts': [2, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [4.25531914893617, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.0425531914893617, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.7, 'translation_length': 47, 'reference_length': 10} Rouge: {'rouge1': 0.07692307692307693, 'rouge2': 0.0, 'rougeL': 0.07692307692307693, 'rougeLsum': 0.07692307692307693} Sari: {'sari': 26.439393939393934} Flesh Reading Ease: 95.8 ---------------------------------------- Source: ['Vor dem Wirtshause stand der Wirt, und wie ihn der herankommen sah, erschrak er, weil Hans so entsetzlich aussah, ärger als eine Vogelscheuche.'] Prediction: ['Im Wirtshause erschrak Hans, der seine Wirt aus dem Wirt erschrak.\nDer Wirt erschrak ihn, weil Hans so entsetzlich aussah, ärger als eine Vogelscheuche.'] Label: [['Und lange Haare.\nUnd hat lange Nägel.\nHans ist schmutzig.\nHans sieht nämlich schrecklich aus: Aber der Wirt lässt Hans nicht herein.\nHans will im Gasthaus schlafen.\nIn der Stadt ist ein Gasthaus.']] Sacrebleu: {'score': 1.432266524294412, 'counts': [7, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 0.6843332004383633, 'sys_len': 29, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6843332004383633, 'length_ratio': 0.725, 'translation_length': 29, 'reference_length': 40} Rouge: {'rouge1': 0.2333333333333333, 'rouge2': 0.034482758620689655, 'rougeL': 0.16666666666666669, 'rougeLsum': 0.2} Sari: {'sari': 37.96515525758645} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['»Das hätte ich mir nicht gedacht,« sprach er, war vergnügt und ging in die Stadt hinein.'] Prediction: ['Ein Mann hatte in der Stadt Zürich in die Stadt Zürich eine Stadt geschickt.\nEr war vergnügt und ging in die Stadt hinein.\nNun sprach er über die Stadt und sprach er in die Stadt hinein.'] Label: [['Hans geht in die Stadt.\nJetzt ist Hans glücklich.']] Sacrebleu: {'score': 3.9893707027646133, 'counts': [5, 2, 1, 0], 'totals': [39, 38, 37, 36], 'precisions': [12.820512820512821, 5.2631578947368425, 2.7027027027027026, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1282051282051282, 0.05263157894736842, 0.02702702702702703, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5454545454545454, 'translation_length': 39, 'reference_length': 11} Rouge: {'rouge1': 0.12244897959183675, 'rouge2': 0.0851063829787234, 'rougeL': 0.12244897959183675, 'rougeLsum': 0.12244897959183675} Sari: {'sari': 42.89141414141414} Flesh Reading Ease: 97.8 ---------------------------------------- Source: ['wie er ihn aber öffnete, so war der Kehrdreck pures Gold geworden.'] Prediction: ['Der Kehrdreck pures Gold war nicht mehr öffnet.\nDer Kehrdreck war pures Gold geworden.\nDer Kehrdreck war pures Gold geworden.'] Label: [['Im Rucksack ist Gold: Aber im Rucksack ist kein Dreck.\nHans macht den Rucksack auf:']] Sacrebleu: {'score': 1.958224832501124, 'counts': [2, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [8.695652173913043, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.08695652173913043, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2777777777777777, 'translation_length': 23, 'reference_length': 18} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 35.476190476190474} Flesh Reading Ease: 79.7 ---------------------------------------- Source: ['Sobald er nun wieder oben im Walde war, hob er seinen Ranzen vom Rücken und wollte ihn ausschütten;'] Prediction: ['Ein Mann wurde im Walde von der Rücken von der Walde ausschütten.\nDas Rücken wurde von der Walde ausschütten.\nObwohl er sich nicht ausschütten, wurde der Ranzen ausschütten.'] Label: [['Hans will den Dreck aus dem Rucksack schütten.\nHans kommt im Wald an.']] Sacrebleu: {'score': 1.526608193588886, 'counts': [3, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [9.375, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.09375, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1333333333333333, 'translation_length': 32, 'reference_length': 15} Rouge: {'rouge1': 0.08333333333333333, 'rouge2': 0.0, 'rougeL': 0.041666666666666664, 'rougeLsum': 0.08333333333333333} Sari: {'sari': 52.84090909090909} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['Der Soldat schwieg still und that, was der Teufel sagte, aber er war mit seinem Lohn gar nicht zufrieden.'] Prediction: ['Ein Soldat schwieg still und wurde mit seinem Lohn gar nicht zufrieden.\nDer Soldat schwieg still und wurde dabei nicht zufrieden.'] Label: [['Aber Hans wundert sich über seinen Lohn.\nUnd geht los.']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9166666666666667, 'translation_length': 23, 'reference_length': 12} Rouge: {'rouge1': 0.12903225806451613, 'rouge2': 0.0, 'rougeL': 0.12903225806451613, 'rougeLsum': 0.12903225806451613} Sari: {'sari': 35.53240740740741} Flesh Reading Ease: 81.75 ---------------------------------------- Source: ['auch.‹« Du sollst auch gehen ungewaschen und ungekämmt, mit langen Haaren am Kopf und am Bart, mit ungeschnittenen Nägeln und mit trüben Augen, und wenn du gefragt wirst, woher du kämst, sollst du sagen: ›Aus der Hölle,‹ und wenn du gefragt wirst, wer du wärst, sollst du sagen: ›Des Teufels rußiger Bruder und mein König'] Prediction: ['Du sollst auch gehen ungewaschen und ungekämmt, mit langen Haaren am Kopf und am Bart, mit ungeschnittenen Nägeln und mit trüben Augen, und wenn du gefragt wirst, woher du kämst, sollst du sagen: Du sollst auch gehen ungewaschen und ungekämmt, mit langen Haaren am Kopf und am Bart, mit ungeschnittenen Nägeln und mit trüben Augen, und wenn du gefragt wirst, wer du wärst, sollst du sagen: ›Des Teufels rußiger Bruder und mein König.'] Label: [['Und ich bin ein freier Mann.\nIch bin des Teufels rußiger Bruder.\nDann sagst du: Wer bist du?\nUnd fragt dich jemand: Ich komme aus der Hölle.\nDann sagst du: Woher kommst du?\nFragt dich jemand: Und du darfst deine Augen nicht auswischen.\nUnd auch nicht die Nägel.\nUnd dir nicht die Haare schneiden.\nUnd nicht kämmen.\nAber du darfst dich nicht waschen.']] Sacrebleu: {'score': 2.289355938731725, 'counts': [14, 2, 1, 0], 'totals': [86, 85, 84, 83], 'precisions': [16.27906976744186, 2.3529411764705883, 1.1904761904761905, 0.6024096385542169], 'bp': 1.0, 'sys_len': 86, 'ref_len': 77} Bleu: {'bleu': 0.0, 'precisions': [0.16279069767441862, 0.023529411764705882, 0.011904761904761904, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1168831168831168, 'translation_length': 86, 'reference_length': 77} Rouge: {'rouge1': 0.30666666666666664, 'rouge2': 0.05405405405405405, 'rougeL': 0.14666666666666667, 'rougeLsum': 0.30666666666666664} Sari: {'sari': 33.871686429413764} Flesh Reading Ease: 19.25 ---------------------------------------- Source: ["« Sprach der Teufel: »Damit du deinen verdienten Lohn kriegst, geh und raffe dir deinen Ranzen voll Kehrdreck und nimm's mit nach Haus."] Prediction: ['Du findest hier in der Nähe des Jahres 2020 in der Nähe des Jahres statt?\nHier gibts dir einen Ranzen, wie du dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir dir'] Label: [['Und nimm den Rucksack mit nach Hause.\nFüll einen Rucksack mit Dreck.\nIch gebe dir den Lohn für deine Arbeit:']] Sacrebleu: {'score': 0.096322929398925, 'counts': [2, 0, 0, 0], 'totals': [438, 437, 436, 435], 'precisions': [0.45662100456621, 0.11441647597254005, 0.05733944954128441, 0.028735632183908046], 'bp': 1.0, 'sys_len': 438, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.0045662100456621, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 19.043478260869566, 'translation_length': 438, 'reference_length': 23} Rouge: {'rouge1': 0.008695652173913044, 'rouge2': 0.0, 'rougeL': 0.008695652173913044, 'rougeLsum': 0.008695652173913044} Sari: {'sari': 49.33771929824562} Flesh Reading Ease: -96.51 ---------------------------------------- Source: ['jetzt ist deine Zeit herum, willst du wieder heim?«'] Prediction: ['Der Schweizer Gastronomiker überrascht mit seiner Zeit, wie er sich nicht mehr überrascht.\nIm Interview mit der 20-Minuten-App spricht er über seine Zeit, wie er sich nicht mehr überrascht.\nIm Interview spricht er über seine Zeit, wie er sich nicht mehr überrascht.'] Label: [['Du kannst nach Hause gehen.\nDeine Arbeit ist jetzt zu Ende.']] Sacrebleu: {'score': 0.8671339908544159, 'counts': [2, 0, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [4.0, 1.0204081632653061, 0.5208333333333334, 0.26595744680851063], 'bp': 1.0, 'sys_len': 50, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.04, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8461538461538463, 'translation_length': 50, 'reference_length': 13} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 55.59523809523809} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['dein Glück ist, daß du noch Holz zugelegt hast, sonst war dein Leben verloren;'] Prediction: ['Ein Glück ist in der Nacht auf Sonntag in der Nacht auf Sonntag gestorben.\nDer Opfer war ein Leben verloren.\nDer Opfer war ein Leben verloren.'] Label: [['Deshalb werde ich dich nicht bestrafen.\nDas war richtig.\nAber du hast Holz zum Feuer gelegt.\nDas hatte ich dir verboten!']] Sacrebleu: {'score': 1.8196871111910016, 'counts': [4, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [13.793103448275861, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.13793103448275862, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.16, 'translation_length': 29, 'reference_length': 25} Rouge: {'rouge1': 0.041666666666666664, 'rouge2': 0.0, 'rougeL': 0.041666666666666664, 'rougeLsum': 0.041666666666666664} Sari: {'sari': 49.99287749287749} Flesh Reading Ease: 83.55 ---------------------------------------- Source: ['»Aber du hast auch in die Kessel geguckt:'] Prediction: ['Einige Frauen sind in einem Kessel geguckt.\nSie wollten sich auf ihre Kessel geguckt haben.\nSie wollten sich auf ihren Mann auf ihren Mann aufnehmen.'] Label: [['Du hast aber auch in die Kessel geguckt.']] Sacrebleu: {'score': 5.341413623819777, 'counts': [4, 2, 1, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 7.407407407407407, 3.8461538461538463, 2.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.07407407407407407, 0.038461538461538464, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.111111111111111, 'translation_length': 28, 'reference_length': 9} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.06451612903225806, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 26.88471250971251} Flesh Reading Ease: 78.1 ---------------------------------------- Source: ['»Ich habe das Feuer unter den Kesseln geschürt, ich habe gekehrt und den Kehrdreck hinter die Thür getragen.«'] Prediction: ['Ein Kehrdreck hat sich in einem Kesseln in der Nähe des Kantons Bern überrascht.\nDer Kehrdreck war dabei unter den Kesseln geschürt.\nDie Frau war dabei, dass sie sich unter den Kesseln gekehrt habe.'] Label: [['Und ich habe den Dreck hinaus·gebracht.\nIch habe sauber gemacht.\nHans sagt: Ich habe Feuer unter den Kesseln gemacht.']] Sacrebleu: {'score': 4.609815356235175, 'counts': [8, 2, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [21.05263157894737, 5.405405405405405, 2.7777777777777777, 1.4285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.05405405405405406, 0.027777777777777776, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6521739130434783, 'translation_length': 38, 'reference_length': 23} Rouge: {'rouge1': 0.17857142857142858, 'rouge2': 0.07407407407407407, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.17857142857142858} Sari: {'sari': 41.51324166030049} Flesh Reading Ease: 80.95 ---------------------------------------- Source: ['Als nun die Zeit vollends herum war, kam der Teufel und sagte: »Nun, Hans, was hast du gemacht?«'] Prediction: ['Im Interview mit Hans (45) spricht der Schauspieler über seine Zeit vollends herum.\nDer Teufel war selbst und sagte: "Nun, Hans, was hast du gemacht?"'] Label: [['Was hast du gemacht?\nDer Teufel fragt Hans: Und der Teufel kommt zurück.\nDie 7 Jahre vergehen.']] Sacrebleu: {'score': 9.207598308796069, 'counts': [10, 4, 2, 1], 'totals': [34, 33, 32, 31], 'precisions': [29.41176470588235, 12.121212121212121, 6.25, 3.225806451612903], 'bp': 1.0, 'sys_len': 34, 'ref_len': 21} Bleu: {'bleu': 0.09207598308796072, 'precisions': [0.29411764705882354, 0.12121212121212122, 0.0625, 0.03225806451612903], 'brevity_penalty': 1.0, 'length_ratio': 1.619047619047619, 'translation_length': 34, 'reference_length': 21} Rouge: {'rouge1': 0.41860465116279066, 'rouge2': 0.19512195121951217, 'rougeL': 0.18604651162790697, 'rougeLsum': 0.37209302325581395} Sari: {'sari': 52.93947882183176} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['Also that er sieben Jahre seinen Dienst in der Hölle, wusch sich nicht, kämmte sich nicht, schnippte sich nicht, schnitt sich die Nägel und Haare nicht und wischte sich kein Wasser aus den Augen;'] Prediction: ['Ein Dienst in der Hölle wurde seinen Dienst in der Hölle geschickt.\nEr wusch sich nicht, kämmte sich nicht, schnippte sich nicht, schnitt sich die Nägel und Haare nicht und wischte sich kein Wasser aus den Augen.'] Label: [['Und wischt sich nicht die Augen aus.\nUnd auch nicht die Nägel.\nUnd schneidet sich nicht die Haare.\nUnd putzt sich nicht die Nase.\nUnd kämmt sich nicht.\nUnd Hans wäscht sich nicht.\nSo arbeitet Hans 7 Jahre lang für den Teufel.']] Sacrebleu: {'score': 3.5701205541386143, 'counts': [17, 4, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [40.476190476190474, 9.75609756097561, 1.25, 0.6410256410256411], 'bp': 0.846481724890614, 'sys_len': 42, 'ref_len': 49} Bleu: {'bleu': 0.0, 'precisions': [0.40476190476190477, 0.0975609756097561, 0.0, 0.0], 'brevity_penalty': 0.846481724890614, 'length_ratio': 0.8571428571428571, 'translation_length': 42, 'reference_length': 49} Rouge: {'rouge1': 0.4367816091954023, 'rouge2': 0.16470588235294117, 'rougeL': 0.27586206896551724, 'rougeLsum': 0.3908045977011494} Sari: {'sari': 38.62332519061367} Flesh Reading Ease: 85.45 ---------------------------------------- Source: ['Du hast mich gehabt, jetzt hab ich dich,« holte den Blasbalg und ließ das Höllenfeuer recht unter ihm flackern.'] Prediction: ['Immer mehr als ein Jahr lang hatte sich ein Blasbalg einen Höllenfeuer recht unter ihm flackern.\nDer Blasbalg war dabei von einem Blasbalg aufgefunden und flackte das Höllenfeuer recht unter ihm.'] Label: [['Das Feuer wird stärker.\nUnd legt viele große Holz·stücke zum Feuer.\nHans macht den Deckel wieder zu.\nJetzt bestimme ich über dich.\nHans sagt: Früher hast du über mich bestimmt.']] Sacrebleu: {'score': 1.2195355710189777, 'counts': [2, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [6.0606060606060606, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.9131007162822624, 'sys_len': 33, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.06060606060606061, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9131007162822622, 'length_ratio': 0.9166666666666666, 'translation_length': 33, 'reference_length': 36} Rouge: {'rouge1': 0.05882352941176471, 'rouge2': 0.0, 'rougeL': 0.029411764705882356, 'rougeLsum': 0.05882352941176471} Sari: {'sari': 31.477732793522268} Flesh Reading Ease: 70.9 ---------------------------------------- Source: ["Nun wollte er auch sehen, wer im dritten Kessel säße, da war's gar ein General: »Aha, Vogel, treff' ich dich hier?"] Prediction: ["Im dritten Kessel säßte ein General sehen, wer im dritten Kessel säße.\nDer General war ein General, der sich auf dem Kopf treff' ich dich hier war."] Label: [['Und Hans kennt auch diesen Soldaten von früher.\nAuch in diesem Kessel sitzt ein Soldat.\nUnd guckt in den Kessel: Also hebt Hans vorsichtig den Deckel vom 3.\nKessel an.\nJetzt will Hans auch in den 3.\nKessel gucken.']] Sacrebleu: {'score': 1.1054656997659176, 'counts': [5, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 0.616392731327227, 'sys_len': 31, 'ref_len': 46} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.0, 0.0, 0.0], 'brevity_penalty': 0.616392731327227, 'length_ratio': 0.6739130434782609, 'translation_length': 31, 'reference_length': 46} Rouge: {'rouge1': 0.08695652173913043, 'rouge2': 0.0, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 34.42606209150327} Flesh Reading Ease: 78.75 ---------------------------------------- Source: ["Du hast mich gehabt, jetzt hab' ich dich,« machte den Deckel wieder zu und trug noch einen Klotz herbei, der sollte ihm erst recht heiß machen."] Prediction: ['Ein Deckel hatte einen Klotz herbei und trug noch einen Klotz herbei.\nDer Deckel sollte ihm erst recht heiß machen.\nDie Deckel-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-Klotz-'] Label: [['Das Feuer wird stärker.\nUnd legt ein großes Stück Holz zum Feuer.\nHans macht den Deckel wieder zu.\nJetzt bestimme ich über dich.\nHans sagt: Früher hast du über mich bestimmt.']] Sacrebleu: {'score': 1.2046120757916725, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 0.5817778142098082, 'sys_len': 24, 'ref_len': 37} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5817778142098083, 'length_ratio': 0.6486486486486487, 'translation_length': 24, 'reference_length': 37} Rouge: {'rouge1': 0.043795620437956206, 'rouge2': 0.0, 'rougeL': 0.0291970802919708, 'rougeLsum': 0.0291970802919708} Sari: {'sari': 28.039669881775147} Flesh Reading Ease: -123.51 ---------------------------------------- Source: ["Danach ging er zum zweiten Kessel, hob den Deckel auch ein wenig auf und guckte, da saß sein Fähnrich darin: »Aha, Vogel, treff' ich dich hier?"] Prediction: ['Ein Fähnrich hat einen Deckel aufgefunden und wie er sich darin verkündete.\nDer Deckel wurde von seinem Fähnrich aufgefunden und wurde dabei von seinem Fähnrich verletzt.\nDer Deckel wurde von seinem Fähnrich aufgefunden und wurde von seinem Fähnrich geschickt.'] Label: [['Und Hans kennt auch diesen Soldaten von früher.\nAuch in diesem Kessel sitzt ein Soldat.\nUnd guckt in den Kessel: Also hebt Hans vorsichtig den Deckel vom 2.\nKessel an.\nJetzt will Hans auch in die anderen Kessel gucken.']] Sacrebleu: {'score': 1.2158697028245447, 'counts': [5, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [11.904761904761905, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 0.9310627797040228, 'sys_len': 42, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.11904761904761904, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9310627797040228, 'length_ratio': 0.9333333333333333, 'translation_length': 42, 'reference_length': 45} Rouge: {'rouge1': 0.11764705882352941, 'rouge2': 0.0, 'rougeL': 0.09411764705882353, 'rougeLsum': 0.09411764705882353} Sari: {'sari': 53.02896218043484} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ["Du hast mich gehabt, jetzt hab' ich dich,« ließ geschwind den Deckel fallen, schürte das Feuer und legte noch frisch zu."] Prediction: ["Du hast mich gehabt, jetzt hab' ich dich,« ließ geschwind den Deckel fallen, schürte das Feuer und legte noch frisch zu.\nDas Feuer war noch frisch zu."] Label: [['Das Feuer wird stärker.\nUnd legt mehr Holz zum Feuer.\nHans macht den Deckel wieder zu.\nJetzt bestimme ich über dich.\nUnd sagt: Früher hast du über mich bestimmt.']] Sacrebleu: {'score': 4.354572584990633, 'counts': [12, 3, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [36.36363636363637, 9.375, 1.6129032258064515, 0.8333333333333334], 'bp': 0.9411939401248326, 'sys_len': 33, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.36363636363636365, 0.09375, 0.0, 0.0], 'brevity_penalty': 0.9411939401248326, 'length_ratio': 0.9428571428571428, 'translation_length': 33, 'reference_length': 35} Rouge: {'rouge1': 0.44067796610169496, 'rouge2': 0.07017543859649124, 'rougeL': 0.1694915254237288, 'rougeLsum': 0.4067796610169491} Sari: {'sari': 40.97490347490347} Flesh Reading Ease: 90.45 ---------------------------------------- Source: ["Da sah er seinen ehemaligen Unteroffizier darin sitzen: »Aha, Vogel,« sprach er, »treff' ich dich hier?"] Prediction: ['Ein ehemaliger Unteroffizier hat seinen ehemaligen Unteroffizier darin sitzen.\nDer Unteroffizier sprach von seinem ehemaligen Unteroffizier, der sich hier verlassen hat.\nDer Unteroffizier sprach von seinem ehemaligen Unteroffizier, der sich hier verlassen hat.'] Label: [['Hans kennt den Soldaten von früher.\nDer Soldat ist ein böser Mensch.\nIm Kessel sitzt ein Soldat.']] Sacrebleu: {'score': 2.4371431437250504, 'counts': [5, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 38, 'reference_length': 20} Rouge: {'rouge1': 0.11538461538461539, 'rouge2': 0.0, 'rougeL': 0.07692307692307693, 'rougeLsum': 0.11538461538461539} Sari: {'sari': 36.45045045045045} Flesh Reading Ease: 28.6 ---------------------------------------- Source: ['endlich konnte er sich nicht mehr anhalten, hob vom ersten Kessel ein klein bißchen den Deckel auf und guckte hinein.'] Prediction: ['Ein bißchen bißchen hatte den Deckel auf und guckte hinein.\nDer Mann hatte sich nicht mehr anhalten, sondern wurde sich nicht mehr anhalten.'] Label: [['Und guckt in den Kessel: Trotzdem hebt Hans vorsichtig den Deckel von einem Kessel an.']] Sacrebleu: {'score': 3.197383344450448, 'counts': [3, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [11.538461538461538, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5294117647058822, 'translation_length': 26, 'reference_length': 17} Rouge: {'rouge1': 0.15, 'rouge2': 0.052631578947368425, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 37.31559011164274} Flesh Reading Ease: 74.9 ---------------------------------------- Source: ['Er hätte für sein Leben gern hineingeschaut, wenn es ihm der Teufel nicht so streng verboten hätte:'] Prediction: ['Ein Teufel der Schweizer Grenze hatte für sein Leben gern hineingeschaut, wenn es ihm der Teufel nicht so streng verboten hätte.\nDer Teufel hätte für sein Leben gern hineingeschaut werden.'] Label: [['Aber der Teufel hat es ihm verboten.\nHans will unbedingt in die Kessel gucken.\nJetzt ist Hans neugierig:']] Sacrebleu: {'score': 3.6536151167279005, 'counts': [7, 2, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 6.25, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.21212121212121213, 0.0625, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5714285714285714, 'translation_length': 33, 'reference_length': 21} Rouge: {'rouge1': 0.1923076923076923, 'rouge2': 0.08, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.1923076923076923} Sari: {'sari': 35.683590288853445} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Wie der alte Teufel wieder kam, sah er nach, ob alles geschehen war, zeigte sich zufrieden und ging zum zweitenmal fort.'] Prediction: ['Ein altes Teufel wurde in der Nacht auf Sonntag zum zweiten Mal fort.\nDer alte Teufel wurde wieder wieder kam, wie er nach, ob alles geschehen war, zeigte sich zufrieden und ging zum zweitenmal fort.'] Label: [['Und geht wieder weg.\nDeshalb ist der Teufel zufrieden.\nNach einiger Zeit kommt der Teufel zurück.']] Sacrebleu: {'score': 1.494348998143061, 'counts': [7, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [17.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.175, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1052631578947367, 'translation_length': 40, 'reference_length': 19} Rouge: {'rouge1': 0.3076923076923077, 'rouge2': 0.0, 'rougeL': 0.11538461538461539, 'rougeLsum': 0.23076923076923078} Sari: {'sari': 37.35632183908046} Flesh Reading Ease: 74.75 ---------------------------------------- Source: ['« Da ging nun der alte Teufel wieder hinaus auf seine Wanderung und der Soldat trat seinen Dienst an, legte Feuer zu, kehrte und trug den Kehrdreck hinter die Thür, alles wie es befohlen war.'] Prediction: ['Ein Teufel wurde in der Nacht auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zu sehen.\nDer alte Teufel wurde wieder hinaus auf seine Wanderung geschickt und legte Feuer zu, kehrte und trug den Kehrdreck hinter die Thür, alles wie es befohlen war.'] Label: [['Und Hans bringt den Dreck hinaus.\nUnd Hans macht sauber.\nHans macht Feuer unter den Kesseln.\nAlso beginnt Hans mit der Arbeit: Und geht weg.\nDas sagt der Teufel zu Hans.']] Sacrebleu: {'score': 0.6796024057698294, 'counts': [8, 0, 0, 0], 'totals': [89, 88, 87, 86], 'precisions': [8.98876404494382, 0.5681818181818182, 0.28735632183908044, 0.14534883720930233], 'bp': 1.0, 'sys_len': 89, 'ref_len': 37} Bleu: {'bleu': 0.0, 'precisions': [0.0898876404494382, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4054054054054053, 'translation_length': 89, 'reference_length': 37} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.0, 'rougeL': 0.06837606837606837, 'rougeLsum': 0.13675213675213674} Sari: {'sari': 37.254901960784316} Flesh Reading Ease: 49.75 ---------------------------------------- Source: ['aber guckte er ein einziges Mal in die Kessel hinein, so würde es ihm schlimm ergehen.'] Prediction: ['Ein Mann hat ein einziges Mal in die Kessel hinein.\nDer Mann wurde schwerm ergehen.\nEr wurde schon schon mal schwerm ergehen.'] Label: [['Sonst werde ich dich bestrafen.\nAber du darfst nicht in die Kessel gucken.']] Sacrebleu: {'score': 6.370405230161802, 'counts': [5, 2, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [20.0, 8.333333333333334, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.08333333333333333, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.1714285714285714, 'rouge2': 0.12121212121212123, 'rougeL': 0.1714285714285714, 'rougeLsum': 0.1714285714285714} Sari: {'sari': 43.217592592592595} Flesh Reading Ease: 84.95 ---------------------------------------- Source: ['er müßte das Feuer schüren unter den Kesseln, wo die Höllenbraten drin säßen, das Haus rein halten, den Kehrdreck hinter die Thür tragen und überall auf Ordnung sehen;'] Prediction: ['Ein Kehrdreck hat in der Thür einen Kehrdreck entdeckt.\nDer Kehrdreck trug den Kehrdreck hinter die Thür und überall auf Ordnung sehen.'] Label: [['Und den Dreck hinaus·bringen.\nUnd sauber machen.\nDu musst Feuer unter den Kesseln machen.']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.411764705882353, 'translation_length': 24, 'reference_length': 17} Rouge: {'rouge1': 0.10256410256410255, 'rouge2': 0.0, 'rougeL': 0.10256410256410255, 'rougeLsum': 0.10256410256410255} Sari: {'sari': 33.701531909483855} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Dann sagte es ihm, was er zu thun hätte:'] Prediction: ['Ein Mann hatte sich in einem Interview mit dem US-Präsidenten verhaftet, was er zu thun hätte.\nEr sagte, er habe sich zu thun hätte, was er zu thun hätte.\nDas sagte er, er habe sich zu thun hätte, was er zu thun hätte.'] Label: [['Der Teufel sagt zu Hans:']] Sacrebleu: {'score': 0.7144315612998046, 'counts': [1, 0, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [1.9607843137254901, 1.0, 0.5102040816326531, 0.2604166666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.0196078431372549, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.5, 'translation_length': 51, 'reference_length': 6} Rouge: {'rouge1': 0.03636363636363636, 'rouge2': 0.0, 'rougeL': 0.03636363636363636, 'rougeLsum': 0.03636363636363636} Sari: {'sari': 33.101851851851855} Flesh Reading Ease: 83.8 ---------------------------------------- Source: ["»Frisch dran, wenn's nicht anders sein kann,« und ging mit dem Männchen fort, das führte ihn geradeswegs in die Hölle hinein. « Der Soldat sprach:"] Prediction: ['Ein Männchen führte in die Hölle eines Soldaten in die Hölle hinein.\nDer Soldat sprach: "Wenn\'s nicht anders sein kann,« und ging mit dem Männchen fort.\nDer Soldat sprach: "Wenn\'s nicht anders sein kann,« und sprach: "Wenn\'s nicht anders sein kann,«'] Label: [['Hans und der Teufel kommen in der Hölle an.\nUnd Hans geht mit dem Teufel in die Hölle.\nHans überlegt und stimmt zu.']] Sacrebleu: {'score': 3.768010205709776, 'counts': [11, 3, 1, 0], 'totals': [55, 54, 53, 52], 'precisions': [20.0, 5.555555555555555, 1.8867924528301887, 0.9615384615384616], 'bp': 1.0, 'sys_len': 55, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.05555555555555555, 0.018867924528301886, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1153846153846154, 'translation_length': 55, 'reference_length': 26} Rouge: {'rouge1': 0.35135135135135137, 'rouge2': 0.1388888888888889, 'rougeL': 0.21621621621621617, 'rougeLsum': 0.2972972972972973} Sari: {'sari': 40.88752803174056} Flesh Reading Ease: 90.25 ---------------------------------------- Source: ['Aber eins sag ich dir, du darfst dich nicht waschen, nicht kämmen, nicht schnippen, keine Nägel und Haare abschneiden und kein Wasser aus den Augen wischen.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag zu Gast geschickt.\nEr hatte sich nicht waschen, nicht kämmen, nicht schnippen.\nAber auch darfst dich nicht waschen, nicht kämmen, nicht schnippen, keine Nägel und Haare abschneiden.'] Label: [['Und du darfst dir nicht die Augen auswischen.\nUnd auch nicht die Nägel.\nUnd dir nicht die Haare schneiden.\nUnd dir nicht die Nase putzen.\nUnd nicht kämmen.\nAber in den 7 Jahren darfst du dich nicht waschen.']] Sacrebleu: {'score': 5.765501047725263, 'counts': [18, 4, 1, 0], 'totals': [44, 43, 42, 41], 'precisions': [40.90909090909091, 9.30232558139535, 2.380952380952381, 1.2195121951219512], 'bp': 1.0, 'sys_len': 44, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.4090909090909091, 0.09302325581395349, 0.023809523809523808, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 44, 'reference_length': 44} Rouge: {'rouge1': 0.45569620253164556, 'rouge2': 0.15584415584415584, 'rougeL': 0.22784810126582278, 'rougeLsum': 0.45569620253164556} Sari: {'sari': 40.827290482267856} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ['sieben Jahre sollst du mir dienen, hernach bist du wieder frei. Der Teufel sagte: »Willst du dich bei mir vermieten und mein Knecht sein, so sollst du für dein Lebtag genug haben;'] Prediction: ['Der Teufel der 20-Minuten-App ist auf Spotify veröffentlicht.\nDer 20-Minuten-App ist auf Spotify zu sehen, wie es sich um die Leiche handelt.\nDer Lebens-Kollege sagt, dass er sich für ihre Lebens-Kolle nicht mehr genug haben soll.'] Label: [['Danach bist du ein freier Mann.\nDer Teufel sagt: Du kannst für mich arbeiten: 7 Jahre lang.']] Sacrebleu: {'score': 2.5449372629507847, 'counts': [6, 2, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [13.333333333333334, 4.545454545454546, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 45, 'reference_length': 21} Rouge: {'rouge1': 0.16129032258064516, 'rouge2': 0.06666666666666667, 'rougeL': 0.16129032258064516, 'rougeLsum': 0.16129032258064516} Sari: {'sari': 50.15128968253968} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['« Da sprach der Soldat: »Ich habe Hunger, aber kein Geld.«'] Prediction: ['Ein Soldat hat Hunger, aber kein Geld.\nDer Soldat spricht von Hunger und warnt von Hunger.'] Label: [['Aber ich habe kein Geld.\nHans sagt: Ich habe Hunger.']] Sacrebleu: {'score': 9.475814783795371, 'counts': [5, 3, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [26.31578947368421, 16.666666666666668, 5.882352941176471, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.16666666666666666, 0.058823529411764705, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4615384615384615, 'translation_length': 19, 'reference_length': 13} Rouge: {'rouge1': 0.3076923076923077, 'rouge2': 0.08333333333333334, 'rougeL': 0.3076923076923077, 'rougeLsum': 0.3076923076923077} Sari: {'sari': 42.98367446393762} Flesh Reading Ease: 95.95 ---------------------------------------- Source: ['Du siehst ja so trübselig aus. Das Männchen sagte zu ihm: »Was fehlt dir?'] Prediction: ['Ein Männchen hat sich in der Nacht auf Sonntag in Zürich einen Täter gefunden.\nDas Männchen sagte zu ihm: "Was fehlt dir?"'] Label: [['Warum bist du so traurig?\nDer Teufel fragt Hans:']] Sacrebleu: {'score': 1.6504045595709425, 'counts': [2, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [7.407407407407407, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.07407407407407407, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4545454545454546, 'translation_length': 27, 'reference_length': 11} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 34.12698412698412} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Da ging er hinaus in den Wald und als er ein Weilchen gegangen war, begegnete ihm ein kleines Männchen, das war aber der Teufel.'] Prediction: ['Ein kleines Männchen wurde in den Wald gefeiert.\nDas war aber der Teufel.\nDer Mann war ein kleines Männchen.'] Label: [['Der kleine Mann ist der Teufel.\nIm Wald trifft Hans einen kleinen Mann.\nHans kommt zu einem Wald.']] Sacrebleu: {'score': 8.216107324922536, 'counts': [8, 2, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 9.523809523809524, 5.0, 2.6315789473684212], 'bp': 1.0, 'sys_len': 22, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.36363636363636365, 0.09523809523809523, 0.05, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0476190476190477, 'translation_length': 22, 'reference_length': 21} Rouge: {'rouge1': 0.25641025641025644, 'rouge2': 0.05405405405405405, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.25641025641025644} Sari: {'sari': 44.10173160173161} Flesh Reading Ease: 91.8 ---------------------------------------- Source: ['Ein abgedankter Soldat hatte nichts zu leben und wußte sich nicht mehr zu helfen.'] Prediction: ['Ein abgedankter Soldat hatte nichts zu leben und wußte sich nicht mehr zu helfen.\nDer abgedankte Soldat wurde nicht mehr zu helfen.'] Label: [['Und denkt: Was soll ich jetzt tun?\nDeshalb ist Hans traurig.\nUnd hat kein Geld zum Leben.\nHans arbeitet nicht mehr.\nEin Soldat kommt aus dem Krieg zurück.']] Sacrebleu: {'score': 2.7300086204579035, 'counts': [6, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 0.6592406302004437, 'sys_len': 24, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 0.6592406302004439, 'length_ratio': 0.7058823529411765, 'translation_length': 24, 'reference_length': 34} Rouge: {'rouge1': 0.23076923076923075, 'rouge2': 0.04, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.19230769230769232} Sari: {'sari': 40.0} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Also erhielt er die Krone und hat lange in Weisheit geherrscht.'] Prediction: ['Ein Mann hat sich in der Krone geherrscht und hat lange in Weisheit geherrscht.\nDas hat er seine Krone geherrscht.'] Label: [['So wird der Dummling der neue König.']] Sacrebleu: {'score': 2.0540268312306345, 'counts': [2, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [9.090909090909092, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.75, 'translation_length': 22, 'reference_length': 8} Rouge: {'rouge1': 0.07142857142857144, 'rouge2': 0.0, 'rougeL': 0.07142857142857144, 'rougeLsum': 0.07142857142857144} Sari: {'sari': 36.38888888888889} Flesh Reading Ease: 88.1 ---------------------------------------- Source: ['Darauf sprang das schöne Fräulein, das der Dummling mitgebracht hatte, und sprang so leicht hindurch wie ein Reh, und aller Widerspruch mußte aufhören.'] Prediction: ['Ein Fräulein sprang auf einem Reh und sprang so leicht hindurch wie ein Reh, und aller Widerspruch mußte aufhören.\nDer Dummling sprang so leicht hindurch wie ein Reh, und aller Widerspruch mußte aufhören.'] Label: [['Und die Frau vom Dummling schafft es.\nDie Frau vom Dummling springt so leicht wie eine Feder.\nDann springt die Frau vom Dummling durch den Reifen.']] Sacrebleu: {'score': 2.6227235705350953, 'counts': [6, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [16.216216216216218, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.16216216216216217, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2758620689655173, 'translation_length': 37, 'reference_length': 29} Rouge: {'rouge1': 0.15625, 'rouge2': 0.03225806451612903, 'rougeL': 0.15625, 'rougeLsum': 0.15625} Sari: {'sari': 38.449074074074076} Flesh Reading Ease: 75.75 ---------------------------------------- Source: ['Da sprangen die zwei Bauernweiber, sprangen auch durch den Ring, waren aber so plump, daß sie fielen und ihre groben Arme und Beine entzwei brachen.'] Prediction: ['Zwei Bauernweiber sprangen durch den Ring, sprangen auch durch den Ring, waren aber so plump, daß sie fielen und ihre groben Arme und Beine entzwei brachen.\nDie zwei Bauernweiber sprangen auch durch den Ring, daß sie fielen und ihre groben Arme und Beine entzwei brachen.'] Label: [['Und die Frauen fallen hin.\nAber die Frauen sind zu schwer.\nZuerst springen die Frauen von den 2 Brüdern durch den Reifen.']] Sacrebleu: {'score': 1.7967002567978951, 'counts': [5, 1, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [9.803921568627452, 2.0, 1.0204081632653061, 0.5208333333333334], 'bp': 1.0, 'sys_len': 51, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.09803921568627451, 0.02, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.04, 'translation_length': 51, 'reference_length': 25} Rouge: {'rouge1': 0.1764705882352941, 'rouge2': 0.030303030303030307, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.1764705882352941} Sari: {'sari': 37.08170360712733} Flesh Reading Ease: 69.75 ---------------------------------------- Source: ['Sie dachten: »Die Bauernweiber können das wohl, die sind stark genug, aber das zarte Fräulein springt sich tot.«'] Prediction: ['Die Bauernweiber können das wohl, die sind stark genug, aber das zarte Fräulein springt sich tot.\nDie Bauernweiber können das wohl, die sind stark genug, aber das zarte Fräulein springt sich tot.'] Label: [['Die Frau vom Dummling schafft diese Aufgabe nicht.\nUnd schwach.\nAber die Frau vom Dummling ist dünn.\nUnsere Frauen können durch den Reifen springen.\nDie Brüder vom Dummling denken: Unsere Frauen sind stark.']] Sacrebleu: {'score': 3.1749707622921095, 'counts': [8, 2, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [21.05263157894737, 5.405405405405405, 1.3888888888888888, 0.7142857142857143], 'bp': 0.9740274534203012, 'sys_len': 38, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.05405405405405406, 0.0, 0.0], 'brevity_penalty': 0.9740274534203012, 'length_ratio': 0.9743589743589743, 'translation_length': 38, 'reference_length': 39} Rouge: {'rouge1': 0.2222222222222222, 'rouge2': 0.05714285714285714, 'rougeL': 0.2222222222222222, 'rougeLsum': 0.19444444444444445} Sari: {'sari': 37.430614757980486} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ["Aber die zwei ältesten betäubten die Ohren des Königs aufs neue mit ihrem Geschrei, »wir können's nicht zugeben, daß der Dummling König wird,« und verlangten, der sollte den Vorzug haben, dessen Frau durch einen Ring springen könnte, der da mitten in dem Saal hing."] Prediction: ['Eine Frau wurde in einem neuen Saal mit ihrem Geschrei aufgefunden.\nDie Frau verlangte den Vorzug, dessen Frau durch einen Ring springen könnte.\nDie Ohren des Königs werden von der Dummling König aufs neue mit ihrem Geschrei verlangt.'] Label: [['Dann wird dieser Sohn König.\nSchafft es die Frau von einem Sohn?\nJetzt sollen die Frauen durch einen Reifen springen.\nDer König ist einverstanden: Deshalb bitten die Brüder vom Dummling den König um eine letzte Aufgabe.']] Sacrebleu: {'score': 2.733590008405116, 'counts': [12, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [28.571428571428573, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.024390243902439, 'translation_length': 42, 'reference_length': 41} Rouge: {'rouge1': 0.39506172839506176, 'rouge2': 0.0759493670886076, 'rougeL': 0.2962962962962963, 'rougeLsum': 0.39506172839506176} Sari: {'sari': 40.14564915276941} Flesh Reading Ease: 73.7 ---------------------------------------- Source: ['»Dem jüngsten gehört das Reich nach meinem Tode.«'] Prediction: ['Der Schweizer Präsident hat sich in den vergangenen Tagen einen Tod geschickt.\nEr hatte sich in der Nacht auf Sonntag zu sehen geschickt.\nDie Schweizerin hatte sich mit einem Tod geschickt.'] Label: [['Der Dummling wird König.']] Sacrebleu: {'score': 1.2944532586971997, 'counts': [2, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [5.882352941176471, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.058823529411764705, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.8, 'translation_length': 34, 'reference_length': 5} Rouge: {'rouge1': 0.05405405405405406, 'rouge2': 0.0, 'rougeL': 0.05405405405405406, 'rougeLsum': 0.05405405405405406} Sari: {'sari': 67.28395061728395} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['Als der König sie erblickte, sprach er:'] Prediction: ['Eine Frau, die sich in der König erblickte, sprach von einem Interview mit der BBC, als sie sie sich erblickte.\nDie Frau sprach von ihn, dass sie sich in der König erblickte, nachdem sie sie sich erblickte.'] Label: [['Da sagt der König:']] Sacrebleu: {'score': 1.664356790958625, 'counts': [2, 1, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [4.545454545454546, 2.3255813953488373, 1.1904761904761905, 0.6097560975609756], 'bp': 1.0, 'sys_len': 44, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.045454545454545456, 0.023255813953488372, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.8, 'translation_length': 44, 'reference_length': 5} Rouge: {'rouge1': 0.13636363636363635, 'rouge2': 0.09523809523809525, 'rougeL': 0.13636363636363635, 'rougeLsum': 0.13636363636363635} Sari: {'sari': 45.0} Flesh Reading Ease: 79.6 ---------------------------------------- Source: ['Seine Brüder kamen nach, die hatten sich gar keine Mühe gegeben, eine schöne Frau zu suchen, sondern die ersten besten Bauernweiber mitgenommen.'] Prediction: ['Die ersten besten Bauernweiber sind in der Schweiz mitgebracht.\nSie haben sich nach, eine schöne Frau zu suchen.\nDie Brüder sind sich nach, sondern die ersten besten Bauernweiber mitgenommen.'] Label: [['Aber die Brüder haben es sich wieder leicht gemacht: Auch die Brüder vom Dummling bringen ihre Frauen zum Schloss.']] Sacrebleu: {'score': 1.6276888006478718, 'counts': [5, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.619047619047619, 'translation_length': 34, 'reference_length': 21} Rouge: {'rouge1': 0.2692307692307692, 'rouge2': 0.08, 'rougeL': 0.2692307692307692, 'rougeLsum': 0.23076923076923075} Sari: {'sari': 37.9144385026738} Flesh Reading Ease: 70.85 ---------------------------------------- Source: ['Da küßte er sie, jagte mit den Pferden davon und brachte sie zu dem König.'] Prediction: ['Ein Mann hatte sich mit seinem Pferden zu dem König geschickt.\nEr brachte sie zu dem König.\nDie Pferden küßten sie davon und brachten sie zu dem König.'] Label: [['Der Dummling fährt mit der schönen Frau in der Kutsche zum Schloss.']] Sacrebleu: {'score': 1.4262733286728257, 'counts': [2, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [6.451612903225806, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.06451612903225806, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3846153846153846, 'translation_length': 31, 'reference_length': 13} Rouge: {'rouge1': 0.043478260869565216, 'rouge2': 0.0, 'rougeL': 0.043478260869565216, 'rougeLsum': 0.043478260869565216} Sari: {'sari': 35.8974358974359} Flesh Reading Ease: 88.8 ---------------------------------------- Source: ['« Da griff er auf Geratewohl eine aus dem Kreise und setzte sie in die gelbe Kutsche, aber kaum saß sie darin, so ward sie zu einem wunderschönen Fräulein, die Rübe zur Kutsche, und die sechs Mäuschen zu Pferden.'] Prediction: ['Eine Frau aus dem Kreise hat sich in die gelbe Kutsche gefunden.\nSie war auf Geratewohl eine wunderschönen Fräulein, die Rübe zur Kutsche, und die sechs Mäuschen zu Pferden.\nDie Frau war auf Geratewohl eine aus dem Kreise und setzte sie in die gelbe Kutsche.'] Label: [['Und die kleine Kröte wird zu einer schönen Frau.\nUnd die 6 Mäuse werden zu Pferden.\nPlötzlich wird die Rübe zu einer Kutsche.\nDer Dummling setzt eine kleine Kröte in die Rübe.']] Sacrebleu: {'score': 5.01638333230382, 'counts': [14, 5, 1, 0], 'totals': [50, 49, 48, 47], 'precisions': [28.0, 10.204081632653061, 2.0833333333333335, 1.0638297872340425], 'bp': 1.0, 'sys_len': 50, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.28, 0.10204081632653061, 0.020833333333333332, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3888888888888888, 'translation_length': 50, 'reference_length': 36} Rouge: {'rouge1': 0.3636363636363636, 'rouge2': 0.11627906976744186, 'rougeL': 0.25, 'rougeLsum': 0.31818181818181823} Sari: {'sari': 41.82381154546626} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Die Itsche antwortete: »Setze nur eine von meinen kleinen Itschen hinein.'] Prediction: ['Die Itsche ist eine von meinen kleinen Itschen hinein.\nDie Itsche antwortete: Die Itsche antwortete: Die Itsche antwortete: Die Itsche antwortete:'] Label: [['Setze eine kleine Kröte in die Rübe.\nDie dicke Kröte antwortet:']] Sacrebleu: {'score': 3.435812002459847, 'counts': [4, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 26, 'reference_length': 13} Rouge: {'rouge1': 0.17142857142857143, 'rouge2': 0.0, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.17142857142857143} Sari: {'sari': 38.81944444444444} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['»Was soll ich damit anfangen?« Da sprach der Dummling ganz traurig:'] Prediction: ['Der Dummling ist ein 20-Minuten-Radio-Host mit seinem Podcast "Unchained" über 20 Jahre alt.\nIn der Radio-Section der 20-Minuten-App spricht der Dummling ganz traurig: Im Interview mit Host Andrea über 20 Minuten, die 20-Minuten-App sowie ihre Leute über 20 Fragen und ihre Leute über 20 Minuten Radio-Hosts und ihre Leute über 20 Fragen und 20 Fragen.'] Label: [['Und sagt: Was soll ich damit?\nDer Dummling ist traurig.']] Sacrebleu: {'score': 2.389790307453075, 'counts': [6, 2, 1, 0], 'totals': [67, 66, 65, 64], 'precisions': [8.955223880597014, 3.0303030303030303, 1.5384615384615385, 0.78125], 'bp': 1.0, 'sys_len': 67, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.08955223880597014, 0.030303030303030304, 0.015384615384615385, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.153846153846154, 'translation_length': 67, 'reference_length': 13} Rouge: {'rouge1': 0.13513513513513514, 'rouge2': 0.05555555555555555, 'rougeL': 0.10810810810810811, 'rougeLsum': 0.13513513513513514} Sari: {'sari': 36.32309048975716} Flesh Reading Ease: 41.35 ---------------------------------------- Source: ['« Sie gab ihm eine ausgehöhlte gelbe Rübe mit sechs Mäuschen bespannt.'] Prediction: ['Eine Frau hat eine ausgehöhlte gelbe Rübe mit sechs Mäuschen bespannt.\nSie gab ihm eine ausgehöhlte gelbe Rübe mit sechs Mäuschen bespannt.'] Label: [['Vor die Rübe sind 6 Mäuse gespannt.\nDie Rübe ist innen hohl.\nDie dicke Kröte gibt dem Dummling eine Rübe.']] Sacrebleu: {'score': 2.352622489487909, 'counts': [5, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.20833333333333334, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0434782608695652, 'translation_length': 24, 'reference_length': 23} Rouge: {'rouge1': 0.2264150943396226, 'rouge2': 0.07843137254901962, 'rougeL': 0.2264150943396226, 'rougeLsum': 0.2264150943396226} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['die ist nicht gleich zur Hand, aber du sollst sie doch haben. »Ei,« antwortete die Itsche, »die schönste Frau!'] Prediction: ['Eine schönste Frau sollst sie doch haben.\nDie schönste Frau sollst sie doch haben.\nDie Frau sollst sie doch haben.'] Label: [['Aber du bekommst die schönste Frau.\nDas ist schwer.\nDie dicke Kröte antwortet:']] Sacrebleu: {'score': 4.92467473444436, 'counts': [5, 2, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 9.090909090909092, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.09090909090909091, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4375, 'translation_length': 23, 'reference_length': 16} Rouge: {'rouge1': 0.27027027027027023, 'rouge2': 0.17142857142857143, 'rougeL': 0.27027027027027023, 'rougeLsum': 0.27027027027027023} Sari: {'sari': 40.7290321764006} Flesh Reading Ease: 97.25 ---------------------------------------- Source: ['Da ging der Dummling ohne weiteres hinab zu der dicken Itsche und sprach: »Ich soll die schönste Frau heimbringen.«'] Prediction: ['Ein Dummling hat eine schönste Frau heimbringen.\nDie Frau soll ihr schönes Heimbringen heimbringen.'] Label: [['Ich soll die schönste Frau nach Hause bringen.\nDer Dummling sagt zu der dicken Kröte: Und der Dummling geht wieder zu der dicken Kröte.']] Sacrebleu: {'score': 3.2368099623649473, 'counts': [6, 1, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [37.5, 6.666666666666667, 3.5714285714285716, 1.9230769230769231], 'bp': 0.5028315779709409, 'sys_len': 16, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.375, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 0.5028315779709409, 'length_ratio': 0.5925925925925926, 'translation_length': 16, 'reference_length': 27} Rouge: {'rouge1': 0.27906976744186046, 'rouge2': 0.0975609756097561, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.2325581395348837} Sari: {'sari': 33.30548593706489} Flesh Reading Ease: 73.55 ---------------------------------------- Source: ['Die drei Federn blies er nochmals in die Luft, und sie flogen wie die vorigen Male.'] Prediction: ['Die drei Federn blieben nochmals in die Luft.\nSie flogen wie die vorigen Male.'] Label: [['Und die Federn fliegen wieder an dieselben Orte.\nDer König pustet 3 Federn in die Luft.\nDer König und seine 3 Söhne gehen wieder vor das Schloss.']] Sacrebleu: {'score': 7.340641142706144, 'counts': [7, 3, 2, 1], 'totals': [16, 15, 14, 13], 'precisions': [43.75, 20.0, 14.285714285714286, 7.6923076923076925], 'bp': 0.4168620196785084, 'sys_len': 16, 'ref_len': 30} Bleu: {'bleu': 0.07340641142706147, 'precisions': [0.4375, 0.2, 0.14285714285714285, 0.07692307692307693], 'brevity_penalty': 0.4168620196785084, 'length_ratio': 0.5333333333333333, 'translation_length': 16, 'reference_length': 30} Rouge: {'rouge1': 0.22727272727272724, 'rouge2': 0.09523809523809525, 'rougeL': 0.22727272727272724, 'rougeLsum': 0.22727272727272724} Sari: {'sari': 41.69628959527103} Flesh Reading Ease: 85.25 ---------------------------------------- Source: ['Die zwei ältesten ließen nicht ab, den König zu quälen, bis er noch eine dritte Bedingung machte und den Ausspruch that, der sollte das Reich haben, der die schönste Frau heimbrächte.'] Prediction: ['Die zwei ältesten Frauen sollten das Reich haben, der die schönste Frau heimbrächte.\nSie sollten sich in einer dritten Bedingung quälen, bis er noch eine dritte Bedingung machte.\nDie zwei ältesten ließen nicht ab, den König zu quälen, bis er noch eine dritte Bedingung machte.'] Label: [['Der Sohn mit der schönsten Frau wird König.\nDa sagt der König: Sucht die schönste Frau.\nUnd die Brüder vom Dummling bitten den König um eine neue Aufgabe.\nDer Dummling darf nicht König sein.\nDer Dummling ist dumm.\nAber die Brüder vom Dummling sagen zum König:']] Sacrebleu: {'score': 3.9159241227705754, 'counts': [11, 3, 1, 0], 'totals': [52, 51, 50, 49], 'precisions': [21.153846153846153, 5.882352941176471, 2.0, 1.0204081632653061], 'bp': 0.9809529623602028, 'sys_len': 52, 'ref_len': 53} Bleu: {'bleu': 0.0, 'precisions': [0.21153846153846154, 0.058823529411764705, 0.02, 0.0], 'brevity_penalty': 0.9809529623602028, 'length_ratio': 0.9811320754716981, 'translation_length': 52, 'reference_length': 53} Rouge: {'rouge1': 0.22641509433962262, 'rouge2': 0.09615384615384615, 'rougeL': 0.18867924528301885, 'rougeLsum': 0.22641509433962262} Sari: {'sari': 35.550445930880706} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['»Ihm gehört das Reich.'] Prediction: ['Der Schweizer Präsident hat sich mit einem neuen Aufruf geschlossen.\nEr hatte sich in einem Interview mit dem "Unschuldigen" zu sehen.\nEr hatte sich mit seinem Aufruf geschlossen und hat sich mit seinem Aufruf geschlossen.'] Label: [['Der Dummling wird König.']] Sacrebleu: {'score': 1.092534162077208, 'counts': [2, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [5.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.0, 'translation_length': 40, 'reference_length': 5} Rouge: {'rouge1': 0.048780487804878044, 'rouge2': 0.0, 'rougeL': 0.048780487804878044, 'rougeLsum': 0.048780487804878044} Sari: {'sari': 67.33333333333333} Flesh Reading Ease: 68.85 ---------------------------------------- Source: ['Als aber der Dummling seinen goldenen Ring vorzeigte, so sprach der Vater abermals:'] Prediction: ['Der Dummling hat seinen goldenen Ring vorzeigt.\nDer Vater sprach abermals: Der Dummling selbst hat seinen goldenen Ring vorzeigt.'] Label: [['Da sagt der König: Und der Dummling bringt dem König seinen schönen Ring.']] Sacrebleu: {'score': 2.5828020030551087, 'counts': [5, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [22.727272727272727, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.22727272727272727, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4666666666666666, 'translation_length': 22, 'reference_length': 15} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.0606060606060606, 'rougeL': 0.2857142857142857, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 51.78571428571429} Flesh Reading Ease: 76.9 ---------------------------------------- Source: ['Die zwei ältesten lachten über den Dummling, der einen goldenen Ring suchen wollte, gaben sich gar keine Mühe, sondern schlugen einem alten Wagenring die Nägel aus und brachten ihn dem König.'] Prediction: ['Ein Dummling brachte einen goldenen Ring aus.\nDer Dummling wollte einen goldenen Ring suchen.\nDie zwei ältesten lachten über den Dummling, der einen goldenen Ring suchen wollte, gaben sich gar keine Mühe.'] Label: [['Die Brüder bringen dem König die alten Ringe.\nUnd die Brüder suchen nicht weiter.\nDie Brüder finden alte Ringe auf dem Weg.\nDeshalb machen wir es uns leicht.\nDer Dummling findet nichts.\nDie Brüder vom Dummling denken: Der Dummling ist dumm.']] Sacrebleu: {'score': 4.012879047858375, 'counts': [9, 3, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [24.324324324324323, 8.333333333333334, 2.857142857142857, 1.4705882352941178], 'bp': 0.742823140219264, 'sys_len': 37, 'ref_len': 48} Bleu: {'bleu': 0.0, 'precisions': [0.24324324324324326, 0.08333333333333333, 0.02857142857142857, 0.0], 'brevity_penalty': 0.7428231402192642, 'length_ratio': 0.7708333333333334, 'translation_length': 37, 'reference_length': 48} Rouge: {'rouge1': 0.17721518987341772, 'rouge2': 0.025974025974025972, 'rougeL': 0.12658227848101267, 'rougeLsum': 0.1518987341772152} Sari: {'sari': 33.48670371778164} Flesh Reading Ease: 75.7 ---------------------------------------- Source: ['Sie ließ sich gleich ihre große Schachtel holen, und gab ihm daraus einen Ring, der glänzte von Edelsteinen und war so schön, daß ihn kein Goldschmied auf der Erde hätte machen können.'] Prediction: ['Ein Ring, der von Edelsteinen einen Ring glänzte, ist von Edelsteinen gefunden.\nDer Ring war ein Goldschmied auf der Erde hätte machen können.\nDer Ring war ein Goldschmied, der glänzte von Edelsteinen und war so schön, daß ihn kein Goldschmied auf der Erde hätte machen können können.'] Label: [['Der Ring ist schöner als alle Ringe auf der Welt.\nUnd der Ring hat viele Edel·steine.\nDer Ring glänzt.\nDie dicke Kröte gibt dem Dummling den Ring.\nUnd holt einen Ring heraus.\nDie dicke Kröte macht die Schachtel auf.\nDie kleine Kröte bringt eine große Schachtel.\nBring mir die große Schachtel!\nDie dicke Kröte sagt zu einer kleinen Kröte:']] Sacrebleu: {'score': 3.6379117869235533, 'counts': [15, 5, 1, 0], 'totals': [54, 53, 52, 51], 'precisions': [27.77777777777778, 9.433962264150944, 1.9230769230769231, 0.9803921568627451], 'bp': 0.7716229467154109, 'sys_len': 54, 'ref_len': 68} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.09433962264150944, 0.019230769230769232, 0.0], 'brevity_penalty': 0.7716229467154109, 'length_ratio': 0.7941176470588235, 'translation_length': 54, 'reference_length': 68} Rouge: {'rouge1': 0.24193548387096772, 'rouge2': 0.0819672131147541, 'rougeL': 0.17741935483870966, 'rougeLsum': 0.24193548387096772} Sari: {'sari': 36.484135208619236} Flesh Reading Ease: 76.55 ---------------------------------------- Source: ['Da stieg er wieder hinab zu der dicken Itsche und sagte ihr, daß er den schönsten Ring brauchte.'] Prediction: ['Ein Mann hatte am Sonntag seine Schwangerschaft in der Nacht auf Sonntag ein schönes Ring geschickt.\nDas Ring war nicht mehr, sondern auch der dritte Gemäss der Familie.\nDer Mann stieg wieder hinab zu der dicken Itsche und sagte ihr, daß er den schönsten Ring brauchte.'] Label: [['Ich brauche den schönsten Ring.\nDer Dummling sagt zu der dicken Kröte: Und der Dummling geht wieder zu der dicken Kröte.']] Sacrebleu: {'score': 5.623975733856203, 'counts': [12, 5, 2, 0], 'totals': [51, 50, 49, 48], 'precisions': [23.529411764705884, 10.0, 4.081632653061225, 1.0416666666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.1, 0.04081632653061224, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.125, 'translation_length': 51, 'reference_length': 24} Rouge: {'rouge1': 0.3287671232876712, 'rouge2': 0.14084507042253522, 'rougeL': 0.24657534246575347, 'rougeLsum': 0.24657534246575347} Sari: {'sari': 44.523142590369474} Flesh Reading Ease: 82.8 ---------------------------------------- Source: ['Die zwei ältesten zogen wieder nach Osten und Westen, und für den Dummling flog die Feder geradeaus und fiel neben der Erdthür nieder.'] Prediction: ['Die zwei ältesten zogen wieder nach Osten und Westen.\nFür den Dummling flog die Feder geradeaus und fiel neben der Erdthür nieder.'] Label: [['Nur die Feder vom Dummling fliegt wieder gerade∙aus neben die Fall∙tür.\nUnd eine Feder fliegt wieder nach Westen.\nEine Feder fliegt wieder nach Osten.']] Sacrebleu: {'score': 8.30472823969576, 'counts': [10, 4, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [41.666666666666664, 17.391304347826086, 4.545454545454546, 2.380952380952381], 'bp': 0.8824969025845955, 'sys_len': 24, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.4166666666666667, 0.17391304347826086, 0.045454545454545456, 0.0], 'brevity_penalty': 0.8824969025845955, 'length_ratio': 0.8888888888888888, 'translation_length': 24, 'reference_length': 27} Rouge: {'rouge1': 0.4313725490196078, 'rouge2': 0.12244897959183673, 'rougeL': 0.19607843137254902, 'rougeLsum': 0.35294117647058826} Sari: {'sari': 38.107923497267755} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Da sagte der Vater: »Der soll das Reich erben, der mir den schönsten Ring bringt,« führte die drei Brüder hinaus, und blies drei Federn in die Luft, denen sie nachgehen sollten.'] Prediction: ['Drei Brüder blieben in die Luft, denen sie nachgehen sollten.\nDer Vater führte die drei Brüder hinaus und blieb drei Federn in die Luft, denen sie nachgehen sollten.'] Label: [['Folgt den Federn!\nDann sagt der König zu seinen 3 Söhnen: Der König pustet 3 Federn in die Luft.\nDer König und seine 3 Söhne gehen wieder vor das Schloss.\nDer Sohn mit dem schönsten Ring wird König.\nDa sagt der König: Sucht den schönsten Ring.']] Sacrebleu: {'score': 4.8142818088984365, 'counts': [8, 4, 2, 1], 'totals': [32, 31, 30, 29], 'precisions': [25.0, 12.903225806451612, 6.666666666666667, 3.4482758620689653], 'bp': 0.5187931656538893, 'sys_len': 32, 'ref_len': 53} Bleu: {'bleu': 0.04814281808898436, 'precisions': [0.25, 0.12903225806451613, 0.06666666666666667, 0.034482758620689655], 'brevity_penalty': 0.5187931656538893, 'length_ratio': 0.6037735849056604, 'translation_length': 32, 'reference_length': 53} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.07142857142857142, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.18604651162790697} Sari: {'sari': 38.992869875222816} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['« Aber die zwei anderen ließen dem Vater keine Ruhe und sprachen, unmöglich könnte der Dummling, dem es in allen Dingen an Verstand fehlte, König werden, und baten ihn, er möchte eine neue Bedingung machen.'] Prediction: ['Ein Dummling bat in allen Dingen eine neue Bedingung.\nDer Vater möchte eine neue Bedingung machen.'] Label: [['Und die Brüder vom Dummling bitten den König um eine neue Aufgabe.\nDer Dummling darf nicht König sein.\nDer Dummling ist dumm.\nAber die Brüder vom Dummling sagen zum König:']] Sacrebleu: {'score': 2.763758608025448, 'counts': [6, 2, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [33.333333333333336, 11.764705882352942, 3.125, 1.6666666666666667], 'bp': 0.41111229050718745, 'sys_len': 18, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.11764705882352941, 0.0, 0.0], 'brevity_penalty': 0.41111229050718745, 'length_ratio': 0.5294117647058824, 'translation_length': 18, 'reference_length': 34} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.039999999999999994, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 37.700138026224984} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Zu derselben Zeit kam auch der Dummling zurück und brachte seinen schönen Teppich, und als der König den sah, erstaunte er und sprach: »Wenn es dem Recht nach gehen soll, so gehört dem jüngsten das Königreich.'] Prediction: ['Der Dummling ist seit einigen Tagen in der Schweiz geschossen.\nDer jüngste Königreich hatte seinen schönen Teppich und sprach dabei.\nDer Recht nach gehen soll nach gehen.'] Label: [['Und sagt: Der Dummling wird König.\nDer König staunt.\nUnd der Dummling bringt dem König seinen schönen Teppich.']] Sacrebleu: {'score': 7.425868202031366, 'counts': [10, 4, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [33.333333333333336, 13.793103448275861, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.13793103448275862, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3636363636363635, 'translation_length': 30, 'reference_length': 22} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.16, 'rougeL': 0.34615384615384615, 'rougeLsum': 0.34615384615384615} Sari: {'sari': 45.952315320955464} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['»Was sollen wir uns mit Suchen große Mühe geben,« sprachen sie, nahmen dem ersten besten Schäfersweib, das ihnen begegnete, die groben Tücher vom Leib und trugen sie dem König heim.'] Prediction: ['Eine grobe Tücher trug ihnen dem König heim.\nSie sprachen ihnen, nahmen ihnen dem ersten besten Schäfersweib, das ihnen begegnete, die groben Tücher vom Leib.'] Label: [['Die Brüder bringen dem König die alten Tücher.\nUnd die Brüder suchen nicht weiter.\nDie Brüder finden alte Tücher auf dem Weg.\nDeshalb machen wir es uns leicht.']] Sacrebleu: {'score': 3.2850105791223916, 'counts': [8, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 0.9355069850316178, 'sys_len': 30, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 0.9355069850316178, 'length_ratio': 0.9375, 'translation_length': 30, 'reference_length': 32} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.13114754098360656, 'rougeL': 0.19047619047619047, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 34.927087366111756} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Die beiden anderen hatten aber ihren jüngsten Bruder für so albern gehalten, daß sie glaubten, er würde gar nichts finden und aufbringen.'] Prediction: ['Ein jüngster Bruder hat sich in der Schweiz als jüngstes Bruder für so albern gehalten.\nDie beiden anderen hatten ihren jüngsten Bruder für so albern gehalten, daß sie glaubten, er würde gar nichts finden und aufbringen.'] Label: [['Der Dummling findet nichts.\nDie Brüder vom Dummling denken: Der Dummling ist dumm.']] Sacrebleu: {'score': 2.185068324154416, 'counts': [4, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [10.0, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 40, 'reference_length': 16} Rouge: {'rouge1': 0.10714285714285714, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.10714285714285714} Sari: {'sari': 36.799620132953464} Flesh Reading Ease: 68.4 ---------------------------------------- Source: ['Da dankte er ihr und stieg wieder hinauf.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in die Nacht gegen die Schweizer Polizei verlassen.\nEr stieg wieder hinauf und stieg wieder hinauf.\nDer Mann hatte sich dankte ihr und stieg wieder hinauf.'] Label: [['Und der Dummling geht zurück zum Schloss.\nDer Dummling bedankt sich bei der Kröte.']] Sacrebleu: {'score': 2.4371431437250504, 'counts': [5, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 38, 'reference_length': 16} Rouge: {'rouge1': 0.1568627450980392, 'rouge2': 0.0, 'rougeL': 0.11764705882352938, 'rougeLsum': 0.1568627450980392} Sari: {'sari': 38.49415204678363} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['Die junge Itsche holte die Schachtel, und die dicke Itsche machte sie auf und gab dem Dummling einen Teppich daraus, so schön und so fein, wie oben auf der Erde keiner konnte gewebt werden.'] Prediction: ['Eine junge Itsche holte die Schachtel, und einen Teppich daraus machte sie auf.\nDie dicke Itsche machte sie auf und gab dem Dummling einen Teppich daraus.\nDie junge Itsche holte die Schachtel, und gab dem Dummling einen Teppich daraus, so schön und so fein, wie oben auf der Erde keiner konnte gewebt werden.'] Label: [['Der Teppich ist schöner als alle Teppiche auf der Welt.\nDie dicke Kröte gibt dem Dummling den Teppich.\nUnd holt einen Teppich heraus.\nDie dicke Kröte macht die Schachtel auf.\nDie kleine Kröte bringt eine große Schachtel.']] Sacrebleu: {'score': 5.922623086844012, 'counts': [18, 8, 2, 0], 'totals': [60, 59, 58, 57], 'precisions': [30.0, 13.559322033898304, 3.4482758620689653, 0.8771929824561403], 'bp': 1.0, 'sys_len': 60, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.13559322033898305, 0.034482758620689655, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 60, 'reference_length': 42} Rouge: {'rouge1': 0.39583333333333337, 'rouge2': 0.1276595744680851, 'rougeL': 0.25, 'rougeLsum': 0.375} Sari: {'sari': 42.26863653796846} Flesh Reading Ease: 74.55 ---------------------------------------- Source: ["»Jungfer grün und klein, Hutzelbein, Hutzelbeins Hündchen, Hutzel hin und her, bring' mir die große Schachtel her.«"] Prediction: ["Jungfer grün und klein, Hutzelbein, Hutzelbeins Hündchen, Hutzel hin und her, bring' mir die große Schachtel her.\nDie große Schachtel bring' mir die große Schachtel her."] Label: [['Bring mir die große Schachtel!']] Sacrebleu: {'score': 7.261813302549418, 'counts': [4, 3, 2, 1], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 9.67741935483871, 6.666666666666667, 3.4482758620689653], 'bp': 1.0, 'sys_len': 32, 'ref_len': 6} Bleu: {'bleu': 0.07261813302549416, 'precisions': [0.125, 0.0967741935483871, 0.06666666666666667, 0.034482758620689655], 'brevity_penalty': 1.0, 'length_ratio': 5.333333333333333, 'translation_length': 32, 'reference_length': 6} Rouge: {'rouge1': 0.3243243243243243, 'rouge2': 0.2857142857142857, 'rougeL': 0.3243243243243243, 'rougeLsum': 0.3243243243243243} Sari: {'sari': 41.30507427990266} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['« Da rief sie eine junge und sprach:'] Prediction: ['Eine junge Frau wurde in der Nacht auf Sonntag von ihrem Mann aufgefunden.\nSie war eine junge Frau, die ihn nach dem Mann geschickt hat.\nDie Frau war eine junge Frau, die ihn nach dem Mann geschickt hat.'] Label: [['Die dicke Kröte sagt zu einer kleinen Kröte:']] Sacrebleu: {'score': 0.8522452865706931, 'counts': [1, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [2.3255813953488373, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.023255813953488372, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.777777777777778, 'translation_length': 43, 'reference_length': 9} Rouge: {'rouge1': 0.041666666666666664, 'rouge2': 0.0, 'rougeL': 0.041666666666666664, 'rougeLsum': 0.041666666666666664} Sari: {'sari': 49.228395061728406} Flesh Reading Ease: 85.4 ---------------------------------------- Source: ['Er antwortete: »Ich hätte gern den schönsten und feinsten Teppich.'] Prediction: ['Der Schweizer Gast mit seinem schönsten und feinsten Teppich hat seine Frau im Interview mit dem 20.\nJuni veröffentlicht.\nEr hatte sich im Interview mit dem "Unschönsten" gegenüber dem 20.\nJuni veröffentlicht.'] Label: [['Ich brauche den schönsten Teppich.\nDer Dummling sagt zu der dicken Kröte:']] Sacrebleu: {'score': 1.3705063051209185, 'counts': [4, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7142857142857144, 'translation_length': 38, 'reference_length': 14} Rouge: {'rouge1': 0.1568627450980392, 'rouge2': 0.04081632653061225, 'rougeL': 0.11764705882352942, 'rougeLsum': 0.1568627450980392} Sari: {'sari': 33.63496071829405} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['Die dicke Itsche fragte, was sein Begehren wäre.'] Prediction: ['Die Schweizer Nati hat eine dicke Itsche gefunden.\nDie dicke Itsche fragte, was sein Begehren wäre.\nDie dicke Itsche fragte, was sein Begehren wäre.'] Label: [['Die dicke Kröte fragt: Was willst du?']] Sacrebleu: {'score': 2.5734261919218326, 'counts': [2, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [6.896551724137931, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.06896551724137931, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2222222222222223, 'translation_length': 29, 'reference_length': 9} Rouge: {'rouge1': 0.1764705882352941, 'rouge2': 0.0625, 'rougeL': 0.1764705882352941, 'rougeLsum': 0.1764705882352941} Sari: {'sari': 38.84615384615385} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Die Thür that sich auf und er sah eine große Itsche (Kröte) sitzen und rings um sie eine Menge kleiner Itschen.'] Prediction: ['Eine Itsche (Kröte) ist eine Menge kleiner Itschen.\nDer Thür hat sich auf und sah eine große Itsche (Kröte) sitzen und rings um sie eine Menge kleiner Itschen.'] Label: [['Und um die dicke Kröte herum sitzen viele kleine Kröten.\nUnd dick.\nDie Kröte ist groß.\nDer Dummling sieht eine Kröte.\nDie Tür geht auf.']] Sacrebleu: {'score': 3.2553776012957436, 'counts': [10, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [29.41176470588235, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.29411764705882354, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 34, 'reference_length': 30} Rouge: {'rouge1': 0.45161290322580644, 'rouge2': 0.09999999999999999, 'rougeL': 0.22580645161290322, 'rougeLsum': 0.38709677419354843} Sari: {'sari': 37.21903316618281} Flesh Reading Ease: 72.4 ---------------------------------------- Source: ['Da kam er vor eine andere Thür, klopfte an, und hörte, wie es inwendig rief:'] Prediction: ['Ein Mann hat vor einer andere Thür inwendig rief.\nDer Thür klopfte an und hörte, wie es inwendig rief.\nDer Mann klopte an und hörte, wie es inwendig rief.'] Label: [['Der Dummling klopft an die Tür.\nUnten ist eine Tür.']] Sacrebleu: {'score': 1.5393730252811677, 'counts': [4, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.8333333333333335, 'translation_length': 34, 'reference_length': 12} Rouge: {'rouge1': 0.17777777777777776, 'rouge2': 0.0, 'rougeL': 0.08888888888888888, 'rougeLsum': 0.17777777777777776} Sari: {'sari': 35.35714285714286} Flesh Reading Ease: 88.4 ---------------------------------------- Source: ['Er hob sie in die Höhe, fand eine Treppe und stieg hinab.'] Prediction: ['Eine Frau war in der Höhe von der Schweiz geworden.\nSie war in die Höhe und stieg hinab.\nSie war in der Treppe geworden, warum sie sich in die Höhe geworden hatte.'] Label: [['Der Dummling geht die Treppe hinunter.\nUnter der Fall∙tür ist eine Treppe.\nDer Dummling öffnet die Fall∙tür.']] Sacrebleu: {'score': 1.6677796333413761, 'counts': [7, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [19.444444444444443, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.19444444444444445, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 36, 'reference_length': 20} Rouge: {'rouge1': 0.25, 'rouge2': 0.0, 'rougeL': 0.17857142857142855, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 37.71650326797385} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['Da bemerkte er auf einmal, daß neben der Feder eine Fallthür lag.'] Prediction: ['Ein Mann bemerkte eine Fallthür.\nDer Mann bemerkte nach einem Fall eine Fallthür.\nDer Mann bemerkte sich auf einmal, da er eine Fallthür lag.'] Label: [['Neben der Feder ist eine Fall∙tür.\nPlötzlich sieht der Dummling:']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 28, 'reference_length': 12} Rouge: {'rouge1': 0.25, 'rouge2': 0.0, 'rougeL': 0.2, 'rougeLsum': 0.2} Sari: {'sari': 27.89351851851852} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Der Dummling setzte sich nieder und war traurig.'] Prediction: ['Der Dummling setzte sich nieder und war traurig.\nDer Dummling setzte sich nieder und war traurig.'] Label: [['Und ist traurig.\nDer Dummling setzt sich hin.']] Sacrebleu: {'score': 14.879641171245488, 'counts': [6, 3, 2, 1], 'totals': [18, 17, 16, 15], 'precisions': [33.333333333333336, 17.647058823529413, 12.5, 6.666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 10} Bleu: {'bleu': 0.1487964117124549, 'precisions': [0.3333333333333333, 0.17647058823529413, 0.125, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 18, 'reference_length': 10} Rouge: {'rouge1': 0.4166666666666667, 'rouge2': 0.18181818181818182, 'rougeL': 0.4166666666666667, 'rougeLsum': 0.4166666666666667} Sari: {'sari': 50.41666666666668} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['Nun ging der eine Bruder rechts, der andere ging links, und sie lachten den Dummling aus, der bei der dritten Feder, da, wo sie niedergefallen war, bleiben mußte.'] Prediction: ['Eine Bruder lachte den Dummling aus, wo sie niedergefallen war, und ging rechts.\nDer Dummling lachte den Bruder aus, wo sie niedergefallen war, und der Dummling lachte den Bruder aus.'] Label: [['Deshalb lachen seine Brüder über den Dummling.\nNur der Dummling muss bei der 3.\nFeder bleiben.\nEin Sohn folgt der Feder nach Westen.\nEin Sohn folgt der Feder nach Osten.']] Sacrebleu: {'score': 3.2094599769449297, 'counts': [6, 2, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [16.666666666666668, 5.714285714285714, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.05714285714285714, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0285714285714285, 'translation_length': 36, 'reference_length': 35} Rouge: {'rouge1': 0.16393442622950818, 'rouge2': 0.06779661016949153, 'rougeL': 0.16393442622950818, 'rougeLsum': 0.16393442622950818} Sari: {'sari': 35.1329480334057} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Die eine Feder flog nach Osten, die andere nach Westen, die dritte flog aber gerade aus und flog nicht weit, sondern fiel bald zur Erde.'] Prediction: ['Eine Feder flog nach Osten, die andere nach Westen, die dritte flog aber gerade aus.\nDie dritte flog aber gerade aus und flog nicht weit.\nDie Schweizer fiel bald zur Erde.'] Label: [['Und fällt auf den Boden.\nNur die 3.\nFeder fliegt gerade∙aus.\nUnd eine Feder fliegt links nach Westen.\nEine Feder fliegt rechts nach Osten.']] Sacrebleu: {'score': 4.035682266239977, 'counts': [10, 3, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [27.77777777777778, 8.571428571428571, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.08571428571428572, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2413793103448276, 'translation_length': 36, 'reference_length': 29} Rouge: {'rouge1': 0.3508771929824561, 'rouge2': 0.1818181818181818, 'rougeL': 0.14035087719298245, 'rougeLsum': 0.3508771929824561} Sari: {'sari': 39.57013574660633} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['»Wie die fliegen, so sollt ihr ziehen.«'] Prediction: ['Eine Frau soll ihr einen Mann aufgefunden haben, wie sie sich auf dem Flugzeug zieht.\nDie Frau soll ihr ziehen, wie sie ihr ziehen.'] Label: [['Folgt den Federn!']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.0, 'translation_length': 28, 'reference_length': 4} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 41.66666666666667} Flesh Reading Ease: 91.95 ---------------------------------------- Source: ['Und damit es keinen Streit unter ihnen gab, führte er sie vor sein Schloß, blies drei Federn in die Luft und sprach:'] Prediction: ['Ein Streit unter ihnen gab es keinen Streit unter ihnen.\nDer Mann hatte drei Federn in die Luft und sprach drei Federn in die Luft.'] Label: [['Dann sagt der König zu seinen 3 Söhnen: Der König pustet 3 Federn in die Luft.\nDer König und seine 3 Söhne gehen vor das Schloss.']] Sacrebleu: {'score': 14.346988763760717, 'counts': [8, 5, 3, 2], 'totals': [27, 26, 25, 24], 'precisions': [29.62962962962963, 19.23076923076923, 12.0, 8.333333333333334], 'bp': 0.9286029058931802, 'sys_len': 27, 'ref_len': 29} Bleu: {'bleu': 0.14346988763760718, 'precisions': [0.2962962962962963, 0.19230769230769232, 0.12, 0.08333333333333333], 'brevity_penalty': 0.9286029058931802, 'length_ratio': 0.9310344827586207, 'translation_length': 27, 'reference_length': 29} Rouge: {'rouge1': 0.21428571428571427, 'rouge2': 0.11111111111111112, 'rougeL': 0.21428571428571427, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 47.48778811278812} Flesh Reading Ease: 91.45 ---------------------------------------- Source: ['Da sprach er zu ihnen: »Zieht aus, und wer mir den feinsten Teppich bringt, der soll nach meinem Tode König sein.«'] Prediction: ['Der feinste Teppich in der Schweiz ist nach meinem Tode König sein.\nDer feinste Teppich soll nach meinem Tode König sein.\nDer feinste Teppich soll nach meinem Tode König sein.'] Label: [['Der Sohn mit dem schönsten Teppich wird König.\nUnd der König sagt zu seinen Söhnen: Sucht den schönsten Teppich.']] Sacrebleu: {'score': 1.8888209302404182, 'counts': [8, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [24.242424242424242, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.24242424242424243, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 33, 'reference_length': 22} Rouge: {'rouge1': 0.2807017543859649, 'rouge2': 0.07272727272727272, 'rougeL': 0.2807017543859649, 'rougeLsum': 0.2456140350877193} Sari: {'sari': 35.17156862745098} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['Als der König alt und schwach ward und an sein Ende dachte, wußte er nicht, welcher von seinen Söhnen nach ihm das Reich erben sollte.'] Prediction: ['Der König hat sich in einem Sohnen nach ihm das Reich erben.\nDer König war alt und schwach wie vor seinem Ende dachte.\nDer König war nicht das erste Mal, sondern nach ihm das Reich erben sollte.'] Label: [['Welcher Sohn wird nach mir König?\nDeshalb fragt sich der König: Und auch krank.\nDer König ist schon sehr alt.']] Sacrebleu: {'score': 4.386696765552137, 'counts': [9, 2, 1, 0], 'totals': [41, 40, 39, 38], 'precisions': [21.951219512195124, 5.0, 2.5641025641025643, 1.3157894736842106], 'bp': 1.0, 'sys_len': 41, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.21951219512195122, 0.05, 0.02564102564102564, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7083333333333333, 'translation_length': 41, 'reference_length': 24} Rouge: {'rouge1': 0.38095238095238093, 'rouge2': 0.16393442622950816, 'rougeL': 0.3174603174603175, 'rougeLsum': 0.3174603174603175} Sari: {'sari': 39.195018945777285} Flesh Reading Ease: 85.8 ---------------------------------------- Source: ['Es war einmal ein König, der hatte drei Söhne, davon waren zwei klug und gescheit, aber der dritte sprach nicht viel, war einfältig und hieß nur der Dummling.'] Prediction: ['Ein König, der drei Söhne hatte, hieß nur der Dummling.\nDer dritte sprach nicht viel, war einfältig und hieß nur der Dummling.\nDer König hatte drei Söhne, davon waren zwei klug und gescheit.'] Label: [['Deshalb heißt dieser Sohn: Dummling.\nUnd 1 Sohn ist dumm.\n2 Söhne sind klug.\nEin König hat 3 Söhne: Es war einmal:']] Sacrebleu: {'score': 3.2674392554094007, 'counts': [10, 2, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [25.0, 5.128205128205129, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.05128205128205128, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 40, 'reference_length': 28} Rouge: {'rouge1': 0.34375, 'rouge2': 0.12903225806451613, 'rougeL': 0.18749999999999997, 'rougeLsum': 0.34375} Sari: {'sari': 28.786884174815206} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Da hatten alle Sorgen ein Ende, und sie lebten in lauter Freude zusammen.'] Prediction: ['Einige Frauen lebten in einem Freude in der Nacht auf Sonntag in Südtirol (D) ein Ende.\nSie waren nach dem Ende ein Ende, dass sie sich in lauter Freude lebten.\nSie lebten in lauter Freude zusammen.'] Label: [['Hänsel und Gretel und ihr Vater leben glücklich zusammen.\nUnd die Familie muss nie wieder Hunger leiden.\nJetzt ist die Familie reich.']] Sacrebleu: {'score': 2.077079238326844, 'counts': [4, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [9.523809523809524, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.68, 'translation_length': 42, 'reference_length': 25} Rouge: {'rouge1': 0.03278688524590164, 'rouge2': 0.0, 'rougeL': 0.03278688524590164, 'rougeLsum': 0.03278688524590164} Sari: {'sari': 36.08262108262108} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['Gretel schüttete sein Schürzchen aus, daß die Perlen und Edelsteine in der Stube herumsprangen, und Hänsel warf eine Handvoll nach der andern aus seiner Tasche dazu.'] Prediction: ['Ein Schürzchen schüttete seinen Edelsteine aus und schüttete sein Schürzchen aus.\nDer andere warf eine Handvoll nach der anderen aus seiner Tasche dazu.'] Label: [['Dann zeigen Hänsel und Gretel dem Vater die Edel∙steine.']] Sacrebleu: {'score': 1.7911710595643588, 'counts': [2, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [8.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.08, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 25, 'reference_length': 10} Rouge: {'rouge1': 0.05263157894736842, 'rouge2': 0.0, 'rougeL': 0.05263157894736842, 'rougeLsum': 0.05263157894736842} Sari: {'sari': 31.96969696969697} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['Da fingen sie an zu laufen, stürzten in die Stube hinein und fielen ihrem Vater um den Hals.'] Prediction: ['Einige Frauen wurden in der Stube in der Nähe des Stadt Zürich in die Stube gefilmt.\nSie fingen sie an zu laufen, stürzten in die Stube hinein und fielen ihrem Vater um den Hals.\nDie Frauen wurden dabei verletzt.'] Label: [['Hänsel und Gretel umarmen den Vater.\nUnd der Vater ist sehr glücklich.\nDer Vater sieht Hänsel und Gretel.\nHänsel und Gretel gehen in das Haus hinein:']] Sacrebleu: {'score': 1.476132136851538, 'counts': [9, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [20.930232558139537, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.20930232558139536, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4333333333333333, 'translation_length': 43, 'reference_length': 30} Rouge: {'rouge1': 0.19444444444444445, 'rouge2': 0.0, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.19444444444444445} Sari: {'sari': 38.05797101449275} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Der Mann hatte keine frohe Stunde gehabt, seitdem er die Kinder im Walde gelassen hatte, die Frau aber war gestorben.'] Prediction: ['Ein Mann hatte keine frohe Stunde gehabt, seitdem er die Kinder im Walde gelassen hatte, die Frau aber war gestorben.\nDer Mann hatte keine frohe Stunde gehabt, seitdem er die Kinder im Walde gelassen hatte, die Frau aber war gestorben.'] Label: [['Die Stief∙mutter ist nämlich gestorben.\nDie Stief∙mutter ist nicht mehr da.\nOhne seine Kinder war der Vater sehr traurig.']] Sacrebleu: {'score': 1.9986978024115483, 'counts': [5, 1, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [10.869565217391305, 2.2222222222222223, 1.1363636363636365, 0.5813953488372093], 'bp': 1.0, 'sys_len': 46, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.10869565217391304, 0.022222222222222223, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.090909090909091, 'translation_length': 46, 'reference_length': 22} Rouge: {'rouge1': 0.19354838709677416, 'rouge2': 0.0, 'rougeL': 0.16129032258064516, 'rougeLsum': 0.16129032258064516} Sari: {'sari': 37.9041248606466} Flesh Reading Ease: 60.55 ---------------------------------------- Source: ['« Das that das gute Tierchen, und als sie glücklich drüben waren und ein Weilchen fortgingen, da kam ihnen der Wald immer bekannter und immer bekannter vor, und endlich erblickten sie von weitem ihres Vaters Haus. « Als sie aber ein paar Stunden gegangen waren, gelangten sie an ein großes Wasser.'] Prediction: ['Eine Frau wurde in der Wald von ihrem Vaters Haus von einem Weilchen geschickt.\nAls sie ein paar Stunden gegangen waren, gelangten sie an ein großes Wasser.'] Label: [['Nach einer Weile sehen Hänsel und Gretel das Haus vom Vater.\nHänsel und Gretel finden endlich den Weg aus dem Wald.\nHänsel und Gretel haben Glück:']] Sacrebleu: {'score': 1.7557381354086663, 'counts': [4, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0344827586206897, 'translation_length': 30, 'reference_length': 29} Rouge: {'rouge1': 0.0689655172413793, 'rouge2': 0.0, 'rougeL': 0.03448275862068965, 'rougeLsum': 0.0689655172413793} Sari: {'sari': 34.52508090614887} Flesh Reading Ease: 72.9 ---------------------------------------- Source: ['»Aber jetzt wollen wir fort,« sagte Hänsel, »damit wir aus dem Hexenwalde herauskommen.'] Prediction: ['Der Grund: Im Hexenwalde wollen wir fort.\nDie Polizei hatte am Mittwoch einen Grund aufgefunden.\nDie Polizei hatte den Grund eines der Verstorbenen aus dem Hexenwalde herauskommen.'] Label: [['Und Hänsel und Gretel laufen durch den Wald.\nLass uns den Weg nach Hause suchen.\nDann sagt Hänsel zu Gretel:']] Sacrebleu: {'score': 1.696134390396339, 'counts': [4, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3478260869565217, 'translation_length': 31, 'reference_length': 23} Rouge: {'rouge1': 0.04081632653061224, 'rouge2': 0.0, 'rougeL': 0.04081632653061224, 'rougeLsum': 0.04081632653061224} Sari: {'sari': 35.06944444444445} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['»Die sind noch besser als Kieselsteine,« sagte Hänsel und steckte in seine Taschen was hinein wollte, und Gretel sagte: »Ich will auch etwas mit nach Hause bringen,« und füllte sich sein Schürzchen voll.'] Prediction: ['Eine Frau und ihr Schürzchen sind noch besser als Kieselsteine, sagte Hänsel.\nGretel und ihr Schürzchen füllten sich mit nach Hause voll.'] Label: [['Und auch Gretel nimmt einige Edel∙steine.\nHänsel steckt sich Edel∙steine in seine Hosen∙taschen.']] Sacrebleu: {'score': 2.252278368576829, 'counts': [5, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [20.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.23255813953488372, 'rouge2': 0.048780487804878044, 'rougeL': 0.186046511627907, 'rougeLsum': 0.186046511627907} Sari: {'sari': 34.4784838985466} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['Und weil sie sich nicht mehr zu fürchten brauchten, so gingen sie in das Haus der Hexe hinein, da standen in allen Ecken Kasten mit Perlen und Edelsteinen.'] Prediction: ['In einem Haus der Hexe in Perlen und Edelsteinen brauchten sich die Frauen nicht mehr zu fürchten.\nSie brauchten sich nicht mehr zu fürchten, so gingen sie in das Haus der Hexe hinein.'] Label: [['In den Kisten sind Edel∙steine.\nIn allen Ecken stehen große Kisten.\nDann gehen Hänsel und Gretel in das Häuschen von der Hexe:']] Sacrebleu: {'score': 3.4487891886160993, 'counts': [8, 2, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 5.714285714285714, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.05714285714285714, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.44, 'translation_length': 36, 'reference_length': 25} Rouge: {'rouge1': 0.22950819672131148, 'rouge2': 0.06779661016949153, 'rougeL': 0.22950819672131148, 'rougeLsum': 0.19672131147540986} Sari: {'sari': 34.31688175360576} Flesh Reading Ease: 81.6 ---------------------------------------- Source: ['Wie haben sie sich gefreut, sind sich um den Hals gefallen, sind herumgesprungen und haben sich geküßt!'] Prediction: ['Eine Frau hat sich gefreut, sind sich um den Hals gefallen und haben sich geküßt.\nWie haben sie sich gefreut, sind sie um den Hals gefallen und haben sich geküßt.\nWie haben sie sich gefreut, sind sie sich gefallen und haben sich geküßt.'] Label: [['Hänsel und Gretel umarmen sich.']] Sacrebleu: {'score': 0.9798555761147508, 'counts': [3, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [6.122448979591836, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.061224489795918366, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.166666666666666, 'translation_length': 49, 'reference_length': 6} Rouge: {'rouge1': 0.07692307692307691, 'rouge2': 0.0, 'rougeL': 0.07692307692307691, 'rougeLsum': 0.07692307692307691} Sari: {'sari': 36.9670542635659} Flesh Reading Ease: 83.8 ---------------------------------------- Source: ['Gretel aber lief schnurstracks zum Hänsel, öffnete sein Ställchen und rief: »Hänsel, wir sind erlöst, die alte Hexe ist tot!'] Prediction: ['Der Ställchen von der alten Hexe ist tot.\nDer Ställchen ist seit Tagen auf der Liste der alten Hexe.\nDer Ställchen ist tot.'] Label: [['Die böse Hexe ist im Ofen verbrannt!\nUnd ruft: Wir sind frei!\nGretel befreit Hänsel aus dem Käfig.\nDann läuft Gretel schnell zum Käfig.']] Sacrebleu: {'score': 3.061388812122894, 'counts': [4, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 0.8910233766955563, 'sys_len': 26, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.04, 0.0, 0.0], 'brevity_penalty': 0.8910233766955563, 'length_ratio': 0.896551724137931, 'translation_length': 26, 'reference_length': 29} Rouge: {'rouge1': 0.07272727272727274, 'rouge2': 0.03773584905660378, 'rougeL': 0.07272727272727274, 'rougeLsum': 0.07272727272727274} Sari: {'sari': 44.4869750132908} Flesh Reading Ease: 90.4 ---------------------------------------- Source: ['aber Gretel lief fort und die gottlose Hexe mußte elendiglich verbrennen.'] Prediction: ['In der Nacht auf Sonntag wurde eine Hexe von Gretel verbrennen.\nDie gottlose Hexe ist elendiglich verbrennen.\nIm Alter von 99 Jahren ist Gretel nun auf den gottlosen Hexe gefunden.'] Label: [['Und die böse Hexe verbrennt im Ofen.']] Sacrebleu: {'score': 1.3355980882200826, 'counts': [2, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [6.0606060606060606, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.06060606060606061, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.125, 'translation_length': 33, 'reference_length': 8} Rouge: {'rouge1': 0.15789473684210528, 'rouge2': 0.0, 'rougeL': 0.15789473684210528, 'rougeLsum': 0.10526315789473685} Sari: {'sari': 44.14862914862914} Flesh Reading Ease: 70.55 ---------------------------------------- Source: ['Da gab ihr Gretel einen Stoß, daß sie weit hineinfuhr, machte die eiserne Thür zu und schob den Riegel vor.'] Prediction: ['Ein ehemaliger Riegel schob Gretel vor.\nDas gab ihr einen Stoß, daß sie weit hineinfuhr, machte die eiserne Thür zu und schob den Riegel vor.'] Label: [['Gretel macht schnell die Tür vom Ofen zu.\nDie Hexe fällt in den Ofen.\nUnd sofort gibt Gretel der Hexe einen Stoß:']] Sacrebleu: {'score': 3.639374222382003, 'counts': [8, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [27.586206896551722, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.27586206896551724, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.16, 'translation_length': 29, 'reference_length': 25} Rouge: {'rouge1': 0.32, 'rouge2': 0.041666666666666664, 'rougeL': 0.2, 'rougeLsum': 0.27999999999999997} Sari: {'sari': 38.764367816091955} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['»Dumme Gans,« sagte die Alte, »die Öffnung ist groß genug, siehst du wohl, ich könnte selbst hinein,« krabbelte heran und steckte den Kopf in den Backofen.'] Prediction: ['Immer mehr als eine Woche kam es in der Nähe des Bundes zu einem Kopf.\nDie Alte krabbelte den Kopf und krabbelte den Kopf in den Backofen.\nDie Alte krabbelte den Kopf und krabbelte den Kopf in den Backofen.'] Label: [['Die Hexe steckt den Kopf in den Ofen.\nUnd die Hexe macht es Gretel vor: Ich zeige es dir.\nGeh da weg.\nUnd sagt: Dummes Kind!\nDie Hexe ist wütend.']] Sacrebleu: {'score': 6.874614919231697, 'counts': [10, 3, 2, 1], 'totals': [42, 41, 40, 39], 'precisions': [23.80952380952381, 7.317073170731708, 5.0, 2.5641025641025643], 'bp': 1.0, 'sys_len': 42, 'ref_len': 37} Bleu: {'bleu': 0.06874614919231697, 'precisions': [0.23809523809523808, 0.07317073170731707, 0.05, 0.02564102564102564], 'brevity_penalty': 1.0, 'length_ratio': 1.135135135135135, 'translation_length': 42, 'reference_length': 37} Rouge: {'rouge1': 0.2535211267605634, 'rouge2': 0.08695652173913043, 'rougeL': 0.1971830985915493, 'rougeLsum': 0.2535211267605634} Sari: {'sari': 54.254458520163105} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ["wie komm ich da hinein? Aber Gretel merkte, was sie im Sinn hatte, und sprach: »Ich weiß nicht, wie ich's machen soll;"] Prediction: ['Der britische Sinn-Stern hatte sich im Sinn geschafft.\nGretel merkte, was sie im Sinn hatte, und sprach: "Ich weiß nicht, wie ich\'s machen soll".'] Label: [['Wie komme ich in den Ofen?\nUnd deshalb fragt Gretel die Hexe: Gretel kennt den Plan von der Hexe.\nAber Gretel ist schlau.']] Sacrebleu: {'score': 1.6404472625060698, 'counts': [4, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1851851851851851, 'translation_length': 32, 'reference_length': 27} Rouge: {'rouge1': 0.20408163265306123, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.20408163265306123} Sari: {'sari': 34.223484848484844} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ["Und wenn Gretel darin war, wollte sie den Ofen zumachen und Gretel sollte darin braten, und dann wollte sie's auch aufessen."] Prediction: ['Gretel wollte den Ofen zumachen und Gretel sollte darin braten.\nDas war Gretel darin, wenn sie den Ofen zumachen und Gretel sollte darin braten.\nWenn Gretel darin war, wollte sie den Ofen darin braten.'] Label: [['Gretel soll im Ofen braten.\nDie Hexe will Gretel nämlich in den Ofen stoßen.']] Sacrebleu: {'score': 3.1726297461095347, 'counts': [8, 2, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [20.512820512820515, 5.2631578947368425, 1.3513513513513513, 0.6944444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.20512820512820512, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4375, 'translation_length': 39, 'reference_length': 16} Rouge: {'rouge1': 0.24, 'rouge2': 0.041666666666666664, 'rougeL': 0.24, 'rougeLsum': 0.24} Sari: {'sari': 39.49707602339181} Flesh Reading Ease: 75.1 ---------------------------------------- Source: ['»Kriech hinein,« sagte die Hexe, »und sieh zu, ob schon recht eingeheizt ist, damit wir das Brot hineinschießen können.«'] Prediction: ['Im Brot kann man ein Brot hineinschießen.\nDer Brot kann nicht mehr recht eingeheizt werden.\nDie Hexe warnt, ob das Brot recht eingeheizt ist.'] Label: [['Gretel soll in den Ofen steigen.\nIst der Ofen heiß?']] Sacrebleu: {'score': 1.3353534059549443, 'counts': [1, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [3.5714285714285716, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.03571428571428571, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 28, 'reference_length': 12} Rouge: {'rouge1': 0.11428571428571428, 'rouge2': 0.0, 'rougeL': 0.05714285714285714, 'rougeLsum': 0.11428571428571428} Sari: {'sari': 45.15669515669515} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['»Spare nur dein Geplärre,« sagte die Alte, »es hilft dir alles nichts.«'] Prediction: ['Die Alte hat einen Geplärten in der Schweiz gegeben.\nDie Alte hilft dir alles nichts.'] Label: [['Weinen hilft dir nicht.\nAber die Hexe sagt zu Gretel: Sei still.\nDie arme Gretel weint viele Tränen.']] Sacrebleu: {'score': 5.096790497964662, 'counts': [5, 2, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [29.41176470588235, 12.5, 3.3333333333333335, 1.7857142857142858], 'bp': 0.7451888170134805, 'sys_len': 17, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.29411764705882354, 0.125, 0.0, 0.0], 'brevity_penalty': 0.7451888170134805, 'length_ratio': 0.7727272727272727, 'translation_length': 17, 'reference_length': 22} Rouge: {'rouge1': 0.22857142857142856, 'rouge2': 0.0606060606060606, 'rougeL': 0.11428571428571428, 'rougeLsum': 0.22857142857142856} Sari: {'sari': 42.72727272727273} Flesh Reading Ease: 84.75 ---------------------------------------- Source: ['»Lieber Gott, hilf uns doch,« rief sie aus, »hätten uns nur die wilden Tiere im Wald gefressen, so wären wir doch zusammen gestorben.«'] Prediction: ['Im Wald im Wald wurden Tiere immer wieder aufgefunden.\nSie wurden nur die wilden Tiere im Wald gefressen.\nDie Tiere waren nur im Wald gefressen, so wären wir doch zusammen gestorben.'] Label: [['Die Hexe darf Hänsel nicht essen.\nDer liebe Gott soll uns beschützen!\nGretel denkt:']] Sacrebleu: {'score': 1.2557690800697192, 'counts': [2, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [5.714285714285714, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.05714285714285714, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0588235294117645, 'translation_length': 35, 'reference_length': 17} Rouge: {'rouge1': 0.041666666666666664, 'rouge2': 0.0, 'rougeL': 0.041666666666666664, 'rougeLsum': 0.041666666666666664} Sari: {'sari': 33.75} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Hänsel mag fett oder mager sein, morgen will ich ihn schlachten und kochen.'] Prediction: ['Hänsel mag fett oder mager sein, morgen will ich ihn schlachten und kochen.\nHänsel mag fett oder mager sein, morgen will ich ihn schlachten und kochen.'] Label: [['Morgen will ich Hänsel im Ofen braten.']] Sacrebleu: {'score': 2.952787808378777, 'counts': [4, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.2777777777777778, 'rouge2': 0.17647058823529413, 'rougeL': 0.2777777777777778, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 40.773809523809526} Flesh Reading Ease: 85.1 ---------------------------------------- Source: ['Als vier Wochen herum waren und Hänsel immer mager blieb, da übernahm sie die Ungeduld und sie wollte nicht länger warten.'] Prediction: ['Eine junge Frau wurde in den vergangenen Tagen von ihrem Mann aufgefunden.\nAls vier Wochen herum waren und Hänsel immer mager blieb, da übernahm sie die Ungeduld und sie wollte nicht länger warten.'] Label: [['Hänsel und Gretel sind viele Wochen bei der Hexe.\nDie Zeit vergeht:']] Sacrebleu: {'score': 1.4500372328365223, 'counts': [4, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [11.11111111111111, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5714285714285716, 'translation_length': 36, 'reference_length': 14} Rouge: {'rouge1': 0.20833333333333331, 'rouge2': 0.04347826086956522, 'rougeL': 0.12500000000000003, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 36.27450980392157} Flesh Reading Ease: 64.05 ---------------------------------------- Source: ['« Hänsel streckte ihr aber ein Knöchlein heraus, und die Alte, die trübe Augen hatte, konnte es nicht sehen und meinte, es wären Hänsels Finger, und verwunderte sich, daß er gar nicht fett werden wollte.'] Prediction: ['Ein Knöchlein hatte ein Hänsel in einem Knöchlein herausgebracht.\nDer Hänsel streckte ihr aber ein Knöchlein heraus, und verwunderte sich, da er gar nicht fett werden wollte.'] Label: [['Und die Hexe denkt: Hänsel ist immer noch zu dünn.\nDeshalb sieht die Hexe den Knochen nicht.\nDie Hexe hat nämlich schlechte Augen.\nHänsel steckt einen dünnen Knochen durch das Gitter.\nHänsel steckt nicht seine Finger durch das Gitter.\nAber Hänsel ist schlau:']] Sacrebleu: {'score': 0.9716442260301982, 'counts': [5, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 0.5417756864712343, 'sys_len': 31, 'ref_len': 50} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5417756864712342, 'length_ratio': 0.62, 'translation_length': 31, 'reference_length': 50} Rouge: {'rouge1': 0.17073170731707318, 'rouge2': 0.05, 'rougeL': 0.12195121951219513, 'rougeLsum': 0.12195121951219513} Sari: {'sari': 33.515924329501914} Flesh Reading Ease: 72.9 ---------------------------------------- Source: ['Jeden Morgen schlich die Alte zu dem Ställchen und rief: »Hänsel, streck deine Finger heraus, damit ich fühle, ob du bald fett bist.'] Prediction: ['Ein Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställchen-Ställ'] Label: [['Ich will deine Finger fühlen.\nZeig mir deine Finger.\nUnd die Hexe fragt: Bist du schon fett?\nJeden Morgen kommt die Hexe zu Hänsel.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [2, 1, 0, 0], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.3709590863840845e-06, 'sys_len': 2, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.3709590863840845e-06, 'length_ratio': 0.06896551724137931, 'translation_length': 2, 'reference_length': 29} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 45.216049382716044} Flesh Reading Ease: -5087.01 ---------------------------------------- Source: ['Gretel fing an bitterlich zu weinen, aber es war alles vergeblich, sie mußte thun, was die böse Hexe verlangte.'] Prediction: ['Eine böse Hexe ist in der Nacht auf Sonntag gestorben.\nDer böse Hexe war auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zu sehen.\nDer Grund: Der böse Hexe war auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zu sehen.\nDer Grund: Der Grund: Der böse Hexe war auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zu sehen.\nDer Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund: Der Grund:'] Label: [['Aber Gretel muss auf die Hexe hören.\nGretel weint viele Tränen.']] Sacrebleu: {'score': 0.22779338780875671, 'counts': [4, 0, 0, 0], 'totals': [221, 220, 219, 218], 'precisions': [1.8099547511312217, 0.22727272727272727, 0.1141552511415525, 0.05733944954128441], 'bp': 1.0, 'sys_len': 221, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.01809954751131222, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 17.0, 'translation_length': 221, 'reference_length': 13} Rouge: {'rouge1': 0.018957345971563982, 'rouge2': 0.0, 'rougeL': 0.018957345971563982, 'rougeLsum': 0.009478672985781991} Sari: {'sari': 52.75122549019608} Flesh Reading Ease: 59.3 ---------------------------------------- Source: ['Wenn er fett ist, so will ich ihn essen.«'] Prediction: ['Ein Mann wurde in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich verhaftet.\nEr fettete sich, wenn er fett ist, so will ich ihn essen.\nDer Mann wurde dabei verhaftet, dass er fett ist.'] Label: [['Dann kann ich Hänsel essen.']] Sacrebleu: {'score': 1.8863288995952103, 'counts': [3, 1, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [6.976744186046512, 2.380952380952381, 1.2195121951219512, 0.625], 'bp': 1.0, 'sys_len': 43, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.06976744186046512, 0.023809523809523808, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.166666666666667, 'translation_length': 43, 'reference_length': 6} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 38.41991341991342} Flesh Reading Ease: 85.8 ---------------------------------------- Source: ['Dann ging sie zur Gretel, rüttelte sie wach und rief: »Steh auf, Faulenzerin, trag Wasser und koch deinem Bruder etwas Gutes, der sitzt draußen im Stall und soll fett werden.'] Prediction: ['Eine Gretel-Fälle wurde von Faulenzerin aufgefunden.\nSie wurde von einem Bruder entdeckt.\nDie Gretel-Fälle wurde von einem Bruder entdeckt.'] Label: [['Hänsel soll nämlich fett werden.\nEssen!\nKoch Mach dich an die Arbeit!\nDann sagt die Hexe zu Gretel: Du faules Mädchen!']] Sacrebleu: {'score': 1.4400778827658958, 'counts': [1, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [4.545454545454546, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 0.8337529180751805, 'sys_len': 22, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.045454545454545456, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8337529180751805, 'length_ratio': 0.8461538461538461, 'translation_length': 22, 'reference_length': 26} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.0, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 40.89841089414833} Flesh Reading Ease: 45.0 ---------------------------------------- Source: ['Da packte sie Hänsel mit ihrer dürren Hand und trug ihn in einen kleinen Stall und sperrte ihn mit einer Gitterthür ein;'] Prediction: ['Eine Frau hat sich mit ihrer dürren Hand und trug ihn in einen kleinen Stall und sperrte ihn mit einer Gitterthür ein.\nSie trug ihn in einen kleinen Stall und trug ihn mit einer Gitterthür ein.'] Label: [['Der Käfig hat ein Gitter.\nUnd die Hexe sperrt Hänsel in einen Käfig.\nDie Hexe packt Hänsel.\nDie Hexe ist böse.']] Sacrebleu: {'score': 2.550799653951183, 'counts': [6, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [15.789473684210526, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.52, 'translation_length': 38, 'reference_length': 25} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.031746031746031744, 'rougeL': 0.1230769230769231, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 37.12224494433084} Flesh Reading Ease: 85.95 ---------------------------------------- Source: ['Wenn eins in ihre Gewalt kam, so machte sie es tot, kochte es und aß es, und das war ihr ein Festtag.'] Prediction: ['Eine Frau war tot, kochte es und aß es, das war ihr ein Festtag.\nSie war ein Festtag, wenn sie sie tot machte und aß es, war ihr ein Festtag.'] Label: [['Und die böse Hexe will Hänsel und Gretel essen.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6, 'translation_length': 36, 'reference_length': 10} Rouge: {'rouge1': 0.0975609756097561, 'rouge2': 0.0, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 35.294117647058826} Flesh Reading Ease: 94.8 ---------------------------------------- Source: ['Die Alte hatte sich nur so freundlich angestellt, sie war aber eine böse Hexe, die den Kindern auflauerte, und hatte das Brothäuslein bloß gebaut, um sie herbeizulocken.'] Prediction: ['Eine böse Hexe, die den Kindern auflauerte, hatte sich in einem Brothäuslein bloß gebaut, um sie herbeizulocken.\nDie Alte war aber nur so freundlich angestellt, sie war aber eine böse Hexe, die den Kindern auflauerte, und hatte das Brothäuslein bloß gebaut, um sie herbeizulocken.'] Label: [['Die alte Frau ist nämlich eine böse Hexe.']] Sacrebleu: {'score': 2.90427443969669, 'counts': [5, 2, 1, 0], 'totals': [53, 52, 51, 50], 'precisions': [9.433962264150944, 3.8461538461538463, 1.9607843137254901, 1.0], 'bp': 1.0, 'sys_len': 53, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.09433962264150944, 0.038461538461538464, 0.0196078431372549, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.888888888888889, 'translation_length': 53, 'reference_length': 9} Rouge: {'rouge1': 0.20689655172413793, 'rouge2': 0.14285714285714285, 'rougeL': 0.20689655172413793, 'rougeLsum': 0.20689655172413793} Sari: {'sari': 38.423170194003525} Flesh Reading Ease: 52.7 ---------------------------------------- Source: ['Hernach wurden zwei schöne Bettlein weiß gedeckt und Hänsel und Gretel legten sich hinein und meinten, sie wären im Himmel.'] Prediction: ['In der Nacht auf Sonntag wurden zwei schöne Bettlein weiß gedeckt.\nHänsel und Gretel legten sich hinein und meinten, sie wären im Himmel.\nHänsel und Gretel legten sich hinein und meinten, sie wären im Himmel.'] Label: [['Hänsel und Gretel sind sehr glücklich.\nDann gehen Hänsel und Gretel ins Bett.']] Sacrebleu: {'score': 6.18030651746205, 'counts': [8, 4, 2, 0], 'totals': [40, 39, 38, 37], 'precisions': [20.0, 10.256410256410257, 5.2631578947368425, 1.3513513513513513], 'bp': 1.0, 'sys_len': 40, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.10256410256410256, 0.05263157894736842, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 40, 'reference_length': 15} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.2222222222222222, 'rougeL': 0.28571428571428575, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 38.6764705882353} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['Da ward gutes Essen aufgetragen, Milch und Pfannkuchen mit Zucker, Äpfel und Nüsse.'] Prediction: ['Wer im bedeuten Pharmauntergabe gesucht wird, ist noch unklar.\nDas ist der erste Pharmauntergabe, die auf der Suche zu verkünden.\nWir haben sich dabei zu einer neuen Essen-Task veröffentlicht.'] Label: [['• Und Nüsse.\n• Äpfel.\n• Und Pfann∙kuchen.\n• Milch.\nDie alte Frau gibt Hänsel und Gretel zu essen:']] Sacrebleu: {'score': 1.5393730252811677, 'counts': [4, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4166666666666667, 'translation_length': 34, 'reference_length': 24} Rouge: {'rouge1': 0.12000000000000002, 'rouge2': 0.0, 'rougeL': 0.12000000000000002, 'rougeLsum': 0.12000000000000002} Sari: {'sari': 39.292328042328045} Flesh Reading Ease: 59.15 ---------------------------------------- Source: ['« Sie faßte beide an der Hand und führte sie in ihr Häuschen.'] Prediction: ['Eine Frau führte in ihr Häuschen in ihr Häuschen.\nSie faßte beide an der Hand und führte sie in ihr Häuschen.'] Label: [['Hänsel und Gretel gehen mit der alten Frau ins Häuschen.']] Sacrebleu: {'score': 4.141141330484801, 'counts': [5, 1, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 4.545454545454546, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.090909090909091, 'translation_length': 23, 'reference_length': 11} Rouge: {'rouge1': 0.30769230769230765, 'rouge2': 0.05405405405405406, 'rougeL': 0.20512820512820512, 'rougeLsum': 0.20512820512820512} Sari: {'sari': 40.63390313390314} Flesh Reading Ease: 87.6 ---------------------------------------- Source: ['Kommt nur herein und bleibt bei mir, es geschieht euch kein Leid. Die Alte aber wackelte mit dem Kopfe und sprach: »Ei, ihr lieben Kinder, wer hat euch hierher gebracht?'] Prediction: ['Im Video der Alte spricht eine Alte mit dem Kopfe und sprach, dass sie ihr Kinder gebracht hat.\nDie Alte wollte ihr Leid und ihr Leid geben.\nDie Alte wollte ihn nicht mehr gebracht haben, sondern auch euch euch hierher gebracht.'] Label: [['Habt keine Angst.\nKommt herein.\nAber die alte Frau sagt: Liebe Kinder!']] Sacrebleu: {'score': 1.045953676514853, 'counts': [3, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [6.521739130434782, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.06521739130434782, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.875, 'translation_length': 46, 'reference_length': 16} Rouge: {'rouge1': 0.11320754716981131, 'rouge2': 0.03921568627450981, 'rougeL': 0.07547169811320753, 'rougeLsum': 0.11320754716981131} Sari: {'sari': 36.00217864923747} Flesh Reading Ease: 84.4 ---------------------------------------- Source: ['Hänsel und Gretel erschraken so gewaltig, daß sie fallen ließen, was sie in den Händen hielten.'] Prediction: ['Hänsel und Gretel wurden in den Händen von der Nacht auf Sonntag in der Nacht auf Sonntag erschraken.\nDas war einige Tage lang, dass sie in den Händen hielten.\nIm Interview mit Gretel spricht der "Bachelor"-Schauspieler über die Welt und die Welt.'] Label: [['Hänsel und Gretel erschrecken sich.']] Sacrebleu: {'score': 2.978116934066752, 'counts': [4, 2, 1, 0], 'totals': [49, 48, 47, 46], 'precisions': [8.16326530612245, 4.166666666666667, 2.127659574468085, 1.0869565217391304], 'bp': 1.0, 'sys_len': 49, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.08163265306122448, 0.041666666666666664, 0.02127659574468085, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.166666666666666, 'translation_length': 49, 'reference_length': 6} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.12000000000000001, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 44.25925925925927} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Da ging auf einmal die Thür auf und eine steinalte Frau, die sich auf eine Krücke stützte, kam herausgeschlichen.'] Prediction: ['Eine steinalte Frau, die sich auf eine Krücke stützte, kam herausgeschlichen.\nDie Frau war auf einmal die Thür auf und wurde herausgeschlichen.'] Label: [['Und eine alte Frau kommt aus dem Häuschen.\nDie Tür vom Häuschen geht auf.']] Sacrebleu: {'score': 3.802351022611669, 'counts': [6, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [23.076923076923077, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.625, 'translation_length': 26, 'reference_length': 16} Rouge: {'rouge1': 0.28571428571428564, 'rouge2': 0.0, 'rougeL': 0.2380952380952381, 'rougeLsum': 0.28571428571428564} Sari: {'sari': 35.12452107279693} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['und aßen weiter, ohne sich irre machen zu lassen.'] Prediction: ['Weil sich die Menschen sich in den vergangenen Tagen geschickt haben, werden sie sich in der Nacht auf Sonntag machen lassen.\nDie beiden sind sich in der Nacht auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zu sehen.'] Label: [['Dann essen Hänsel und Gretel weiter.']] Sacrebleu: {'score': 0.7772751558853214, 'counts': [1, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [2.127659574468085, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.02127659574468085, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.714285714285714, 'translation_length': 47, 'reference_length': 7} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 48.51851851851852} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['»Der Wind, der Wind, das himmlische Kind,« die Kinder antworteten:'] Prediction: ['Ein hemlischer Kind, der die Kinder antworteten, ist ein hemlischer Kind.\nDie Kinder antworteten den Wind, der Wind, das hemlische Kind, die Kinder antworteten.'] Label: [['Das himmlische Kind.\nDer Wind.\nHänsel und Gretel antworten: Der Wind.']] Sacrebleu: {'score': 3.016200863100729, 'counts': [5, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.066666666666667, 'translation_length': 31, 'reference_length': 15} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.1176470588235294, 'rougeL': 0.2777777777777778, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 34.155638869513545} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['»Knupper, knupper, kneischen, wer knuppert an meinem Häuschen?« Da rief eine feine Stimme aus der Stube heraus:'] Prediction: ['Im Alter von 99 Jahren ist einige Tage nach der Stube in der Nähe von Stücken ausgebrochen.\nDie Stimme rief aus der Stube heraus und rief eine feine Stimme aus der Stube heraus.'] Label: [['Wer knuspert an meinem Häuschen?\nDie Stimme kommt aus dem Häuschen: Knusper knusper Knäuschen.\nPlötzlich hören Hänsel und Gretel eine Stimme.']] Sacrebleu: {'score': 2.9867390496386634, 'counts': [8, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [22.857142857142858, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.22857142857142856, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 35, 'reference_length': 25} Rouge: {'rouge1': 0.1935483870967742, 'rouge2': 0.03333333333333333, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.1935483870967742} Sari: {'sari': 31.25952478893656} Flesh Reading Ease: 69.9 ---------------------------------------- Source: ['Ich will ein Stück vom Dach essen, Gretel, du kannst, vom Fenster essen, das schmeckt süß.'] Prediction: ['Gretel, Gretel, kannst ein Stück vom Dach essen, Gretel, du kannst, vom Fenster essen, das schmeckt süß.\nIm Interview mit dem 20-Minuten-Podcast "Unchained" spricht Gretel über ihre Leistung, die sich über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen über ihre Leistungen ü'] Label: [['Hänsel und Gretel essen ein Stück vom Häuschen.\nIch esse ein Stück vom Dach.']] Sacrebleu: {'score': 1.726045093524829, 'counts': [8, 3, 2, 1], 'totals': [154, 153, 152, 151], 'precisions': [5.194805194805195, 1.9607843137254901, 1.3157894736842106, 0.6622516556291391], 'bp': 1.0, 'sys_len': 154, 'ref_len': 16} Bleu: {'bleu': 0.017260450935248292, 'precisions': [0.05194805194805195, 0.0196078431372549, 0.013157894736842105, 0.006622516556291391], 'brevity_penalty': 1.0, 'length_ratio': 9.625, 'translation_length': 154, 'reference_length': 16} Rouge: {'rouge1': 0.09876543209876543, 'rouge2': 0.049999999999999996, 'rougeL': 0.07407407407407407, 'rougeLsum': 0.08641975308641976} Sari: {'sari': 39.48453374249839} Flesh Reading Ease: -2.16 ---------------------------------------- Source: ['»Da wollen wir uns dranmachen,« sprach Hänsel, »und eine gesegnete Mahlzeit halten.'] Prediction: ['Immer wieder wieder zu tun, wie sich die Täter eine gesegnete Mahlzeit halten.\nDie Täter wollen sich dranmachen, wie sie sich dranmachen.\nDie Täter wollen sich dort dranmachen, und die Täter wollen sich dranmachen.'] Label: [['Lass uns ein Stück vom Häuschen essen.\nUnd ich bin sehr hungrig.\nDas Häuschen sieht lecker aus.\nHänsel sagt zu Gretel:']] Sacrebleu: {'score': 1.2992493989257516, 'counts': [4, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [10.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 40, 'reference_length': 25} Rouge: {'rouge1': 0.06349206349206349, 'rouge2': 0.0, 'rougeL': 0.031746031746031744, 'rougeLsum': 0.06349206349206349} Sari: {'sari': 33.57864357864358} Flesh Reading Ease: 69.25 ---------------------------------------- Source: ['aber die Fenster waren von hellem Zucker. Und als es fertig war, schwang es seine Flügel und flog vor ihnen her, und sie gingen ihm nach, bis sie zu einem Häuschen gelangten, auf dessen Dach es sich setzte, und als sie ganz nahe herankamen, so sahen sie, daß das Häuslein aus Brot gebaut war und mit Kuchen gedeckt;'] Prediction: ['Eine Fenster-Fälle flog vor ihnen her, bis sie zu einem Häuschen gelangten, auf dessen Dach es sich setzte.\nAls sie ganz nahe herankamen, so sahen sie, daß das Häuslein aus Brot gebaut war und mit Kuchen gedeckt war.'] Label: [['Und das Dach von dem Häuschen ist mit Leb·kuchen bedeckt.\nUnd Zucker.\nDas Häuschen ist aus Brot.\nDann kommen Hänsel und Gretel zu einem Häuschen.\nHänsel und Gretel laufen dem kleinen Vogel nach.\nDann fliegt der kleine Vogel weiter.']] Sacrebleu: {'score': 4.637266841191351, 'counts': [11, 3, 1, 0], 'totals': [44, 43, 42, 41], 'precisions': [25.0, 6.976744186046512, 2.380952380952381, 1.2195121951219512], 'bp': 0.9775290462529921, 'sys_len': 44, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.06976744186046512, 0.023809523809523808, 0.0], 'brevity_penalty': 0.9775290462529921, 'length_ratio': 0.9777777777777777, 'translation_length': 44, 'reference_length': 45} Rouge: {'rouge1': 0.2758620689655172, 'rouge2': 0.1176470588235294, 'rougeL': 0.16091954022988508, 'rougeLsum': 0.25287356321839083} Sari: {'sari': 35.984023238925204} Flesh Reading Ease: 73.25 ---------------------------------------- Source: ['Als es Mittag war, sahen sie ein schönes schneeweißes Vöglein auf einem Ast sitzen, das sang so schön, daß sie stehen blieben und ihm zuhörten.'] Prediction: ['Eine Frau sang auf einem Ast, das sie in einem schönes schneeweißes Vöglein sang.\nAls sie ein schönes schneeweißes Vöglein auf einem Ast sitzen, sang so schön, daß sie stehen blieben und ihm zuhörten.\nDie Frau sang, wie sie sich das Vöglein sang, wie sie sich das sang so schön, daß sie stehen blieben und ihm zuhörten.'] Label: [['Der kleine Vogel singt wunder∙schön.\nNach einer Weile sehen Hänsel und Gretel einen kleinen Vogel auf einem Ast.']] Sacrebleu: {'score': 2.426852372828193, 'counts': [6, 2, 1, 0], 'totals': [66, 65, 64, 63], 'precisions': [9.090909090909092, 3.076923076923077, 1.5625, 0.7936507936507936], 'bp': 1.0, 'sys_len': 66, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.03076923076923077, 0.015625, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3, 'translation_length': 66, 'reference_length': 20} Rouge: {'rouge1': 0.1348314606741573, 'rouge2': 0.06896551724137931, 'rougeL': 0.08988764044943819, 'rougeLsum': 0.1348314606741573} Sari: {'sari': 38.641975308641975} Flesh Reading Ease: 79.1 ---------------------------------------- Source: ['Sie gingen die ganze Nacht und noch einen Tag von Morgen bis Abend, aber sie kamen aus dem Walde nicht heraus, und waren so hungrig, denn sie hatten nichts als die paar Beeren, die auf der Erde standen.'] Prediction: ['Einige Frauen wurden auf der Erde in der Nacht auf Sonntag geschlossen.\nSie hatten nichts als die paar Beeren, die auf der Erde standen.\nSie waren nicht hungrig, denn sie hatten nichts als die paar Beeren, die auf der Erde standen.'] Label: [['Hänsel und Gretel sind hungrig.\nSo laufen Hänsel und Gretel 3 Tage lang durch den Wald.\nAber Hänsel und Gretel finden den Weg nach Hause nicht.\nHänsel und Gretel suchen den Weg nach Hause.']] Sacrebleu: {'score': 1.1622974570266493, 'counts': [5, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [10.638297872340425, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.10638297872340426, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.236842105263158, 'translation_length': 47, 'reference_length': 38} Rouge: {'rouge1': 0.05063291139240506, 'rouge2': 0.0, 'rougeL': 0.02531645569620253, 'rougeLsum': 0.05063291139240506} Sari: {'sari': 33.94444444444444} Flesh Reading Ease: 84.4 ---------------------------------------- Source: ['« Als der Mond kam, machten sie sich auf, aber sie fanden kein Bröcklein mehr, denn die viel tausend Vögel, die im Walde und im Felde umherfliegen, die hatten sie weggepickt.'] Prediction: ['Eine viel tausende Vögel, die im Walde und im Felde umherfliegen, hatten sie weggepickt.\nDie viel tausend Vögel, die im Walde und im Felde umherfliegen, hatten sie weggepickt.\nDie viel tausend Vögel, die im Walde und im Felde umherfliegen, hatten sie weggepickt.'] Label: [['Vögel haben die Brot∙krümel gegessen.\nDie Brot∙krümel sind weg.']] Sacrebleu: {'score': 1.7967002567978951, 'counts': [5, 1, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [9.803921568627452, 2.0, 1.0204081632653061, 0.5208333333333334], 'bp': 1.0, 'sys_len': 51, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.09803921568627451, 0.02, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.636363636363637, 'translation_length': 51, 'reference_length': 11} Rouge: {'rouge1': 0.13559322033898305, 'rouge2': 0.03508771929824561, 'rougeL': 0.13559322033898305, 'rougeLsum': 0.13559322033898305} Sari: {'sari': 37.1904761904762} Flesh Reading Ease: 60.7 ---------------------------------------- Source: ['Sie erwachten erst in der finsteren Nacht, und Hänsel tröstete sein Schwesterchen und sagte: »Wart nur, Gretel, bis der Mond aufgeht, dann werden wir die Brotbröcklein sehen, die ich ausgestreut habe, die zeigen uns den Weg nach Hause.'] Prediction: ['In der finsteren Nacht wurde Gretel (30) von einem Mond aufgefunden.\nDer Mond war eine Brotbröcklein, die sich ausgestreut habe, die zeigen uns den Weg nach Hause.\nImmer wieder wieder aufgeht Gretel, bis der Mond aufgeht, dann werden wir die Brotbröcklein sehen, die ich ausgestreut habe, die zeigen uns den Weg nach Hause.'] Label: [['Aber Hänsel und Gretel sehen die Brot∙krümel auf dem Weg nicht.\nSo können Hänsel und Gretel vielleicht die Brot∙krümel auf dem Weg sehen.\nZum Glück scheint der Mond hell.\nHänsel und Gretel wachen auf.\nEs ist dunkle Nacht.']] Sacrebleu: {'score': 1.806769827401652, 'counts': [13, 1, 0, 0], 'totals': [64, 63, 62, 61], 'precisions': [20.3125, 1.5873015873015872, 0.8064516129032258, 0.4098360655737705], 'bp': 1.0, 'sys_len': 64, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.203125, 0.015873015873015872, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4883720930232558, 'translation_length': 64, 'reference_length': 43} Rouge: {'rouge1': 0.19607843137254902, 'rouge2': 0.039999999999999994, 'rougeL': 0.1176470588235294, 'rougeLsum': 0.19607843137254902} Sari: {'sari': 35.97574872799399} Flesh Reading Ease: 68.7 ---------------------------------------- Source: ['Dann schliefen sie ein, und der Abend verging, aber niemand kam zu den armen Kindern.'] Prediction: ['Eine Frau schlief ein, niemand war zu den armen Kindern.\nDas war niemand, aber niemand kam zu den armen Kindern.'] Label: [['Und Hänsel und Gretel schlafen ein.\nHänsel und Gretel sind sehr müde.']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 24, 'reference_length': 14} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 34.70695970695971} Flesh Reading Ease: 88.1 ---------------------------------------- Source: ['wir gehen in den Wald und hauen Holz, und abends, wenn wir fertig sind, kommen wir und holen euch ab. Da ward wieder ein großes Feuer angemacht, und die Mutter sagte: »Bleibt nur da sitzen, ihr Kinder, und wenn ihr müde seid, könnt ihr ein wenig schlafen;'] Prediction: ['Immer wieder gehen wir in den Wald und hauen Holz, und abends, wenn wir fertig sind, kommen wir und holen euch ab.\nWir sind wieder ein großes Feuer angemacht, und die Mutter sagte: "Bleibt nur da sitzen, ihr Kinder, und wenn ihr müde seid, könnt ihr ein wenig schlafen".'] Label: [['Wir holen euch später ab.\nWir gehen Holz sammeln.\nIhr wartet hier.\nIm Wald sagt die Stief∙mutter zu Hänsel und Gretel:']] Sacrebleu: {'score': 3.462404899369664, 'counts': [12, 3, 1, 0], 'totals': [61, 60, 59, 58], 'precisions': [19.672131147540984, 5.0, 1.694915254237288, 0.8620689655172413], 'bp': 1.0, 'sys_len': 61, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.19672131147540983, 0.05, 0.01694915254237288, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.44, 'translation_length': 61, 'reference_length': 25} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.05405405405405406, 'rougeL': 0.21052631578947367, 'rougeLsum': 0.2894736842105263} Sari: {'sari': 37.5291346462654} Flesh Reading Ease: 73.6 ---------------------------------------- Source: ['Hänsel aber warf nach und nach alle Bröcklein auf den Weg.'] Prediction: ['Einige Bröcklein sind auf den Weg gefunden.\nDie Bröckle sind auf den Weg gefunden.'] Label: [['Und Hänsel lässt die Brot∙krümel auf den Weg fallen.']] Sacrebleu: {'score': 9.782375748961453, 'counts': [4, 2, 1, 0], 'totals': [16, 15, 14, 13], 'precisions': [25.0, 13.333333333333334, 7.142857142857143, 3.8461538461538463], 'bp': 1.0, 'sys_len': 16, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.13333333333333333, 0.07142857142857142, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 16, 'reference_length': 10} Rouge: {'rouge1': 0.27586206896551724, 'rouge2': 0.14814814814814814, 'rougeL': 0.27586206896551724, 'rougeLsum': 0.27586206896551724} Sari: {'sari': 63.46801346801346} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Auf dem Wege nach dem Walde bröckelte es Hänsel in der Tasche, stand oft still und warf ein Bröcklein, auf die Erde.'] Prediction: ['Ein Bröcklein war in der Tasche von Hänsel in der Tasche, auf die Erde.\nDer Bröcklein war oft still und warf auf die Erde.'] Label: [['Die Familie geht in den Wald.\nAber Hänsel hat Brot∙krümel.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 27, 'reference_length': 12} Rouge: {'rouge1': 0.2, 'rouge2': 0.05263157894736842, 'rougeL': 0.15, 'rougeLsum': 0.15} Sari: {'sari': 36.8421052631579} Flesh Reading Ease: 91.95 ---------------------------------------- Source: ['Als die Alten schliefen, stand Hänsel wieder auf, wollte hinaus und Kieselsteine auflesen, wie das vorige Mal, aber die Frau hatte die Thür verschlossen, und Hänsel konnte nicht heraus.'] Prediction: ['Eine Frau hatte Hänsel verschlossen, wie das vorige Mal verschlossen hatte.\nHänsel konnte nicht heraus, wie das vorige Mal verschlossen hatte.\nDie Frau konnte nicht herausgeben, wie das vorige Mal hatte.'] Label: [['Deshalb kann Hänsel keine kleinen weißen Steine vom Hof holen.\nDie Stief∙mutter hat nämlich abends die Tür zum Hof abgeschlossen.\nDieses Mal hat Hänsel keine kleinen weißen Steine.']] Sacrebleu: {'score': 2.725770058666702, 'counts': [7, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [18.91891891891892, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.1891891891891892, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1935483870967742, 'translation_length': 37, 'reference_length': 31} Rouge: {'rouge1': 0.1764705882352941, 'rouge2': 0.06060606060606061, 'rougeL': 0.14705882352941174, 'rougeLsum': 0.1764705882352941} Sari: {'sari': 36.75122749590835} Flesh Reading Ease: 64.4 ---------------------------------------- Source: ['Die Kinder müssen fort, wir wollen sie tiefer in den Wald hineinführen, damit sie den Weg nicht wieder herausfinden; »Alles ist wieder aufgezehrt, wir haben noch einen halben Laib Brot, hernach hat das Lied ein Ende. Nicht lange danach war wieder Not in allen Ecken, und die Kinder hörten wie die Mutter nachts im Bette zu dem Vater sprach:'] Prediction: ['Ein Laib Brot hat einen halben Laib Brot in den Wald geschickt.\nNicht lange danach war wieder Not in allen Ecken, und die Kinder hörten wie die Mutter nachts im Bette zu dem Vater sprach.'] Label: [['Die Stief∙mutter will Hänsel und Gretel wieder in den Wald schicken.\nWenige Tage später: Die Familie hat wieder nichts zu essen.']] Sacrebleu: {'score': 4.747573105125849, 'counts': [9, 2, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [23.68421052631579, 5.405405405405405, 2.7777777777777777, 1.4285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.23684210526315788, 0.05405405405405406, 0.027777777777777776, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5833333333333333, 'translation_length': 38, 'reference_length': 24} Rouge: {'rouge1': 0.3666666666666667, 'rouge2': 0.06896551724137931, 'rougeL': 0.16666666666666669, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 37.14834821571814} Flesh Reading Ease: 86.45 ---------------------------------------- Source: ['Der Vater aber freute sich, denn es war ihm zu Herzen gegangen, daß er sie so allein zurückgelassen hatte.'] Prediction: ['Ein Vater hatte sich in einem Herzen gegangen, da er sie so allein zurückgelassen hatte.\nDer Vater freute sich, denn es war ihm zu Herzen gegangen, da er sie so allein zurückgelassen hatte.'] Label: [['Der Vater freut sich sehr.']] Sacrebleu: {'score': 2.304907678117588, 'counts': [4, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.333333333333333, 'translation_length': 38, 'reference_length': 6} Rouge: {'rouge1': 0.15, 'rouge2': 0.05263157894736842, 'rougeL': 0.15, 'rougeLsum': 0.15} Sari: {'sari': 37.15780998389695} Flesh Reading Ease: 64.05 ---------------------------------------- Source: ['Sie gingen die ganze Nacht hindurch und kamen bei anbrechendem Tage wieder zu ihres Vaters Haus. Und als der volle Mond aufgestiegen war, so nahm Hänsel sein Schwesterchen an der Hand und ging den Kieselsteinen nach, die schimmerten wie neugeschlagene Batzen und zeigten ihnen den Weg.'] Prediction: ['Im Haus Haus in Bern wurde ein Mond aufgestiegen.\nDer Mond war bei anbrechendem Tagen wieder zu ihres Vaters Haus geschlagen.\nDer Vaters Haus wurde als der volle Mond aufgestiegen.'] Label: [['Hänsel und Gretel kommen zu Hause an.\nUnd Hänsel und Gretel finden den Weg nach Hause.\nSo können Hänsel und Gretel die kleinen weißen Steine auf dem Weg sehen.\nZum Glück scheint der Mond hell.']] Sacrebleu: {'score': 1.465525803087546, 'counts': [6, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [18.181818181818183, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.8337529180751805, 'sys_len': 33, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8337529180751805, 'length_ratio': 0.8461538461538461, 'translation_length': 33, 'reference_length': 39} Rouge: {'rouge1': 0.08450704225352113, 'rouge2': 0.028985507246376812, 'rougeL': 0.08450704225352113, 'rougeLsum': 0.08450704225352113} Sari: {'sari': 33.47494553376906} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Als sie endlich erwachten, war es schon finstere Nacht.'] Prediction: ['Eine Frau wurde in der Nacht auf Sonntag in der Nähe von einem Mann (27) geschossen.\nSie war nach einem Finale geschossen.\nNun wurde sie von einem Mann aufgefunden.'] Label: [['Hänsel und Gretel wachen auf.\nEs ist dunkle Nacht.']] Sacrebleu: {'score': 1.5393730252811677, 'counts': [4, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.090909090909091, 'translation_length': 34, 'reference_length': 11} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.05, 'rougeLsum': 0.1} Sari: {'sari': 53.379120879120876} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['Und als sie so lange gesessen hatten, fielen ihnen die Augen vor Müdigkeit zu, und sie schliefen fest ein.'] Prediction: ['Eine junge Frau wurde vor Müdigkeit festgenommen.\nSie schliefen sie fest ein und schliefen sie fest ein.'] Label: [['Und Hänsel und Gretel schlafen ein.\nHänsel und Gretel sind sehr müde.']] Sacrebleu: {'score': 4.814971807094068, 'counts': [4, 1, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [21.05263157894737, 5.555555555555555, 2.9411764705882355, 1.5625], 'bp': 1.0, 'sys_len': 19, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.05555555555555555, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3571428571428572, 'translation_length': 19, 'reference_length': 14} Rouge: {'rouge1': 0.1818181818181818, 'rouge2': 0.0, 'rougeL': 0.1212121212121212, 'rougeLsum': 0.1818181818181818} Sari: {'sari': 48.47222222222222} Flesh Reading Ease: 77.9 ---------------------------------------- Source: ['Wenn wir fertig sind, kommen wir wieder und holen euch ab.«'] Prediction: ['Wenn wir fertig sind, kommen wir wieder und holen euch ab.\nWenn wir fertig sind, kommen wir wieder und holen euch ab.'] Label: [['Wir holen euch später ab.']] Sacrebleu: {'score': 4.085892079136996, 'counts': [4, 2, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 8.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.08, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.333333333333333, 'translation_length': 26, 'reference_length': 6} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.07692307692307693, 'rougeL': 0.28571428571428575, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 40.25974025974026} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['»Nun legt euch ans Feuer, ihr Kinder, und ruht euch aus, wir gehen in den Wald und hauen Holz.'] Prediction: ['Einige Frauen sind in den Walden in den USA verstorben.\nSie wollen ihr Kinder und ihr Kinder gehen.\nSie wollen ihr Wald und hauen Holz.'] Label: [['Wir gehen Holz sammeln.\nIhr wartet hier.']] Sacrebleu: {'score': 1.8884748972625875, 'counts': [4, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.111111111111111, 'translation_length': 28, 'reference_length': 9} Rouge: {'rouge1': 0.1875, 'rouge2': 0.0, 'rougeL': 0.125, 'rougeLsum': 0.1875} Sari: {'sari': 36.33101851851852} Flesh Reading Ease: 83.95 ---------------------------------------- Source: ['Hänsel aber hatte nicht nach dem Kätzchen gesehen, sondern immer einen von den blanken Kieselsteinen aus seiner Tasche auf den Weg geworfen.'] Prediction: ['Im Kätzchen in der Nähe von Kieselsteinen wurde ein blanker Kieselsteinen aus seiner Tasche auf den Weg geworfen.\nDas konnte nicht nach dem Kätzchen gesehen werden.'] Label: [['Und Hänsel lässt die kleinen weißen Steine auf den Weg fallen.\nHänsel hat kleine weiße Steine vom Hof in seinen Hosen·taschen.']] Sacrebleu: {'score': 5.911245883122323, 'counts': [6, 2, 1, 0], 'totals': [28, 27, 26, 25], 'precisions': [21.428571428571427, 7.407407407407407, 3.8461538461538463, 2.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.07407407407407407, 0.038461538461538464, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2173913043478262, 'translation_length': 28, 'reference_length': 23} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.07407407407407408, 'rougeL': 0.10714285714285715, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 39.377585377585376} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Danach machten sie sich alle zusammen auf den Weg nach dem Walde.'] Prediction: ['Eine Frau (27) und ihr Mann (28) sind am Sonntag in den Weg nach dem Walde gefunden.\nSie waren sie auf den Weg nach dem Walde.\nSie war sie sich alle zusammen, sie sind sich alle zusammen.'] Label: [['Die Familie geht in den Wald.']] Sacrebleu: {'score': 1.7995423963268318, 'counts': [3, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [6.666666666666667, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.428571428571429, 'translation_length': 45, 'reference_length': 7} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.048780487804878044, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.09302325581395349} Sari: {'sari': 37.14520773344302} Flesh Reading Ease: 85.8 ---------------------------------------- Source: ['»Steht auf, ihr Faulenzer, wir wollen in den Wald gehen und Holz holen.« Als der Tag anbrach, noch ehe die Sonne aufgegangen war, kam schon die Frau und weckte die beiden Kinder:'] Prediction: ['Eine Frau und ihr Faulenzer wollen in den Wald gehen und Holz holen.\nAls sie aufgegangen war, kam schon die Frau und weckte die beiden Kinder.'] Label: [['Und Holz sammeln.\nWir wollen in den Wald gehen.\nSteht auf.\nDie Stief∙mutter weckt Hänsel und Gretel: Ihr faulen Kinder!\nEs ist der nächste Morgen.']] Sacrebleu: {'score': 13.369900693644063, 'counts': [10, 4, 3, 2], 'totals': [29, 28, 27, 26], 'precisions': [34.48275862068966, 14.285714285714286, 11.11111111111111, 7.6923076923076925], 'bp': 0.9333588643117228, 'sys_len': 29, 'ref_len': 31} Bleu: {'bleu': 0.13369900693644068, 'precisions': [0.3448275862068966, 0.14285714285714285, 0.1111111111111111, 0.07692307692307693], 'brevity_penalty': 0.9333588643117227, 'length_ratio': 0.9354838709677419, 'translation_length': 29, 'reference_length': 31} Rouge: {'rouge1': 0.4074074074074074, 'rouge2': 0.1923076923076923, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.4074074074074074} Sari: {'sari': 41.15079365079365} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['»Still, Gretel,« sprach Hänsel, »gräme dich nicht, ich will uns schon helfen.«'] Prediction: ['Der Chef des Schweizer TV-Hosts Gretel spricht von einer ähnlichen Situation über ihre Welt.\nIn der Folge spricht Gretel über ihre Änderung, die sich über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ihre Welt über ih'] Label: [['Mach dir keine Sorgen.\nHänsel tröstet Gretel:']] Sacrebleu: {'score': 0.24233829256430914, 'counts': [2, 0, 0, 0], 'totals': [175, 174, 173, 172], 'precisions': [1.1428571428571428, 0.28735632183908044, 0.14450867052023122, 0.07267441860465117], 'bp': 1.0, 'sys_len': 175, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.011428571428571429, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 19.444444444444443, 'translation_length': 175, 'reference_length': 9} Rouge: {'rouge1': 0.01092896174863388, 'rouge2': 0.0, 'rougeL': 0.01092896174863388, 'rougeLsum': 0.01092896174863388} Sari: {'sari': 63.24786324786324} Flesh Reading Ease: 11.6 ---------------------------------------- Source: ["Gretel weinte bittere Thränen und sprach zu Hänsel: »Nun ist's um uns geschehen.«"] Prediction: ['Der Thränen-Konzern Gretel (34) ist seit seinem Jahr 2020 in der Nähe von der Nähe von Thränen geschickt.\nDer Thränen-Konzern weinte sich zu Hänsel.\nIm Interview mit dem "Gretel"-Konzern spricht Gretel über seine Welt und seine Welt.'] Label: [['Gretel ist sehr traurig.']] Sacrebleu: {'score': 1.0700143107304574, 'counts': [3, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [6.666666666666667, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 9.0, 'translation_length': 45, 'reference_length': 5} Rouge: {'rouge1': 0.08, 'rouge2': 0.0, 'rougeL': 0.08, 'rougeLsum': 0.08} Sari: {'sari': 54.298941798941804} Flesh Reading Ease: 74.1 ---------------------------------------- Source: ['Die zwei Kinder hatten vor Hunger auch nicht einschlafen können und hatten gehört, was die Stiefmutter zum Vater gesagt hatte.'] Prediction: ['Eine Stiefmutter hatte vor Hunger eine Kinder-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen haben vor Hunger auch nicht einschlafen können.\nDie zwei Kinder hatten vor Hunger auch nicht einschlafen und gehört.'] Label: [['Deshalb haben Hänsel und Gretel alles gehört.\nAber Hänsel und Gretel sind noch wach.\nDiese Frau ist die Stief∙mutter von Hänsel und Gretel.']] Sacrebleu: {'score': 3.4901807086831904, 'counts': [5, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [18.51851851851852, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.18518518518518517, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0384615384615385, 'translation_length': 27, 'reference_length': 26} Rouge: {'rouge1': 0.12048192771084339, 'rouge2': 0.024691358024691357, 'rougeL': 0.09638554216867469, 'rougeLsum': 0.12048192771084339} Sari: {'sari': 37.137071734594954} Flesh Reading Ease: -130.86 ---------------------------------------- Source: ['»O du Narr,« sagte sie, »dann müssen wir alle vier Hungers sterben, du kannst nur die Bretter für die Särge hobeln,« und ließ ihm keine Ruhe, bis er einwilligte. »'] Prediction: ['Eine Bretterin hat vier Hungers für die Särge geschickt.\nSie warnt, dass sie alle vier Hungers sterben müssen, wie sie sich für die Särge hobeln, und ließ ihm keine Ruhe, bis er einwilligte.'] Label: [['Wir können nicht genug Essen für uns alle kaufen.\nWir sind arm.\nDu Dumm∙kopf.\nSeine Frau antwortet:']] Sacrebleu: {'score': 1.3339264902154053, 'counts': [4, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [10.256410256410257, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.10256410256410256, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 39, 'reference_length': 21} Rouge: {'rouge1': 0.10344827586206896, 'rouge2': 0.03571428571428572, 'rougeL': 0.10344827586206896, 'rougeLsum': 0.06896551724137931} Sari: {'sari': 34.29166666666667} Flesh Reading Ease: 75.75 ---------------------------------------- Source: ["wie sollte ich's übers Herz bringen, meine Kinder im Walde allein zu lassen, die wilden Tiere würden bald kommen und sie zerreißen.« »Nein, Frau,« sagte der Mann, »das thue ich nicht;"] Prediction: ['Ein Mann hat in der Nacht auf Sonntag meine Kinder im Walde allein zu lassen.\nDie wilden Tiere würden bald kommen und sie zerreißen.\nDie Tiere würden bald kommen und sie zerreißen.'] Label: [['Die wilden Tiere werden die Kinder fressen.\nDer Vater antwortet: Ich will meine Kinder nicht im Wald lassen.']] Sacrebleu: {'score': 6.151986961870088, 'counts': [9, 4, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [25.714285714285715, 11.764705882352942, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.2571428571428571, 0.11764705882352941, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 35, 'reference_length': 21} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.11538461538461539, 'rougeL': 0.1851851851851852, 'rougeLsum': 0.2962962962962963} Sari: {'sari': 41.85515873015873} Flesh Reading Ease: 81.55 ---------------------------------------- Source: ['Sie finden den Weg nicht wieder nach Hause und wir sind sie los.«'] Prediction: ['Eine Frau wurde nicht wieder nach Hause geschickt.\nSie findet sie nicht wieder nach Hause.\nSie findet sie los.'] Label: [['Dann sind wir Hänsel und Gretel los.\nAlleine werden Hänsel und Gretel nicht den Weg nach Hause finden.']] Sacrebleu: {'score': 5.406502668979588, 'counts': [6, 2, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [27.272727272727273, 9.523809523809524, 2.5, 1.3157894736842106], 'bp': 1.0, 'sys_len': 22, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.09523809523809523, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 22, 'reference_length': 20} Rouge: {'rouge1': 0.20512820512820512, 'rouge2': 0.05405405405405406, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.20512820512820512} Sari: {'sari': 34.06084656084656} Flesh Reading Ease: 85.95 ---------------------------------------- Source: ['« »Weißt du was, Mann,« antwortete die Frau, »wir wollen morgen in aller Frühe die Kinder hinaus in den Wald führen, wo er am dicksten ist:'] Prediction: ['Eine Frau hat in den Walden in den Wald eine Kinderfahren gefunden.\nSie warnt, dass ihn die Kinder hinaus in den Wald führen.\nDie Frau warnt, dass ihn die Kinder in den Wald führen.'] Label: [['Seine Frau antwortet: Morgen bringen wir Hänsel und Gretel in den Wald.']] Sacrebleu: {'score': 3.9893707027646133, 'counts': [5, 2, 1, 0], 'totals': [39, 38, 37, 36], 'precisions': [12.820512820512821, 5.2631578947368425, 2.7027027027027026, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.1282051282051282, 0.05263157894736842, 0.02702702702702703, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7857142857142856, 'translation_length': 39, 'reference_length': 14} Rouge: {'rouge1': 0.163265306122449, 'rouge2': 0.0851063829787234, 'rougeL': 0.163265306122449, 'rougeLsum': 0.163265306122449} Sari: {'sari': 43.9083820662768} Flesh Reading Ease: 86.8 ---------------------------------------- Source: ['Wie können wir unsere armen Kinder ernähren, da wir für uns selbst nichts mehr haben?'] Prediction: ['Wie können wir unsere armen Kinder ernähren, wie wir für uns selbst nichts mehr haben haben können?\nWie können wir unsere armen Kinder ernähren?'] Label: [['Wir haben nichts zu essen für meine armen Kinder.']] Sacrebleu: {'score': 3.4901807086831904, 'counts': [5, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [18.51851851851852, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.18518518518518517, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7, 'translation_length': 27, 'reference_length': 10} Rouge: {'rouge1': 0.35, 'rouge2': 0.10526315789473684, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 38.99535423925668} Flesh Reading Ease: 68.55 ---------------------------------------- Source: ['Wie er sich nun abends im Bette Gedanken machte und sich vor Sorgen herumwälzte, seufzte er und sprach zu seiner Frau:'] Prediction: ['Ein Mann hat sich in einem Gedanken in der Nacht auf Sonntag in die Schweiz geschickt.\nEr wurde nun im Bette Gedanken herumwälzt.\nNun sprach er zu seiner Frau: Er war ein Bette Gedanken.'] Label: [['Der Vater fragt seine neue Frau: Deshalb macht sich der Vater große Sorgen.']] Sacrebleu: {'score': 2.4371431437250504, 'counts': [5, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.533333333333333, 'translation_length': 38, 'reference_length': 15} Rouge: {'rouge1': 0.12244897959183673, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 39.111111111111114} Flesh Reading Ease: 86.8 ---------------------------------------- Source: ['Er hatte wenig zu beißen und zu brechen, und einmal, als große Teuerung ins Land kam, konnte er auch das tägliche Brot nicht mehr schaffen.'] Prediction: ['Ein täglicher Brot hatte in einem großen Teuerung ins Land einen Täter gebrochen.\nDer Täter war wenig zu beißen und zu brechen, und einmal, als große Teuerung ins Land kam, konnte er auch das tägliche Brot nicht mehr schaffen.'] Label: [['Und die Familie hat nur wenig zu essen.\nDie Familie ist arm.']] Sacrebleu: {'score': 1.9792649377110934, 'counts': [4, 1, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [9.090909090909092, 2.3255813953488373, 1.1904761904761905, 0.6097560975609756], 'bp': 1.0, 'sys_len': 44, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.023255813953488372, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.142857142857143, 'translation_length': 44, 'reference_length': 14} Rouge: {'rouge1': 0.10344827586206896, 'rouge2': 0.03571428571428571, 'rougeL': 0.06896551724137931, 'rougeLsum': 0.06896551724137931} Sari: {'sari': 35.80246913580247} Flesh Reading Ease: 66.9 ---------------------------------------- Source: ['das Bübchen hieß Hänsel und das Mädchen Gretel.'] Prediction: ['Das Bübchen hieß Hänsel und das Mädchen Gretel.\nDas hat eine neue Frau mit dem Bübchen geschickt.\nDas hat sie auf eine neue Frau geschickt.'] Label: [['Und das Mädchen heißt Gretel.\nDer Junge heißt Hänsel.']] Sacrebleu: {'score': 4.1798820492168565, 'counts': [6, 2, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [21.428571428571427, 7.407407407407407, 1.9230769230769231, 1.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.07407407407407407, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5454545454545454, 'translation_length': 28, 'reference_length': 11} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.2, 'rougeL': 0.23809523809523808, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 46.75224466891133} Flesh Reading Ease: 89.8 ---------------------------------------- Source: ['Vor einem großen Walde wohnte ein armer Holzhacker mit seiner Frau und seinen zwei Kindern;'] Prediction: ['Ein armer Holzhacker wurde in einem großen Walde in der Nähe des Kantons Bern mit seiner Frau und seinen zwei Kindern verletzt.\nDer Holzhacker wurde mit seiner Frau und seinen zwei Kindern verletzt.'] Label: [['Der Vater hat 2 Kinder: Eine Familie lebt an einem großen Wald.']] Sacrebleu: {'score': 2.5115381601394384, 'counts': [4, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 35, 'reference_length': 14} Rouge: {'rouge1': 0.16666666666666666, 'rouge2': 0.08695652173913045, 'rougeL': 0.12500000000000003, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 38.658008658008654} Flesh Reading Ease: 69.9 ---------------------------------------- Source: ['der Wolf ist tot!« und tanzten mit ihrer Mutter vor Freude um den Brunnen herum. »Der Wolf ist tot! Als die sieben Geißlein das sahen, da kamen sie herbeigelaufen, riefen laut:'] Prediction: ['Einige Geißlein sind in den vergangenen Tagen in der Schweiz tot.\nSie sind sieben von ihrer Mutter gefunden und tanzten um den Brunnen herum.\nDer Wolf ist tot!\nAls die sieben Geißlein das sahen, da kamen sie herbeigelaufen, riefen laut:'] Label: [['Der Wolf ist tot!\nUnd rufen: Der Wolf ist tot!\nDie Ziegen∙mutter und die Ziegen∙kinder tanzen um den Brunnen.\nUnd die Ziegen∙mutter läuft mit.\nDie Ziegen∙kinder laufen zum Brunnen.\nDie Ziegen∙kinder sehen das.']] Sacrebleu: {'score': 11.644216046403804, 'counts': [15, 6, 4, 2], 'totals': [46, 45, 44, 43], 'precisions': [32.608695652173914, 13.333333333333334, 9.090909090909092, 4.651162790697675], 'bp': 1.0, 'sys_len': 46, 'ref_len': 40} Bleu: {'bleu': 0.11644216046403798, 'precisions': [0.32608695652173914, 0.13333333333333333, 0.09090909090909091, 0.046511627906976744], 'brevity_penalty': 1.0, 'length_ratio': 1.15, 'translation_length': 46, 'reference_length': 40} Rouge: {'rouge1': 0.3209876543209877, 'rouge2': 0.12658227848101267, 'rougeL': 0.22222222222222224, 'rougeLsum': 0.3209876543209877} Sari: {'sari': 37.22243308178361} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Und als er an den Brunnen kam und sich über das Wasser bückte und trinken wollte, da zogen ihn die schweren Steine hinein und er mußte jämmerlich ersaufen.'] Prediction: ['Ein Brunnen-Einbruch ist in den Brunnen gefunden und trinken.\nDer Brunnen-Einbruch war über das Wasser bückte und trinken wollte und zogen ihn die schweren Steine hinein.'] Label: [['Und ertrinkt.\nDer Wolf fällt in den Brunnen.\nDie Steine ziehen den Wolf in den Brunnen.\nAber die Steine im Bauch vom Wolf sind schwer.\nDeshalb lehnt sich der Wolf über den Rand vom Brunnen.\nDer Wolf will aus dem Brunnen trinken.']] Sacrebleu: {'score': 3.910104520882803, 'counts': [10, 4, 1, 0], 'totals': [28, 27, 26, 25], 'precisions': [35.714285714285715, 14.814814814814815, 3.8461538461538463, 2.0], 'bp': 0.48954165955695317, 'sys_len': 28, 'ref_len': 48} Bleu: {'bleu': 0.0, 'precisions': [0.35714285714285715, 0.14814814814814814, 0.038461538461538464, 0.0], 'brevity_penalty': 0.48954165955695317, 'length_ratio': 0.5833333333333334, 'translation_length': 28, 'reference_length': 48} Rouge: {'rouge1': 0.3055555555555556, 'rouge2': 0.057142857142857134, 'rougeL': 0.19444444444444448, 'rougeLsum': 0.3055555555555556} Sari: {'sari': 40.71297431091245} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ["Ich meinte es wären sechs Geißlein so sind's lauter Wackerstein.«"] Prediction: ['Der Schweizer Wackerstein hat sechs Geißlein immer wieder geäussert.\nDer Geilteil seiner Wohnung hat sechs sechs Geißlein während seiner Wohnung seines Geilteilnehmens sechs sechs sechs Geißlein verkauft.'] Label: [['So wie Steine.\nDie Ziegen∙kinder sind schwer.']] Sacrebleu: {'score': 1.5301683686839007, 'counts': [2, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [6.896551724137931, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.06896551724137931, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2222222222222223, 'translation_length': 29, 'reference_length': 9} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 51.73611111111111} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['Als er aber anfing zu gehen und sich hin und her zu bewegen, so stießen die Steine in seinem Bauch aneinander und rappelten.'] Prediction: ['Ein Bauch-Rapper stieg in seinem Bauch aneinander und rappelte die Steine.\nAls er anfing zu gehen und sich hin und her zu bewegen, so stießen die Steine in seinem Bauch aneinander und rappelte die Steine.'] Label: [['Die Steine bewegen sich im Bauch vom Wolf.']] Sacrebleu: {'score': 1.4491339833989647, 'counts': [5, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.222222222222222, 'translation_length': 38, 'reference_length': 9} Rouge: {'rouge1': 0.22222222222222224, 'rouge2': 0.046511627906976744, 'rougeL': 0.17777777777777778, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 37.97313797313797} Flesh Reading Ease: 68.9 ---------------------------------------- Source: ['Als der Wolf endlich ausgeschlafen hatte, machte er sich auf die Beine, und weil ihm die Steine im Magen so großen Durst erregten, so wollte er zu einem Brunnen gehen und trinken.'] Prediction: ['Ein Wolf hatte sich auf die Beine im Magen so großen Durst erregten, weil er die Steine im Magen so großen Durst erregte, so wollte er zu einem Brunnen gehen und trinken.\nDer Wolf wollte sich auf die Beine und trinkte, weil er sich auf die Beine, und weil ihm die Steine im Magen so großen Durst erregte, so wollte er zu einem Brunnen gehen und trinken.'] Label: [['Der Wolf geht zum Brunnen.\nDie Steine im Bauch haben den Wolf durstig gemacht.\nDer Wolf hat Durst.\nNach einer Weile wacht der Wolf auf.']] Sacrebleu: {'score': 2.7147913610143637, 'counts': [10, 3, 1, 0], 'totals': [74, 73, 72, 71], 'precisions': [13.513513513513514, 4.109589041095891, 1.3888888888888888, 0.704225352112676], 'bp': 1.0, 'sys_len': 74, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.13513513513513514, 0.0410958904109589, 0.013888888888888888, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5517241379310347, 'translation_length': 74, 'reference_length': 29} Rouge: {'rouge1': 0.1894736842105263, 'rouge2': 0.06451612903225806, 'rougeL': 0.16842105263157897, 'rougeLsum': 0.1894736842105263} Sari: {'sari': 40.47936110685244} Flesh Reading Ease: 64.6 ---------------------------------------- Source: ['Dann nähte ihn die Alte in aller Geschwindigkeit wieder zu, daß er nichts merkte und sich nicht einmal regte.'] Prediction: ['Ein Mann nähte die Alte in aller Geschwindigkeit wieder zu, daß er nichts merkte und sich nicht einmal regte.\nDas hatte er nichts merkte und sich nicht einmal regte.'] Label: [['Der Wolf schläft weiter.\nDer Wolf merkt nichts.\nUnd die Ziegen∙mutter näht den Bauch vom Wolf zu.\nUnd die Ziegen∙mutter nimmt die Nadel.\nDie Ziegen∙mutter nimmt den Faden.']] Sacrebleu: {'score': 1.681194938544026, 'counts': [5, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [15.625, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 0.9692332344763441, 'sys_len': 32, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.15625, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9692332344763441, 'length_ratio': 0.9696969696969697, 'translation_length': 32, 'reference_length': 33} Rouge: {'rouge1': 0.1904761904761905, 'rouge2': 0.0, 'rougeL': 0.09523809523809525, 'rougeLsum': 0.15873015873015872} Sari: {'sari': 36.80555555555556} Flesh Reading Ease: 77.75 ---------------------------------------- Source: ['« Da schleppten die sieben Geißerchen in aller Eile die Steine herbei und steckten sie ihm in den Bauch, soviel sie hineinbringen konnten.'] Prediction: ['Eine Frau wurde in der Schweiz von einem Bauch in einem Bauch geschleppt.\nSie schleppte die Steine und steckten ihm in den Bauch.\nDie Frau war dabei, dass sie ihm hineinbringen konnten.'] Label: [['Und die Ziegen∙kinder legen die Steine in den Bauch vom Wolf.\nDie Ziegen∙kinder holen große Steine.']] Sacrebleu: {'score': 5.800148931346088, 'counts': [8, 4, 1, 0], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 11.428571428571429, 2.9411764705882355, 1.5151515151515151], 'bp': 1.0, 'sys_len': 36, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.11428571428571428, 0.029411764705882353, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 36, 'reference_length': 18} Rouge: {'rouge1': 0.2745098039215686, 'rouge2': 0.12244897959183673, 'rougeL': 0.23529411764705882, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 48.02836052836052} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['Die Alte aber sagte: »Jetzt geht und sucht Wackersteine, damit wollen wir dem gottlosen Tier den Bauch füllen, solange es noch im Schlafe liegt.'] Prediction: ['Wackersteine sucht den Bauch für den gottlosen Tier.\nDie Alte sagt: Wackersteine wollen den Bauch füllen.'] Label: [['Vielleicht wacht der Wolf gleich auf.\nBeeilt euch.\nDie Steine legen wir in den Bauch vom Wolf.\nAber die Ziegen∙mutter sagt: Holt schnell große Steine.']] Sacrebleu: {'score': 4.085073989931579, 'counts': [7, 3, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [36.8421052631579, 16.666666666666668, 2.9411764705882355, 1.5625], 'bp': 0.560488043568919, 'sys_len': 19, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.3684210526315789, 0.16666666666666666, 0.0, 0.0], 'brevity_penalty': 0.560488043568919, 'length_ratio': 0.6333333333333333, 'translation_length': 19, 'reference_length': 30} Rouge: {'rouge1': 0.17777777777777776, 'rouge2': 0.04651162790697675, 'rougeL': 0.17777777777777776, 'rougeLsum': 0.17777777777777776} Sari: {'sari': 49.965054913707036} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Da herzten sie ihre liebe Mutter und hüpften wie ein Schneider, der Hochzeit hält.'] Prediction: ['Eine Frau hat ihre liebe Mutter und ihre liebe Mutter verhaftet.\nSie hält ihren Hochzeit hält und hüpften wie ein Schneider, der Hochzeit hält.\nDie Frau hält ihren Hochzeit hält und hüpfte wie ein Schneider, der Hochzeit hält.'] Label: [['Und die Ziegen∙kinder tanzen.\nDie Ziegen∙kinder freuen sich.\nDie Ziegen∙mutter umarmt ihre Ziegen∙kinder.']] Sacrebleu: {'score': 2.1432834272474053, 'counts': [5, 1, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [11.627906976744185, 2.380952380952381, 1.2195121951219512, 0.625], 'bp': 1.0, 'sys_len': 43, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.11627906976744186, 0.023809523809523808, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6875, 'translation_length': 43, 'reference_length': 16} Rouge: {'rouge1': 0.12698412698412698, 'rouge2': 0.0, 'rougeL': 0.06349206349206349, 'rougeLsum': 0.12698412698412698} Sari: {'sari': 38.03969863807592} Flesh Reading Ease: 79.55 ---------------------------------------- Source: ['Dann schnitt sie dem Ungetüm den Wanst auf und kaum hatte sie einen Schnitt gethan, so streckte schon ein Geißlein den Kopf heraus, und als sie weiter schnitt, so sprangen nacheinander alle sechs heraus und waren noch alle am Leben, und hatten nicht einmal Schaden gelitten, denn das Ungetüm hatte sie in der Gier ganz hinuntergeschluckt.'] Prediction: ['Eine Frau hatte einen Wanst aufgefunden, als sie weiter schnitt, und sprangen alle sechs heraus und waren noch alle am Leben.\nDie Frau hatte sie in der Gier ganz hinuntergeschluckt, denn das Ungetüm hatte sie in der Gier ganz hinuntergeschluckt.'] Label: [['Die Ziegen∙kinder klettern aus dem Bauch vom Wolf.\nUnd alle Ziegen∙kinder leben.\nAlle Ziegen∙kinder bewegen sich.\nDie Ziegen∙mutter sieht das 1.\nZiegen∙kind.\nUnd die Ziegen∙mutter schneidet den Bauch vom Wolf auf.\nDie Ziegen∙mutter nimmt jetzt die Schere.']] Sacrebleu: {'score': 2.0446749214858784, 'counts': [5, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [11.11111111111111, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0227272727272727, 'translation_length': 45, 'reference_length': 44} Rouge: {'rouge1': 0.16470588235294117, 'rouge2': 0.0, 'rougeL': 0.1176470588235294, 'rougeLsum': 0.16470588235294117} Sari: {'sari': 36.106346274141835} Flesh Reading Ease: 66.4 ---------------------------------------- Source: ['« Da mußte das Geißlein nach Hause laufen und Schere, Nadel und Zwirn holen.'] Prediction: ['Im Alter von 99 Jahren ist auf dem 23.\nJuni ein Geißlein in der Schweiz gestorben.\nDie Nadel, Schere, Nadel und Zwirn holen ihren Mann.\nNun wurde das Geißlein nach Hause laufen.'] Label: [['Das 7.\nZiegen∙kind holt diese Dinge.\nUnd einen Faden.\nUnd eine Nadel.\nDie Ziegen∙mutter sagt zum 7.\nZiegen∙kind: Hol mir eine Schere.']] Sacrebleu: {'score': 2.6510202602018675, 'counts': [7, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [18.42105263157895, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.18421052631578946, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3103448275862069, 'translation_length': 38, 'reference_length': 29} Rouge: {'rouge1': 0.16949152542372883, 'rouge2': 0.0, 'rougeL': 0.06779661016949153, 'rougeLsum': 0.13559322033898305} Sari: {'sari': 36.67028551462514} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['»Ach Gott,« dachte sie, »sollten meine armen Kinder, die er zum Abendbrot hinuntergewürgt hat, noch am Leben sein?'] Prediction: ['Eine Frau, die am Abendbrot hinuntergewürgt hat, wurde noch am Leben sein, verkündet.\nSie war eine armene Kinder, die er zum Abendbrot hinuntergewürgt hat, noch am Leben sein.\nDie Frau wurde von ihm aufgefunden und ihnen aufgefunden.'] Label: [['Meine Ziegen∙kinder leben noch.\nDie Ziegen∙mutter denkt:']] Sacrebleu: {'score': 1.7995423963268318, 'counts': [3, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [6.666666666666667, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 45, 'reference_length': 9} Rouge: {'rouge1': 0.163265306122449, 'rouge2': 0.0, 'rougeL': 0.12244897959183673, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 36.71828579916816} Flesh Reading Ease: 62.4 ---------------------------------------- Source: ['Sie betrachtete ihn von allen Seiten und sah, daß in seinem angefüllten Bauch sich etwas regte und zappelte.'] Prediction: ['Ein Mann hatte sich in seinem angefüllten Bauch sich etwas regte und zappelte.\nDie Frau war mit seinem angefüllten Bauch zu sehen, da sie sich etwas regte und zappelte.'] Label: [['Der Bauch vom Wolf bewegt sich.\nDer Wolf hat einen dicken Bauch.\nDie Ziegen∙mutter guckt sich den Wolf genau an:']] Sacrebleu: {'score': 3.1731768853938878, 'counts': [7, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [21.875, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 1.0, 'sys_len': 32, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.21875, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.391304347826087, 'translation_length': 32, 'reference_length': 23} Rouge: {'rouge1': 0.1923076923076923, 'rouge2': 0.0, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.1923076923076923} Sari: {'sari': 37.81156156156156} Flesh Reading Ease: 71.9 ---------------------------------------- Source: ['Als sie auf die Wiese kam, so lag da der Wolf an dem Baum und schnarchte, daß die Äste zitterten.'] Prediction: ['Eine Äste wurde auf die Wiese von einem Baum in der Nähe des Kantons Bern verletzt.\nSie schnarchte und schnarchte, da sie die Äste zitterten.\nDie Äste schnarchten sich und schnarchten, da sie schnarchten.'] Label: [['Und der Wolf schnarcht laut.\nDer Wolf schläft.\nDer Wolf liegt unter einem Baum.\nDie Ziegen∙mutter sieht den Wolf:']] Sacrebleu: {'score': 3.068466632962121, 'counts': [7, 2, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [17.94871794871795, 5.2631578947368425, 1.3513513513513513, 0.6944444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.1794871794871795, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6956521739130435, 'translation_length': 39, 'reference_length': 23} Rouge: {'rouge1': 0.17857142857142855, 'rouge2': 0.03703703703703704, 'rougeL': 0.10714285714285714, 'rougeLsum': 0.17857142857142855} Sari: {'sari': 37.29441150636803} Flesh Reading Ease: 75.1 ---------------------------------------- Source: ['Endlich ging sie in ihrem Jammer hinaus und das jüngste Geißlein lief mit.'] Prediction: ['Eine junge Frau wurde in ihrem Jammer hinaus und das jüngste Geißlein lief mit.\nDie Frau war seit einigen Tagen in ihrem Jammer hinaus und lief mit.\nDie Frau war seit einigen Tagen in ihrem Jammer hinaus und lief mit.'] Label: [['Und das 7.\nZiegen∙kind geht mit.\nDie Ziegen∙mutter geht nach draußen.']] Sacrebleu: {'score': 3.772657799190421, 'counts': [6, 2, 1, 0], 'totals': [43, 42, 41, 40], 'precisions': [13.953488372093023, 4.761904761904762, 2.4390243902439024, 1.25], 'bp': 1.0, 'sys_len': 43, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.13953488372093023, 0.047619047619047616, 0.024390243902439025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0714285714285716, 'translation_length': 43, 'reference_length': 14} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.07407407407407408, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 42.962885544407285} Flesh Reading Ease: 78.95 ---------------------------------------- Source: ['Da könnt ihr denken, wie sie über ihre armen Kinder geweint hat.'] Prediction: ['Eine Frau hat über ihre armen Kinder geweint.\nSie könnt ihr denken, wie sie über ihre armen Kinder geweint hat.'] Label: [['Jetzt weint auch die Ziegen∙mutter.']] Sacrebleu: {'score': 1.6466642419110007, 'counts': [1, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [4.3478260869565215, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.043478260869565216, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8333333333333335, 'translation_length': 23, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.523809523809526} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['« Sie holte es heraus und es erzählte ihr, daß der Wolf gekommen wäre und die anderen alle gefressen hätte. »Liebe Mutter, ich stecke im Uhrkasten.'] Prediction: ['Im Uhrkasten stecke Mutter (30) ihre Frau (27) im Uhrkasten.\nSie war dabei von einem Wolf gekommen und wurde von der Wolf gefressen.\nDie Frau war dabei, dass ihr Wolf gekommen wäre und die anderen alle alle gefressen hätten.'] Label: [['Und der Wolf hat die anderen Ziegen∙kinder gefressen.\nUnd das 7.\nZiegen∙kind sagt: Der Wolf war hier.\nUnd findet das 7.\nZiegen∙kind.\nDa guckt die Ziegen∙mutter in den Uhren∙kasten.\nIch bin hier.\nLiebe Ziegen·mutter.']] Sacrebleu: {'score': 3.0593389570270797, 'counts': [10, 3, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [21.27659574468085, 6.521739130434782, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.2127659574468085, 0.06521739130434782, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0930232558139534, 'translation_length': 47, 'reference_length': 43} Rouge: {'rouge1': 0.271604938271605, 'rouge2': 0.05063291139240506, 'rougeL': 0.17283950617283952, 'rougeLsum': 0.24691358024691357} Sari: {'sari': 40.755887509388785} Flesh Reading Ease: 73.4 ---------------------------------------- Source: ['Endlich als sie an das jüngste kam, da rief eine feine Stimme:'] Prediction: ['Eine Frau aus dem Kanton Bern kam an einem jüngsten jüngste, da rief eine feine Stimme.\nDie Frau rief eine feine Stimme.'] Label: [['Plötzlich ruft eine Stimme:']] Sacrebleu: {'score': 1.7911710595643588, 'counts': [2, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [8.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.08, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 25, 'reference_length': 5} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.0, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 33.40277777777778} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['Sie rief sie nacheinander bei Namen, aber niemand antwortete.'] Prediction: ['Eine Frau war nicht nach Namen, sondern nach der Tat nach der Tat gegen die Polizei.\nDie Frau war nach der Tat nach Angaben gefragt, sie rief sie nacheinander bei Namen.'] Label: [['Aber die Ziegen∙kinder antworten nicht.\nUnd die Ziegen∙mutter ruft ihre Ziegen∙kinder.']] Sacrebleu: {'score': 1.493369524819332, 'counts': [4, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6923076923076925, 'translation_length': 35, 'reference_length': 13} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.08888888888888889, 'rougeLsum': 0.08888888888888889} Sari: {'sari': 33.99470899470899} Flesh Reading Ease: 82.6 ---------------------------------------- Source: ['Sie suchte ihre Kinder, aber nirgends waren sie zu finden.'] Prediction: ['Eine Frau suchte ihre Kinder, aber nirgends waren sie zu finden.\nSie suchte ihre Kinder, aber nirgends waren sie zu finden.'] Label: [['Die Ziegen∙mutter sucht ihre Ziegen∙kinder.']] Sacrebleu: {'score': 1.7911710595643588, 'counts': [2, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [8.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.08, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.166666666666667, 'translation_length': 25, 'reference_length': 6} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.0, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 35.8974358974359} Flesh Reading Ease: 75.9 ---------------------------------------- Source: ['Die Hausthür stand sperrweit auf: Tisch, Stühle und Bänke waren umgeworfen, die Waschschüssel lag in Scherben, Decke und Kissen waren aus dem Bett gezogen. Ach, was mußte sie da erblicken!'] Prediction: ['In der Hausthür in der Schweiz wurden Waschschüssel und Kissen aus dem Bett gezogen.\nDas Bett wurde mit der Hausthür zu einem grossen Aufgebot gesperrt.\nDie Hausthür stand sperrweit auf: Tisch, Stühle und Bänke waren umgeworfen, die Waschschüssel lag in Scherben, Decke und Kissen waren aus dem Bett gezogen.'] Label: [['Ein Stuhl ist kaputt.\nScherben liegen auf dem Boden.\nDer Tisch ist umgefallen.\nDie Ziegen∙mutter sieht: Die Ziegen∙mutter geht vorsichtig ins Haus.\nUnd erschrickt: Die Tür vom Haus ist offen.']] Sacrebleu: {'score': 1.8900924361305647, 'counts': [9, 1, 0, 0], 'totals': [56, 55, 54, 53], 'precisions': [16.071428571428573, 1.8181818181818181, 0.9259259259259259, 0.4716981132075472], 'bp': 1.0, 'sys_len': 56, 'ref_len': 37} Bleu: {'bleu': 0.0, 'precisions': [0.16071428571428573, 0.01818181818181818, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5135135135135136, 'translation_length': 56, 'reference_length': 37} Rouge: {'rouge1': 0.20224719101123598, 'rouge2': 0.0, 'rougeL': 0.11235955056179775, 'rougeLsum': 0.1797752808988764} Sari: {'sari': 38.184941920574104} Flesh Reading Ease: 70.1 ---------------------------------------- Source: ['Nicht lange danach kam die alte Geiß aus dem Walde wieder heim.'] Prediction: ['Eine alte Geiß aus dem Walde wurde wieder heim.\nDie alte Geiß kam aus dem Walde wieder heim.'] Label: [['Jetzt kommt die Ziegen∙mutter nach Hause.']] Sacrebleu: {'score': 1.9146030690102511, 'counts': [1, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [5.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.857142857142857, 'translation_length': 20, 'reference_length': 7} Rouge: {'rouge1': 0.08, 'rouge2': 0.0, 'rougeL': 0.08, 'rougeLsum': 0.08} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Als der Wolf seine Lust gebüßt hatte, trollte er sich fort, legte sich draußen auf der grünen Wiese unter einen Baum und fing an zu schlafen.'] Prediction: ['Ein Wolf hat seine Lust gebüßt und hatte sich fort.\nDer Wolf hatte sich draußen und fing an zu schlafen.'] Label: [['Und schläft ein.\nDer Wolf legt sich unter einen Baum.\nDer Wolf geht hinaus auf die Wiese.\nUnd müde.\nJetzt ist der Wolf satt.']] Sacrebleu: {'score': 5.5622027016116435, 'counts': [6, 2, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [27.272727272727273, 9.523809523809524, 5.0, 2.6315789473684212], 'bp': 0.7274705090242837, 'sys_len': 22, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.09523809523809523, 0.05, 0.0], 'brevity_penalty': 0.7274705090242835, 'length_ratio': 0.7586206896551724, 'translation_length': 22, 'reference_length': 29} Rouge: {'rouge1': 0.2916666666666667, 'rouge2': 0.043478260869565216, 'rougeL': 0.24999999999999994, 'rougeLsum': 0.24999999999999994} Sari: {'sari': 34.48244122566411} Flesh Reading Ease: 93.95 ---------------------------------------- Source: ['eins nach dem andern schluckte er in seinen Rachen; Aber der Wolf fand sie alle und machte nicht langes Federlesen:'] Prediction: ['Ein Wolf schluckte in seinen Rachen und machte nicht langes Federlesen.\nDer Wolf fand sie alle und machte nicht langes Federlesen.'] Label: [['Also verschluckt der Wolf alle 6 Ziegen∙kinder.\nDer Wolf hat großen Hunger.\nDer Wolf findet 6 Ziegen∙kinder.']] Sacrebleu: {'score': 7.289334177359764, 'counts': [6, 2, 1, 0], 'totals': [23, 22, 21, 20], 'precisions': [26.08695652173913, 9.090909090909092, 4.761904761904762, 2.5], 'bp': 1.0, 'sys_len': 23, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.2608695652173913, 0.09090909090909091, 0.047619047619047616, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.15, 'translation_length': 23, 'reference_length': 20} Rouge: {'rouge1': 0.1951219512195122, 'rouge2': 0.05128205128205128, 'rougeL': 0.14634146341463414, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 40.750187634862556} Flesh Reading Ease: 70.05 ---------------------------------------- Source: ['nur das jüngste in dem Uhrkasten das fand er nicht.'] Prediction: ['Ein Mann hatte in der Nacht auf Sonntag einen Tötungsdelikt geschickt.\nEr fand nicht, dass er nicht geben konnte.\nDas hatte er nicht mehr geschickt.'] Label: [['Der Wolf guckt nämlich nicht in den Uhren∙kasten.\nAber das 7.\nZiegen·kind findet der Wolf nicht.']] Sacrebleu: {'score': 2.0929373635196202, 'counts': [7, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5263157894736843, 'translation_length': 29, 'reference_length': 19} Rouge: {'rouge1': 0.2222222222222222, 'rouge2': 0.0, 'rougeL': 0.17777777777777778, 'rougeLsum': 0.17777777777777778} Sari: {'sari': 54.74074074074075} Flesh Reading Ease: 89.8 ---------------------------------------- Source: ['Das eine sprang unter den Tisch, das zweite ins Bett, das dritte in den Ofen, das vierte in die Küche, das fünfte in den Schrank, das sechste unter die Waschschüssel, das siebente in den Kasten der Wanduhr.'] Prediction: ['Eine Frau sprang unter den Tisch, das in den Ofen dritte in die Küche, das fünfte in den Schrank, das sechste unter die Waschschüssel, das siebente in den Kasten der Wanduhr.\nDie Frau sprang unter den Tisch, das dritte in den Ofen, das vierte in die Küche, das fünfte in den Schrank, das sechste unter die Waschschüssel, das siebente in den Kasten der Wanduhr.'] Label: [['Das 7.\nZiegen∙kind versteckt sich in der Wand∙uhr.\nDas 6.\nZiegen∙kind versteckt sich in der Wasch∙schüssel.\nDas 5.\nZiegen∙kind versteckt sich im Schrank.\nDas 4.\nZiegen∙kind versteckt sich in der Küche.\nDas 3.\nZiegen∙kind versteckt sich im Ofen.\nDas 2.\nZiegen∙kind versteckt sich im Bett.\nDas 1.\nZiegen∙kind versteckt sich unter dem Tisch.']] Sacrebleu: {'score': 0.8953920480274995, 'counts': [12, 0, 0, 0], 'totals': [75, 74, 73, 72], 'precisions': [16.0, 0.6756756756756757, 0.3424657534246575, 0.1736111111111111], 'bp': 1.0, 'sys_len': 75, 'ref_len': 67} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1194029850746268, 'translation_length': 75, 'reference_length': 67} Rouge: {'rouge1': 0.2835820895522388, 'rouge2': 0.07575757575757576, 'rougeL': 0.1940298507462687, 'rougeLsum': 0.26865671641791045} Sari: {'sari': 35.02923976608187} Flesh Reading Ease: 66.1 ---------------------------------------- Source: ['Sie erschraken und wollten sich verstecken.'] Prediction: ['Eine Frau wollte sich verstecken.\nSie wollte sich verstecken.'] Label: [['Die Ziegen∙kinder verstecken sich im Haus: Und die Ziegen∙kinder haben große Angst.\nDie Ziegen∙kinder erschrecken ganz fürchterlich.']] Sacrebleu: {'score': 2.338604925845441, 'counts': [4, 0, 0, 0], 'totals': [11, 10, 9, 8], 'precisions': [36.36363636363637, 5.0, 2.7777777777777777, 1.5625], 'bp': 0.441233167759984, 'sys_len': 11, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.36363636363636365, 0.0, 0.0, 0.0], 'brevity_penalty': 0.441233167759984, 'length_ratio': 0.55, 'translation_length': 11, 'reference_length': 20} Rouge: {'rouge1': 0.1290322580645161, 'rouge2': 0.0, 'rougeL': 0.1290322580645161, 'rougeLsum': 0.06451612903225805} Sari: {'sari': 45.138888888888886} Flesh Reading Ease: 70.2 ---------------------------------------- Source: ['Wer aber hereinkam, das war der Wolf.'] Prediction: ['Der Wolf ist auf der Kippe von einem Wolf.\nDer Wolf war der Wolf, der sich auf der Kippe aufmerksam war.\nDer Wolf war der Wolf, der sich aufmerksam war.'] Label: [['Doch vor der Tür steht der böse Wolf.']] Sacrebleu: {'score': 2.5115381601394384, 'counts': [4, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.888888888888889, 'translation_length': 35, 'reference_length': 9} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.15, 'rougeLsum': 0.15} Sari: {'sari': 52.083333333333336} Flesh Reading Ease: 99.8 ---------------------------------------- Source: ['»Zeig uns erst deine Pfote, damit wir wissen, daß du unser liebes Mütterchen bist.« Da legte er die Pfote ins Fenster und als sie sahen, daß sie weiß war, so glaubten sie, es wäre alles wahr, was er sagte, und machten die Thür auf.'] Prediction: ['Ein Mann machte in Mütterchen eine Pfote.\nDer Thür machte die Thür auf.'] Label: [['Und die Ziegen∙kinder machen die Tür auf.\nDie Ziegen∙kinder freuen sich.\nDie Ziegen∙kinder denken: Das ist unsere Ziegen∙mutter.\nDie Ziegen∙kinder sehen eine weiße Pfote.\nDer Wolf hält seine Pfote vor das Fenster.\nAber zeig uns erst deine Pfote.']] Sacrebleu: {'score': 1.810807929886382, 'counts': [7, 3, 1, 0], 'totals': [15, 14, 13, 12], 'precisions': [46.666666666666664, 21.428571428571427, 7.6923076923076925, 4.166666666666667], 'bp': 0.1353352832366127, 'sys_len': 15, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.4666666666666667, 0.21428571428571427, 0.07692307692307693, 0.0], 'brevity_penalty': 0.1353352832366127, 'length_ratio': 0.3333333333333333, 'translation_length': 15, 'reference_length': 45} Rouge: {'rouge1': 0.19354838709677416, 'rouge2': 0.06666666666666667, 'rougeL': 0.09677419354838708, 'rougeLsum': 0.19354838709677416} Sari: {'sari': 39.78159825183635} Flesh Reading Ease: 85.75 ---------------------------------------- Source: ['Nun ging der Bösewicht zum drittenmal zu der Hausthür, klopfte an und sprach: »Macht mir auf, Kinder, euer liebes Mütterchen ist heimgekommen und hat jedem von euch etwas aus dem Walde mitgebracht.'] Prediction: ['Einige Tage nach der Hausthür in der Nähe von Mütterchen ist am Sonntag ein Bösewicht aus dem Walde mitgebracht.\nEinige Tage nach dem Walde klopfte an und sprach: "Macht mir auf, Kinder, euer liebes Mütterchen ist heimgekommen".'] Label: [['Ich habe Geschenke für euch.\nMacht die Tür auf.\nUnd ruft: Liebe Kinder.\nDer Wolf klopft an die Tür.\nSo geht der Wolf wieder zum Haus von den Ziegen∙kindern.']] Sacrebleu: {'score': 1.4413752619313158, 'counts': [9, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [20.454545454545453, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.20454545454545456, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2571428571428571, 'translation_length': 44, 'reference_length': 35} Rouge: {'rouge1': 0.23999999999999996, 'rouge2': 0.0, 'rougeL': 0.10666666666666667, 'rougeLsum': 0.23999999999999996} Sari: {'sari': 35.93508056078678} Flesh Reading Ease: 56.2 ---------------------------------------- Source: ['Da fürchtete sich der Müller und machte ihm die Pfote weiß.'] Prediction: ['Ein Mann fürchtete sich in der Schweiz mit einem Pfote.\nDer Müller machte ihm die Pfote weiß.\nDer Mann fürchtete sich und machte sich die Pfote weiß.'] Label: [['Deshalb macht der Müller weißes Mehl auf die Pfote vom Wolf.\nJetzt hat der Müller Angst.']] Sacrebleu: {'score': 3.2677968802443296, 'counts': [6, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [20.0, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 30, 'reference_length': 18} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.1276595744680851, 'rougeL': 0.24489795918367346, 'rougeLsum': 0.24489795918367346} Sari: {'sari': 41.875} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['« Der Müller dachte, »der Wolf will einen betrügen« und weigerte sich, aber der Wolf sprach: »Wenn du es nicht thust, so fresse ich dich.«'] Prediction: ['Der Müller sprach, dass es nicht thust, so fresse ich dich dich.\nDer Wolf sprach: "Wenn du es nicht thust, so fresse ich dich dich".'] Label: [['Oder ich fresse dich!\nUnd sagt: Mach weißes Mehl auf meine Pfote.\nDer Wolf ärgert sich.\nIch helfe dir nicht.\nDer Müller antwortet: Du bist der böse Wolf.']] Sacrebleu: {'score': 6.025781665688239, 'counts': [11, 3, 1, 0], 'totals': [33, 32, 31, 30], 'precisions': [33.333333333333336, 9.375, 3.225806451612903, 1.6666666666666667], 'bp': 0.9411939401248326, 'sys_len': 33, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.09375, 0.03225806451612903, 0.0], 'brevity_penalty': 0.9411939401248326, 'length_ratio': 0.9428571428571428, 'translation_length': 33, 'reference_length': 35} Rouge: {'rouge1': 0.42105263157894735, 'rouge2': 0.1090909090909091, 'rougeL': 0.17543859649122806, 'rougeLsum': 0.3508771929824561} Sari: {'sari': 40.227198803018474} Flesh Reading Ease: 103.15 ---------------------------------------- Source: ['»Streu mir weißes Mehl auf meine Pfote.'] Prediction: ['Am Mittwochabend wurde ein Mann auf der Suche gefunden.\nEr war mit seinem Mehl auf Pfote gefunden.\nDie Frau war mit seinem Mehl auf der Pfote gefunden.'] Label: [['Mach weißes Mehl auf meine Pfote.']] Sacrebleu: {'score': 2.952787808378777, 'counts': [4, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.285714285714286, 'translation_length': 30, 'reference_length': 7} Rouge: {'rouge1': 0.17647058823529413, 'rouge2': 0.0625, 'rougeL': 0.17647058823529413, 'rougeLsum': 0.17647058823529413} Sari: {'sari': 22.499999999999996} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Und als ihm der Bäcker die Pfote bestrichen hatte, so lief er zum Müller und sprach:'] Prediction: ['Ein Bäcker hatte die Pfote bestrichen und hatte die Pfote bestrichen.\nDer Bäcker sprach von einem Müller und sprach von einem Müller.'] Label: [['Also sagt der Wolf zum Müller: Dann geht der Wolf zum Müller.\nDeshalb macht der Bäcker Teig auf die Pfote vom Wolf.']] Sacrebleu: {'score': 4.909289526088913, 'counts': [7, 2, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [29.166666666666668, 8.695652173913043, 2.272727272727273, 1.1904761904761905], 'bp': 0.9591894571091382, 'sys_len': 24, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.2916666666666667, 0.08695652173913043, 0.0, 0.0], 'brevity_penalty': 0.9591894571091382, 'length_ratio': 0.96, 'translation_length': 24, 'reference_length': 25} Rouge: {'rouge1': 0.35294117647058826, 'rouge2': 0.20408163265306126, 'rougeL': 0.19607843137254902, 'rougeLsum': 0.35294117647058826} Sari: {'sari': 49.93055555555555} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['« Da lief der Wolf zu einem Bäcker und sprach: »Ich habe mich an den Fuß gestoßen, streich mir Teig darüber.«'] Prediction: ['Der Wolf hatte am Sonntag einen Bäcker auf einen Fuß gestoßen.\nDer Wolf sprach von der Wolf und sprach von den Bäcker.'] Label: [['Mach mir Teig auf meine Pfote.\nMeine Pfote tut weh.\nDer Wolf sagt zum Bäcker: Der Wolf geht zum Bäcker.']] Sacrebleu: {'score': 9.165852474742529, 'counts': [9, 4, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [37.5, 17.391304347826086, 4.545454545454546, 2.380952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.375, 0.17391304347826086, 0.045454545454545456, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 24, 'reference_length': 24} Rouge: {'rouge1': 0.3829787234042554, 'rouge2': 0.17777777777777778, 'rougeL': 0.3404255319148936, 'rougeLsum': 0.3829787234042554} Sari: {'sari': 57.878787878787875} Flesh Reading Ease: 92.95 ---------------------------------------- Source: ['Aber der Wolf hatte seine schwarze Pfote in das Fenster gelegt, das sahen die Kinder und riefen: »Wir machen nicht auf, unsere Mutter hat keinen schwarzen Fuß wie du;'] Prediction: ['Eine schwarze Pfote in einem Fenster in der Nähe des Kantons Bern hatte eine Kinder-Kollegen mit ihrem Mann geschickt.\nDer Mann sahen die Kinder und riefen die Kinder.\nDie Mutter hat keinen schwarzen Fuß wie du.'] Label: [['Deine Pfote ist schwarz.\nUnsere Ziegen∙mutter hat eine weiße Pfote.\nDu bist nicht unsere Ziegen∙mutter.\nDeshalb rufen die Ziegen∙kinder: Und die Ziegen∙kinder sehen eine schwarze Pfote.\nDie Ziegen∙kinder gucken aus dem Fenster.']] Sacrebleu: {'score': 3.43554045043224, 'counts': [11, 2, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [28.205128205128204, 5.2631578947368425, 1.3513513513513513, 0.6944444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.28205128205128205, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0263157894736843, 'translation_length': 39, 'reference_length': 38} Rouge: {'rouge1': 0.39473684210526316, 'rouge2': 0.10810810810810811, 'rougeL': 0.21052631578947367, 'rougeLsum': 0.3684210526315789} Sari: {'sari': 38.93875424851302} Flesh Reading Ease: 68.55 ---------------------------------------- Source: ['Dann kam er zurück, klopfte an die Hausthür und rief: »Macht auf, ihr lieben Kinder, eure Mutter ist da und hat jedem von euch etwas mitgebracht.«'] Prediction: ['Ein Mann hat eine Hausthür in der Nähe von einem März mitgebracht.\nEr klopfte und rief, dass er sich auf eine Kinder lieben.\nDer März hatte euch etwas mitgebracht.'] Label: [['Ich habe Geschenke für euch.\nMacht die Tür auf.\nUnd ruft: Liebe Kinder.\nDer Wolf klopft an die Tür.\nDann geht der Wolf wieder zum Haus von den Ziegen∙kindern.']] Sacrebleu: {'score': 3.0791478040159106, 'counts': [9, 1, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [27.272727272727273, 3.125, 1.6129032258064515, 0.8333333333333334], 'bp': 0.9411939401248326, 'sys_len': 33, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.03125, 0.0, 0.0], 'brevity_penalty': 0.9411939401248326, 'length_ratio': 0.9428571428571428, 'translation_length': 33, 'reference_length': 35} Rouge: {'rouge1': 0.24242424242424243, 'rouge2': 0.0, 'rougeL': 0.12121212121212122, 'rougeLsum': 0.24242424242424243} Sari: {'sari': 35.30311910843519} Flesh Reading Ease: 82.55 ---------------------------------------- Source: ['die aß er und machte damit seine Stimme fein.'] Prediction: ['Ein Mann aus der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der Nähe der'] Label: [['Der Wolf weiß nämlich: Kreide macht die Stimme hell.\nDer Wolf isst die Kreide.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [226, 225, 224, 223], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 226, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 13.294117647058824, 'translation_length': 226, 'reference_length': 17} Rouge: {'rouge1': 0.017045454545454544, 'rouge2': 0.0, 'rougeL': 0.017045454545454544, 'rougeLsum': 0.017045454545454544} Sari: {'sari': 57.02380952380953} Flesh Reading Ease: -133.76 ---------------------------------------- Source: ['« Da ging der Wolf fort zu einem Krämer und kaufte sich ein großes Stück Kreide;'] Prediction: ['Im Alter von 99 Jahren ist ein Kreide in der Nähe von Kreid (31) gestorben.\nDer Wolf war zu einem Krämer und kaufte sich ein großes Stück Kreide.\nNun wurde der Wolf von einem Krämer verletzt.'] Label: [['Der Wolf kauft ein großes Stück Kreide.\nDer Wolf geht in einen Laden.']] Sacrebleu: {'score': 11.85461069741113, 'counts': [10, 6, 4, 2], 'totals': [41, 40, 39, 38], 'precisions': [24.390243902439025, 15.0, 10.256410256410257, 5.2631578947368425], 'bp': 1.0, 'sys_len': 41, 'ref_len': 15} Bleu: {'bleu': 0.11854610697411125, 'precisions': [0.24390243902439024, 0.15, 0.10256410256410256, 0.05263157894736842], 'brevity_penalty': 1.0, 'length_ratio': 2.7333333333333334, 'translation_length': 41, 'reference_length': 15} Rouge: {'rouge1': 0.3928571428571429, 'rouge2': 0.25925925925925924, 'rougeL': 0.35714285714285715, 'rougeLsum': 0.35714285714285715} Sari: {'sari': 52.54772629772629} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ['»Wir machen nicht auf,« riefen sie, »du bist unsere Mutter nicht, die hat eine feine und liebliche Stimme, aber deine Stimme ist rauh;'] Prediction: ['Eine Mutter hat eine feine und liebliche Stimme, aber deine Stimme ist rauh.\nDie Mutter hat eine feine und liebliche Stimme, aber deine Stimme ist rauh.'] Label: [['Und böse.\nAber deine Stimme ist dunkel.\nUnd freundlich.\nDie Stimme von unserer Ziegen∙mutter ist hell.\nDu bist nicht unsere Ziegen∙mutter.\nDeshalb rufen die Ziegen∙kinder:']] Sacrebleu: {'score': 6.321331511354372, 'counts': [8, 3, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 10.344827586206897, 3.5714285714285716, 1.8518518518518519], 'bp': 0.9672161004820058, 'sys_len': 30, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.10344827586206896, 0.03571428571428571, 0.0], 'brevity_penalty': 0.967216100482006, 'length_ratio': 0.967741935483871, 'translation_length': 30, 'reference_length': 31} Rouge: {'rouge1': 0.4, 'rouge2': 0.1132075471698113, 'rougeL': 0.29090909090909095, 'rougeLsum': 0.3636363636363637} Sari: {'sari': 45.960166351308736} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Aber die Geißerchen hörten an der rauhen Stimme, daß es der Wolf war.'] Prediction: ['In den Schweizerischen Geißerchen wurde ein Wolf gefunden.\nDer Wolf war auf der rauhen Stimme, da es der Wolf war.'] Label: [['Und böse.\nDie Stimme ist dunkel.']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.875, 'translation_length': 23, 'reference_length': 8} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 34.444444444444436} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Es dauerte nicht lange, so klopfte jemand an die Hausthür und rief: »Macht auf, ihr lieben Kinder, eure Mutter ist da und hat jedem von euch etwas mitgebracht.«'] Prediction: ['Eine Mutter hat euch etwas mitgebracht.\nDie Mutter hat ihr euch etwas mitgebracht.'] Label: [['Ich habe Geschenke für euch.\nMacht die Tür auf.\nEine Stimme ruft: Liebe Kinder.\nPlötzlich klopft es an der Tür.']] Sacrebleu: {'score': 1.9081142568337384, 'counts': [4, 0, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [26.666666666666668, 3.5714285714285716, 1.9230769230769231, 1.0416666666666667], 'bp': 0.513417119032592, 'sys_len': 15, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 0.513417119032592, 'length_ratio': 0.6, 'translation_length': 15, 'reference_length': 25} Rouge: {'rouge1': 0.16216216216216217, 'rouge2': 0.0, 'rougeL': 0.10810810810810811, 'rougeLsum': 0.16216216216216217} Sari: {'sari': 35.83721532091098} Flesh Reading Ease: 74.05 ---------------------------------------- Source: ['Da meckerte die Alte und machte sich getrost auf den Weg.'] Prediction: ['Ein Mann meckte sich in einem Weg auf den Weg und meckte sich getrost auf den Weg.\nDie Alte meckerte sich und machte sich getrost auf den Weg.'] Label: [['Und die Ziegen∙mutter geht in den Wald.\nDie Ziegen∙mutter ist beruhigt.']] Sacrebleu: {'score': 3.1221929756173616, 'counts': [5, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [16.666666666666668, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.1951219512195122, 'rouge2': 0.0, 'rougeL': 0.14634146341463414, 'rougeLsum': 0.14634146341463414} Sari: {'sari': 39.98737373737374} Flesh Reading Ease: 89.95 ---------------------------------------- Source: ['« Die Geißlein sagten: »Liebe Mutter, wir wollen uns schon in acht nehmen, ihr könnt ohne Sorge fortgehen.«'] Prediction: ['Die Geißlein in der Schweiz sind eine Mutter, die ihr nicht in acht nehmen könnt.\nSie wollen ihr schon in acht nehmen, ihr könnt ohne Sorge fortgehen.\nDie Geißlein sind eine Mutter, die ihn schon in acht nehmen könnt.'] Label: [['Wir passen gut auf uns auf.\nHab keine Angst.\nDie Ziegen∙kinder antworten: Liebe Mutter.']] Sacrebleu: {'score': 2.0446749214858784, 'counts': [5, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [11.11111111111111, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 45, 'reference_length': 18} Rouge: {'rouge1': 0.06779661016949153, 'rouge2': 0.0, 'rougeL': 0.06779661016949153, 'rougeLsum': 0.06779661016949153} Sari: {'sari': 31.998069498069498} Flesh Reading Ease: 85.1 ---------------------------------------- Source: ['Der Bösewicht verstellt sich oft, aber an seiner rauhen Stimme und an seinen schwarzen Füßen werdet ihr ihn gleich erkennen.'] Prediction: ['Der Bösewicht wird an seinen schwarzen Füßen werdet ihr gleich erkennen.\nDer Bösewicht verstellt sich oft an seiner rauhen Stimme und an seinen schwarzen Füßen.'] Label: [['Die Pfoten vom Wolf sind schwarz.\nUnd ihr erkennt den Wolf an seinen Pfoten: Und böse.\nDie Stimme vom Wolf ist dunkel.\nAber ihr erkennt den Wolf an seiner Stimme: Und der Wolf kann sich verkleiden.\nDer Wolf ist schlau.']] Sacrebleu: {'score': 2.604270611548455, 'counts': [10, 3, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [37.03703703703704, 11.538461538461538, 2.0, 1.0416666666666667], 'bp': 0.47676062866896984, 'sys_len': 27, 'ref_len': 47} Bleu: {'bleu': 0.0, 'precisions': [0.37037037037037035, 0.11538461538461539, 0.0, 0.0], 'brevity_penalty': 0.47676062866896995, 'length_ratio': 0.574468085106383, 'translation_length': 27, 'reference_length': 47} Rouge: {'rouge1': 0.3142857142857143, 'rouge2': 0.08823529411764705, 'rougeL': 0.20000000000000004, 'rougeLsum': 0.2285714285714286} Sari: {'sari': 38.18057689025431} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['wenn er hereinkommt, so frißt er euch alle mit Haut und Haar.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag zu sehen.\nIm Interview spricht der Mann über seine Worte und seine Worte und seine Worte.'] Label: [['Der Wolf will euch fressen.\nDer Wolf ist ein böses Tier.']] Sacrebleu: {'score': 0.5881113610200113, 'counts': [2, 0, 0, 0], 'totals': [73, 72, 71, 70], 'precisions': [2.73972602739726, 0.6944444444444444, 0.352112676056338, 0.17857142857142858], 'bp': 1.0, 'sys_len': 73, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.0273972602739726, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.615384615384615, 'translation_length': 73, 'reference_length': 13} Rouge: {'rouge1': 0.07228915662650602, 'rouge2': 0.0, 'rougeL': 0.04819277108433735, 'rougeLsum': 0.04819277108433735} Sari: {'sari': 63.07575757575757} Flesh Reading Ease: 68.45 ---------------------------------------- Source: ['Eines Tages wollte sie in den Wald gehen und Futter holen, da rief sie alle sieben herbei und sprach: »Liebe Kinder, ich will hinaus in den Wald, seid auf eurer Hut vor dem Wolf;'] Prediction: ['Ein Tage nach einem Wald in den Wald wollte sie alle sieben herbei und sprach: Sie wollte sieben herbei und sprach: Sie sei in den Wald gehen und Futter holte sieben herbei.\nDie Kinder seien auf eurer Hut vor dem Wolf.'] Label: [['Vielleicht kommt der Wolf.\nPasst gut auf euch auf!\nUnd die Ziegen∙mutter sagt zu ihren Ziegen∙kindern: Ich gehe in den Wald.\nEs ist ein schöner Morgen.']] Sacrebleu: {'score': 4.2800572429218295, 'counts': [8, 3, 1, 0], 'totals': [45, 44, 43, 42], 'precisions': [17.77777777777778, 6.818181818181818, 2.3255813953488373, 1.1904761904761905], 'bp': 1.0, 'sys_len': 45, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.17777777777777778, 0.06818181818181818, 0.023255813953488372, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4516129032258065, 'translation_length': 45, 'reference_length': 31} Rouge: {'rouge1': 0.2285714285714286, 'rouge2': 0.058823529411764705, 'rougeL': 0.1142857142857143, 'rougeLsum': 0.2285714285714286} Sari: {'sari': 39.501587366285335} Flesh Reading Ease: 77.6 ---------------------------------------- Source: ['Es war einmal eine alte Geiß, die hatte sieben junge Geißlein und hatte sie lieb, wie eine Mutter ihre Kinder lieb hat.'] Prediction: ['Eine alte Geiß hatte sieben junge Geißlein und hatte sie lieb, wie eine Mutter ihre Kinder lieb hat.\nEs war einmal eine alte Geiß, die hatte sieben junge Geißlein und hatte sie lieb, wie eine Mutter ihre Kinder lieb hat.'] Label: [['Die Ziegen∙mutter liebt ihre Ziegen∙kinder sehr.\nUnd die Geißlein sind die Kinder von der Ziege.\nEine Geiß hat 7 Geißlein.']] Sacrebleu: {'score': 1.4458035023047362, 'counts': [10, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [22.22222222222222, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9565217391304348, 'translation_length': 45, 'reference_length': 23} Rouge: {'rouge1': 0.3939393939393939, 'rouge2': 0.06250000000000001, 'rougeL': 0.24242424242424246, 'rougeLsum': 0.33333333333333337} Sari: {'sari': 38.13559322033899} Flesh Reading Ease: 66.4 ---------------------------------------- Source: ['Er führte sie in sein Reich, wo er mit Freude empfangen ward, und sie lebten noch lange glücklich und vergnügt.'] Prediction: ['Ein junges Jahr wurde in seinem Reich mit Freude empfangen.\nEr fuhr sie in seinem ganzen Reich und lebte noch lange glücklich und vergnügt.\nNun hat er sich mit Freude empfangen und lebte noch lange glücklich und vergnügt.'] Label: [['Und alle leben noch viele Jahre glücklich zusammen.\nDer Prinz nimmt Rapunzel und die beiden Kinder mit auf sein Schloss.']] Sacrebleu: {'score': 1.4014248243844825, 'counts': [6, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [14.634146341463415, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.14634146341463414, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8636363636363635, 'translation_length': 41, 'reference_length': 22} Rouge: {'rouge1': 0.19047619047619047, 'rouge2': 0.03278688524590164, 'rougeL': 0.19047619047619047, 'rougeLsum': 0.19047619047619047} Sari: {'sari': 36.5676359039191} Flesh Reading Ease: 73.7 ---------------------------------------- Source: ['So wanderte er einige Jahre im Elend umher und geriet endlich in die Wüstenei, wo Rapunzel mit den Zwillingen, die sie geboren hatte, einem Knaben und Mädchen, kümmerlich lebte.'] Prediction: ['Rapunzel (23) wurde in die Wüstenei von den Zwillingen eingeboren.\nEr war ein Jahr nach dem Elend geworden und geriet in die Wüstenei.\nNun wurde er von den Zwillingen einige Jahre lang geboren.'] Label: [['Die Kinder sind Zwillinge.\nUnd von dem Prinzen.\nDiese Kinder sind die Kinder von Rapunzel.\nNach vielen Jahren kommt der Prinz zu einem einsamen Ort.']] Sacrebleu: {'score': 1.6298158492058863, 'counts': [8, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [21.05263157894737, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3103448275862069, 'translation_length': 38, 'reference_length': 29} Rouge: {'rouge1': 0.26666666666666666, 'rouge2': 0.0, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.19999999999999998} Sari: {'sari': 45.83776595744681} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['Zwei von ihren Thränen aber benetzten seine Augen, da wurden sie wieder klar, und er konnte damit sehen wie sonst.'] Prediction: ['Zwei von ihren Thränen benetzten seine Augen, da wurden sie wieder klar, und er konnte damit sehen wie sonst.\nZwei von ihren Thränen benetzten seine Augen aber.'] Label: [['Plötzlich kann der Prinz wieder sehen: Dabei berühren 2 Tränen die Augen vom Prinzen.']] Sacrebleu: {'score': 1.696134390396339, 'counts': [4, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9375, 'translation_length': 31, 'reference_length': 16} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 35.8974358974359} Flesh Reading Ease: 72.9 ---------------------------------------- Source: ['da ging er darauf zu, und wie er herankam, erkannte ihn Rapunzel und fiel ihm um den Hals und weinte.'] Prediction: ['Ein Rapunzel hatte sich in der Nacht auf Sonntag in der Nacht auf Sonntag zu Gast geworden.\nDer Rapunzel war seit Jahren in den Nacht geworden.\nNun hat er seinen Rapunzel geschickt und erfiel ihm um den Hals und weinte.'] Label: [['Und Rapunzel weint vor Freude.\nRapunzel umarmt den Prinzen.\nUnd Rapunzel läuft auf den Prinzen zu.\nRapunzel erkennt den Prinzen.\nEs ist seine liebe Rapunzel.\nUnd der Prinz hat recht: Der Prinz geht auf die Stimme zu.']] Sacrebleu: {'score': 1.6106335644812864, 'counts': [14, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [32.55813953488372, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 0.9770125183673897, 'sys_len': 43, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.32558139534883723, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9770125183673897, 'length_ratio': 0.9772727272727273, 'translation_length': 43, 'reference_length': 44} Rouge: {'rouge1': 0.33333333333333337, 'rouge2': 0.0, 'rougeL': 0.1794871794871795, 'rougeLsum': 0.3076923076923077} Sari: {'sari': 39.15470494417863} Flesh Reading Ease: 78.95 ---------------------------------------- Source: ['Er vernahm eine Stimme, und sie däuchte ihm so bekannt:'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich gestellt.\nEr vernahm eine Stimme, und sie däuchte ihm so bekannt: Er vernahm eine Stimme.'] Label: [['Und der Prinz kennt diese Stimme.\nDie Stimme ist sehr schön.\nPlötzlich hört der Prinz eine Stimme.']] Sacrebleu: {'score': 4.85815973404977, 'counts': [7, 2, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [20.0, 5.882352941176471, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.058823529411764705, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 35, 'reference_length': 20} Rouge: {'rouge1': 0.22641509433962265, 'rouge2': 0.0392156862745098, 'rougeL': 0.15094339622641512, 'rougeLsum': 0.22641509433962265} Sari: {'sari': 40.51865580266702} Flesh Reading Ease: 82.6 ---------------------------------------- Source: ['Da irrte er blind im Walde umher, aß nichts als Wurzeln und Beeren, und that nichts als jammern und weinen über den Verlust seiner liebsten Frau.'] Prediction: ['Ein Mann hat seine liebsten Frau im Walde umher und wehrt sich über den Verlust seiner liebsten Frau.\nDas hatte er seinen über den Verlust seiner liebsten Frau verloren.'] Label: [['Und der Prinz hat seine liebe Rapunzel verloren.\nDer Prinz kann nicht mehr sehen.\nSo irrt der Prinz ohne Ziel durch den Wald:']] Sacrebleu: {'score': 3.7541625264671095, 'counts': [6, 2, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [19.35483870967742, 6.666666666666667, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1923076923076923, 'translation_length': 31, 'reference_length': 26} Rouge: {'rouge1': 0.19230769230769232, 'rouge2': 0.04, 'rougeL': 0.11538461538461538, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 38.98656898656899} Flesh Reading Ease: 77.75 ---------------------------------------- Source: ['das Leben brachte er davon, aber die Dornen, in die er fiel, zerstachen ihm die Augen.'] Prediction: ['Ein Mann hatte in seinem Leben seine Augen geschickt.\nDas Leben brachte er davon, aber die Dornen, in die er fiel, zerstachen ihm die Augen.'] Label: [['Aber der Prinz ist jetzt blind.\nDer Prinz überlebt den Sturz: Und bleibt in einem spitzen Dornen∙busch liegen.']] Sacrebleu: {'score': 1.633898440122165, 'counts': [3, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [10.0, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 30, 'reference_length': 21} Rouge: {'rouge1': 0.13636363636363635, 'rouge2': 0.0, 'rougeL': 0.0909090909090909, 'rougeLsum': 0.0909090909090909} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 79.75 ---------------------------------------- Source: ['« Der Königssohn geriet außer sich vor Schmerzen, und in der Verzweiflung sprang er den Turm herab;'] Prediction: ['Im Königssohn geriet ein Mann vor Schmerzen.\nDer Königssohn sprang in der Verzweiflung und sprang den Turm herab.'] Label: [['Der Prinz stürzt nach unten.\nDeshalb springt der Prinz aus dem Turm∙fenster.\nDer Prinz hat große Angst vor der Zauberin.']] Sacrebleu: {'score': 4.14428464062764, 'counts': [5, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 0.8607079764250579, 'sys_len': 20, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 0.8607079764250577, 'length_ratio': 0.8695652173913043, 'translation_length': 20, 'reference_length': 23} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.0, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.18604651162790697} Sari: {'sari': 45.4943783068783} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Für dich ist Rapunzel verloren, du wirst sie nie wieder erblicken.'] Prediction: ['Rapunzel verloren seine neue Single "Rapunzel" und wird sie nie wieder erblicken.\nDie Single wurde in der Radio-Section deiner 20-Minuten-App veröffentlicht.\nIm Interview mit Host Andrea über Rapunzel, die 20-Minuten-App sowie ihre Leute über ihre Leute und ihre Leute veröffentlicht.'] Label: [['Du wirst Rapunzel nie wieder sehen.\nUnd jetzt werde ich dich bestrafen.']] Sacrebleu: {'score': 1.8337651269639847, 'counts': [5, 1, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [10.0, 2.0408163265306123, 1.0416666666666667, 0.5319148936170213], 'bp': 1.0, 'sys_len': 50, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.02040816326530612, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5714285714285716, 'translation_length': 50, 'reference_length': 14} Rouge: {'rouge1': 0.13559322033898305, 'rouge2': 0.03508771929824561, 'rougeL': 0.13559322033898305, 'rougeLsum': 0.13559322033898305} Sari: {'sari': 34.50588837685611} Flesh Reading Ease: 38.0 ---------------------------------------- Source: ['»Aha,« rief sie höhnisch, »du willst die Frau Liebste holen, aber der schöne Vogel sitzt nicht mehr im Nest und singt nicht mehr, die Katze hat ihn geholt und wird dir auch noch die Augen auskratzen.'] Prediction: ['Im Nest von Zürich (D) ist ein schönes Vogel in der Schweiz gestorben.\nDer Vogel sitzt nicht mehr im Nest und singt nicht mehr.\nDer Vogel wird noch die Augen auskratzen.'] Label: [['Ich habe Rapunzel bestraft.\nUnd sagt: Deine schöne Rapunzel ist nicht mehr hier.']] Sacrebleu: {'score': 2.5785713549430027, 'counts': [5, 1, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [13.88888888888889, 2.857142857142857, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.1388888888888889, 0.02857142857142857, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 36, 'reference_length': 16} Rouge: {'rouge1': 0.21276595744680848, 'rouge2': 0.044444444444444446, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.1702127659574468} Sari: {'sari': 36.7063492063492} Flesh Reading Ease: 93.65 ---------------------------------------- Source: ['Der Königssohn stieg hinauf, aber er fand oben nicht seine liebste Rapunzel, sondern die Zauberin, die ihn mit bösen und giftigen Blicken ansah.'] Prediction: ['Der Rapunzel von Königssohn ist seit Jahren nicht mehr geworden.\nDer Zauberin fand ihn mit bösen und giftigen Blicken ansah.\nDie Zauberin fand ihn mit bösen und giftigen Blicken ansah.'] Label: [['Die Zauberin schaut den Prinzen böse an.\nDer Prinz sieht die Zauberin.\nDer Prinz klettert am Zopf nach oben.']] Sacrebleu: {'score': 3.7776418604808364, 'counts': [8, 2, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [24.242424242424242, 6.25, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.24242424242424243, 0.0625, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 33, 'reference_length': 22} Rouge: {'rouge1': 0.22641509433962265, 'rouge2': 0.0392156862745098, 'rougeL': 0.15094339622641512, 'rougeLsum': 0.22641509433962265} Sari: {'sari': 37.21395502645502} Flesh Reading Ease: 70.55 ---------------------------------------- Source: ['so ließ sie die Haare hinab.'] Prediction: ['Die 20-Minuten-App-App-App-App-App-App-App-App-App-App-App-App-App-App-App-App-App-App-App-Reality-Reality-Host Andrea überrascht ihre Lebenszeitungen.\nImmer mehr Leute, die sich über ihre Leistungen zu verkaufen, wie sie ihnen ihre Leistungen aufmerksam.'] Label: [['Und die Zauberin lässt den langen Zopf von Rapunzel hinunter.']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5454545454545454, 'translation_length': 28, 'reference_length': 11} Rouge: {'rouge1': 0.03571428571428571, 'rouge2': 0.0, 'rougeL': 0.03571428571428571, 'rougeLsum': 0.03571428571428571} Sari: {'sari': 65.0} Flesh Reading Ease: -70.86 ---------------------------------------- Source: ['»Rapunzel, Rapunzel, laß dein Haar herunter.« Denselben Tag aber, wo sie Rapunzel verstoßen hatte, machte abends die Zauberin die abgeschnittenen Flechten oben am Fensterhaken fest, und als der Königssohn kam und rief:'] Prediction: ['Der Königssohn hat eine Zauberin am Fensterhaken in den USA verstossen.\nDer Königssohn kam und rief.\nDer Zauberin hatte den Tag aber nicht mehr verstoßen, sondern auch die Zauberin.'] Label: [['Rapunzel: Lass deine Haare herunter!\nUnd ruft: Rapunzel!\nAm nächsten Tag kommt der Prinz zum Turm.']] Sacrebleu: {'score': 1.3355980882200826, 'counts': [2, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [6.0606060606060606, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.06060606060606061, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5714285714285714, 'translation_length': 33, 'reference_length': 21} Rouge: {'rouge1': 0.16326530612244897, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.16326530612244897} Sari: {'sari': 35.21825396825397} Flesh Reading Ease: 70.85 ---------------------------------------- Source: ['Und sie war so unbarmherzig, daß sie die arme Rapunzel in eine Wüstenei brachte, wo sie in großem Jammer und Elend leben mußte.'] Prediction: ['Rapunzel ist in eine Wüstenei in eine Wüstenei gefragt worden.\nDie arme Rapunzel war so unbarmherzig, da sie in großem Jammer und Elend leben mußte.\nDie Rapunzel war so unbarmherzig, da sie die arme Rapunzel in eine Wüstenei brachte, wo sie in großem Jammer und Elend leben mußte.'] Label: [['An diesem Ort muss Rapunzel jetzt arm und alleine leben.\nDeshalb schickt die Zauberin Rapunzel an einen einsamen Ort.\nDie Zauberin kann Rapunzel nicht verzeihen.']] Sacrebleu: {'score': 2.014497422069854, 'counts': [10, 1, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [18.51851851851852, 1.8867924528301887, 0.9615384615384616, 0.49019607843137253], 'bp': 1.0, 'sys_len': 54, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.18518518518518517, 0.018867924528301886, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9285714285714286, 'translation_length': 54, 'reference_length': 28} Rouge: {'rouge1': 0.175, 'rouge2': 0.0, 'rougeL': 0.175, 'rougeLsum': 0.175} Sari: {'sari': 36.84500827357971} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['In ihrem Zorne packte sie die schönen Haare der Rapunzel, schlug sie ein paarmal um ihre linke Hand, griff eine Schere mit der rechten, und ritsch, ratsch waren sie abgeschnitten, und die schönen Flechten lagen auf der Erde.'] Prediction: ['Eine Rapunzel-Rapperin wurde in ihrem Zusammenhang mit schönen Flechten geschlagen.\nDie Rapunzel-Rapperin ritschte ihre Schere mit der rechten, und ritschte ihre Flechten.\nDie Rapunzel-Rapperin wurde dabei von ihrem linzen Hand geschlagen.'] Label: [['Und die Zauberin schneidet Rapunzel den langen Zopf ab.\nDa nimmt die Zauberin eine Schere.']] Sacrebleu: {'score': 1.389736936231864, 'counts': [3, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0588235294117645, 'translation_length': 35, 'reference_length': 17} Rouge: {'rouge1': 0.24000000000000002, 'rouge2': 0.0, 'rougeL': 0.12000000000000001, 'rougeLsum': 0.2} Sari: {'sari': 36.099567099567096} Flesh Reading Ease: 41.0 ---------------------------------------- Source: ['»Ach, du gottloses Kind,« rief die Zauberin, »was muß ich von dir hören, ich dachte, ich hätte dich von aller Welt geschieden, und du hast mich doch betrogen!«'] Prediction: ['Ein Kind, der sich von aller Welt geschieden hatte, ist auf der Suche geworden.\nDer Kind war auf der Suche, der sich von aller Welt geschieden hatte, und hast mich doch betrogen.'] Label: [['Du hast mich betrogen.\nDu gehörst mir allein.\nDu darfst keine anderen Menschen sehen.\nUnd schreit: Was sagst du da?\nDie Zauberin ist sehr wütend.']] Sacrebleu: {'score': 3.0334290974252256, 'counts': [6, 2, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [15.789473684210526, 5.405405405405405, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.05405405405405406, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2258064516129032, 'translation_length': 38, 'reference_length': 31} Rouge: {'rouge1': 0.1694915254237288, 'rouge2': 0.03508771929824561, 'rougeL': 0.10169491525423728, 'rougeLsum': 0.1694915254237288} Sari: {'sari': 37.561413948943496} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Die Zauberin merkte auch nichts davon, bis einmal Rapunzel anfing und zu ihr sagte: »Sag sie mir doch, Frau Gothel, wie kommt es nur, sie wird mir viel schwerer heraufzuziehen als der junge Königssohn, der ist in einem Augenblick bei mir.«'] Prediction: ['Eine Zauberin hat einen Rapunzel angekündigt, der sie sich auf ihrem Rapunzel anfangen konnte.\nDie Zauberin merkte ihr aber nicht, sondern sagte: "Ich wird viel schwerer heraufzuziehen als der junge Königssohn, der ist in einem Augenblick bei mir".'] Label: [['Der Prinz klettert viel schneller den Zopf herauf als du.\nDu kletterst sehr langsam.\nUnd sagt zu der Zauberin: An einem Abend passt Rapunzel nicht auf.\nUnd besucht ihre Rapunzel jeden Abend.\nDie Zauberin weiß nichts von dem Prinzen.']] Sacrebleu: {'score': 4.3481962738678845, 'counts': [14, 2, 1, 0], 'totals': [46, 45, 44, 43], 'precisions': [30.434782608695652, 4.444444444444445, 2.272727272727273, 1.1627906976744187], 'bp': 1.0, 'sys_len': 46, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.30434782608695654, 0.044444444444444446, 0.022727272727272728, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0222222222222221, 'translation_length': 46, 'reference_length': 45} Rouge: {'rouge1': 0.3037974683544304, 'rouge2': 0.025974025974025976, 'rougeL': 0.1518987341772152, 'rougeLsum': 0.27848101265822783} Sari: {'sari': 38.581697228431985} Flesh Reading Ease: 55.7 ---------------------------------------- Source: ['« Sie verabredeten, daß er bis dahin alle Abend zu ihr kommen sollte, denn bei Tage kam die Alte.'] Prediction: ['Ein Mann wollte bis dahin alle Abend zu ihr kommen sollte, denn bei Tage kam die Alte.\nDie Alte wurde von einem Mann verabredet.'] Label: [['Und die Zauberin kommt am Abend.\nVon jetzt an kommt der Prinz immer am Tage zu Rapunzel.']] Sacrebleu: {'score': 2.172054551709621, 'counts': [6, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [22.22222222222222, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4210526315789473, 'translation_length': 27, 'reference_length': 19} Rouge: {'rouge1': 0.24390243902439027, 'rouge2': 0.0, 'rougeL': 0.09756097560975609, 'rougeLsum': 0.14634146341463414} Sari: {'sari': 38.22751322751323} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Wenn du kommst, so bring jedesmal einen Strang Seide mit, daraus will ich eine Leiter flechten und wenn die fertig ist, so steige ich herunter und du nimmst mich auf dein Pferd.'] Prediction: ['Ein Pferd ist eine Leiter, wenn du einen Strang Seide mit seinen Leiter flechten will.\nWenn du kommst, sollte eine Leiter flechten.\nWenn du kommst, sollte eine Leiter flechten.'] Label: [['Und wir können zusammen in mein Schloss reiten.\nErst dann kannst du den Turm verlassen.\nDas Seil muss bis zum Boden gehen.\nAus dem Stoff kannst du dir ein langes Seil machen.\nUnd sagt: Ich bringe dir jeden Tag ein Stück Stoff.\nDer Prinz hat eine Idee.']] Sacrebleu: {'score': 0.9603515410137791, 'counts': [6, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 0.5810856336678201, 'sys_len': 35, 'ref_len': 54} Bleu: {'bleu': 0.0, 'precisions': [0.17142857142857143, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5810856336678201, 'length_ratio': 0.6481481481481481, 'translation_length': 35, 'reference_length': 54} Rouge: {'rouge1': 0.10256410256410256, 'rouge2': 0.0, 'rougeL': 0.07692307692307693, 'rougeLsum': 0.10256410256410256} Sari: {'sari': 35.326278659611994} Flesh Reading Ease: 82.55 ---------------------------------------- Source: ['Sie sprach: »Ich will gern mit dir gehen, aber ich weiß nicht wie ich herabkommen kann.'] Prediction: ['Die 20-Minuten-Radio-Host Andrea überrascht ihre Lebens-Hostin, die ihre Woche mit ihrem Podcast "Unchained" über ihre Lebens-Hostin Andrea (30) und ihre Lebens-Hostin (34) über ihre Woche mit ihrem Podcast "Unchained" und ihre Lebens-Hostin Andrea (34) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (30) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) über ihre Woche zum Podcast "Unchained" und ihre Lebens-Hostin Andrea (45) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) über ihre Lebens-Hostin Andrea (45) und ihre Lebens-Hostin Andrea (45) im Podcast "Unchained" ihrer 20-Minuten-App (ganz unten im Direktstream), bei Spotify, Apple Podcasts und Tune In.\nWir haben ihr zusammen mit ihrer Lebens-Hostin Andrea (45) zusammen mit ihrer Lebens-Hostin Andrea (48'] Label: [['Mein lieber Prinz: Wie komme ich aus dem Turm heraus?\nAber Rapunzel sagt:']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [217, 216, 215, 214], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 217, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 13.5625, 'translation_length': 217, 'reference_length': 16} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 56.388888888888886} Flesh Reading Ease: -15.01 ---------------------------------------- Source: ['»Der wird mich lieber haben als die alte Frau Gothel,« und sagte ja, und legte ihre Hand in seine Hand. Da verlor Rapunzel ihre Angst, und als er sie fragte, ob sie ihn zum Manne nehmen wollte, und sie sah, daß er jung und schön war, so dachte sie:'] Prediction: ['Der Rapunzel hat seine Frau Gothel (23) als Frau (27) geschützt.\nDer Rapunzel war seit einigen Tagen bei seiner Angst und sagte, er wollte ihn ihn zum Manne nehmen.\nDer Rapunzel war seit einigen Tagen geschützt, als er ihn zum Manne nehmen wollte, und sie sah, daß er jung und schön war.'] Label: [['Und Rapunzel möchte den Prinzen gerne heiraten.\nRapunzel ist glücklich.\nUnd fragt: Möchtest du meine Frau werden?\nDer Prinz verliebt sich sofort in das schöne Rapunzel.\nJetzt hat Rapunzel keine Angst mehr vor dem Prinzen.']] Sacrebleu: {'score': 1.0224725922587765, 'counts': [10, 0, 0, 0], 'totals': [63, 62, 61, 60], 'precisions': [15.873015873015873, 0.8064516129032258, 0.4098360655737705, 0.20833333333333334], 'bp': 1.0, 'sys_len': 63, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.15873015873015872, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5365853658536586, 'translation_length': 63, 'reference_length': 41} Rouge: {'rouge1': 0.2127659574468085, 'rouge2': 0.0, 'rougeL': 0.10638297872340426, 'rougeLsum': 0.2127659574468085} Sari: {'sari': 35.87947530586137} Flesh Reading Ease: 74.95 ---------------------------------------- Source: ['Anfangs erschrak Rapunzel gewaltig, als ein Mann zu ihr hereinkam, wie ihre Augen noch nie einen erblickt hatten, doch der Königssohn fing an ganz freundlich mit ihr zu reden und erzählte ihr, daß von ihrem Gesange sein Herz so sehr sei bewegt worden, daß es ihm keine Ruhe gelassen, und er sie selbst habe sehen müssen.'] Prediction: ['Der Königssohn hat einen Mann zu ihren Augen hereinkam.\nDer Mann fing an ganz freundlich mit ihr zu reden und erzählte ihr, daß der Königssohn sein Herz so sehr sei bewegt worden, daß es ihm keine Ruhe gelassen, und er sie selbst habe sehen müssen.'] Label: [['Ich musste dich unbedingt sehen.\nDer Prinz sagt: Du hast so schön gesungen.\nAber der Prinz ist sehr freundlich.\nRapunzel hat nämlich noch nie einen Prinzen gesehen.\nUnd Rapunzel erschrickt.\nRapunzel sieht den Prinzen.']] Sacrebleu: {'score': 2.1807265362294386, 'counts': [10, 1, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [20.0, 2.0408163265306123, 1.0416666666666667, 0.5319148936170213], 'bp': 1.0, 'sys_len': 50, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.02040816326530612, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2195121951219512, 'translation_length': 50, 'reference_length': 41} Rouge: {'rouge1': 0.21176470588235297, 'rouge2': 0.0, 'rougeL': 0.09411764705882353, 'rougeLsum': 0.18823529411764706} Sari: {'sari': 34.76286838740148} Flesh Reading Ease: 69.75 ---------------------------------------- Source: ['Alsbald fielen die Haare herab und der Königssohn stieg hinauf.'] Prediction: ['Im Alter von 99 Jahren ist Alsbald in der Nähe des Jahres gestorben.\nDie Haare herab und der Königssohn stieg hinauf.\nAlsbald fielen die Haare herab und stieg hinauf.'] Label: [['Der Prinz klettert am Zopf nach oben: Und Rapunzel lässt ihre langen Haare herunter.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 32, 'reference_length': 16} Rouge: {'rouge1': 0.13043478260869568, 'rouge2': 0.0, 'rougeL': 0.13043478260869568, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 37.77777777777778} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['»Rapunzel, Rapunzel, laß dein Haar herunter.« Und den folgenden Tag, als es anfing dunkel zu werden, ging er zu dem Turm und rief'] Prediction: ['Rapunzel, Rapunzel, laß dein Haar herunter.\nDer frühere Musiker hat seinen neuen Song "Unchained" veröffentlicht.\nIm Interview mit Rapunzel spricht er über seinen neuen Song, in dem er sich auf dem Turm rief.'] Label: [['Rapunzel: Lass deine Haare herunter!\nUnd ruft: Rapunzel!\nDer Prinz verstellt seine Stimme.\nAm nächsten Abend kommt der Prinz wieder zum Turm.']] Sacrebleu: {'score': 1.4564866342357627, 'counts': [7, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [17.073170731707318, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.17073170731707318, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4642857142857142, 'translation_length': 41, 'reference_length': 28} Rouge: {'rouge1': 0.17241379310344826, 'rouge2': 0.0, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.17241379310344826} Sari: {'sari': 37.67857142857143} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Ist das die Leiter, auf welcher man hinaufkommt, so will ich auch einmal mein Glück versuchen.«'] Prediction: ['Einige Jahre lang später werden in der Schweiz einige Menschen hinaufkommen.\nNun werden die Leute auf ihre Leistungen aufgefordert.'] Label: [['So komme ich also in den Turm.\nUnd denkt: Der Prinz beobachtet das.']] Sacrebleu: {'score': 2.3901021968803136, 'counts': [3, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [14.285714285714286, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.12121212121212123, 'rouge2': 0.0, 'rougeL': 0.12121212121212123, 'rougeLsum': 0.12121212121212123} Sari: {'sari': 60.433836996337} Flesh Reading Ease: 53.5 ---------------------------------------- Source: ['Da ließ Rapunzel die Haarflechten herab und die Zauberin stieg zu ihr hinauf. »'] Prediction: ['Rapunzel hat seine Haarflechten zu ihr hinaufgefunden.\nDie Zauberin stieg zu ihr hinaufgefunden.\nDie Rapunzel-Zauberin hatte sich in der Nacht auf Sonntag zu ihrem Mann hinaufgefunden.'] Label: [['Die Zauberin klettert am Zopf nach oben.\nUnd Rapunzel lässt ihre langen Haare herunter.']] Sacrebleu: {'score': 3.235912122544166, 'counts': [5, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8125, 'translation_length': 29, 'reference_length': 16} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.05, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 39.99158249158249} Flesh Reading Ease: 54.3 ---------------------------------------- Source: ['»Rapunzel, Rapunzel, laß dein Haar herunter.« Als er einmal so hinter einem Baume stand, sah er, daß eine Zauberin herankam und hörte wie sie hinaufrief:'] Prediction: ['Rapunzel, Rapunzel, laß dein Haar herunter.\nDer Zauberin hatte eine Zauberin herankam und hörte wie sie hinaufrief.\nDer Rapunzel-Konzern hatte sich in einem Interview mit dem Zürcher Rapunzel veröffentlicht.'] Label: [['Rapunzel: Lass deine Haare herunter!\nUnd ruft : Rapunzel!\nDa kommt die böse Zauberin zum Turm.\nEinmal versteckt sich der Prinz hinter einem Baum.']] Sacrebleu: {'score': 1.8306333543076283, 'counts': [8, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1724137931034482, 'translation_length': 34, 'reference_length': 29} Rouge: {'rouge1': 0.2807017543859649, 'rouge2': 0.0, 'rougeL': 0.2105263157894737, 'rougeLsum': 0.2807017543859649} Sari: {'sari': 36.202111613876326} Flesh Reading Ease: 53.3 ---------------------------------------- Source: ['Er ritt heim, doch der Gesang hatte ihm so sehr das Herz gerührt, daß er jeden Tag hinaus in den Wald ging und zuhörte.'] Prediction: ['Ein Mann hatte ihm so sehr das Herz gerührt, da er jeden Tag hinaus in den Wald ging und zuhörte.\nDer Gesang hatte ihm so sehr das Herz gerührt, da er jeden Tag hinaus in den Wald ging und zuhörte.\nDer Gesang hatte ihm so sehr das Herz gerührt, daß er jeden Tag hinaus in den Wald ging und zuhörte.'] Label: [['Und hört dem schönen Gesang von dem Mädchen zu.\nDeshalb kommt der Prinz jeden Tag zu dem Turm im Wald.\nAber der Prinz kann den Gesang von dem Mädchen im Turm nicht vergessen.\nDie Tage vergehen.\nDeshalb reitet der Prinz auf seinem Pferd weiter.']] Sacrebleu: {'score': 1.5969586705756391, 'counts': [9, 1, 0, 0], 'totals': [66, 65, 64, 63], 'precisions': [13.636363636363637, 1.5384615384615385, 0.78125, 0.3968253968253968], 'bp': 1.0, 'sys_len': 66, 'ref_len': 49} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.015384615384615385, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.346938775510204, 'translation_length': 66, 'reference_length': 49} Rouge: {'rouge1': 0.15789473684210525, 'rouge2': 0.017857142857142856, 'rougeL': 0.12280701754385966, 'rougeLsum': 0.12280701754385966} Sari: {'sari': 38.535353535353536} Flesh Reading Ease: 83.95 ---------------------------------------- Source: ['Der Königssohn wollte zu ihr hinaufsteigen und suchte nach einer Thür des Turmes, aber es war keine zu finden.'] Prediction: ['Der Königssohn wollte zu ihr hinaufsteigen und suchte nach einer Thür des Turmes.\nDer Königssohn wollte zu ihr hinaufsteigen und suchte nach einer Thür des Turmes.\nDer Königssohn wollte zu ihr hinaufsteigen und suchte nach einer Thür des Turmes.'] Label: [['Aber der Turm hat keine Tür.\nDer Prinz sucht eine Tür.\nDer Prinz möchte unbedingt in den Turm hinein.']] Sacrebleu: {'score': 2.6117888703725423, 'counts': [5, 2, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [11.904761904761905, 4.878048780487805, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.11904761904761904, 0.04878048780487805, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9090909090909092, 'translation_length': 42, 'reference_length': 22} Rouge: {'rouge1': 0.14925373134328357, 'rouge2': 0.0, 'rougeL': 0.14925373134328357, 'rougeLsum': 0.14925373134328357} Sari: {'sari': 33.24074074074074} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Da hörte er einen Gesang, der war so lieblich, daß er still hielt und horchte.'] Prediction: ['Ein Mann hat einen Gesang, der so lieblich, daß er still hielt und horchte.\nDas Gesang hörte er einen Gesang, der hörte er und horchte.\nDas Gesang war so lieblich, daß er still hielt und horchte.'] Label: [['Der Prinz bleibt stehen.\nDa hört der Prinz ein Mädchen im Turm singen.']] Sacrebleu: {'score': 1.121617874316939, 'counts': [3, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [6.976744186046512, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.06976744186046512, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.8666666666666667, 'translation_length': 43, 'reference_length': 15} Rouge: {'rouge1': 0.18867924528301885, 'rouge2': 0.0, 'rougeL': 0.1509433962264151, 'rougeLsum': 0.1509433962264151} Sari: {'sari': 28.133903133903132} Flesh Reading Ease: 91.95 ---------------------------------------- Source: ['Nach ein paar Jahren trug es sich zu, daß der Sohn des Königs durch den Wald ritt und an dem Turm vorüberkam.'] Prediction: ['Nach einem paar Jahren trug es sich zu, da der Sohn des Königs durch den Wald ritt und an dem Turm vorüberkam.\nDer Sohn des Königs trug es sich zu, da er durch den Wald ritt und an dem Turm vorüberkam.'] Label: [['Der Prinz reitet an dem Turm von Rapunzel vorbei.\nAn einem Tag reitet ein Prinz durch den Wald.\nUnd die böse Zauberin besucht ihre Rapunzel jeden Tag.\nDie Jahre vergehen.']] Sacrebleu: {'score': 5.783214009218945, 'counts': [10, 4, 2, 0], 'totals': [45, 44, 43, 42], 'precisions': [22.22222222222222, 9.090909090909092, 4.651162790697675, 1.1904761904761905], 'bp': 1.0, 'sys_len': 45, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.09090909090909091, 0.046511627906976744, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3235294117647058, 'translation_length': 45, 'reference_length': 34} Rouge: {'rouge1': 0.2631578947368421, 'rouge2': 0.10810810810810811, 'rougeL': 0.21052631578947367, 'rougeLsum': 0.2368421052631579} Sari: {'sari': 39.433029282142556} Flesh Reading Ease: 89.3 ---------------------------------------- Source: ['Wenn sie nun die Stimme der Zauberin vernahm, so band sie ihre Zöpfe los, wickelte sie oben um einen Fensterhaken und dann fielen die Haare zwanzig Ellen tief herunter, und die Zauberin stieg daran hinauf.'] Prediction: ['Die Zauberin hat sich am Sonntagabend in der Nacht auf Sonntag vernahm.\nDie Zauberin hat sich nun die Stimme der Zauberin vernahm.\nDie Haare fielen die Haare zwanzig Ellen tief herunter.'] Label: [['So kann die Zauberin am Zopf nach oben klettern.\nRapunzel hat ihre langen Haare zu einem Zopf geflochten.\nUnd Rapunzel lässt ihre Haare herunter.']] Sacrebleu: {'score': 3.2553776012957436, 'counts': [10, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [29.41176470588235, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.29411764705882354, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2592592592592593, 'translation_length': 34, 'reference_length': 27} Rouge: {'rouge1': 0.25, 'rouge2': 0.037037037037037035, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 38.288844507437474} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['Rapunzel hatte lange prächtige Haare, fein wie gesponnen Gold.'] Prediction: ['Rapunzel hatte lange prächtige Haare, fein wie gesponnen Gold.\nDer Rapunzel-Star hatte lange prächtige Haare, fein wie gesponnen Gold.'] Label: [['Und Rapunzel bekommt sehr lange Haare:']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2857142857142856, 'translation_length': 23, 'reference_length': 7} Rouge: {'rouge1': 0.21428571428571427, 'rouge2': 0.0, 'rougeL': 0.21428571428571427, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 36.904761904761905} Flesh Reading Ease: 53.5 ---------------------------------------- Source: ['»Rapunzel, Rapunzel, laß mir dein Haar herunter.«'] Prediction: ['Rapunzel, Rapunzel, laß mir dein Haar herunter.\nIm Interview mit dem 20-Minuten-Radio-Host Andrea äusserte sich über ihre neue Single, in dem sich der US-Amerikaner überrascht.\nIm Interview spricht der Clip über seine Welt und über seine Welt, die sich über ihre Welt und ihre Welt überrascht.'] Label: [['Rapunzel: Lass deine Haare herunter!\nRapunzel!']] Sacrebleu: {'score': 0.8699141688737136, 'counts': [3, 0, 0, 0], 'totals': [55, 54, 53, 52], 'precisions': [5.454545454545454, 0.9259259259259259, 0.4716981132075472, 0.2403846153846154], 'bp': 1.0, 'sys_len': 55, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.05454545454545454, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.111111111111111, 'translation_length': 55, 'reference_length': 9} Rouge: {'rouge1': 0.10714285714285712, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.10714285714285712} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 65.25 ---------------------------------------- Source: ['Wenn die Zauberin hinein wollte, so stellte sie sich unten hin und rief:'] Prediction: ['Zauberin und Zauberin: Sie wollten sich unten hin und rief.\nDie Zauberin hatte sich unten hin und rief.'] Label: [['Dann ruft die Zauberin zu Rapunzel: Die böse Zauberin besucht Rapunzel jeden Abend.']] Sacrebleu: {'score': 2.7156804039319287, 'counts': [5, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [23.80952380952381, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.23809523809523808, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 21, 'reference_length': 15} Rouge: {'rouge1': 0.1875, 'rouge2': 0.06666666666666667, 'rougeL': 0.1875, 'rougeLsum': 0.1875} Sari: {'sari': 41.66666666666667} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Als es zwölf Jahre alt war, schloß es die Zauberin in einen Turm, der in einem Walde lag und weder Treppe noch Thür hatte, nur ganz oben war ein kleines Fensterchen. Rapunzel ward das schönste Kind unter der Sonne.'] Prediction: ['Eine Zauberin wurde zwölf Jahre alt, als sie in einem Turm gewohnt war.\nDas schönste Kind war zwölf Jahre alt.\nRapunzel ward das schönste Kind unter der Sonne.'] Label: [['Und Rapunzel wird immer schöner.\nRapunzel wird älter.\nDer Turm hat nur ein kleines Fenster.\nDer Turm hat keine Tür.\nDer Turm ist mitten im Wald.\nDie Zauberin bringt Rapunzel in einen Turm.']] Sacrebleu: {'score': 2.5497192577223347, 'counts': [7, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [21.875, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 0.8035225736890608, 'sys_len': 32, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.21875, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 0.8035225736890608, 'length_ratio': 0.8205128205128205, 'translation_length': 32, 'reference_length': 39} Rouge: {'rouge1': 0.1791044776119403, 'rouge2': 0.0, 'rougeL': 0.08955223880597014, 'rougeLsum': 0.1791044776119403} Sari: {'sari': 33.037134697476255} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['« Der Mann sagte in der Angst alles zu, und als die Frau in Wochen kam, so erschien sogleich die Zauberin, gab dem Kinde den Namen Rapunzel und nahm es mit sich fort.'] Prediction: ['Ein Mann, der in Wochen kam, wurde mit seinem Kinden Rapunzel geschickt.\nDer Mann sagte, als die Frau in Wochen kam, so erschien sogleich die Zauberin, gab dem Kinde den Namen Rapunzel und nahm es mit sich fort.'] Label: [['Die Zauberin nennt das Mädchen: Rapunzel.\nUnd die Zauberin nimmt das kleine Mädchen mit.\nPlötzlich steht die Zauberin in der Tür.\nUnd die Frau bekommt ein Kind: Einige Wochen vergehen.\nWir werden dir unser Kind geben.\nDeshalb sagt der Mann zur Zauberin: Der Mann hat große Angst.']] Sacrebleu: {'score': 2.726046241540586, 'counts': [14, 3, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [31.11111111111111, 6.818181818181818, 1.1627906976744187, 0.5952380952380952], 'bp': 0.7831394949065555, 'sys_len': 45, 'ref_len': 56} Bleu: {'bleu': 0.0, 'precisions': [0.3111111111111111, 0.06818181818181818, 0.0, 0.0], 'brevity_penalty': 0.7831394949065555, 'length_ratio': 0.8035714285714286, 'translation_length': 45, 'reference_length': 56} Rouge: {'rouge1': 0.3111111111111111, 'rouge2': 0.09090909090909091, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 35.735632913076884} Flesh Reading Ease: 79.1 ---------------------------------------- Source: ['du mußt mir das Kind geben, das deine Frau zur Welt bringen wird. « Da ließ die Zauberin in ihrem Zorne nach und sprach zu ihm: »Verhält es sich so, wie du sagst, so will ich dir gestatten, Rapunzeln mitzunehmen, soviel du willst, allein ich mache eine Bedingung:'] Prediction: ['Du mußt das Kind, das deine Frau zur Welt bringen wird.\nWie du sagst, so will du dir gestatten, so will ich dir gestatten, Rapunzeln mitzunehmen.'] Label: [['Dann musst du mir euer Kind für die Rapunzeln geben.\nDeine Frau hat euer Kind geboren?\nAber dafür musst du mir etwas versprechen: Dann nimm dir noch mehr von meinen Rapunzeln.\nUnd antwortet: Ist das wahr?\nDie Zauberin beruhigt sich.']] Sacrebleu: {'score': 1.2572810339383311, 'counts': [9, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [28.125, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 0.6257840096045911, 'sys_len': 32, 'ref_len': 47} Bleu: {'bleu': 0.0, 'precisions': [0.28125, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6257840096045911, 'length_ratio': 0.6808510638297872, 'translation_length': 32, 'reference_length': 47} Rouge: {'rouge1': 0.2318840579710145, 'rouge2': 0.029850746268656723, 'rougeL': 0.20289855072463767, 'rougeLsum': 0.2318840579710145} Sari: {'sari': 35.117826989451494} Flesh Reading Ease: 85.1 ---------------------------------------- Source: ['meine Frau hat Euere Rapunzeln aus dem Fenster erblickt, und empfindet ein so großes Gelüsten, daß sie sterben würde, wenn sie nicht davon zu essen bekäme. »Ach,« antwortete er, »laßt Gnade für Recht ergehen, ich habe mich nur aus Not dazu entschlossen:'] Prediction: ['Euere Rapunzeln hat einen Gelüsten aus dem Fenster erblickt, da sie sterben würde, wenn sie nicht davon zu essen bekäme.\nDer Ehemann Gnade hat sich nur aus Not dazu entschlossen.'] Label: [['Sonst stirbt meine Frau.\nMeine Frau wollte unbedingt Rapunzeln essen.\nMeine Frau ist schwanger.\nUnd sagt: Bitte bestraf mich nicht.\nDer Mann hat Angst.']] Sacrebleu: {'score': 2.977665307178987, 'counts': [7, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.20588235294117646, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 34, 'reference_length': 30} Rouge: {'rouge1': 0.1754385964912281, 'rouge2': 0.0, 'rougeL': 0.14035087719298245, 'rougeLsum': 0.1754385964912281} Sari: {'sari': 34.94139761167625} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Das soll dir schlecht bekommen.«'] Prediction: ['Im Alter von 99 Jahren ist der Schweizer Mann überraschend schlecht bekommen.\nNun soll er schlecht bekommen.'] Label: [['Deshalb werde ich dich bestrafen.']] Sacrebleu: {'score': 2.0244462660665508, 'counts': [1, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [5.2631578947368425, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1666666666666665, 'translation_length': 19, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 45.0} Flesh Reading Ease: 83.75 ---------------------------------------- Source: ['»Wie kannst du es wagen,« sprach sie mit zornigem Blick, »in meinen Garten zu steigen und wie ein Dieb mir meine Rapunzeln zu stehlen?'] Prediction: ['Der 20-Minuten-Podcast "Unchained" hat am Freitag mit Host Stefan über 20 Fragen über 20 Fragen diskutiert.\nWie kannst du es wagen, wie du ihnen mit zornigem Blick und ihnen mit zornigem Blick steigen?\nWir haben dir jeden Tag die besten Fragen zum Direktstream-Kollegen und der Direktstream-Kollegen über 20 Fragen zum Direktstream-Kollegen und der Direktstream-Kollegen sowie der Radio-Section deiner 20-Minuten-App sowie auf Spotify sowie auf iTunes sowie auf Spotify sowie auf Tune In Radio sowie auch auf Spotify sowie auf den Marktverfahren.'] Label: [['Du bist ein Dieb!\nDu hast meine Rapunzeln genommen.\nUnd das sind meine Rapunzeln.\nDas ist mein Feld.\nUnd sagt wütend:']] Sacrebleu: {'score': 0.46981119395512716, 'counts': [2, 0, 0, 0], 'totals': [91, 90, 89, 88], 'precisions': [2.197802197802198, 0.5555555555555556, 0.2808988764044944, 0.14204545454545456], 'bp': 1.0, 'sys_len': 91, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.02197802197802198, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 91, 'reference_length': 26} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 32.496109554933085} Flesh Reading Ease: 41.85 ---------------------------------------- Source: ['Er machte sich also in der Abenddämmerung wieder hinab, als er aber die Mauer hinabgeklettert war, erschrak er gewaltig, denn er sah die Zauberin vor sich stehen.'] Prediction: ['Ein Mann hat sich in der Abenddämmerung wieder hinabgeklettert.\nEr sah die Zauberin vor sich.\nDie Mauer war in der Abenddämmerung wieder hinabgeklettert.'] Label: [['Plötzlich steht die böse Zauberin vor dem Mann.\nDer Mann nimmt einige Rapunzeln.\nUnd geht auf das Feld.\nDann klettert der Mann wieder über die Mauer.\nDeshalb wartet der Mann auf die nächste Nacht.']] Sacrebleu: {'score': 2.6835848102482434, 'counts': [11, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [42.30769230769231, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 0.6065306597126334, 'sys_len': 26, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.4230769230769231, 0.04, 0.0, 0.0], 'brevity_penalty': 0.6065306597126334, 'length_ratio': 0.6666666666666666, 'translation_length': 26, 'reference_length': 39} Rouge: {'rouge1': 0.2903225806451613, 'rouge2': 0.06666666666666667, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.25806451612903225} Sari: {'sari': 42.64382960035134} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['Sie hatten ihr aber so gut, so gut geschmeckt, daß sie den anderen Tag noch dreimal so viel Lust bekam.'] Prediction: ['Eine Frau hat ihr erstes Tag noch dreimal so viel Lust bekam.\nDie Frau war dabei so gut, da sie den anderen Tag noch dreimal so viel Lust bekam.'] Label: [['Und die Frau möchte noch mehr von den Rapunzeln essen.']] Sacrebleu: {'score': 1.6404472625060698, 'counts': [4, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.909090909090909, 'translation_length': 32, 'reference_length': 11} Rouge: {'rouge1': 0.2, 'rouge2': 0.05263157894736841, 'rougeL': 0.15, 'rougeLsum': 0.15} Sari: {'sari': 39.115418894830654} Flesh Reading Ease: 89.45 ---------------------------------------- Source: ['Sie machte sich sogleich Salat daraus und aß sie in voller Begierde auf.'] Prediction: ['Eine Frau aus der Nähe der Schweiz hat sich in einem Begierde aufgefunden.\nSie war sogleich Salat daraus und ausserdem in voller Begierde aufgefunden.\nDie Frau war sogar in voller Begierde aufgefunden.'] Label: [['Die Frau isst die Rapunzeln.']] Sacrebleu: {'score': 2.3372496156461082, 'counts': [3, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.833333333333333, 'translation_length': 35, 'reference_length': 6} Rouge: {'rouge1': 0.10526315789473685, 'rouge2': 0.05555555555555555, 'rougeL': 0.10526315789473685, 'rougeLsum': 0.10526315789473685} Sari: {'sari': 37.40450725744843} Flesh Reading Ease: 64.0 ---------------------------------------- Source: ['« In der Abenddämmerung stieg er also über die Mauer in den Garten der Zauberin, stach in aller Eile eine Hand voll Rapunzeln und brachte sie seiner Frau.'] Prediction: ['Ein Mann hat in der Nacht auf Sonntag eine Frau gefunden.\nDie Frau brachte ihn seine Frau.\nDer Mann stieg in aller Eile eine Hand voll Rapunzeln und brachte seine Frau.'] Label: [['Und der Mann bringt die Rapunzeln seiner schwangeren Frau.\nDer Mann nimmt einige Rapunzeln.\nUnd geht auf das Feld.\nDer Mann klettert über die Mauer.\nDeshalb wartet der Mann auf die Nacht.']] Sacrebleu: {'score': 8.034146566386895, 'counts': [11, 3, 2, 1], 'totals': [34, 33, 32, 31], 'precisions': [32.35294117647059, 9.090909090909092, 6.25, 3.225806451612903], 'bp': 0.9155454289236553, 'sys_len': 34, 'ref_len': 37} Bleu: {'bleu': 0.08034146566386896, 'precisions': [0.3235294117647059, 0.09090909090909091, 0.0625, 0.03225806451612903], 'brevity_penalty': 0.9155454289236553, 'length_ratio': 0.918918918918919, 'translation_length': 34, 'reference_length': 37} Rouge: {'rouge1': 0.3174603174603175, 'rouge2': 0.09836065573770492, 'rougeL': 0.2222222222222222, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 39.79270683396181} Flesh Reading Ease: 87.8 ---------------------------------------- Source: ['« Der Mann, der sie lieb hatte, dachte: »Ehe du deine Frau sterben läßt, holst du ihr von den Rapunzeln, es mag kosten was es will.'] Prediction: ['Ein Rapunzel hatte eine Frau sterben läßt, wie ihr von den Rapunzeln holst.\nDer Mann, der sie lieb, dachte, holst ihr von den Rapunzeln, es mag kosten was es will.'] Label: [['Der Mann liebt seine Frau nämlich sehr.\nDer Mann will seiner Frau diesen Wunsch erfüllen.']] Sacrebleu: {'score': 4.410877697328769, 'counts': [6, 2, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [16.216216216216218, 5.555555555555555, 2.857142857142857, 1.4705882352941178], 'bp': 1.0, 'sys_len': 37, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.16216216216216217, 0.05555555555555555, 0.02857142857142857, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.176470588235294, 'translation_length': 37, 'reference_length': 17} Rouge: {'rouge1': 0.20833333333333331, 'rouge2': 0.04347826086956522, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.20833333333333331} Sari: {'sari': 38.45789627039627} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['»Ach,« antwortete sie, »wenn ich keine Rapunzeln aus dem Garten hinter unserem Hause zu essen kriege, so sterbe ich.'] Prediction: ['Eine Rapunzel-Männerin wollte sich in den vergangenen Tagen in den vergangenen Tagen einen Rap-Song aus dem Garten essen kriege.\nDie Frau war auf dem Garten hinter unserem Hause zu essen kriege.'] Label: [['Sonst sterbe ich.\nIch will unbedingt Rapunzeln essen.\nUnd so sagt die Frau zu ihrem Mann: Hol mir Rapunzeln.']] Sacrebleu: {'score': 1.6794256847485503, 'counts': [5, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [15.151515151515152, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.15151515151515152, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.434782608695652, 'translation_length': 33, 'reference_length': 23} Rouge: {'rouge1': 0.1509433962264151, 'rouge2': 0.0392156862745098, 'rougeL': 0.1509433962264151, 'rougeLsum': 0.1509433962264151} Sari: {'sari': 33.134789187420765} Flesh Reading Ease: 59.2 ---------------------------------------- Source: ['Eines Tages stand die Frau an diesem Fenster und sah in den Garten hinab, da erblickte sie ein Beet, das mit den schönsten Rapunzeln bepflanzt war: und sie sahen so frisch und grün aus, daß sie lüstern ward und das größte Verlangen empfand, von den Rapunzeln zu essen.'] Prediction: ['Eine Frau hat einen Beet in den Fenster geschickt, das mit den Rapunzeln bepflanzt war.\nDas Beet sahen so frisch und grün aus, daß sie lüstern ward und das größte Verlangen empfand, von den Rapunzeln zu essen.'] Label: [['Die Frau möchte unbedingt von den Rapunzeln essen.\nAuf dem Feld von der Zauberin wachsen Rapunzeln.']] Sacrebleu: {'score': 4.597332077682467, 'counts': [8, 3, 1, 0], 'totals': [42, 41, 40, 39], 'precisions': [19.047619047619047, 7.317073170731708, 2.5, 1.2820512820512822], 'bp': 1.0, 'sys_len': 42, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.19047619047619047, 0.07317073170731707, 0.025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 42, 'reference_length': 18} Rouge: {'rouge1': 0.21052631578947367, 'rouge2': 0.07272727272727274, 'rougeL': 0.17543859649122806, 'rougeLsum': 0.21052631578947367} Sari: {'sari': 37.346046938328406} Flesh Reading Ease: 79.6 ---------------------------------------- Source: ['er war aber von einer hohen Mauer umgeben und niemand wagte hineinzugehen, weil er einer Zauberin gehörte, die große Macht hatte und von aller Welt gefürchtet ward. Die Leute hatten in ihrem Hinterhause ein kleines Fenster, daraus konnte man in einen prächtigen Garten sehen, der voll der schönsten Blumen und Kräuter stand;'] Prediction: ['Ein Zauberin hatte in einem Hinterhause einen Fenster gefürchtet.\nDer Fenster war in einen prächtigen Garten sehen.\nDie Leute waren in ihrem Hinterhause ein kleines Fenster.'] Label: [['Deshalb haben die Menschen Angst vor der Zauberin: Das wissen die Menschen.\nNiemand soll auf das Feld gehen.\nDie Zauberin hat eine Mauer um das Feld gebaut.\nDas Feld gehört einer Zauberin.\nDas Haus ist an einem Feld.\nDer Mann und die Frau wohnen in einem kleinen Haus.']] Sacrebleu: {'score': 1.9540675008252408, 'counts': [8, 3, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [27.586206896551722, 10.714285714285714, 1.8518518518518519, 0.9615384615384616], 'bp': 0.40797404404520005, 'sys_len': 29, 'ref_len': 55} Bleu: {'bleu': 0.0, 'precisions': [0.27586206896551724, 0.10714285714285714, 0.0, 0.0], 'brevity_penalty': 0.40797404404519994, 'length_ratio': 0.5272727272727272, 'translation_length': 29, 'reference_length': 55} Rouge: {'rouge1': 0.12987012987012986, 'rouge2': 0.02666666666666667, 'rougeL': 0.12987012987012986, 'rougeLsum': 0.12987012987012986} Sari: {'sari': 36.95321854742144} Flesh Reading Ease: 60.15 ---------------------------------------- Source: ['Es war einmal ein Mann und eine Frau, die wünschten sich schon lange vergeblich ein Kind, endlich machte sich die Frau Hoffnung, der liebe Gott werde ihren Wunsch erfüllen.'] Prediction: ['Ein Mann und eine Frau wünschten sich schon lange vergeblich ein Kind, endlich machte sich die Frau Hoffnung, der liebe Gott werde ihren Wunsch erfüllen.\nDer Mann und die Frau wünschten sich schon lange vergeblich ein Kind, endlich machte sich die Mann und die Frau Hoffnung, der liebe Gott werde ihren Wunsch erfüllen.'] Label: [['Bald wird die Frau ein Kind bekommen.\nEin Mann und eine Frau wünschen sich ein Kind.\nEs war einmal:']] Sacrebleu: {'score': 8.565616170543521, 'counts': [14, 7, 3, 2], 'totals': [59, 58, 57, 56], 'precisions': [23.728813559322035, 12.068965517241379, 5.2631578947368425, 3.5714285714285716], 'bp': 1.0, 'sys_len': 59, 'ref_len': 22} Bleu: {'bleu': 0.08565616170543526, 'precisions': [0.23728813559322035, 0.1206896551724138, 0.05263157894736842, 0.03571428571428571], 'brevity_penalty': 1.0, 'length_ratio': 2.6818181818181817, 'translation_length': 59, 'reference_length': 22} Rouge: {'rouge1': 0.33766233766233766, 'rouge2': 0.21333333333333335, 'rougeL': 0.2597402597402597, 'rougeLsum': 0.33766233766233766} Sari: {'sari': 31.048234896795595} Flesh Reading Ease: 65.75 ---------------------------------------- Source: ['»Das hat dir der Teufel gesagt, das hat dir der Teufel gesagt,« schrie das Männlein und stieß mit dem rechten Fuß vor Zorn so tief in die Erde, daß es bis an den Leib hineinfuhr, dann packte es in seiner Wut den linken Fuß mit beiden Händen und riß sich selbst mitten entzwei.'] Prediction: ['Immer mehr Männlein stieß ein rechtes Fuß vor Zorn.\nDabei riß sich der Männlein selbst mitten entzwei.\nDer Teufel schrie das Männlein und stieß vor Zorn so tief in die Erde.'] Label: [['Und Rumpelstilzchen ist weg.\nDann geht das Loch wieder zu.\nUnd Rumpelstilzchen fällt in das Loch im Boden.\nIm Boden ist jetzt ein Loch.\nPlötzlich öffnet sich der Boden: Dann stampft Rumpelstilzchen mit dem rechten Fuß auf den Boden.\nErst stampft Rumpelstilzchen mit dem linken Fuß auf den Boden.\nUnd stampft mit den Füßen auf den Boden: Und schreit ganz laut.\nDeshalb ist Rumpelstilzchen sehr wütend.\nUnd das Männchen sagt: Du hast meinen Namen erraten.']] Sacrebleu: {'score': 0.6670732741179585, 'counts': [9, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [26.470588235294116, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 0.2103834355879918, 'sys_len': 34, 'ref_len': 87} Bleu: {'bleu': 0.0, 'precisions': [0.2647058823529412, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 0.2103834355879918, 'length_ratio': 0.39080459770114945, 'translation_length': 34, 'reference_length': 87} Rouge: {'rouge1': 0.14035087719298245, 'rouge2': 0.03571428571428571, 'rougeL': 0.08771929824561403, 'rougeLsum': 0.14035087719298245} Sari: {'sari': 32.428142288016986} Flesh Reading Ease: 93.65 ---------------------------------------- Source: ['»Heißt du etwa Rumpelstilzchen?«'] Prediction: ['Ein Rumpelstilzchen in der Nacht auf Sonntag ist gestorben.\nDer Mann war mit einem Rumpelstilzchen in der Nacht auf Sonntag gestorben.\nDer Rumpelstilzchen wurde von der Polizei verletzt.'] Label: [['Heißt du vielleicht Rumpelstilzchen?']] Sacrebleu: {'score': 1.199348129252962, 'counts': [1, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [3.225806451612903, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.03225806451612903, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.2, 'translation_length': 31, 'reference_length': 5} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 49.16666666666667} Flesh Reading Ease: 71.25 ---------------------------------------- Source: ['»Heißest du Heinz?« »Nein.«'] Prediction: ['Im Alter von 99 Jahren ist der Schweizer Heinz (68) gestorben.\nEr war der erste Mal in der Schweiz.\nEr war der erste Mal in der Schweiz.'] Label: [['Und das Männchen antwortet: Nein.\nHeißt du Hinz?']] Sacrebleu: {'score': 1.1599713834969503, 'counts': [1, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [3.125, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.03125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.909090909090909, 'translation_length': 32, 'reference_length': 11} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 58.333333333333336} Flesh Reading Ease: 94.95 ---------------------------------------- Source: ['« fragte sie erst: »Heißest du Kunz?« »Nein.«'] Prediction: ['Im Alter von 99 Jahren ist der Schweizer Kunststurm aufgefunden.\nIm Interview mit der 20-Minuten-App spricht sie über ihre Worte, die sich auf dem TV-Moderatorin übertragen.'] Label: [['Nein Oder heißt du Kunz?\nUnd die Königin fragt das Männchen:']] Sacrebleu: {'score': 1.199348129252962, 'counts': [1, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [3.225806451612903, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.03225806451612903, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3846153846153846, 'translation_length': 31, 'reference_length': 13} Rouge: {'rouge1': 0.046511627906976744, 'rouge2': 0.0, 'rougeL': 0.046511627906976744, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 36.292688792688786} Flesh Reading Ease: 55.85 ---------------------------------------- Source: ['Da könnt ihr denken wie die Königin froh war, als sie den Namen hörte, und als bald hernach das Männlein hereintrat und fragte: »Nun, Frau Königin, wie heiß ich?'] Prediction: ['Die Frau Königin hat ihr Männlein aufgefordert, als sie den Namen hörte.\nDie 20-Minuten-Radio-Hostin hat ihr denken wie die Königin froh war, als sie den Namen hörte.\nDie beiden waren auf der Radio-Hostin, die sie den Namen hörte.'] Label: [['Kennst du meinen Namen jetzt?\nDas Männchen fragt die Königin: Am Abend kommt das Männchen wieder ins Schloss.\nDie Königin ist glücklich:']] Sacrebleu: {'score': 2.487711108149435, 'counts': [6, 2, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [13.043478260869565, 4.444444444444445, 1.1363636363636365, 0.5813953488372093], 'bp': 1.0, 'sys_len': 46, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.044444444444444446, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7692307692307692, 'translation_length': 46, 'reference_length': 26} Rouge: {'rouge1': 0.21333333333333335, 'rouge2': 0.0821917808219178, 'rougeL': 0.18666666666666668, 'rougeLsum': 0.21333333333333335} Sari: {'sari': 36.36412969746303} Flesh Reading Ease: 67.85 ---------------------------------------- Source: ['ach, wie gut ist, daß niemand weiß daß ich Rumpelstilzchen heiß!«'] Prediction: ['Ein Rumpelstilzchen ist in der Nacht auf Sonntag gestorben.\nDer Mann hatte sich mit einem Rumpelstilzchen zu sehen geschickt.\nDer Rumpelstilzchen ist nicht mehr gut, sondern auch der Rumpelstilzchen ist nicht mehr gut.'] Label: [['Und kein Mensch weiß: Dass ich Rumpelstilzchen heiß.']] Sacrebleu: {'score': 1.184949136625139, 'counts': [2, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [5.405405405405405, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.05405405405405406, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.7, 'translation_length': 37, 'reference_length': 10} Rouge: {'rouge1': 0.04878048780487805, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 40.0595238095238} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['»Heute back ich, morgen brau ich, übermorgen hol ich der Königin ihr Kind;'] Prediction: ['Eine Königin hat ihr Kind veröffentlicht.\nDer Kind war ein Kind, der sich in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag zu sehen.'] Label: [['Übermorgen hole ich mir das Kind von der Königin.\nMorgen brau ich.\nHeute back ich.']] Sacrebleu: {'score': 0.6911661521824561, 'counts': [5, 0, 0, 0], 'totals': [78, 77, 76, 75], 'precisions': [6.410256410256411, 0.6493506493506493, 0.32894736842105265, 0.16666666666666666], 'bp': 1.0, 'sys_len': 78, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.0641025641025641, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.333333333333333, 'translation_length': 78, 'reference_length': 18} Rouge: {'rouge1': 0.08602150537634409, 'rouge2': 0.021978021978021976, 'rougeL': 0.043010752688172046, 'rougeLsum': 0.08602150537634409} Sari: {'sari': 38.088222693485854} Flesh Reading Ease: 66.45 ---------------------------------------- Source: ['« Den dritten Tag kam der Bote wieder zurück und erzählte: »Neue Namen habe ich keinen einzigen finden können, aber wie ich an einen hohen Berg um die Waldecke kam, wo Fuchs und Hase sich gute Nacht sagen, so sah ich da ein kleines Haus, und vor dem Haus brannte ein Feuer, und um das Feuer sprang ein gar zu lächerliches Männchen, hüpfte auf einem Bein und schrie:'] Prediction: ['Einige Tage nach dem dritten Tag kam der Bote wieder zurück.\nDer dritten Tag kam der Bote wieder zurück und erzählte: Der Bote brannte ein Feuer und sprang ein gar zu lächerliches Männchen.'] Label: [['Und hat ein Lied gesungen: Ein kleines Männchen ist um das Feuer getanzt.\nBei dem Haus war ein kleines Feuer.\nHinter dem Berg war ein kleines Haus.\nMitten im Wald war ein Berg.\nGestern war ich im Wald.\nDer Diener hat die letzten 3 Tage und Nächte nach dem Namen von dem Männchen gesucht.\nAm nächsten Morgen kommt ein Diener zur Königin ins Schloss.']] Sacrebleu: {'score': 1.4040901130781642, 'counts': [12, 2, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [33.333333333333336, 5.714285714285714, 1.4705882352941178, 0.7575757575757576], 'bp': 0.36787944117144233, 'sys_len': 36, 'ref_len': 72} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.05714285714285714, 0.0, 0.0], 'brevity_penalty': 0.36787944117144233, 'length_ratio': 0.5, 'translation_length': 36, 'reference_length': 72} Rouge: {'rouge1': 0.22429906542056074, 'rouge2': 0.03809523809523809, 'rougeL': 0.11214953271028037, 'rougeLsum': 0.22429906542056074} Sari: {'sari': 35.65481307158863} Flesh Reading Ease: 69.9 ---------------------------------------- Source: ['»So heiß ich nicht. aber es antwortete immer:'] Prediction: ['Im Interview mit der 20-Minuten-App mit Host Andrea äussert sich über ihre Leistung.\nIm Interview spricht sie über ihre Worte, die sich über ihre Leistungen zu verhindern.'] Label: [['So heiße ich nicht.\nUnd sagt: Nein.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2, 'translation_length': 32, 'reference_length': 10} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 39.32870370370371} Flesh Reading Ease: 67.05 ---------------------------------------- Source: ['« Den zweiten Tag ließ sie in der Nachbarschaft herumfragen, wie die Leute da genannt würden, und sagte dem Männlein die ungewöhnlichsten und seltsamsten Namen vor: »Heißt du vielleicht Rippenbiest oder Hammelswade oder Schnürbein?«'] Prediction: ['Ein Männlein hat in der Nachbarschaft einen zweiten Tag in der Nachbarschaft herumfragen.\nDer Männlein warnt vor, wie die Leute da genannt würden.\nDen zweiten Tag ließ der Männlein die ungewöhnlichsten und seltsamsten Namen vor.'] Label: [['Oder heißt du Schnür∙bein?\nOder heißt du Hammels∙wade?\n?\nRippen∙biest Heißt du Und die Königin fragt das Männchen: Und am nächsten Morgen kommt das Männchen wieder ins Schloss.\nDie Königin sucht die ganze Nacht nach dem Namen von dem Männchen.']] Sacrebleu: {'score': 1.209330106336455, 'counts': [5, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [12.820512820512821, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 0.8574039191604413, 'sys_len': 39, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.1282051282051282, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8574039191604413, 'length_ratio': 0.8666666666666667, 'translation_length': 39, 'reference_length': 45} Rouge: {'rouge1': 0.15217391304347824, 'rouge2': 0.0, 'rougeL': 0.10869565217391305, 'rougeLsum': 0.13043478260869565} Sari: {'sari': 32.35042735042735} Flesh Reading Ease: 74.7 ---------------------------------------- Source: ['Als am anderen Tage das Männchen kam, fing sie an mit Kaspar, Melchior, Balzer, und sagte alle Namen, die sie wußte, nach der Reihe her, aber bei jedem sprach das Männlein: »So heiß ich nicht.'] Prediction: ['Das Männlein in der Nähe von Balzer, Kaspar, Melchior, Balzer, ist am Freitagabend in der Nähe des Jahres gestorben.\nAls das Männlein in der Nähe von Balzer und Kaspar kam, fing sie an den Stars, die sich nach der Reihe her wußten.\nDie beiden waren nach der Reihe her, aber bei jedem sprach das Männlein: "So heiß ich nicht".'] Label: [['So heiße ich nicht.\nAber das Männchen antwortet: Nein.\nOder heißt du Balthasar?\nOder heißt du Melchior?\nHeißt du Kaspar?\nDie Königin fragt das Männchen: Am nächsten Morgen kommt das Männchen ins Schloss.']] Sacrebleu: {'score': 1.5699590360613203, 'counts': [12, 1, 0, 0], 'totals': [72, 71, 70, 69], 'precisions': [16.666666666666668, 1.408450704225352, 0.7142857142857143, 0.36231884057971014], 'bp': 1.0, 'sys_len': 72, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.014084507042253521, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7560975609756098, 'translation_length': 72, 'reference_length': 41} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.09433962264150944, 'rougeL': 0.14814814814814814, 'rougeLsum': 0.25925925925925924} Sari: {'sari': 36.87778623255242} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Nun besann sich die Königin die ganze Nacht über auf alle Namen, die sie jemals gehört hatte, und schickte einen Boten über Land, der sollte sich erkundigen weit und breit, was es sonst noch für Namen gäbe!'] Prediction: ['Die Königin hat sich in der Nacht auf Sonntag auf alle Namen geschickt.\nSie besann sich über die Namen, die sie jemals gehört hatte, und schickte einen Boten über Land, der sollte sich erkundigen weit und breit gäbe.'] Label: [['Das macht die Königin die ganze Nacht.\nDie Königin schreibt die Namen auf.\nUnd fragt alle Menschen im Schloss nach ihren Namen.\nDeshalb geht die Königin durch das Schloss.\nAber die Königin kennt den Namen von dem Männchen nicht.']] Sacrebleu: {'score': 3.0327939375463457, 'counts': [11, 2, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [25.58139534883721, 4.761904761904762, 1.2195121951219512, 0.625], 'bp': 0.9770125183673897, 'sys_len': 43, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.2558139534883721, 0.047619047619047616, 0.0, 0.0], 'brevity_penalty': 0.9770125183673897, 'length_ratio': 0.9772727272727273, 'translation_length': 43, 'reference_length': 44} Rouge: {'rouge1': 0.25882352941176473, 'rouge2': 0.07228915662650602, 'rougeL': 0.21176470588235297, 'rougeLsum': 0.2352941176470588} Sari: {'sari': 33.62125088511774} Flesh Reading Ease: 73.25 ---------------------------------------- Source: ['»Drei Tage will ich dir Zeit lassen,« sprach er, »wenn du bis dahin meinen Namen weißt, so sollst du dein Kind behalten.«'] Prediction: ['Der Schweizer Stürmer will seine Zeit lassen.\nEr will bis dahin meinen Namen weißt, sollst du dein Kind behalten.'] Label: [['Dann darfst du dein Kind behalten.\nDu errätst meinen Namen?\nDafür hast du 3 Tage Zeit.\nDu musst meinen Namen erraten.\nIch gebe dir ein Rätsel auf:']] Sacrebleu: {'score': 12.569788356160682, 'counts': [9, 5, 3, 2], 'totals': [22, 21, 20, 19], 'precisions': [40.90909090909091, 23.80952380952381, 15.0, 10.526315789473685], 'bp': 0.6347364189402819, 'sys_len': 22, 'ref_len': 32} Bleu: {'bleu': 0.12569788356160685, 'precisions': [0.4090909090909091, 0.23809523809523808, 0.15, 0.10526315789473684], 'brevity_penalty': 0.6347364189402819, 'length_ratio': 0.6875, 'translation_length': 22, 'reference_length': 32} Rouge: {'rouge1': 0.27450980392156865, 'rouge2': 0.16326530612244897, 'rougeL': 0.1568627450980392, 'rougeLsum': 0.27450980392156865} Sari: {'sari': 48.68235930735931} Flesh Reading Ease: 82.75 ---------------------------------------- Source: ['« Da fing die Königin so an zu jammern und zu weinen, daß das Männlein Mitleid mit ihr hatte:'] Prediction: ['Eine Männigin hat ihr Männlein Mitleid mit ihr zu jammern.\nDie Königin hatte ihr Männlein Mitleid mit ihr zu jammern.\nDie Männin hatte ihr Mitleid mit ihr zu jammern und zu weinen.'] Label: [['Also sagt das Männchen: Und weint viele Tränen.\nDeshalb ist die Königin sehr traurig.']] Sacrebleu: {'score': 1.389736936231864, 'counts': [3, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0588235294117645, 'translation_length': 35, 'reference_length': 17} Rouge: {'rouge1': 0.18518518518518517, 'rouge2': 0.07692307692307691, 'rougeL': 0.14814814814814817, 'rougeLsum': 0.18518518518518517} Sari: {'sari': 37.5} Flesh Reading Ease: 81.55 ---------------------------------------- Source: ['da trat es plötzlich in ihre Kammer und sprach: »Nun gieb mir was du versprochen hast.'] Prediction: ['Immer mehr Menschen sind in der Schweiz verletzt.\nImmer mehr Menschen sind sie in der Schweiz gefunden.\nDie Polizei vermutet, dass sie sich in der Schweiz verletzt haben.'] Label: [['Das Männchen möchte das Kind von der Königin.\nUnd das Männchen kommt ins Schloss.\nPlötzlich geht die Tür auf.']] Sacrebleu: {'score': 1.6404472625060698, 'counts': [4, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 32, 'reference_length': 22} Rouge: {'rouge1': 0.07547169811320756, 'rouge2': 0.0, 'rougeL': 0.07547169811320756, 'rougeLsum': 0.07547169811320756} Sari: {'sari': 61.736111111111114} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['Über ein Jahr brachte sie ein schönes Kind zur Welt und dachte gar nicht mehr an das Männchen;'] Prediction: ['Eine Frau (27) hat ein schönes Kind zur Welt und dachte nicht mehr an das Männchen.\nIhr Kind war nicht mehr an das Männchen.\nDie Frau war nicht mehr an das Männchen.'] Label: [['Und die neue Königin und der König bekommen ein Kind.\nEin Jahr vergeht.']] Sacrebleu: {'score': 1.4899946568663818, 'counts': [5, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [13.513513513513514, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.13513513513513514, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.466666666666667, 'translation_length': 37, 'reference_length': 15} Rouge: {'rouge1': 0.1568627450980392, 'rouge2': 0.0, 'rougeL': 0.0784313725490196, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 34.70374260815437} Flesh Reading Ease: 99.1 ---------------------------------------- Source: ['Und als am Morgen der König kam und alles fand, wie er gewünscht hatte, so hielt er Hochzeit mit ihr und die schöne Müllerstochter ward eine Königin.'] Prediction: ['Am Morgen der König kam es am Morgen der Königin zu einem gewünschten Gewünschten.\nEine Müllerstochterin fand das gewünscht.\nDie Müllerstochterin wurde dabei geschickt.'] Label: [['Und ist jetzt die neue Königin.\nDie Tochter vom Müller heiratet den König.\nUnd die neue Königin sein.\nDu sollst meine Frau werden.\nDer König sagt zu der Tochter vom Müller: Und der König freut sich sehr.\nDer König sieht das Gold.\nDer König kommt in das Zimmer.']] Sacrebleu: {'score': 1.6861587789262193, 'counts': [10, 2, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [37.03703703703704, 7.6923076923076925, 2.0, 1.0416666666666667], 'bp': 0.3416139180901607, 'sys_len': 27, 'ref_len': 56} Bleu: {'bleu': 0.0, 'precisions': [0.37037037037037035, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 0.3416139180901607, 'length_ratio': 0.48214285714285715, 'translation_length': 27, 'reference_length': 56} Rouge: {'rouge1': 0.24999999999999994, 'rouge2': 0.09302325581395349, 'rougeL': 0.1590909090909091, 'rougeLsum': 0.22727272727272727} Sari: {'sari': 40.094959621275414} Flesh Reading Ease: 55.0 ---------------------------------------- Source: ['sie versprach also dem Männchen was er verlangte und das Männchen spann dafür noch einmal das Stroh zu Gold. »Wer weiß, wie das noch geht,« dachte die Müllerstochter und wußte sich auch in der Not nicht anders zu helfen;'] Prediction: ['Ein Männchen spann dafür noch einmal das Stroh zu Gold.\nDie Müllerstochter wollte sich in der Not nicht anders helfen.'] Label: [['Am nächsten Morgen ist auch das 3. Zimmer voll mit Gold.\nUnd macht das ganze Stroh zu Gold.\nDas Männchen sitzt die ganze Nacht am Spinn∙rad.\nUnd das Spinn∙rad macht das Stroh zu Gold.\nDas Männchen dreht am Spinn∙rad.\nDann setzt sich das Männchen an das Spinn∙rad.\nDu bekommst mein 1.\nKind.\nDeshalb sagt die Tochter vom Müller zu dem Männchen: Aber die Tochter vom Müller hat sonst nichts.']] Sacrebleu: {'score': 1.3024490237987627, 'counts': [8, 4, 3, 2], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 19.047619047619047, 15.0, 10.526315789473685], 'bp': 0.07162123746450355, 'sys_len': 22, 'ref_len': 80} Bleu: {'bleu': 0.013024490237987622, 'precisions': [0.36363636363636365, 0.19047619047619047, 0.15, 0.10526315789473684], 'brevity_penalty': 0.07162123746450355, 'length_ratio': 0.275, 'translation_length': 22, 'reference_length': 80} Rouge: {'rouge1': 0.17475728155339806, 'rouge2': 0.07920792079207921, 'rougeL': 0.15533980582524273, 'rougeLsum': 0.17475728155339806} Sari: {'sari': 43.784395680947405} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['»So versprich mir, wenn du Königin wirst, dein erstes Kind.«'] Prediction: ['Im Interview mit 20 Minuten mit dem Radio-Host Andrea über ihre ersten Lebens-Radio-Host Andrea über ihre ersten Lebens-Radio-Host Andrea über ihre ersten Lebens-Radio-Host Andrea über ihre ersten Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebens-Radio-Host Andrea über ihre Lebenshow, die ihre Lebenshow-Host Andrea über ihre Lebenshow und ihre Lebenshow-Host Andrea über ihre Lebenshow-Host Andrea über ihre Lebenshow-Host Andrea über ihre Lebenshow und ihre Lebenshow-Host Andrea über ihre Lebenshow-Host Andrea über ihre Lebenshow-Host Andrea über ihre Lebenshow-Host Andrea über ihre Lebenshow-Hostessin und ihre Lebenshow-Host Andrea über ihre Lebenshow-Hostessin Andrea über ihre Lebenshow-Hostessin Andrea über ihre Lebenshow-Hostessin und ihre Lebenshow-Hostessin Andrea über ihre Lebenshow-Hostessin Andrea über ihre Lebenshow-Hostessin und ihre Lebenshow'] Label: [['Dann musst du mir euer Kind geben!\nDu bekommst mit dem König ein Kind?\nUnd sagt: Dann gib mir dein 1.\nKind.']] Sacrebleu: {'score': 0.5142764787426495, 'counts': [2, 1, 0, 0], 'totals': [139, 138, 137, 136], 'precisions': [1.4388489208633093, 0.7246376811594203, 0.36496350364963503, 0.18382352941176472], 'bp': 1.0, 'sys_len': 139, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.014388489208633094, 0.007246376811594203, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.148148148148148, 'translation_length': 139, 'reference_length': 27} Rouge: {'rouge1': 0.029411764705882356, 'rouge2': 0.009900990099009901, 'rougeL': 0.029411764705882356, 'rougeLsum': 0.029411764705882356} Sari: {'sari': 48.002331002331} Flesh Reading Ease: -92.56 ---------------------------------------- Source: ['»Ich habe nichts mehr, das ich geben könnte,« antwortete das Mädchen.'] Prediction: ['Ein Mädchen hat sich in einem Interview mit dem Polizei über ihre Mädchen geschickt.\nDie Polizei vermutet, dass sie sich geben könnte.\nDie Polizei vermutet, dass sie sich nichts mehr geben könnte.'] Label: [['Jetzt habe ich nichts mehr.\nUnd du hast meinen Ring.\nDie Tochter vom Müller sagt: Du hast meine Kette.']] Sacrebleu: {'score': 3.118961530765676, 'counts': [6, 2, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [16.216216216216218, 5.555555555555555, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.16216216216216217, 0.05555555555555555, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.608695652173913, 'translation_length': 37, 'reference_length': 23} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.037037037037037035, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 57.87037037037036} Flesh Reading Ease: 69.85 ---------------------------------------- Source: ['« Als das Mädchen allein war, kam das Männlein zum drittenmal wieder und sprach: »Was giebst du mir, wenn ich dir noch diesmal das Stroh spinne?«'] Prediction: ['Im Männlein wurde ein Männlein zum drittenmal wieder geschickt.\nDer Männlein war das erste Mal, wenn das Stroh spinne.\nIm Interview spricht der 39-Jährige über das Männlein und spricht von seinem Männlein.'] Label: [['Aber dafür möchte ich eine Belohnung.\nUnd sagt: Ich helfe dir.\nUnd das Männchen kommt ins Zimmer.\nDie Tochter vom Müller weint viele Tränen.\nJetzt ist die Tochter vom Müller allein in dem Zimmer.']] Sacrebleu: {'score': 1.3002397342166176, 'counts': [4, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 0.9487294800164372, 'sys_len': 38, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9487294800164372, 'length_ratio': 0.95, 'translation_length': 38, 'reference_length': 40} Rouge: {'rouge1': 0.1518987341772152, 'rouge2': 0.025974025974025976, 'rougeL': 0.10126582278481013, 'rougeLsum': 0.1518987341772152} Sari: {'sari': 33.281380928439745} Flesh Reading Ease: 75.7 ---------------------------------------- Source: ["gelingt dir's aber, so sollst du meine Gemahlin werden.«"] Prediction: ['Im Alter von 99 Jahren ist der Schweizer Jahre nach der Nacht auf Sonntag eine gemeinsame Gemahlin gekommen.\nIm Alter von 99 Jahren ist der Schweizer Jahre nach dem Jahr 2020 ein Paar.\nIm Alter von 99 Jahren ist der Schweizer Jahre nach dem Jahr 2020 ein Paar.'] Label: [['Dann heirate ich dich.\nDu machst das ganze Stroh zu Gold?']] Sacrebleu: {'score': 0.7144315612998046, 'counts': [1, 0, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [1.9607843137254901, 1.0, 0.5102040816326531, 0.2604166666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.0196078431372549, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.923076923076923, 'translation_length': 51, 'reference_length': 13} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 61.66666666666667} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Der König freute sich über die Maßen bei dem Anblick, war aber noch immer nicht Goldes satt, sondern ließ die Müllerstochter in eine noch größere Kammer voll Stroh bringen und sprach: »Die mußt du noch in dieser Nacht verspinnen;'] Prediction: ['Die Müllerstochter in der Nacht auf Sonntag sind in der Schweiz eine noch größere Kammer voll Stroh bringen.\nDie Müllerstochter sieht sich über die Maßen und sprach von ihrem König.\nDie Müllerstochter sieht sich über die Maßen und sprach von ihrem Stroh.'] Label: [['Heute Nacht musst du das ganze Stroh zu Gold machen.\nDer König sagt zur Tochter vom Müller: Und auch das 3. Zimmer ist voll mit Stroh.\nDas 3. Zimmer ist noch größer.\nAlso schickt der König das Mädchen in ein 3. Zimmer.\nDer König will noch mehr Gold.\nJetzt freut sich der König sehr.\nUnd der König sieht das Gold.\nDer König kommt in das Zimmer.']] Sacrebleu: {'score': 1.2924744419615801, 'counts': [15, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [33.333333333333336, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 0.48030530108979935, 'sys_len': 45, 'ref_len': 78} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 0.48030530108979935, 'length_ratio': 0.5769230769230769, 'translation_length': 45, 'reference_length': 78} Rouge: {'rouge1': 0.2903225806451613, 'rouge2': 0.03278688524590164, 'rougeL': 0.16129032258064516, 'rougeLsum': 0.27419354838709675} Sari: {'sari': 38.001110731373885} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Das Männchen nahm den Ring, fing wieder an zu schnurren mit dem Rade und hatte bis zum Morgen alles Stroh zu glänzendem Gold gesponnen.'] Prediction: ['Im Männchen hatte ein Männchen alles Stroh zu glänzendem Gold gesponnen.\nDas Männchen nahm den Ring, fing wieder an zu schnurren mit dem Rade und hatte bis zum Morgen alles Stroh zu glänzendem Gold gesponnen.'] Label: [['Am nächsten Morgen ist auch das 2. Zimmer voll mit Gold.\nUnd macht das ganze Stroh zu Gold.\nDas Männchen sitzt die ganze Nacht am Spinn∙rad.\nUnd das Spinn∙rad macht das Stroh zu Gold.\nDas Männchen dreht am Spinn∙rad.\nDann setzt sich das Männchen an das Spinn∙rad.\nDas Männchen nimmt den Ring.']] Sacrebleu: {'score': 3.922605370926935, 'counts': [17, 5, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [44.73684210526316, 13.513513513513514, 2.7777777777777777, 1.4285714285714286], 'bp': 0.560488043568919, 'sys_len': 38, 'ref_len': 60} Bleu: {'bleu': 0.0, 'precisions': [0.4473684210526316, 0.13513513513513514, 0.027777777777777776, 0.0], 'brevity_penalty': 0.560488043568919, 'length_ratio': 0.6333333333333333, 'translation_length': 38, 'reference_length': 60} Rouge: {'rouge1': 0.37623762376237624, 'rouge2': 0.14141414141414144, 'rougeL': 0.19801980198019803, 'rougeLsum': 0.3564356435643564} Sari: {'sari': 41.161548829237255} Flesh Reading Ease: 74.75 ---------------------------------------- Source: ['»Meinen Ring von dem Finger,« antwortete das Mädchen. Was giebst du mir, wenn ich dir das Stroh zu Gold spinne?«'] Prediction: ['Immer wieder wieder zu Gold spinne, wenn sich der Mädchen zu Gold spinne.\nImmer wieder zu Gold hat sie das Mädchen, wenn sie ihnen zu Gold spinne.\nIm Interview mit dem 20-Minuten-Podcast "Unchained" spricht der Mädchen über ihre Worte, die ihn zu Gold spinne.'] Label: [['Und gibt den Ring dem Männchen.\nDie Tochter vom Müller nimmt den Ring ab.\nDie Tochter vom Müller hat einen schönen Ring am Finger.\nAber dafür möchte ich eine Belohnung.\nUnd sagt: Ich helfe dir.']] Sacrebleu: {'score': 1.0072487110349273, 'counts': [5, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [9.25925925925926, 0.9433962264150944, 0.4807692307692308, 0.24509803921568626], 'bp': 1.0, 'sys_len': 54, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.09259259259259259, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3170731707317074, 'translation_length': 54, 'reference_length': 41} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.06666666666666667, 'rougeLsum': 0.11111111111111112} Sari: {'sari': 42.441860465116285} Flesh Reading Ease: 77.55 ---------------------------------------- Source: ['Das Mädchen wußte sich nicht zu helfen und weinte, da ging abermals die Thür auf und das kleine Männchen erschien und sprach: »'] Prediction: ['Ein kleines Männchen wurde in der Thür von einem Thür erschien.\nDas Mädchen wurde von einem kleines Männchen erschien und sprach.\nDie Thür wurde von einem kleines Männchen erschien und sprach.'] Label: [['Das Männchen fragt die Tochter vom Müller: Und das Männchen kommt ins Zimmer.\nPlötzlich geht die Tür auf.\nDie Tochter vom Müller weint viele Tränen.']] Sacrebleu: {'score': 2.977665307178987, 'counts': [7, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.20588235294117646, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1724137931034482, 'translation_length': 34, 'reference_length': 29} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.08823529411764705, 'rougeL': 0.22857142857142856, 'rougeLsum': 0.19999999999999998} Sari: {'sari': 36.10527684171282} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['Er ließ die Müllerstochter in eine andere Kammer voll Stroh bringen, die noch viel größer war, und befahl ihr das auch in einer Nacht zu spinnen, wenn ihr das Leben lieb wäre.'] Prediction: ['Ein Mann befiel sich in einer Nacht in Müller (D) einen Stroh.\nEr lieb das Leben, wenn ihr das Leben lieb wäre.\nDie Müllerstochter befahl ihr das auch in einer Nacht zu spinnen, wenn ihr das Leben lieb wäre.'] Label: [['Und du musst sterben.\nOder ich bestrafe dich.\nHeute Nacht musst du das ganze Stroh zu Gold machen.\nDer König sagt zur Tochter vom Müller: Und auch das 2. Zimmer ist voll mit Stroh.\nDas 2. Zimmer ist größer.\nAlso schickt der König das Mädchen in ein 2. Zimmer.']] Sacrebleu: {'score': 1.8752732054763481, 'counts': [12, 1, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [26.08695652173913, 2.2222222222222223, 1.1363636363636365, 0.5813953488372093], 'bp': 0.7538147011255383, 'sys_len': 46, 'ref_len': 59} Bleu: {'bleu': 0.0, 'precisions': [0.2608695652173913, 0.022222222222222223, 0.0, 0.0], 'brevity_penalty': 0.7538147011255383, 'length_ratio': 0.7796610169491526, 'translation_length': 46, 'reference_length': 59} Rouge: {'rouge1': 0.288659793814433, 'rouge2': 0.02105263157894737, 'rougeL': 0.16494845360824742, 'rougeLsum': 0.2268041237113402} Sari: {'sari': 36.45543143646441} Flesh Reading Ease: 85.1 ---------------------------------------- Source: ['Bei Sonnenaufgang kam schon der König und als er das Gold erblickte, erstaunte er und freute sich, aber sein Herz ward nur noch goldgieriger.'] Prediction: ['Der König ist seit Sonnenaufgang nicht mehr goldgieriger.\nDer Herz ward freute sich, aber sein Herz ward nur noch goldgieriger.'] Label: [['Der König will jetzt nämlich noch mehr Gold.\nJetzt freut sich der König sehr.\nUnd der König sieht das Gold.\nDer König kommt in das Zimmer.']] Sacrebleu: {'score': 4.085365957177983, 'counts': [8, 2, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 9.090909090909092, 2.380952380952381, 1.25], 'bp': 0.7376042638218265, 'sys_len': 23, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.34782608695652173, 0.09090909090909091, 0.0, 0.0], 'brevity_penalty': 0.7376042638218265, 'length_ratio': 0.7666666666666667, 'translation_length': 23, 'reference_length': 30} Rouge: {'rouge1': 0.2692307692307692, 'rouge2': 0.08, 'rougeL': 0.1923076923076923, 'rougeLsum': 0.2692307692307692} Sari: {'sari': 37.66507797757798} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ["Dann steckte es eine andere auf, und schnurr, schnurr, schnurr, dreimal gezogen, war auch die zweite voll: und so ging's fort bis zum Morgen, da war alles Stroh versponnen und alle Spulen waren voll Gold. Das Männchen nahm das Halsband, setzte sich vor das Rädchen, und schnurr, schnurr, schnurr, dreimal gezogen, war die Spule voll."] Prediction: ['Im Männchen in der Nähe von St. Gallen wurde ein Männchen von einem Stroh versponnen.\nDas Männchen nahm das Halsband, setzte sich vor das Rädchen, und schnurr, schnurr, schnurr, schnurr, dreimal gezogen.\nDas Männchen nahm das Halsband, setzte sich vor das Rädchen, und schnurr, schnurr, schnurr, schnurr, dreimal gezogen, war die Spule voll.'] Label: [['Am nächsten Morgen ist das Zimmer voll mit Gold.\nUnd macht das ganze Stroh zu Gold.\nDas Männchen sitzt die ganze Nacht am Spinn∙rad.\nUnd das Spinn∙rad macht das Stroh zu Gold.\nDas Männchen dreht am Spinn∙rad.\nDann setzt sich das Männchen an das Spinn∙rad.\nDas Männchen nimmt die Kette.']] Sacrebleu: {'score': 4.253049257115781, 'counts': [18, 4, 2, 0], 'totals': [70, 69, 68, 67], 'precisions': [25.714285714285715, 5.797101449275362, 2.9411764705882355, 0.746268656716418], 'bp': 1.0, 'sys_len': 70, 'ref_len': 57} Bleu: {'bleu': 0.0, 'precisions': [0.2571428571428571, 0.057971014492753624, 0.029411764705882353, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2280701754385965, 'translation_length': 70, 'reference_length': 57} Rouge: {'rouge1': 0.3529411764705882, 'rouge2': 0.10256410256410257, 'rougeL': 0.23529411764705882, 'rougeLsum': 0.31932773109243695} Sari: {'sari': 36.93571797448077} Flesh Reading Ease: 84.8 ---------------------------------------- Source: ["»Mein Halsband,« sagte das Mädchen. Was giebst du mir, wenn ich dir's spinne?«"] Prediction: ['Im Alter von 99 Jahren hat sich ein Mädchen (68) über seinen Halsband veröffentlicht.\nDer Mann hatte sich mit seinem Halsband aufgefunden und wurde von der Zürcher Welt verantwortlich.\nNun hat er seinen Halsband geschickt, wenn er sich selbst verstärkt hat.'] Label: [['Und gibt die Kette dem Männchen.\nDie Tochter vom Müller nimmt die Kette ab.\nDie Tochter vom Müller hat eine schöne Kette um den Hals.\nAber dafür möchte ich eine Belohnung.\nIch kann Stroh zu Gold machen.\nUnd sagt: Ich helfe dir.']] Sacrebleu: {'score': 1.0534384554899547, 'counts': [4, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [8.51063829787234, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 0.9583394886604754, 'sys_len': 47, 'ref_len': 49} Bleu: {'bleu': 0.0, 'precisions': [0.0851063829787234, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9583394886604754, 'length_ratio': 0.9591836734693877, 'translation_length': 47, 'reference_length': 49} Rouge: {'rouge1': 0.06451612903225808, 'rouge2': 0.0, 'rougeL': 0.06451612903225808, 'rougeLsum': 0.06451612903225808} Sari: {'sari': 52.2954822954823} Flesh Reading Ease: 72.7 ---------------------------------------- Source: ['»Ach,« antwortete das Mädchen, »ich soll Stroh zu Gold spinnen und verstehe das nicht.'] Prediction: ['Der Mädchen, der Stroh zu Gold spinnen, verstehe das nicht.\nDer Mädchen war ein Mädchen, der ihn zu Gold spinnen soll.\nDer Mädchen war ein Mädchen, der ihn zu Gold spinnen soll.'] Label: [['Aber ich kann Stroh nicht zu Gold machen.\nUnd die Tochter vom Müller antwortet: Ich soll Stroh zu Gold machen.']] Sacrebleu: {'score': 5.113818794967397, 'counts': [9, 3, 1, 0], 'totals': [39, 38, 37, 36], 'precisions': [23.076923076923077, 7.894736842105263, 2.7027027027027026, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.07894736842105263, 0.02702702702702703, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6956521739130435, 'translation_length': 39, 'reference_length': 23} Rouge: {'rouge1': 0.27586206896551724, 'rouge2': 0.10714285714285714, 'rougeL': 0.24137931034482757, 'rougeLsum': 0.20689655172413793} Sari: {'sari': 41.442307692307686} Flesh Reading Ease: 93.25 ---------------------------------------- Source: ['Da ging auf einmal die Thür auf und trat ein kleines Männchen herein und sprach: »Guten Abend, Jungfer Müllerin, warum weint sie so sehr?«'] Prediction: ['Ein kleines Männchen ist in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich gestorben.\nIm Interview spricht die 20-Minuten-Radio-Hostin über ihre Woche.'] Label: [['Warum weinst du?\nDas Männchen fragt die Tochter vom Müller: Ein Männchen ist ein sehr kleiner Mann.\nUnd ein Männchen kommt ins Zimmer.\nPlötzlich geht die Tür auf.']] Sacrebleu: {'score': 3.0663804738958174, 'counts': [7, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 0.8711587695892689, 'sys_len': 29, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 0.8711587695892689, 'length_ratio': 0.8787878787878788, 'translation_length': 29, 'reference_length': 33} Rouge: {'rouge1': 0.18750000000000003, 'rouge2': 0.06451612903225808, 'rougeL': 0.15625, 'rougeLsum': 0.18750000000000003} Sari: {'sari': 45.71260169489753} Flesh Reading Ease: 68.05 ---------------------------------------- Source: ['sie verstand gar nichts davon, wie man Stroh zu Gold spinnen konnte, und ihre Angst ward immer größer, daß sie endlich zu weinen anfing.'] Prediction: ['Der Stroh zu Gold spinnen konnte wie man Stroh zu Gold spinnen konnte.\nDie Angst ward wurde immer größer, daß sie endlich zu weinen anfing.'] Label: [['Die Tochter vom Müller weint viele Tränen.\nDie Tochter vom Müller kann nämlich Stroh nicht zu Gold machen.']] Sacrebleu: {'score': 4.1798820492168565, 'counts': [6, 2, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [21.428571428571427, 7.407407407407407, 1.9230769230769231, 1.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.07407407407407407, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 28, 'reference_length': 20} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.043478260869565216, 'rougeL': 0.12499999999999997, 'rougeLsum': 0.16666666666666669} Sari: {'sari': 38.97495573282168} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['Da saß nun die arme Müllerstochter und wußte um ihr Leben keinen Rat:'] Prediction: ['Die arme Müllerstochter wurde von ihrem Leben keinen Rat.\nDas hat sie sich um ihr Leben geschickt und während ihrer Müllerstochter verkündet.\nDas hat sie nun einen Rat geschickt und während ihrer Leben keinen Rat.'] Label: [['Die Tochter vom Müller hat Angst:']] Sacrebleu: {'score': 1.1524538390587937, 'counts': [2, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [5.2631578947368425, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.428571428571429, 'translation_length': 38, 'reference_length': 7} Rouge: {'rouge1': 0.1276595744680851, 'rouge2': 0.0, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.1276595744680851} Sari: {'sari': 41.898148148148145} Flesh Reading Ease: 68.85 ---------------------------------------- Source: ['« Darauf schloß er die Kammer selbst zu, und sie blieb allein darin.'] Prediction: ['Ein Mann (27) schloß in der Kammer selbst zu, und sie blieb allein darin.\nDie Kammer blieb allein darin.'] Label: [['Jetzt ist die Tochter vom Müller allein in dem Zimmer.\nUnd schließt die Tür hinter sich zu.\nDer König verlässt das Zimmer.']] Sacrebleu: {'score': 2.2566106884746566, 'counts': [5, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 0.9591894571091382, 'sys_len': 24, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.20833333333333334, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9591894571091382, 'length_ratio': 0.96, 'translation_length': 24, 'reference_length': 25} Rouge: {'rouge1': 0.2608695652173913, 'rouge2': 0.0, 'rougeL': 0.13043478260869565, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 39.684569479965894} Flesh Reading Ease: 94.45 ---------------------------------------- Source: ['Als nun das Mädchen zu ihm gebracht ward, führte er es in eine Kammer, die ganz voll Stroh lag, gab ihr Rad und Haspel und sprach: »Jetzt mache dich an die Arbeit und wenn du diese Nacht durch bis morgen früh dieses Stroh nicht zu Gold versponnen hast, so mußt du sterben.'] Prediction: ['Ein Mädchen, der in eine Kammer ganz voll Stroh lag, führte sich in eine Kammer.\nDer Rad und Haspel sprach: "Jetzt mache dich an die Arbeit und wenn du diese Nacht durch bis morgen früh dieses Stroh nicht zu Gold versponnen hast, so mußt du sterben".'] Label: [['Und du musst sterben.\nOder ich bestrafe dich.\nHeute Nacht musst du das ganze Stroh zu Gold machen.\nDann sagt der König zur Tochter vom Müller: Der König gibt der Tochter vom Müller ein Spinn∙rad.\nDas Zimmer ist voll mit Stroh.\nIm Schloss bringt der König die Tochter vom Müller gleich in ein Zimmer.\nAm nächsten Tag bringt der Müller seine Tochter ins Schloss.']] Sacrebleu: {'score': 1.6482159745079095, 'counts': [17, 1, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [31.48148148148148, 1.8867924528301887, 0.9615384615384616, 0.49019607843137253], 'bp': 0.7165313105737893, 'sys_len': 54, 'ref_len': 72} Bleu: {'bleu': 0.0, 'precisions': [0.3148148148148148, 0.018867924528301886, 0.0, 0.0], 'brevity_penalty': 0.7165313105737893, 'length_ratio': 0.75, 'translation_length': 54, 'reference_length': 72} Rouge: {'rouge1': 0.2926829268292683, 'rouge2': 0.016528925619834708, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.26016260162601623} Sari: {'sari': 36.19359619359619} Flesh Reading Ease: 80.95 ---------------------------------------- Source: ['»Das ist eine Kunst, die mir wohlgefällt, wenn deine Tochter so geschickt ist, wie du sagst, so bringe sie morgen in mein Schloß, da will ich sie auf die Probe stellen.« Der König sprach zum Müller:'] Prediction: ['Eine Tochter soll in mein Schloß eine Probe stellen.\nDer König sprach zum Müller: Sie wohlgefällt, wenn deine Tochter so geschickt ist, wie du sagst.'] Label: [['Deine Tochter soll mein Stroh zu Gold machen.\nUnd sagt: Bring deine Tochter zu mir ins Schloss.\nDer König ist überrascht.']] Sacrebleu: {'score': 7.60493327903722, 'counts': [11, 4, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [36.666666666666664, 13.793103448275861, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.36666666666666664, 0.13793103448275862, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 30, 'reference_length': 25} Rouge: {'rouge1': 0.36000000000000004, 'rouge2': 0.16666666666666666, 'rougeL': 0.28, 'rougeLsum': 0.36000000000000004} Sari: {'sari': 40.635132841015206} Flesh Reading Ease: 79.75 ---------------------------------------- Source: ['Nun traf es sich, daß er mit dem König zu sprechen kam, und um sich ein Ansehen zu geben, sagte er zu ihm: »Ich habe eine Tochter, die kann Stroh zu Gold spinnen.«'] Prediction: ['Ein Mann hatte sich mit dem König zu sprechen kam, um sich ein Ansehen zu geben.\nDer König war eine Tochter, die kann Stroh zu Gold spinnen.\nDer Mann war eine Tochter, die kann Stroh zu Gold spinnen.'] Label: [['Meine Tochter kann Stroh zu Gold machen.\nUnd sagt: Herr König: Und so lügt der Müller den König an.\nDer Müller schämt sich vor dem König.\nAn einem Tag kommt der König zum Müller.']] Sacrebleu: {'score': 7.947806192469663, 'counts': [13, 5, 2, 1], 'totals': [44, 43, 42, 41], 'precisions': [29.545454545454547, 11.627906976744185, 4.761904761904762, 2.4390243902439024], 'bp': 1.0, 'sys_len': 44, 'ref_len': 40} Bleu: {'bleu': 0.07947806192469664, 'precisions': [0.29545454545454547, 0.11627906976744186, 0.047619047619047616, 0.024390243902439025], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 44, 'reference_length': 40} Rouge: {'rouge1': 0.3132530120481927, 'rouge2': 0.1728395061728395, 'rougeL': 0.16867469879518074, 'rougeLsum': 0.3132530120481927} Sari: {'sari': 43.635185789510004} Flesh Reading Ease: 91.25 ---------------------------------------- Source: ['Es war einmal ein Müller, der war arm, aber er hatte eine schöne Tochter.'] Prediction: ['Ein Müller war ein schönes Tochter.\nDer Mann war einmal ein Müller, der war arm, aber er hatte eine schöne Tochter.'] Label: [['Die Tochter vom Müller ist sehr schön.\nDer Müller hat eine Tochter.\nDer Müller ist arm.\nEin Müller hat eine Mühle.\nEs war einmal:']] Sacrebleu: {'score': 8.035080858698535, 'counts': [12, 4, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [48.0, 16.666666666666668, 4.3478260869565215, 2.272727272727273], 'bp': 0.8521437889662115, 'sys_len': 25, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.48, 0.16666666666666666, 0.043478260869565216, 0.0], 'brevity_penalty': 0.8521437889662112, 'length_ratio': 0.8620689655172413, 'translation_length': 25, 'reference_length': 29} Rouge: {'rouge1': 0.509090909090909, 'rouge2': 0.18867924528301888, 'rougeL': 0.3272727272727273, 'rougeLsum': 0.4727272727272728} Sari: {'sari': 18.153642455213916} Flesh Reading Ease: 87.6 ---------------------------------------- Source: ['»Aber«, sagte Hauke wieder, »unsere Deiche sind nichts wert!«'] Prediction: ['Die Schweizer Hauke hat einen neuen Film über ihre Deiche veröffentlicht.\nDie Hauke sind nichts wert.\nDie Hauke haben sich mit ihrem neuen Film über ihre Deiche veröffentlicht.'] Label: [['Hauke sieht ihn an und sagt: „Unsere Deiche sind nichts wert, Vater.']] Sacrebleu: {'score': 5.30918756028263, 'counts': [6, 2, 1, 0], 'totals': [31, 30, 29, 28], 'precisions': [19.35483870967742, 6.666666666666667, 3.4482758620689653, 1.7857142857142858], 'bp': 1.0, 'sys_len': 31, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.06666666666666667, 0.034482758620689655, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.066666666666667, 'translation_length': 31, 'reference_length': 15} Rouge: {'rouge1': 0.23809523809523808, 'rouge2': 0.1, 'rougeL': 0.23809523809523808, 'rougeLsum': 0.23809523809523808} Sari: {'sari': 50.760712717234455} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['»Nein«, erwiderte nach einer Weile der Alte und sah ihm wie abwesend ins Gesicht – »diesmal noch nicht.«'] Prediction: ['Im Gesicht von einer Weile der Alte wurde ein Mann von einem Mann von einer Weile der Alte verletzt.\nDer Mann war nicht nur im Gesicht, sondern nicht.'] Label: [['„Diesmal noch nicht“, entgegnet sein Vater.']] Sacrebleu: {'score': 1.4262733286728257, 'counts': [2, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [6.451612903225806, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.06451612903225806, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.875, 'translation_length': 31, 'reference_length': 8} Rouge: {'rouge1': 0.058823529411764705, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.058823529411764705} Sari: {'sari': 35.72261072261072} Flesh Reading Ease: 84.1 ---------------------------------------- Source: ['»Ja«, sagte Hauke; »ich bin doch nicht versoffen!« Hauke sah ihn trotzig an.'] Prediction: ['Einige Tage lang später war in der Schweiz über die Tage der Schweizer Hauke.\nHauke warnt vor der Tage, warum sie ihn trotzig angekommen hatte.\nNun ist der erste Mal, dass sie sich nicht versoffen hatte.'] Label: [['„Ich bin aber nicht ersoffen“, sagt Hauke trotzig.']] Sacrebleu: {'score': 1.3389812472744242, 'counts': [5, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [12.195121951219512, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.12195121951219512, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.1, 'translation_length': 41, 'reference_length': 10} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.08888888888888889, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 55.21505376344086} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Du hättest ja versaufen können, die Wasser beißen heute in den Deich.«'] Prediction: ['Du hättest ja versaufen können, die Wasser beißen heute in den Deich?\nWir haben sie sich dabei gegeben, wie es sieht.'] Label: [['„Du hättest ersaufen können, bei dieser Flut.“']] Sacrebleu: {'score': 3.5823421191287177, 'counts': [4, 1, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 4.166666666666667, 2.1739130434782608, 1.1363636363636365], 'bp': 1.0, 'sys_len': 25, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.041666666666666664, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 25, 'reference_length': 10} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.19354838709677416, 'rougeL': 0.36363636363636365, 'rougeLsum': 0.36363636363636365} Sari: {'sari': 38.319088319088316} Flesh Reading Ease: 81.75 ---------------------------------------- Source: ['»Was treibst du draußen? Als er so eines Abends zu seinem Vater in die Stube trat, der an seinen Meßgeräten putzte, fuhr dieser auf:'] Prediction: ['Ein Vater hatte am Sonntag einen Meldgeräten in die Stube gefunden.\nDer Meldgeräte trat dabei auf und fuhr auf.\nDer Vater fuhr auf, dass er sich in die Stube trat.'] Label: [['„Was treibst du denn da draußen?“, schimpft sein Vater.']] Sacrebleu: {'score': 1.432548017297354, 'counts': [3, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6153846153846154, 'translation_length': 34, 'reference_length': 13} Rouge: {'rouge1': 0.047619047619047616, 'rouge2': 0.0, 'rougeL': 0.047619047619047616, 'rougeLsum': 0.047619047619047616} Sari: {'sari': 33.24074074074074} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['Wurde es so dunkel, daß alle Erdendinge vor seinen Augen verschwanden und nur die Flut ihm in die Ohren donnerte, dann stand er auf und trabte halb durchnäßt nach Hause.'] Prediction: ['Ein Erdendinge hat in der Nacht auf Sonntag einen Erdendinge verschwanden.\nDer Erdendinge wurde dabei aufgefunden und nur die Flut ihm in die Ohren donnerte.\nDer Erdendinge wurde dabei aufgefunden und trabte nach Hause.'] Label: [['Erst als Wind und Flut ihm in den Ohren donnern, geht Hauke nach Hause.']] Sacrebleu: {'score': 6.703084558950244, 'counts': [8, 4, 2, 0], 'totals': [37, 36, 35, 34], 'precisions': [21.62162162162162, 11.11111111111111, 5.714285714285714, 1.4705882352941178], 'bp': 1.0, 'sys_len': 37, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.21621621621621623, 0.1111111111111111, 0.05714285714285714, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3125, 'translation_length': 37, 'reference_length': 16} Rouge: {'rouge1': 0.2916666666666667, 'rouge2': 0.13043478260869568, 'rougeL': 0.2916666666666667, 'rougeLsum': 0.2916666666666667} Sari: {'sari': 45.92858157755856} Flesh Reading Ease: 57.55 ---------------------------------------- Source: ['Nach langem Hinstarren nickte er wohl langsam mit dem Kopfe oder zeichnete, ohne aufzusehen, mit der Hand eine weiche Linie in die Luft, als ob er dem Deiche damit einen sanfteren Abfall geben wollte.'] Prediction: ['Nach langem Hinstarren nickte er wohl langsam mit dem Kopfe oder zeichnete, ohne aufzusehen, mit der Hand eine weiche Linie in die Luft.\nDer Deiche wollte damit einen sanfteren Abfall geben.'] Label: [['Sondern sanft zum Wasser hin auslaufend.\nNicht so steil abfallend zum Meer hin.\nAls ob er den Deich lieber so hätte.\nEine weiche, sanft abfallende Linie.\nMit der Hand zeichnet Hauke eine Linie in die Luft.']] Sacrebleu: {'score': 10.651579396039686, 'counts': [12, 5, 3, 2], 'totals': [35, 34, 33, 32], 'precisions': [34.285714285714285, 14.705882352941176, 9.090909090909092, 6.25], 'bp': 0.8187307530779819, 'sys_len': 35, 'ref_len': 42} Bleu: {'bleu': 0.10651579396039687, 'precisions': [0.34285714285714286, 0.14705882352941177, 0.09090909090909091, 0.0625], 'brevity_penalty': 0.8187307530779819, 'length_ratio': 0.8333333333333334, 'translation_length': 35, 'reference_length': 42} Rouge: {'rouge1': 0.2941176470588235, 'rouge2': 0.1818181818181818, 'rougeL': 0.2647058823529412, 'rougeLsum': 0.2941176470588235} Sari: {'sari': 34.45236826545096} Flesh Reading Ease: 65.05 ---------------------------------------- Source: ['was er allein hier sah, war der brandende Saum des Wassers, der, als die Flut stand, mit hartem Schlage immer wieder dieselbe Stelle traf und vor seinen Augen die Grasnarbe des steilen Deiches auswusch. Er hörte weder das Klatschen des Wassers noch das Geschrei der Möwen und Strandvögel, die um oder über ihm flogen und ihn fast mit ihren Flügeln streiften, mit den schwarzen Augen in die seinen blitzend;'] Prediction: ['Der deutsche Wasser hat seinen Flügeln in die seinen blitzenden Saum auswusch.\nEr hörte weder das Klatschen des Wassers noch das Geschrei der Möwen und Strandvögel, die um oder über ihm flogen und ihn fast mit ihren Flügeln streiften, mit den schwarzen Augen in die seinen blitzend.'] Label: [['Das Gras dort ist schon ganz ausgewaschen.\nImmer wieder trifft es auf dieselbe Stelle.\nWo schlägt das Wasser bei höchster Flut gegen den Deich?\nIhn interessiert nur eins: Hauke sieht weder die Strandvögel noch hört er die Möwen.']] Sacrebleu: {'score': 1.3010943871027807, 'counts': [11, 0, 0, 0], 'totals': [51, 50, 49, 48], 'precisions': [21.568627450980394, 1.0, 0.5102040816326531, 0.2604166666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.21568627450980393, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.186046511627907, 'translation_length': 51, 'reference_length': 43} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.04301075268817204, 'rougeL': 0.12631578947368421, 'rougeLsum': 0.18947368421052632} Sari: {'sari': 34.85414429780479} Flesh Reading Ease: 68.75 ---------------------------------------- Source: ['erst wenn ihm die Füße überspült waren und der Schaum ihm ins Gesicht spritzte, rückte er ein paar Fuß höher und blieb dann wieder sitzen.'] Prediction: ['Ein Mann hat eine Füße überspült und blieb dann wieder sitzen.\nDer Schaum ihm spritzte und rückte ihm ein paar Fuß höher und blieb dann wieder sitzen.'] Label: [['Erst wenn sie schon an seine Füße schlagen, rutscht er weiter hoch auf den Deich.']] Sacrebleu: {'score': 1.5301683686839007, 'counts': [2, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [6.896551724137931, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.06896551724137931, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7058823529411764, 'translation_length': 29, 'reference_length': 17} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.04444444444444444, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 30.020703933747413} Flesh Reading Ease: 84.6 ---------------------------------------- Source: ['Und wenn im Herbst die Fluten höher stiegen und manch ein Mal die Arbeit eingestellt werden mußte, dann ging er nicht mit den andern nach Haus, sondern blieb, die Hände über die Knie gefaltet, an der abfallenden Seeseite des Deiches sitzen und sah stundenlang zu, wie die trüben Nordseewellen immer höher an die Grasnarbe des Deiches hinaufschlugen;'] Prediction: ['Die Fluten höher stiegen, wenn der Deiches in der Schweiz hinaufschlugen.\nDie Fluten blieben, dann ging er nicht mit den andern nach Haus, sondern blieb, die Hände über die Knie gefaltet.'] Label: [['Stundenlang beobachtet er die Nordsee-Wellen.\nNur Hauke bleibt weiter am Deich sitzen.\nDann gehen sie nach Hause, bis das Wasser bei Ebbe wieder abläuft.\nWenn das Wasser bei Flut immer höher steigt, können die Männer nicht weiterarbeiten.']] Sacrebleu: {'score': 1.506662842385423, 'counts': [10, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [27.027027027027028, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 0.8503033063369506, 'sys_len': 37, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.2702702702702703, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8503033063369504, 'length_ratio': 0.8604651162790697, 'translation_length': 37, 'reference_length': 43} Rouge: {'rouge1': 0.23999999999999996, 'rouge2': 0.027397260273972605, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.18666666666666665} Sari: {'sari': 35.45385463814467} Flesh Reading Ease: 76.75 ---------------------------------------- Source: ['aber den Euklid hatte er allzeit in der Tasche, und wenn die Arbeiter ihr Frühstück oder Vesper aßen, saß er auf seinem umgestülpten Schubkarren mit dem Buche in der Hand. Und der Junge karrte;'] Prediction: ['Ein junger Schubkarren sah mit einem Messer in der Hand.\nDer Junge karrte den Euklid und sah dabei in der Tasche.\nDer Junge karrte den Euklid und sah dabei in der Hand.'] Label: [['Die ganze Zeit über beugt er sich über das Mathematikbuch.\nIn den Pausen setzt er sich an den Deich.\nBei der Arbeit hat Hauke immer den Euklid dabei.']] Sacrebleu: {'score': 2.9867390496386634, 'counts': [8, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [22.857142857142858, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.22857142857142856, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1290322580645162, 'translation_length': 35, 'reference_length': 31} Rouge: {'rouge1': 0.19999999999999998, 'rouge2': 0.034482758620689655, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 38.83125532821825} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['Als der Alte sah, daß der Junge weder für Kühe noch Schafe Sinn hatte und kaum gewahrte, wenn die Bohnen blühten, was doch die Freude von jedem Marschmann ist, und weiterhin bedachte, daß die kleine Stelle wohl mit einem Bauer und einem Jungen, aber nicht mit einem Halbgelehrten und einem Knecht bestehen könne, angleichen, daß er auch selber nicht auf einen grünen Zweig gekommen sei, so schickte er seinen großen Jungen an den Deich, wo er mit andern Arbeitern von Ostern bis Martini Erde karren mußte.'] Prediction: ['Ein Junge kam auf einen grünen Zweig an den Deich, wo er mit andern Arbeitern von Ostern bis Martini Erde karren mußte.\nDer Junge war selber nicht auf einen grünen Zweig gekommen, so schickte er seinen großen Jungen an den Deich.'] Label: [['Den ganzen Tag lang muss der Junge nun Erde in Karren herbeiholen.\nUnd so schickt er Hauke zu den Deicharbeitern.\nDer muss ans Arbeiten kommen, denkt der Vater.\nWas soll er nur mit dem Jungen anfangen?\nAuch mit den Kühen kann er nicht umgehen.\nZur Feldarbeit taugt Hauke nicht.\nAber einen Büchersohn kann er nicht gebrauchen.\nDer Junge ist einfach nicht von den Büchern loszubringen.\nSein Vater beginnt, sich Sorgen zu machen.']] Sacrebleu: {'score': 2.0357986860242736, 'counts': [18, 2, 1, 0], 'totals': [45, 44, 43, 42], 'precisions': [40.0, 4.545454545454546, 2.3255813953488373, 1.1904761904761905], 'bp': 0.4297960674895162, 'sys_len': 45, 'ref_len': 83} Bleu: {'bleu': 0.0, 'precisions': [0.4, 0.045454545454545456, 0.023255813953488372, 0.0], 'brevity_penalty': 0.4297960674895162, 'length_ratio': 0.5421686746987951, 'translation_length': 45, 'reference_length': 83} Rouge: {'rouge1': 0.25, 'rouge2': 0.016949152542372885, 'rougeL': 0.13333333333333336, 'rougeLsum': 0.25} Sari: {'sari': 36.75472730989819} Flesh Reading Ease: 71.75 ---------------------------------------- Source: ["Aber das zweite Buch war eine kleine holländische Grammatik, und da der Winter noch lange nicht vorüber war, so hatte es, als endlich die Stachelbeeren in ihrem Garten wieder blühten, dem Jungen schon so weit geholfen, daß er den Euklid, welcher damals stark im Schwange war, fast überall verstand. Auch das?« frug er wieder. Und als der Alte nickte, wies er noch ein zweites, halb zerrissenes Büchlein vor. » Der Junge, der von wenig Worten war, sah den Vater ruhig an und sagte nur: »Darf ich's behalten?"] Prediction: ['Der Junge, der von wenig Worten war, sah den Vater ruhig an.\nDer Vater sah den Vater ruhig an und sagte nur: "Darf ich\'s behalten?\nDarf ich\'s behalten?'] Label: [['„Darf ich die beiden Bücher behalten?“, fragt Hauke.\nIn der anderen eine alte, holländische Grammatik.\nIn der einen den Euklid.\nAls Hauke vom Dachboden herunterkommt, hält er zwei Bücher in seinen Händen.']] Sacrebleu: {'score': 2.4335978372303484, 'counts': [7, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [20.0, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 0.8424604416167714, 'sys_len': 35, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 0.8424604416167714, 'length_ratio': 0.8536585365853658, 'translation_length': 35, 'reference_length': 41} Rouge: {'rouge1': 0.1791044776119403, 'rouge2': 0.030769230769230767, 'rougeL': 0.08955223880597014, 'rougeLsum': 0.1791044776119403} Sari: {'sari': 34.9597478544847} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['»Ja, ja«, sagte er, »das Buch ist noch von meinem Vater, der verstand es;'] Prediction: ['Ein Buch ist noch von meinem Vater, der verstand es.\nDer Buch ist noch von meinem Vater, der verstand es.'] Label: [['Die Sprache konnte mein Vater damals noch verstehen.“']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 24, 'reference_length': 10} Rouge: {'rouge1': 0.14285714285714288, 'rouge2': 0.0, 'rougeL': 0.14285714285714288, 'rougeLsum': 0.07142857142857144} Sari: {'sari': 37.77777777777778} Flesh Reading Ease: 93.95 ---------------------------------------- Source: ['Es war ein holländischer Euklid, und Holländisch, wenngleich es doch halb Deutsch war, verstanden alle beide nicht.'] Prediction: ['Ein holländischer Euklid, der in Deutschland nicht mehr halb Deutsch war, verstanden alle beide nicht.\nDas war ein holländischer Euklid, der in der Schweiz nicht mehr halb Deutsch war.\nDas war ein holländischer Euklid, der in der Schweiz nicht mehr halb Deutsch war.'] Label: [['Das Buch ist aber auf Holländisch geschrieben.']] Sacrebleu: {'score': 0.8671339908544159, 'counts': [2, 0, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [4.0, 1.0204081632653061, 0.5208333333333334, 0.26595744680851063], 'bp': 1.0, 'sys_len': 50, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.04, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.25, 'translation_length': 50, 'reference_length': 8} Rouge: {'rouge1': 0.07407407407407408, 'rouge2': 0.0, 'rougeL': 0.07407407407407408, 'rougeLsum': 0.07407407407407408} Sari: {'sari': 34.24603174603174} Flesh Reading Ease: 83.8 ---------------------------------------- Source: ["das wird's dir sagen!« Willst du mehr wissen, so suche morgen aus der Kiste, die auf unserm Boden steht, ein Buch, einer, der Euklid hieß, hat's geschrieben;"] Prediction: ["Ein Buch, einer, der Euklid hieß, hat's geschrieben.\nIm Text: Es handelt sich um eine Woche, das ein Buch von einer, der Euklid hieß, wird von der Euklid hieß."] Label: [['Es heißt Euklid.\nDa ist ein altes Mathematikbuch von meinem Vater.\n„Aber wenn du es besser wissen willst, dann geh nach oben auf den Dachboden.']] Sacrebleu: {'score': 1.5763060777242128, 'counts': [7, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [18.42105263157895, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.18421052631578946, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3103448275862069, 'translation_length': 38, 'reference_length': 29} Rouge: {'rouge1': 0.14285714285714288, 'rouge2': 0.0, 'rougeL': 0.10714285714285714, 'rougeLsum': 0.14285714285714288} Sari: {'sari': 35.67809387771297} Flesh Reading Ease: 89.45 ---------------------------------------- Source: ['Und eines Abends frug er den Alten, warum denn das, was er eben hingeschrieben hatte, gerade so sein müsse und nicht anders sein könne, und stellte dann eine eigene Meinung darüber auf Aber der Vater, der darauf nicht zu antworten wußte, schüttelte den Kopf und sprach: »Das kann ich dir nicht sagen; genug, es ist so, und du selber irrst dich.'] Prediction: ['Ein Vater hat eine eigene Meinung darüber auf Aber der Vater, der nicht zu antworten wußte, schüttelte den Kopf und sprach: "Das kann ich dir nicht sagen; genug, es ist so, und du selber irrst dich".'] Label: [['„Das wird schon so stimmen“, antwortet sein Vater.\n„Vater, woher weißt du, dass deine Berechnungen richtig sind?“']] Sacrebleu: {'score': 1.3224637682882356, 'counts': [7, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [15.555555555555555, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.15555555555555556, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9565217391304348, 'translation_length': 45, 'reference_length': 23} Rouge: {'rouge1': 0.17543859649122806, 'rouge2': 0.0, 'rougeL': 0.10526315789473684, 'rougeLsum': 0.14035087719298245} Sari: {'sari': 34.591183574879224} Flesh Reading Ease: 62.1 ---------------------------------------- Source: ['Der Junge saß meist dabei und sah über seine Fibel oder Bibel weg dem Vater zu, wie er maß und berechnete, und grub sich mit der Hand in seinen blonden Haaren.'] Prediction: ['Der Junge sah über seine Fibel oder Bibel weg dem Vater zu, wie er maß und berechnete, und grub sich mit der Hand in seinen blonden Haaren.\nDer Junge sah über seine Fibel oder Bibel weg dem Vater zu, wie er maß und berechnete, und grub sich mit der Hand in seinen blonden Haaren.'] Label: [['Sein Sohn Hauke sieht ihm jeden Abend beim Rechnen zu.']] Sacrebleu: {'score': 0.7188461938966488, 'counts': [2, 0, 0, 0], 'totals': [60, 59, 58, 57], 'precisions': [3.3333333333333335, 0.847457627118644, 0.43103448275862066, 0.21929824561403508], 'bp': 1.0, 'sys_len': 60, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.03333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.454545454545454, 'translation_length': 60, 'reference_length': 11} Rouge: {'rouge1': 0.03125, 'rouge2': 0.0, 'rougeL': 0.03125, 'rougeLsum': 0.03125} Sari: {'sari': 34.48275862068966} Flesh Reading Ease: 71.1 ---------------------------------------- Source: ['aber es reichte doch wohl kaum, denn was die studierten Fachleute darüber niedergeschrieben, davon hatte er wenig gelesen; In der Mitte des vorigen Jahrhunderts, oder vielmehr, um genauer zu bestimmen, vor und nach derselben, gab es hier einen Deichgrafen, der von Deich- und Sielsachen mehr verstand, als Bauern und Hofbesitzer sonst zu verstehen pflegen;'] Prediction: ['Der Hofbesitzer hatte in der Mitte des Jahrhunderts seine Fachleute niedergeschrieben.\nIn der Mitte des vorigen Jahrhunderts, oder vielmehr, um genauer zu bestimmen, vor und nach derselben, gab es hier einen Deichgrafen.'] Label: [['Aber er kann gut mit Zahlen und Maßen umgehen.\nEr hat nicht studiert.\n1700.\nIn unserem Dorf in Nordfriesland lebt damals ein Bauer, der besonders gut rechnen kann.\nDie Geschichte spielt im vorigen Jahrhundert, also um']] Sacrebleu: {'score': 2.60869513447811, 'counts': [10, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [26.31578947368421, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 0.9000876262522591, 'sys_len': 38, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 0.9000876262522594, 'length_ratio': 0.9047619047619048, 'translation_length': 38, 'reference_length': 42} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.14492753623188406, 'rougeLsum': 0.14492753623188406} Sari: {'sari': 35.43521793234437} Flesh Reading Ease: 52.85 ---------------------------------------- Source: ['»Erzählt, erzählt nur, Schulmeister«, riefen ein paar der jüngeren aus der Gesellschaft.'] Prediction: ['Schulmeister und Schulmeister sind ein paar der jüngeren aus der Gesellschaft.\nDie Gesellschaft hat einen neuen Schulmeister.'] Label: [['„Erzähl uns die Geschichte vom Schimmelreiter!“ „Setz dich zu uns!“, rufen die anderen ihm zu.']] Sacrebleu: {'score': 1.822179034099091, 'counts': [1, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [5.2631578947368425, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 0.9000876262522591, 'sys_len': 19, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9000876262522594, 'length_ratio': 0.9047619047619048, 'translation_length': 19, 'reference_length': 21} Rouge: {'rouge1': 0.058823529411764705, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.058823529411764705} Sari: {'sari': 35.515873015873005} Flesh Reading Ease: 66.2 ---------------------------------------- Source: ['»Unser Schulmeister«, sagte er mit erhobener Stimme, »wird von uns hier Ihnen das am besten erzählen können; Abseits hinter dem Ofen, ein wenig gebückt, saß ein kleiner hagerer Mann in einem abgeschabten schwarzen Röcklein;'] Prediction: ['Ein kleiner hagerer Mann sah in einem schwarzen Röcklein.\nDer Schulmeister, der einen hagerer Mann, wird von uns hier Ihnen das am besten erzählen können.\nDer Schulmeister, der einen hagerer Mann, sah in einem abgeschabten schwarzen Röcklein.'] Label: [['Das ist der alte Schulmeister.“ „Der da kann euch die Geschichte am besten erzählen.\nDer Deichgraf zeigt auf einen kleinen, alten Mann am Ofen.']] Sacrebleu: {'score': 4.848189163173709, 'counts': [12, 3, 1, 0], 'totals': [44, 43, 42, 41], 'precisions': [27.272727272727273, 6.976744186046512, 2.380952380952381, 1.2195121951219512], 'bp': 1.0, 'sys_len': 44, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.06976744186046512, 0.023809523809523808, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5172413793103448, 'translation_length': 44, 'reference_length': 29} Rouge: {'rouge1': 0.33333333333333337, 'rouge2': 0.125, 'rougeL': 0.30303030303030304, 'rougeLsum': 0.30303030303030304} Sari: {'sari': 42.75284175817377} Flesh Reading Ease: 68.25 ---------------------------------------- Source: ['»Verzeiht!« sprach ich, »was ist das mit dem Schimmelreiter?«'] Prediction: ['Im Interview mit dem 20-Minuten-Radio-Host Andrea äusserte sich über ihre Frage mit dem Schimmelreiter.\nIm Interview spricht sie über ihre Schäden, die sich mit dem Schimmelreiter über ihren Gespräch mit dem Radio-Host Andrea über ihre Frage und ihre Frage mit Andrea über ihren Schlagzeilen.'] Label: [['„Was bedeutet diese Sache mit dem Schimmelreiter?“ Vorsichtig frage ich:']] Sacrebleu: {'score': 2.771450089816766, 'counts': [3, 2, 1, 0], 'totals': [49, 48, 47, 46], 'precisions': [6.122448979591836, 4.166666666666667, 2.127659574468085, 1.0869565217391304], 'bp': 1.0, 'sys_len': 49, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.061224489795918366, 0.041666666666666664, 0.02127659574468085, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.769230769230769, 'translation_length': 49, 'reference_length': 13} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.06896551724137931, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 47.56124463021014} Flesh Reading Ease: 52.7 ---------------------------------------- Source: ['Mich wollte nachträglich ein Grauen überlaufen.'] Prediction: ['Ein Grauen wurde in der Nacht auf Sonntag in der Nacht auf Sonntag überlaufen.\nDer Grau wurde nachträglich ein Grauen überlaufen.\nNun wurde der Grauen überlaufen.'] Label: [['Mir wird etwas unheimlich.']] Sacrebleu: {'score': 1.286713095960916, 'counts': [1, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [3.4482758620689653, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.034482758620689655, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.8, 'translation_length': 29, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 77.7 ---------------------------------------- Source: ['mögen sie auf alles vorgefaßt sein!« Anno 17 hat es auch denen drüben gegolten; »das ist nicht bloß für uns; »Ihr braucht nicht zu erschrecken«, sprach er über den Tisch hin; Der Deichgraf war aufgestanden. »Der Schimmelreiter!« rief einer aus der Gesellschaft, und eine Bewegung des Erschreckens ging durch die übrigen.'] Prediction: ['Ein Deichgraf hat einen Schimmelreiter auf seinem Erschrecken geschickt.\nDer Schimmelreiter rief einer aus der Gesellschaft, und eine Bewegung des Erschreckens ging durch die übrigen.'] Label: [['Das war ja schon um das Jahr 1700 so.“ Die im Westen, die müssen sich Sorgen machen.\n„Das ist bestimmt nicht wegen unserem Deich.\nDer Deichgraf will die Leute beruhigen.\n„Der Schimmelreiter!“, sagt einer ängstlich.']] Sacrebleu: {'score': 2.0580807918045747, 'counts': [8, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [28.571428571428573, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 0.5449055200013082, 'sys_len': 28, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 0.5449055200013082, 'length_ratio': 0.6222222222222222, 'translation_length': 28, 'reference_length': 45} Rouge: {'rouge1': 0.19672131147540983, 'rouge2': 0.03389830508474576, 'rougeL': 0.13114754098360656, 'rougeLsum': 0.19672131147540983} Sari: {'sari': 35.863872929312606} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Er wurde aufmerksam, und ich bemerkte plötzlich, daß alles Gespräch umher verstummt war. wir waren ins Gespräch gekommen, und ich hatte begonnen, ihm meine seltsame Begegnung auf dem Deiche zu erzählen.'] Prediction: ['Ein Mann wurde aufmerksam, da er alles Gespräch umher verstummt war.\nEr wurde aufmerksam und bemerkte plötzlich, da er alles Gespräch umher verstummt war.\nDer Mann hatte begonnen, ihm meine seltsame Begegnung auf dem Deiche zu erzählen.'] Label: [['Alle sehen sich erschrocken an.\nIch erzähle von dem seltsamen Reiter.']] Sacrebleu: {'score': 1.121617874316939, 'counts': [3, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [6.976744186046512, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.06976744186046512, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3076923076923075, 'translation_length': 43, 'reference_length': 13} Rouge: {'rouge1': 0.07547169811320753, 'rouge2': 0.0, 'rougeL': 0.037735849056603765, 'rougeLsum': 0.037735849056603765} Sari: {'sari': 34.0625} Flesh Reading Ease: 62.4 ---------------------------------------- Source: ['wir haben sichere Leute draußen, die uns Bericht erstatten.«'] Prediction: ['Immer mehr Leute haben sich die Berichten im Interview mit dem 20.\nJuni veröffentlicht.\nSie haben sich dabei auf ihre Leute draußen.\nSie haben sich dabei drauft und sich dabei drauften.'] Label: [['Die geben uns sofort Bescheid, wenn es mit unserem Deich Probleme geben sollte.“ Vorsichtshalber haben wir aber auch unsere Leute draußen.']] Sacrebleu: {'score': 4.674499231292217, 'counts': [6, 2, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 5.882352941176471, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.17142857142857143, 0.058823529411764705, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 35, 'reference_length': 25} Rouge: {'rouge1': 0.21818181818181817, 'rouge2': 0.07547169811320754, 'rougeL': 0.21818181818181817, 'rougeLsum': 0.21818181818181817} Sari: {'sari': 62.32501041935004} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ["unser Hauptdeich ist schon im vorigen Jahrhundert umgelegt. nur drüben an der andern Seite ist's nicht sicher, die Deiche sind dort meist noch mehr nach altem Muster; »wir, hier an der Ostseite, aber glauben, jetzt außer Gefahr zu sein; »Gewiß«, erwiderte er;"] Prediction: ['Der Hauptdeich ist schon im vorigen Jahrhundert umgelegt.\nEr wollte an der andern Seite sein, dass er nur drüben an der andern Seite ist.\nWir glauben, jetzt außer Gefahr zu sein.'] Label: [['Die Deiche dort sind noch nach altem Muster gebaut.\nDie anderen da hinten im Westen, die haben mehr Probleme.\n„Bei uns hier im Osten wurde der Deich vor langer Zeit neu gebaut.\n„Hier haben wir noch Glück“, sagt der Deichgraf.']] Sacrebleu: {'score': 1.3061687727845814, 'counts': [8, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 0.7574651283969664, 'sys_len': 36, 'ref_len': 46} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7574651283969664, 'length_ratio': 0.782608695652174, 'translation_length': 36, 'reference_length': 46} Rouge: {'rouge1': 0.1081081081081081, 'rouge2': 0.0, 'rougeL': 0.08108108108108109, 'rougeLsum': 0.1081081081081081} Sari: {'sari': 30.707823207484363} Flesh Reading Ease: 81.95 ---------------------------------------- Source: ['die Deiche werden ihre Not haben!« »Sie halten hier die Wacht!« sagte ich, mich zu jenem Mann wendend, »es ist bös Wetter draußen;'] Prediction: ['Ein Mann hat einen Wetter draußen.\nDer Mann ist bös Wetter draußen.'] Label: [['„Bestimmt halten Sie hier Wacht wegen der Deiche?\n„Böses Wetter, da draußen“, sage ich.']] Sacrebleu: {'score': 2.537856360538449, 'counts': [2, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [14.285714285714286, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 0.7514772930752859, 'sys_len': 14, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 0.751477293075286, 'length_ratio': 0.7777777777777778, 'translation_length': 14, 'reference_length': 18} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.0689655172413793, 'rougeL': 0.3225806451612903, 'rougeLsum': 0.3225806451612903} Sari: {'sari': 34.45665445665446} Flesh Reading Ease: 97.95 ---------------------------------------- Source: ['Ich grüßte und bat, mich zu ihnen setzen zu dürfen, was bereitwillig gestattet wurde. Als ich eintrat, sah ich etwa ein Dutzend Männer an einem Tische sitzen, der unter den Fenstern entlanglief, eine Punschbowle stand darauf, und ein besonders stattlicher Mann schien die Herrschaft über sie zu führen.'] Prediction: ['Ein Dutzend Männer wurde an einem Tische sitzen, der unter den Fenstern entlanglief, eine Punschbowle stand darauf.\nDer Mann schien die Herrschaft über sie zu führen.'] Label: [['Als ich eintrete, laden die Männer mich zu sich an den Tisch.']] Sacrebleu: {'score': 2.019385597421733, 'counts': [7, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [23.333333333333332, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.23333333333333334, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 30, 'reference_length': 14} Rouge: {'rouge1': 0.2926829268292683, 'rouge2': 0.05128205128205128, 'rougeL': 0.1951219512195122, 'rougeLsum': 0.2926829268292683} Sari: {'sari': 34.32222168242864} Flesh Reading Ease: 73.4 ---------------------------------------- Source: ["t hoge Water!« Dat is um ' »Is wull so wat«, entgegnete der Knecht auf plattdeutsch – und ich erfuhr nachher, daß dieses neben dem Friesischen hier schon seit über hundert Jahren im Schwange gewesen sei –, »Diekgraf und Gevollmächtigten un wecke von de annern Interessenten!"] Prediction: ['Der Knecht ist seit über hundert Jahren im Schwange gewesen.\nDer Knecht entgegnete auf plattdeutsch und erfuhr nachher, da er schon seit über hundert Jahren im Schwange gewesen sei.'] Label: [['Wegen dem Hochwasser.\nUnd auch andere, die Entscheidungen treffen müssen.\n„Der Deichgraf ist da.\nDer Pferdeknecht nickt.']] Sacrebleu: {'score': 3.0532163871777716, 'counts': [6, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [18.75, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 1.0, 'sys_len': 32, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 32, 'reference_length': 22} Rouge: {'rouge1': 0.21276595744680854, 'rouge2': 0.0, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.21276595744680854} Sari: {'sari': 38.070647047726844} Flesh Reading Ease: 71.9 ---------------------------------------- Source: ['»Ist hier Versammlung?« frug ich ihn, da mir jetzt deutlich ein Geräusch von Menschenstimmen und Gläserklirren aus der Stubentür entgegendrang.'] Prediction: ['Im Alter von 99 Jahren ist ein Geräusch von Menschenstimmen und Gläserklirren aus der Stubentür entgegendrang.\nIm Interview mit dem 20-Minuten-Radio-Host Andrea spricht über ihre Versammlung, die sich über ihre Geschichte und ihre Geschichte über ihre Geschichte über ihre Geschichte und ihre Geschichte über ihre Geschichte und ihre Geschichte über ihre Welt und ihre Geschichte über ihre Welt und ihre Geschichte über ihre Welt und ihre Geschichte über ihrer Welt und ihre Geschichte über ihre Welt und ihre Welt und Welt immer wieder aufgeführt.'] Label: [['„Ist hier eine Versammlung?“, frage ich.']] Sacrebleu: {'score': 0.5318176229255347, 'counts': [3, 0, 0, 0], 'totals': [89, 88, 87, 86], 'precisions': [3.3707865168539324, 0.5681818181818182, 0.28735632183908044, 0.14534883720930233], 'bp': 1.0, 'sys_len': 89, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.033707865168539325, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.9, 'translation_length': 89, 'reference_length': 10} Rouge: {'rouge1': 0.04123711340206186, 'rouge2': 0.0, 'rougeL': 0.04123711340206186, 'rougeLsum': 0.04123711340206186} Sari: {'sari': 33.05115936694884} Flesh Reading Ease: 32.7 ---------------------------------------- Source: ['Ich band das meine an einen derselben und überwies es dann dem Knechte, der mir beim Eintritt in den Flur entgegenkam:'] Prediction: ['Im Alter von 99 Jahren ist der Musiker über die Band "Unchained" aufgefordert.\nIm Alter von 99 Jahren ist der Musiker über die Band auf dem Eintritt in den Flur entgegenkam.\nIm Alter von 99 Jahren ist der Musiker über die Band aufgefordert worden.'] Label: [['Am Eingang begrüßt mich der Pferdeknecht.']] Sacrebleu: {'score': 0.8853994618255676, 'counts': [2, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [4.081632653061225, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.04081632653061224, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.0, 'translation_length': 49, 'reference_length': 7} Rouge: {'rouge1': 0.0392156862745098, 'rouge2': 0.0, 'rougeL': 0.0392156862745098, 'rougeLsum': 0.0392156862745098} Sari: {'sari': 35.978835978835974} Flesh Reading Ease: 71.7 ---------------------------------------- Source: ['Ich sah wohl, daß es ein Wirtshaus war;'] Prediction: ['Ein Wirtshaus war in der Nähe des Kantons Bern in der Nähe des Kantons Bern geraten.\nDer Mann war ein Wirtshaus, der sich ein Wirtshaus war.\nNun wurde er von der Polizei verhaftet.'] Label: [['Es ist sicher ein Wirtshaus.']] Sacrebleu: {'score': 2.205438848664384, 'counts': [3, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [8.108108108108109, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.08108108108108109, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.166666666666667, 'translation_length': 37, 'reference_length': 6} Rouge: {'rouge1': 0.09999999999999999, 'rouge2': 0.05263157894736842, 'rougeL': 0.09999999999999999, 'rougeLsum': 0.09999999999999999} Sari: {'sari': 51.47243107769424} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['lag ein großes Haus derselben Art; an der Südseite, rechts von der Haustür, sah ich alle Fenster erleuchtet; Aber ein anderes sah ich, das ich mit Freuden jetzt begrüßte: vor mir, von unten aus dem Kooge, schimmerten eine Menge zerstreuter Lichtscheine zu mir herauf, sie schienen aus jenen langgestreckten friesischen Häusern zu kommen, die vereinzelt auf mehr oder minder hohen Werften lagen, dicht vor mir aber auf halber Höhe des Binnendeiches'] Prediction: ['Ein Binnendeiches-Haus in derselben Art ist ein großes Haus derselben Art.\nEs ist ein großes Haus derselben Art, das sich auf die Südseite zu kommen, die vereinzelt auf mehr oder minder hohen Werften lagen, dicht vor mir aber auf halber Höhe des Binnendeiches.'] Label: [['Ich denke noch immer an die seltsame Gestalt, als ich in der Ferne ein paar Lichter entdecke.']] Sacrebleu: {'score': 1.137287189899225, 'counts': [5, 0, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [10.416666666666666, 1.0638297872340425, 0.5434782608695652, 0.2777777777777778], 'bp': 1.0, 'sys_len': 48, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.10416666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.526315789473684, 'translation_length': 48, 'reference_length': 19} Rouge: {'rouge1': 0.09230769230769231, 'rouge2': 0.0, 'rougeL': 0.06153846153846154, 'rougeLsum': 0.09230769230769231} Sari: {'sari': 35.65639659334154} Flesh Reading Ease: 64.9 ---------------------------------------- Source: ['Dann sah ich sie fern und ferner vor mir;'] Prediction: ['Eine Frau wurde aufgefunden, wie sie sie fern und ferner vor mir ist.\nDie Frau war zuvor aufgefunden und wurde dabei verletzt.\nSie war auf der Flucht, wie sie sie sie fern und ferner vor mir ist.'] Label: [['Sie verschwinden im Dunkeln.']] Sacrebleu: {'score': 1.038539619163422, 'counts': [2, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [4.761904761904762, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.047619047619047616, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.4, 'translation_length': 42, 'reference_length': 5} Rouge: {'rouge1': 0.04878048780487805, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 36.547619047619044} Flesh Reading Ease: 85.8 ---------------------------------------- Source: ['mir war, als streifte mich der fliegende Mantel, und die Erscheinung war, wie das erste Mal, lautlos an mir vorübergestoben.'] Prediction: ['Immer mehr Menschen wurden am Sonntag in der Nacht auf Sonntag in die Nacht auf Sonntag beschlossen.\nIm Moment wurde der fliegende Mantel von der Nacht auf Sonntag auf Sonntag auf Sonntag geschlossen.\nIm Moment wurde der fliegende Mantel von der Nacht auf Sonntag auf Sonntag geschlossen.'] Label: [['Aber wieder ist nichts zu hören.\nFast streift mich sein Mantel.']] Sacrebleu: {'score': 0.959641509636166, 'counts': [3, 0, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [6.0, 1.0204081632653061, 0.5208333333333334, 0.26595744680851063], 'bp': 1.0, 'sys_len': 50, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.06, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8461538461538463, 'translation_length': 50, 'reference_length': 13} Rouge: {'rouge1': 0.03389830508474576, 'rouge2': 0.0, 'rougeL': 0.03389830508474576, 'rougeLsum': 0.03389830508474576} Sari: {'sari': 45.27777777777778} Flesh Reading Ease: 70.7 ---------------------------------------- Source: ['In Gedanken darüber ritt ich weiter, aber ich hatte nicht lange Zeit zum Denken, schon fuhr es von rückwärts wieder an mir vorbei;'] Prediction: ['In Gedanken fuhr es von rückwärts wieder an mir vorbei.\nDer Mann hatte nicht lange Zeit zum Denken, aber auch der Schweizer hatte nicht lange Zeit zum Denken.'] Label: [['Diesmal in die andere Richtung.\nWährend ich überlege, stürmt der Reiter wieder an mir vorbei.']] Sacrebleu: {'score': 12.627447243144086, 'counts': [8, 4, 3, 2], 'totals': [31, 30, 29, 28], 'precisions': [25.806451612903224, 13.333333333333334, 10.344827586206897, 7.142857142857143], 'bp': 1.0, 'sys_len': 31, 'ref_len': 18} Bleu: {'bleu': 0.1262744724314408, 'precisions': [0.25806451612903225, 0.13333333333333333, 0.10344827586206896, 0.07142857142857142], 'brevity_penalty': 1.0, 'length_ratio': 1.7222222222222223, 'translation_length': 31, 'reference_length': 18} Rouge: {'rouge1': 0.25531914893617025, 'rouge2': 0.13333333333333333, 'rougeL': 0.21276595744680848, 'rougeLsum': 0.25531914893617025} Sari: {'sari': 46.62362637362637} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Was wollte der?'] Prediction: ['Der französische Chef der Stadt hatte am Sonntagabend seine Frau aufgefunden.\nEr wollte sie sich mit dem Mann aufgeben und wollte sie sich mit dem Mann verlassen.\nDer Chef hatte sich mit dem Mann zu sehen, dass er sich mit dem Mann nicht mehr geschickt hatte.'] Label: [['„Und was wollte er von mir?“']] Sacrebleu: {'score': 0.8671339908544159, 'counts': [2, 0, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [4.0, 1.0204081632653061, 0.5208333333333334, 0.26595744680851063], 'bp': 1.0, 'sys_len': 50, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.04, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.25, 'translation_length': 50, 'reference_length': 8} Rouge: {'rouge1': 0.11320754716981131, 'rouge2': 0.0, 'rougeL': 0.11320754716981131, 'rougeLsum': 0.11320754716981131} Sari: {'sari': 42.75985663082437} Flesh Reading Ease: 82.8 ---------------------------------------- Source: ['Wer war das?'] Prediction: ['Der französische Präsident hatte sich in der Nacht auf Sonntag zu Gast geschickt.\nEr war das erste Mal, dass er sich in der Nacht geschickt hatte.\nDer Präsident war mit einem ähnlichen Verbot zu Gast geschickt.'] Label: [['„Wer war das?“, frage ich mich leise.']] Sacrebleu: {'score': 2.185068324154416, 'counts': [4, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [10.0, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6363636363636362, 'translation_length': 40, 'reference_length': 11} Rouge: {'rouge1': 0.08695652173913043, 'rouge2': 0.045454545454545456, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 42.50000000000001} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['– Und jetzt fiel mir bei, ich hatte keinen Hufschlag, kein Keuchen des Pferdes vernommen; und Roß und Reiter waren doch hart an mir vorbeigefahren!'] Prediction: ['Der Schweizer Gast hatte am Sonntag seine neue Woche mit dem Pferdes geäussert.\nEr wurde von der Woche nicht mehr geschlossen, sondern auch mit den Reitern.\nAuch der Gast war nicht mehr ganz nach der Woche, sondern auch der Gast mit den Reitern.'] Label: [['Kein Hufschlag, kein Keuchen des Pferdes.\nNichts ist davon zu hören.\nEr reitet an mir vorbei.']] Sacrebleu: {'score': 2.0018796078701695, 'counts': [6, 1, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [12.5, 2.127659574468085, 1.0869565217391304, 0.5555555555555556], 'bp': 1.0, 'sys_len': 48, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.02127659574468085, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 48, 'reference_length': 20} Rouge: {'rouge1': 0.06557377049180328, 'rouge2': 0.0, 'rougeL': 0.06557377049180328, 'rougeLsum': 0.06557377049180328} Sari: {'sari': 31.353146671774123} Flesh Reading Ease: 83.8 ---------------------------------------- Source: ['aber immer deutlicher, wenn der halbe Mond ein karges Licht herabließ, glaubte ich eine dunkle Gestalt zu erkennen, und bald, da sie näher kam, sah ich es, sie saß auf einem Pferde, einem hochbeinigen hageren Schimmel;'] Prediction: ['Eine dunkle Gestalt zu erkennen, wenn der halbe Mond ein karges Licht herabließ, glaubte ich eine dunkle Gestalt zu erkennen.\nAber auch ein hochbeiniger Schimmel sah eine dunkle Gestalt.'] Label: [['Ein dunkler Reiter auf einem großen, mageren Schimmel.\nEine Gestalt reitet mir entgegen.\nAuf einmal geben die Wolken für einen Augenblick den Mond frei.']] Sacrebleu: {'score': 1.82680755836395, 'counts': [7, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.21212121212121213, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1785714285714286, 'translation_length': 33, 'reference_length': 28} Rouge: {'rouge1': 0.18181818181818185, 'rouge2': 0.0, 'rougeL': 0.14545454545454548, 'rougeLsum': 0.18181818181818185} Sari: {'sari': 36.540129467344656} Flesh Reading Ease: 60.2 ---------------------------------------- Source: ['meine verklommenen Hände konnten kaum den Zügel halten, und ich verdachte es nicht den Krähen und Möwen, die sich fortwährend krächzend und gackernd vom Sturm ins Land hineintreiben ließen. Es war eiskalt;'] Prediction: ['Immer mehr Krähen und Möwen sind sich in den vergangenen Tagen ins Land gefunden.\nEs war eiskalt, wie sie sich in den verklommenen Händen verdachten.\nDas war eiskalt, wie sie sich in den vergangenen Tagen hineintreiben lieben.'] Label: [['Sie können kaum noch die Zügel halten.\nMeine Hände erstarren vor Kälte.']] Sacrebleu: {'score': 1.038539619163422, 'counts': [2, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [4.761904761904762, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.047619047619047616, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 42, 'reference_length': 14} Rouge: {'rouge1': 0.07142857142857144, 'rouge2': 0.0, 'rougeL': 0.07142857142857144, 'rougeLsum': 0.07142857142857144} Sari: {'sari': 32.08524184023276} Flesh Reading Ease: 68.25 ---------------------------------------- Source: ['denn auch der halbe Mond, der jetzt in der Höhe stand, war meist von treibendem Wolkendunkel überzogen.'] Prediction: ['Der halbe Mond, der jetzt in der Höhe stand, ist meist von treibendem Wolkendunkel überzogen.\nDer halbe Mond war jetzt in der Höhe stand, war meist von treibendem Wolkendunkel überzogen.'] Label: [['Vor dem Mond ziehen düstere Wolken her.']] Sacrebleu: {'score': 1.2557690800697192, 'counts': [2, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [5.714285714285714, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05714285714285714, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.375, 'translation_length': 35, 'reference_length': 8} Rouge: {'rouge1': 0.05, 'rouge2': 0.0, 'rougeL': 0.05, 'rougeLsum': 0.05} Sari: {'sari': 35.294117647058826} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['aber ich sah nichts als die gelbgrauen Wellen, die unaufhörlich wie mit Wutgebrüll an den Deich hinaufschlugen und mitunter mich und das Pferd mit schmutzigem Schaum bespritzten;'] Prediction: ['Die Wutgebrüll-Gruppe ist ein gelbgraues Wellen.\nDas Pferd bespritzt mit schmutzigem Schaum.'] Label: [['Die Wellen schlagen Schaum auf den Deich hinauf.']] Sacrebleu: {'score': 4.016138436407654, 'counts': [4, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [28.571428571428573, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5555555555555556, 'translation_length': 14, 'reference_length': 9} Rouge: {'rouge1': 0.2727272727272727, 'rouge2': 0.0, 'rougeL': 0.2727272727272727, 'rougeLsum': 0.2727272727272727} Sari: {'sari': 45.976190476190474} Flesh Reading Ease: 68.7 ---------------------------------------- Source: ['Zur Linken hatte ich jetzt schon seit über einer Stunde die öde, bereits von allem Vieh geleerte Marsch, zur Rechten, und zwar in unbehaglichster Nähe, das Wattenmeer der Nordsee;'] Prediction: ['Ein Wattenmeer der Nordsee hat seit über einer Stunde die öde.\nJetzt hatte er seit über einer Stunde die öde, bereits von allem Vieh geleerte Marsch zur Rechten.'] Label: [['Rechts davon tobt die wilde Nordsee.\nLinks vom Deich liegt das dunkle Land.']] Sacrebleu: {'score': 1.696134390396339, 'counts': [4, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.066666666666667, 'translation_length': 31, 'reference_length': 15} Rouge: {'rouge1': 0.0975609756097561, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 35.19927536231884} Flesh Reading Ease: 78.25 ---------------------------------------- Source: ['Es war im dritten Jahrzehnt unseres Jahrhunderts, an einem Oktobernachmittag – so begann der damalige Erzähler –, als ich bei starkem Unwetter auf einem nordfriesischen Deich entlangritt.'] Prediction: ['Im Oktobernachmittag wurde der damalige Erzähler auf einem nordfriesischen Deich entlangritt.\nDer damalige Erzähler war im dritten Jahrzehnt des Jahrhunderts, an einem Oktobernachmittag, als sich bei starkem Unwetter auf einem nordfriesischen Deich entlangritt.'] Label: [['Mitten in diesem Unwetter reite ich am Deich entlang.\nEs stürmt und regnet ohne Unterbrechung.\nEs ist ein kalter Nachmittag im Oktober.']] Sacrebleu: {'score': 1.4899946568663818, 'counts': [5, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [13.513513513513514, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.13513513513513514, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.48, 'translation_length': 37, 'reference_length': 25} Rouge: {'rouge1': 0.10344827586206898, 'rouge2': 0.0, 'rougeL': 0.06896551724137931, 'rougeLsum': 0.10344827586206898} Sari: {'sari': 33.02469135802469} Flesh Reading Ease: 34.8 ---------------------------------------- Source: ['Das ganze Gefolge, was er mit sich hatte, sah und sah, aber es bekam nicht mehr heraus als alle die andern, aber sie sagten gleich wie der Kaiser: "Oh, das ist hübsch!'] Prediction: ['Einige Frauen sind in der Nacht auf Sonntag in der Nacht auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zu sehen.\nDer Kaiser warnt vor einer Woche, warum er sich mit sich hatte, sah und sah und sah, aber es bekam nicht mehr heraus als alle die andern.'] Label: [['Alle nicken eifrig und rufen „Oh!“ und „Ah!“ Sie machen es dem Kaiser aber nach und rufen: „Oh, wie schön die Stoffe sind!“ Alle anderen sehen nichts.']] Sacrebleu: {'score': 0.771504154132731, 'counts': [10, 0, 0, 0], 'totals': [83, 82, 81, 80], 'precisions': [12.048192771084338, 0.6097560975609756, 0.30864197530864196, 0.15625], 'bp': 1.0, 'sys_len': 83, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.12048192771084337, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3055555555555554, 'translation_length': 83, 'reference_length': 36} Rouge: {'rouge1': 0.169811320754717, 'rouge2': 0.0, 'rougeL': 0.07547169811320754, 'rougeLsum': 0.11320754716981134} Sari: {'sari': 35.727486559139784} Flesh Reading Ease: 59.1 ---------------------------------------- Source: ['"es hat meinen allerhöchsten Beifall!" und er nickte zufrieden und betrachtete den leeren Webstuhl; "Oh, es ist sehr hübsch", sagte er;'] Prediction: ['Ein Mann hat einen allerhöchsten Beifall und nickte zufrieden und betrachtete den leeren Webstuhl.\n"Oh, es ist sehr hübsch", sagte er.\n"Oh, es ist sehr hübsch", sagte er.'] Label: [['Dabei zeigt er zufrieden auf die leeren Webstühle.\nGute Arbeit!“ Er überlegt und sagt dann: „Die Stoffe sind tatsächlich sehr schön.']] Sacrebleu: {'score': 1.5342333164810604, 'counts': [7, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [17.94871794871795, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.1794871794871795, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 39, 'reference_length': 26} Rouge: {'rouge1': 0.21818181818181817, 'rouge2': 0.0, 'rougeL': 0.14545454545454548, 'rougeLsum': 0.1818181818181818} Sari: {'sari': 34.40591481828595} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['Tauge ich nicht dazu, Kaiser zu sein?'] Prediction: ['Der Schweizer Gastronomiker hat seine Frau aufgefunden, dass sie sich nicht dazu sein könnte.\nWir haben sie sich mit dem Gastronomiker aufgefunden, dass sie sich nicht dazu sein könnte.'] Label: [['Kann ein Dummkopf Kaiser sein?']] Sacrebleu: {'score': 1.123099644603982, 'counts': [1, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [3.0303030303030303, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.030303030303030304, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.5, 'translation_length': 33, 'reference_length': 6} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 47.85714285714286} Flesh Reading Ease: 60.2 ---------------------------------------- Source: ['Bin ich dumm?'] Prediction: ['Einige Jahre nach dem Interview mit dem 20-Minuten-Radio-Host Andrea äusserte sich über ihre Worte, die ihn ihr Leben geschickt hat.\nWir haben ihn zu tun, was sie sich darauf hinnehmen?'] Label: [['Bin ich denn ein Dummkopf?']] Sacrebleu: {'score': 1.0253311603116817, 'counts': [1, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [2.7777777777777777, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.027777777777777776, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.0, 'translation_length': 36, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 45.83333333333333} Flesh Reading Ease: 65.55 ---------------------------------------- Source: ['Das ist ja erschrecklich!'] Prediction: ['Der frühere Jahre alte Schweizer ist mit seinem Mann auf dem Königstück geschickt.\nEr warnt vor allem im Alter von 99 Jahren.\nNun ist er zu sehen, wie er sich das erste Mal war.'] Label: [['Das darf nicht sein!']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 38, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.6, 'translation_length': 38, 'reference_length': 5} Rouge: {'rouge1': 0.04878048780487805, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 59.72222222222222} Flesh Reading Ease: 86.8 ---------------------------------------- Source: ['ich sehe gar nichts!'] Prediction: ['Der französische Präsident hat seine Frau aufgefunden, dass sie sich nichts verlassen hat.\nDie Frau hat sich nicht mehr gefunden, sondern auch ihn nach dem Präsidenten.'] Label: [['Ich sehe keine Stoffe!\nWas ist denn hier los?']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 30, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.727272727272727, 'translation_length': 30, 'reference_length': 11} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 41.66666666666667} Flesh Reading Ease: 67.55 ---------------------------------------- Source: [",Was!' dachte der Kaiser;"] Prediction: ['Der Kaiser hatte am Freitag seine Frau aufgefunden.\nDie Frau war mit ihrem Mann aufgefunden und dabei aufgefunden.\nDie Frau wurde dabei von ihm verhaftet und dabei verletzt.'] Label: [['Nanu?, denkt der Kaiser.']] Sacrebleu: {'score': 1.4262733286728257, 'counts': [2, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [6.451612903225806, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.06451612903225806, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.428571428571429, 'translation_length': 31, 'reference_length': 7} Rouge: {'rouge1': 0.125, 'rouge2': 0.06666666666666667, 'rougeL': 0.125, 'rougeLsum': 0.125} Sari: {'sari': 64.33574879227054} Flesh Reading Ease: 65.4 ---------------------------------------- Source: ['"Ja, ist das nicht prächtig?" sagten die beiden ehrlichen Staatsmänner.'] Prediction: ['Ein ehrlicher Staatsmänner sagt, "Ja, ist das nicht prächtig?"'] Label: [['Wie schön die Formen und Farben sind!“ Wir haben die Wahrheit gesagt.\nDie beiden sagen: „Seht ihr?']] Sacrebleu: {'score': 1.6037083902133962, 'counts': [1, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [7.142857142857143, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 0.5647181220077593, 'sys_len': 14, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5647181220077593, 'length_ratio': 0.6363636363636364, 'translation_length': 14, 'reference_length': 22} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 28.226495726495727} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Mit einer ganzen Schar auserwählter Männer, unter denen auch die beiden ehrlichen Staatsmänner waren, die schon früher dagewesen, ging er zu den beiden listigen Betrügern hin, die nun aus allen Kräften webten, aber ohne Faser oder Faden.'] Prediction: ['Ein auserwählter Männer aus der Schweiz ging aus allen Kräften aus einer ganzen Schar auserwählter Männer hin.\nDiese gingen aus allen Kräften ohne Faser oder Faden.'] Label: [['Auch die beiden Minister sind dabei, die schon einmal hier waren.\nAlle Minister und Diener begleiten ihn.']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 28, 'reference_length': 20} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 30.89411048820338} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Nun wollte der Kaiser es selbst sehen, während es noch auf dem Webstuhl sei.'] Prediction: ['Ein Webstuhl wurde von der Kaiser aufgefunden.\nDas wollte der Kaiser selbst sehen.'] Label: [['Davon will sich der Kaiser nun selbst überzeugen.']] Sacrebleu: {'score': 6.250381527944883, 'counts': [4, 1, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [26.666666666666668, 7.142857142857143, 3.8461538461538463, 2.0833333333333335], 'bp': 1.0, 'sys_len': 15, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.26666666666666666, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 15, 'reference_length': 9} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.10526315789473685, 'rougeL': 0.2857142857142857, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 50.34722222222222} Flesh Reading Ease: 74.05 ---------------------------------------- Source: ['"Ja, es ist ganz allerliebst!" sagte er zum Kaiser.'] Prediction: ['Ein Mann ist in der Nacht auf Sonntag in der Nacht auf Sonntag geschlossen.\nEr war zum ersten Mal geschlossen und sagte, "Ja, es ist ganz allerliebst!"'] Label: [['„Sie sind wirklich prächtig!“ Er sagt zum Kaiser sogar:']] Sacrebleu: {'score': 1.4780822562194806, 'counts': [3, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [9.090909090909092, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.75, 'translation_length': 33, 'reference_length': 12} Rouge: {'rouge1': 0.10810810810810811, 'rouge2': 0.0, 'rougeL': 0.10810810810810811, 'rougeLsum': 0.10810810810810811} Sari: {'sari': 26.458333333333332} Flesh Reading Ease: 84.6 ---------------------------------------- Source: ['Daher lobte er das Zeug, das er nicht sah, und versicherte ihnen seine Freude über die schönen Farben und das herrliche Muster.'] Prediction: ['Ein Mann hatte sich in einem schönen Muster über die schönen Farben geschickt.\nDas Zeug lobte ihnen seine Freude über die schönen Farben und das herrliche Muster.\nDer Mann lobte ihnen seine Freude über die schönen Farben und das herrliche Muster.'] Label: [['Dem Kaiser berichtet er, dass auch die neuen Stoffe sehr schön sind.']] Sacrebleu: {'score': 0.9896324688555468, 'counts': [2, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [4.545454545454546, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.045454545454545456, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.142857142857143, 'translation_length': 44, 'reference_length': 14} Rouge: {'rouge1': 0.06896551724137931, 'rouge2': 0.0, 'rougeL': 0.06896551724137931, 'rougeLsum': 0.06896551724137931} Sari: {'sari': 33.7962962962963} Flesh Reading Ease: 66.85 ---------------------------------------- Source: ["Das wäre seltsam genug, aber das muß man sich nicht merken lassen!' es ist also mein gutes Amt, zu dem ich nicht tauge! ,Dumm bin ich nicht', dachte der Mann;"] Prediction: ['Ein Mann hat seltsam genug, aber das muß man sich nicht merken lassen!\nDumm bin ich nicht, dumm bin ich nicht!'] Label: [['Ich darf mir nichts anmerken lassen, denkt er.\nWird er bald kein Minister mehr sein?\nIst er dumm?']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1363636363636365, 'translation_length': 25, 'reference_length': 22} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.0, 'rougeL': 0.10256410256410256, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 35.12968478530653} Flesh Reading Ease: 99.3 ---------------------------------------- Source: ['weil aber außer dem Webstuhl nichts da war, so konnte er nichts sehen. es ging ihm aber gerade wie dem ersten, er guckte und guckte;'] Prediction: ['Ein Mann wurde in der Nacht auf Sonntag von einem sexuellen Porno-Video veröffentlicht.\nDas Video veröffentlicht ihm, dass er sich nichts sehen konnte.\nDas Video veröffentlicht ihm, dass er sich nichts sehen konnte.'] Label: [['Aber auch der zweite Minister sieht nichts.']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.75, 'translation_length': 38, 'reference_length': 8} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 53.19986179361179} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Der Kaiser sandte bald wieder einen anderen tüchtigen Staatsmann hin, um zu sehen, wie es mit dem Weben stehe und ob das Zeug bald fertig sei;'] Prediction: ['Der Kaiser hat einen anderen tüchtigen Staatsmann hin, um zu sehen, wie es mit dem Weben stehe und ob das Zeug bald fertig sei.\nDer Kaiser hatte bald wieder einen anderen tüchtigen Staatsmann hin, um zu sehen, wie es mit dem Weben stehe und ob das Zeug bald fertig sei.'] Label: [['Er will wissen, ob die Kleider endlich fertig sind.\nDann schickt der Kaiser einen anderen Minister in die Weberei zu den beiden Männern.']] Sacrebleu: {'score': 1.8900924361305647, 'counts': [9, 1, 0, 0], 'totals': [56, 55, 54, 53], 'precisions': [16.071428571428573, 1.8181818181818181, 0.9259259259259259, 0.4716981132075472], 'bp': 1.0, 'sys_len': 56, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.16071428571428573, 0.01818181818181818, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1538461538461537, 'translation_length': 56, 'reference_length': 26} Rouge: {'rouge1': 0.18421052631578946, 'rouge2': 0.05405405405405406, 'rougeL': 0.18421052631578946, 'rougeLsum': 0.18421052631578946} Sari: {'sari': 39.29124806317789} Flesh Reading Ease: 73.1 ---------------------------------------- Source: ['Sie steckten alles in ihre eigenen Taschen, auf den Webstuhl kam kein Faden, aber sie fuhren fort, wie bisher an den leeren Stühlen zu arbeiten.'] Prediction: ['Eine Frau aus den USA fuhren fort, wie bisher an den leeren Stühlen zu arbeiten.\nSie war auf den Webstuhl kein Faden, aber sie fuhren fort, wie bisher an den leeren Stühlen zu arbeiten.'] Label: [['Die Webstühle bleiben leer.\nDenn sie weben überhaupt keinen Stoff.\nDas Geld verschwindet aber wieder einfach in ihren Taschen.']] Sacrebleu: {'score': 1.3339264902154053, 'counts': [4, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [10.256410256410257, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.10256410256410256, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7727272727272727, 'translation_length': 39, 'reference_length': 22} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 32.83208020050125} Flesh Reading Ease: 81.1 ---------------------------------------- Source: ['Nun verlangten die Betrüger mehr Geld, mehr Seide und mehr Gold zum Weben.'] Prediction: ['Nun verlangten die Betrüger mehr Geld, mehr Seide und mehr Gold zum Weben.\nDie Betrüger verlangten mehr Geld, mehr Seide und mehr Gold zum Weben.'] Label: [['Sie brauchen nämlich noch mehr teure Stoffe für die Kleider.\nJetzt möchten die Betrüger noch mehr Geld vom Kaiser.']] Sacrebleu: {'score': 4.1858747270392405, 'counts': [7, 2, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 7.142857142857143, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.380952380952381, 'translation_length': 29, 'reference_length': 21} Rouge: {'rouge1': 0.27999999999999997, 'rouge2': 0.12499999999999997, 'rougeL': 0.24, 'rougeLsum': 0.24} Sari: {'sari': 39.819182389937104} Flesh Reading Ease: 79.75 ---------------------------------------- Source: ['Der alte Minister merkte gut auf, damit er dasselbe sagen könne, wenn er zum Kaiser zurückkomme, und das tat er auch.'] Prediction: ['Der alte Minister der Schweiz hat sich immer wieder zum Kaiser zurückkomme.\nDer alte Minister merkte gut auf, damit er dasselbe sagen könne, wenn er zum Kaiser zurückkomme.'] Label: [['Damit er dem Kaiser alles genau erzählen kann.\nDer alte Minister hört aufmerksam zu.']] Sacrebleu: {'score': 8.35227127473685, 'counts': [7, 3, 2, 1], 'totals': [32, 31, 30, 29], 'precisions': [21.875, 9.67741935483871, 6.666666666666667, 3.4482758620689653], 'bp': 1.0, 'sys_len': 32, 'ref_len': 16} Bleu: {'bleu': 0.0835227127473685, 'precisions': [0.21875, 0.0967741935483871, 0.06666666666666667, 0.034482758620689655], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 32, 'reference_length': 16} Rouge: {'rouge1': 0.25531914893617014, 'rouge2': 0.13333333333333333, 'rougeL': 0.1702127659574468, 'rougeLsum': 0.25531914893617014} Sari: {'sari': 42.16388655844226} Flesh Reading Ease: 60.7 ---------------------------------------- Source: ['"Nun, das freut uns!" sagten beide Weber, und darauf benannten sie die Farben mit Namen und erklärten das seltsame Muster.'] Prediction: ['Weber und Weber haben sich mit seltsame Muster einen seltsame Muster geschickt.\nDas seltsame Muster wurde von der beiden veröffentlicht.\nDie beiden haben sich mit Namen und erklären das seltsame Muster.'] Label: [['Sie beschreiben die Stoffe in allen Einzelheiten.\nDie Betrüger nicken zufrieden.']] Sacrebleu: {'score': 2.4092489848483223, 'counts': [3, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6153846153846154, 'translation_length': 34, 'reference_length': 13} Rouge: {'rouge1': 0.04444444444444444, 'rouge2': 0.0, 'rougeL': 0.04444444444444444, 'rougeLsum': 0.04444444444444444} Sari: {'sari': 35.96028154851684} Flesh Reading Ease: 64.4 ---------------------------------------- Source: ['– Ja, ich werde dem Kaiser sagen, daß es mir sehr gefällt!" "Dieses Muster und diese Farben!'] Prediction: ['Im Podcast "Unchained" findest du jeden zweiten Dienstag mit Host Andrea über Social Media, die ihre Leistungen und ihre Leistungen auf Spotify und Apple Podcasts ausgestrahlt werden.\nHier gibts die besten Folgen der 20-Minuten-App, bei Spotify und TuneIn.'] Label: [['Ich werde das dem Kaiser mitteilen.“ „Diese Formen, diese Farben, wunderbar!']] Sacrebleu: {'score': 1.045953676514853, 'counts': [3, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [6.521739130434782, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.06521739130434782, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.875, 'translation_length': 46, 'reference_length': 16} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 48.306088141095316} Flesh Reading Ease: 49.85 ---------------------------------------- Source: ['"Oh, es ist niedlich, ganz allerliebst!" antwortete der alte Minister und sah durch seine Brille.'] Prediction: ['Der alte Minister der deutschen Staaten hat sich am Sonntagabend über seine Brille geschickt.\nDie beiden waren nicht nur, sondern auch der alte Minister der deutschen Staaten.'] Label: [['„Oh, alles sehr schön!“, sagt der Minister schnell.']] Sacrebleu: {'score': 1.7557381354086663, 'counts': [4, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.1111111111111111, 'rouge2': 0.0, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.1111111111111111} Sari: {'sari': 45.51282051282051} Flesh Reading Ease: 67.05 ---------------------------------------- Source: ['" fragte der eine von den Webern. "Nun, Sie sagen nichts dazu?'] Prediction: ['Die Schweizerin und der Schweizerin sind sich in den letzten Tagen nicht mehr gefragt.\nSie sagen nichts dazu, sagen nichts dazu.'] Label: [['„Sie sagen ja gar nichts“, meint der andere Betrüger.']] Sacrebleu: {'score': 2.224972978585352, 'counts': [4, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1818181818181817, 'translation_length': 24, 'reference_length': 11} Rouge: {'rouge1': 0.25806451612903225, 'rouge2': 0.06896551724137932, 'rougeL': 0.19354838709677416, 'rougeLsum': 0.25806451612903225} Sari: {'sari': 38.88888888888889} Flesh Reading Ease: 81.75 ---------------------------------------- Source: ['Das habe ich nie geglaubt, und das darf kein Mensch wissen!'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in Zürich (D) geschickt und darf kein Mensch wissen.\nDas hatte er nie geglaubt, das darf kein Mensch wissen.\nDas hatte er nie geglaubt, und darf kein Mensch wissen.'] Label: [['O weh, das darf niemand wissen!']] Sacrebleu: {'score': 3.252140229803573, 'counts': [4, 2, 1, 0], 'totals': [45, 44, 43, 42], 'precisions': [8.88888888888889, 4.545454545454546, 2.3255813953488373, 1.1904761904761905], 'bp': 1.0, 'sys_len': 45, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.08888888888888889, 0.045454545454545456, 0.023255813953488372, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.625, 'translation_length': 45, 'reference_length': 8} Rouge: {'rouge1': 0.13333333333333336, 'rouge2': 0.046511627906976744, 'rougeL': 0.13333333333333336, 'rougeLsum': 0.13333333333333336} Sari: {'sari': 36.25702981647108} Flesh Reading Ease: 91.25 ---------------------------------------- Source: ["Dann zeigten sie auf den leeren Stuhl, und der arme, alte Minister fuhr fort, die Augen aufzureißen, aber er konnte nichts sehen, denn es war nichts da. ,Herr Gott', dachte er, sollte ich dumm sein?"] Prediction: ['Der Minister der deutschen Stadt hatte sich auf den leeren Stuhl geschützt.\nDer Minister fuhr fort, die Augen aufzureißen.\nDer Minister war nichts sehen, denn es war nichts da.'] Label: [['Ich bin also dumm, denkt der Minister.\nDer alte Minister schaut hin, sieht aber nichts.']] Sacrebleu: {'score': 3.1707499796910508, 'counts': [9, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [26.470588235294116, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2647058823529412, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7894736842105263, 'translation_length': 34, 'reference_length': 19} Rouge: {'rouge1': 0.21739130434782605, 'rouge2': 0.09090909090909091, 'rougeL': 0.21739130434782605, 'rougeLsum': 0.21739130434782605} Sari: {'sari': 34.99813248512013} Flesh Reading Ease: 82.55 ---------------------------------------- Source: ['Beide Betrüger baten ihn näher zu treten und fragten, ob es nicht ein hübsches Muster und schöne Farben seien.'] Prediction: ['Ein Mann wurde in der Nacht auf Sonntag in Zürich von einem Muster gefunden.\nDer Mann batte näher zu treten und fragte, ob es nicht ein hübsches Muster seien.\nDer Mann batte näher zu treten und fragte, ob es nicht ein hübsches Muster und schöne Farben seien.'] Label: [['Und was halten Sie von dem Muster, von den Formen?“ „Sind die Farben nicht schön?\n„Kommen Sie nur näher“, sagt einer von den Betrügern.']] Sacrebleu: {'score': 1.139054792042459, 'counts': [7, 0, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [13.461538461538462, 0.9803921568627451, 0.5, 0.25510204081632654], 'bp': 1.0, 'sys_len': 52, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.1346153846153846, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 52, 'reference_length': 30} Rouge: {'rouge1': 0.22499999999999998, 'rouge2': 0.025641025641025644, 'rougeL': 0.125, 'rougeLsum': 0.15} Sari: {'sari': 38.34251245738263} Flesh Reading Ease: 76.55 ---------------------------------------- Source: ['Aber das sagte er nicht.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in der Nacht auf Sonntag zu Gast geschickt.\nEr sagte, er habe sich nicht gefragt, sondern nicht ganz nur nach dem Vorfall.'] Label: [['Doch das sagt er natürlich nicht laut.']] Sacrebleu: {'score': 1.389736936231864, 'counts': [3, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.375, 'translation_length': 35, 'reference_length': 8} Rouge: {'rouge1': 0.10256410256410256, 'rouge2': 0.0, 'rougeL': 0.10256410256410256, 'rougeLsum': 0.10256410256410256} Sari: {'sari': 60.416666666666664} Flesh Reading Ease: 88.45 ---------------------------------------- Source: [",Ich kann ja nichts erblicken!' ,Gott behüte uns!' dachte der alte Minister und riß die Augen auf. Nun ging der alte, gute Minister in den Saal hinein, wo die zwei Betrüger saßen und an den leeren Webstühlen arbeiteten."] Prediction: ['Der alte, gute Minister in den Saal hinein, wo die zwei Betrüger saßen und an den leeren Webstühlen arbeiteten.\nNun ging der alte, gute Minister in den Saal hinein, wo die zwei Betrüger saßen und an den leeren Webstühlen arbeiteten.'] Label: [['Du lieber Himmel, denkt er, ich sehe nichts!\nAls der alte Minister die Weberei betritt, ist der Schreck groß.']] Sacrebleu: {'score': 2.2479007417262973, 'counts': [8, 1, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [17.391304347826086, 2.2222222222222223, 1.1363636363636365, 0.5813953488372093], 'bp': 1.0, 'sys_len': 46, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.17391304347826086, 0.022222222222222223, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9166666666666667, 'translation_length': 46, 'reference_length': 24} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.031746031746031744, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.12307692307692308} Sari: {'sari': 33.33088066144332} Flesh Reading Ease: 60.55 ---------------------------------------- Source: [",Ich will meinen alten, ehrlichen Minister zu den Webern senden', dachte der Kaiser, er kann am besten beurteilen, wie der Stoff sich ausnimmt, denn er hat Verstand, und keiner versieht sein Amt besser als er!'"] Prediction: ['Der Kaiser will seinen alten, ehrlichen Minister zu den Webern senden.\nDer Kaiser will seinen alten, ehrlichen Minister zu den Webern senden.'] Label: [['Zur Sicherheit schickt er erst einen alten, weisen Minister in die Weberei.']] Sacrebleu: {'score': 3.435812002459847, 'counts': [4, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.11764705882352942, 'rouge2': 0.0, 'rougeL': 0.11764705882352942, 'rougeLsum': 0.11764705882352942} Sari: {'sari': 39.65277777777778} Flesh Reading Ease: 63.7 ---------------------------------------- Source: [",Nun möchte ich doch wissen, wie weit sie mit dem Zeuge sind!' dachte der Kaiser, aber es war ihm beklommen zumute, wenn er daran dachte, daß keiner, der dumm sei oder schlecht zu seinem Amte tauge, es sehen könne."] Prediction: ['Der Kaiser hatte sich mit dem Zeuge das Amte geschickt.\nDer Kaiser möchte sie wissen, wie weit sie mit dem Zeuge sind.\nDer Mann hatte sich dabei beklommen, wenn er daran dachte, daß keiner, der dumm sei oder schlecht zu seinem Amte tauge, es sehen könne.'] Label: [['Denn wer dumm ist, kann die Stoffe nicht sehen.\nDoch dann zweifelt der Kaiser.\nSollte er nicht mal nachschauen?\nWie weit sind wohl die Weber mit seinen Kleidern?\nNach einiger Zeit wird der Kaiser neugierig.']] Sacrebleu: {'score': 1.2790280156012481, 'counts': [13, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [24.074074074074073, 0.9433962264150944, 0.4807692307692308, 0.24509803921568626], 'bp': 1.0, 'sys_len': 54, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.24074074074074073, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3170731707317074, 'translation_length': 54, 'reference_length': 41} Rouge: {'rouge1': 0.26506024096385544, 'rouge2': 0.07407407407407407, 'rougeL': 0.14457831325301204, 'rougeLsum': 0.26506024096385544} Sari: {'sari': 37.34457385988302} Flesh Reading Ease: 76.95 ---------------------------------------- Source: ['Trotzdem verlangten sie die feinste Seide und das prächtigste Gold, das steckten sie aber in ihre eigene Tasche und arbeiteten an den leeren Stühlen bis spät in die Nacht hinein.'] Prediction: ['Eine feinste Seide hat sich in ihre eigene Tasche verlangt.\nDas prächtigste Gold steckte sie aber in ihre eigene Tasche und arbeiteten an den leeren Stühlen bis spät in die Nacht hinein.'] Label: [['So sitzen sie Tag und Nacht an den leeren Webstühlen.\nAber die Betrüger tun so, als würden sie fleißig arbeiten.']] Sacrebleu: {'score': 5.332544583175986, 'counts': [9, 2, 1, 0], 'totals': [34, 33, 32, 31], 'precisions': [26.470588235294116, 6.0606060606060606, 3.125, 1.6129032258064515], 'bp': 1.0, 'sys_len': 34, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.2647058823529412, 0.06060606060606061, 0.03125, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4782608695652173, 'translation_length': 34, 'reference_length': 23} Rouge: {'rouge1': 0.30508474576271183, 'rouge2': 0.07017543859649121, 'rougeL': 0.23728813559322035, 'rougeLsum': 0.2711864406779661} Sari: {'sari': 35.904899717324} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['Sie stellten auch zwei Webstühle auf, taten, als ob sie arbeiteten, aber sie hatten nicht das geringste auf dem Stuhle.'] Prediction: ['Eine Frau aus der Nähe von einem Stuhle in der Nähe von einem Stuhle hat sich auf einem Stuhle eine Webstühle geschickt.\nDie Frau stellte auch zwei Webstühle auf, taten, als ob sie arbeiteten, aber sie hatten nicht das geringste auf dem Stuhle.'] Label: [['Die beiden Webstühle sind leer!\nAber eines ist seltsam: Damit können sie feine Stoffe wie Seide weben.\nSie setzen sich an ihre Webstühle.']] Sacrebleu: {'score': 1.2370924497617575, 'counts': [7, 0, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [14.583333333333334, 1.0638297872340425, 0.5434782608695652, 0.2777777777777778], 'bp': 1.0, 'sys_len': 48, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.14583333333333334, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 48, 'reference_length': 27} Rouge: {'rouge1': 0.2465753424657534, 'rouge2': 0.056338028169014086, 'rougeL': 0.136986301369863, 'rougeLsum': 0.2191780821917808} Sari: {'sari': 33.207070707070706} Flesh Reading Ease: 64.9 ---------------------------------------- Source: ["' Er gab den beiden Betrügern viel Handgeld, damit sie ihre Arbeit beginnen sollten."] Prediction: ['Ein Schweizer hatte sich in den letzten Tagen bei einem Job mit einem Handgeld gesprochen.\nEr gab den beiden Betrügern viel Handgeld, damit sie ihre Arbeit beginnen sollten.'] Label: [['Sie sollen Stoffe weben und Kleider für den Kaiser machen.\nEr gibt den beiden Webern viel Geld.\nDer Kaiser lässt die beiden Weber zu sich kommen.']] Sacrebleu: {'score': 4.0341101701202575, 'counts': [8, 2, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [25.806451612903224, 6.666666666666667, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.25806451612903225, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0689655172413792, 'translation_length': 31, 'reference_length': 29} Rouge: {'rouge1': 0.24561403508771928, 'rouge2': 0.03636363636363636, 'rougeL': 0.17543859649122806, 'rougeLsum': 0.24561403508771928} Sari: {'sari': 40.14950166112957} Flesh Reading Ease: 66.55 ---------------------------------------- Source: ["Ja, das Zeug muß sogleich für mich gewebt werden! wenn ich solche hätte, könnte ich ja dahinterkommen, welche Männer in meinem Reiche zu dem Amte, das sie haben, nicht taugen, ich könnte die Klugen von den Dummen unterscheiden! ,Das wären ja prächtige Kleider', dachte der Kaiser;"] Prediction: ['Ein Zeug muß könnte sogleich für mich gewebt werden!\nwenn ich solche hätte, könnte ich ja dahinterkommen, welche Männer in meinem Reiche zu dem Amte, das sie haben, nicht taugen, könnte die Klugen von den Dummen unterscheiden.'] Label: [['Dann kann ich zum Beispiel dumme Minister entlassen.\nWenn ich die Kleider trage, sehe ich sofort, wer dumm ist.\nDiese Kleider muss ich haben, denkt er.\nAuch der Kaiser hört davon.']] Sacrebleu: {'score': 2.3537559464014497, 'counts': [8, 1, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [18.181818181818183, 2.3255813953488373, 1.1904761904761905, 0.6097560975609756], 'bp': 1.0, 'sys_len': 44, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.023255813953488372, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1578947368421053, 'translation_length': 44, 'reference_length': 38} Rouge: {'rouge1': 0.15999999999999998, 'rouge2': 0.0273972602739726, 'rougeL': 0.10666666666666666, 'rougeLsum': 0.15999999999999998} Sari: {'sari': 33.42802479615487} Flesh Reading Ease: 67.9 ---------------------------------------- Source: ['Die Farben und das Muster seien nicht allein ungewöhnlich schön, sondern die Kleider, die von dem Zeuge genäht würden, sollten die wunderbare Eigenschaft besitzen, daß sie für jeden Menschen unsichtbar seien, der nicht für sein Amt tauge oder der unverzeihlich dumm sei.'] Prediction: ['Ein Zeuge und ein Muster sind nicht allein ungewöhnlich schön.\nDie Kleider, die von dem Zeuge genäht würden, sollten die wunderbare Eigenschaft besitzen.'] Label: [['Weil sie für dumme Menschen unsichtbar sind.\nDie Kleider sind etwas ganz Besonderes, sagen sie.\n„Und daraus machen wir die schönsten Kleider.“']] Sacrebleu: {'score': 6.384875295507791, 'counts': [7, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [25.925925925925927, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.25925925925925924, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 27, 'reference_length': 27} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.04081632653061224, 'rougeL': 0.15686274509803924, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 35.93800875050875} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['An jedem Tag kamen viele Fremde an, und eines Tages kamen auch zwei Betrüger, die gaben sich für Weber aus und sagten, daß sie das schönste Zeug, was man sich denken könne, zu weben verstanden.'] Prediction: ['Weber kam am Freitagabend auf einen Tag in einem Keller in der Nähe des Kantons Bern.\nDabei wurde ein schönste Zeug geborgen, was man sich denken könne, zu weben verstanden.\nDie Betrüger sind auf der Web aufgerufen, das sich denken könne.'] Label: [['„Wir können die schönsten Stoffe weben“, erzählen sie in der Stadt herum.\nSie sagen, dass sie Weber sind.\nEines Tages kommen auch zwei Betrüger in die Stadt.']] Sacrebleu: {'score': 2.380649473058063, 'counts': [11, 1, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [23.404255319148938, 2.1739130434782608, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.23404255319148937, 0.021739130434782608, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.46875, 'translation_length': 47, 'reference_length': 32} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.053333333333333344, 'rougeL': 0.1038961038961039, 'rougeLsum': 0.2597402597402597} Sari: {'sari': 34.03960065932961} Flesh Reading Ease: 72.7 ---------------------------------------- Source: ['In der großen Stadt, in der er wohnte, ging es sehr munter her.'] Prediction: ['In der großen Stadt in der Nähe von St. Gallen ging es sehr munter her.\nIn der Stadt ging es sehr munter her.'] Label: [['Viele Menschen besuchen die Stadt.\nDer Kaiser wohnt in einer großen Stadt.']] Sacrebleu: {'score': 3.802351022611669, 'counts': [6, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [23.076923076923077, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.1111111111111111, 'rougeL': 0.2105263157894737, 'rougeLsum': 0.2631578947368421} Sari: {'sari': 39.94708994708995} Flesh Reading Ease: 102.1 ---------------------------------------- Source: ['"Der Kaiser ist in der Garderobe!" Er hatte einen Rock für jede Stunde des Tages, und ebenso wie man von einem König sagte, er ist im Rat, so sagte man hier immer:'] Prediction: ['Der Kaiser ist im Garderobe.\nEr hatte einen Rock für jede Stunde des Tages.\nDer Kaiser ist im Rat.'] Label: [['„Er zieht sich gerade um!“ Die Antwort lautet dann immer: „Wo ist der Kaiser?“ Manchmal fragt jemand: Jeden Tag zieht er sich zehnmal um.']] Sacrebleu: {'score': 1.5099515168632092, 'counts': [3, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [13.636363636363637, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 0.6642538428642953, 'sys_len': 22, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6642538428642955, 'length_ratio': 0.7096774193548387, 'translation_length': 22, 'reference_length': 31} Rouge: {'rouge1': 0.1818181818181818, 'rouge2': 0.04761904761904762, 'rougeL': 0.13636363636363635, 'rougeLsum': 0.13636363636363635} Sari: {'sari': 35.54498152537368} Flesh Reading Ease: 85.95 ---------------------------------------- Source: ['Vor vielen Jahren lebte ein Kaiser, der so ungeheuer viel auf neue Kleider hielt, daß er all sein Geld dafür ausgab, um recht geputzt zu sein.'] Prediction: ['Ein Kaiser hat seinen Geld ausgab, um recht geputzt zu sein.\nDer Kaiser hatte seinen Geld dafür ausgab, um recht geputzt zu sein.'] Label: [['Er gibt dafür viel Geld aus.\nDer Kaiser liebt schöne, neue Kleider.\nIn einem schönen Land lebt ein eitler Kaiser.']] Sacrebleu: {'score': 6.601618238283769, 'counts': [8, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [29.62962962962963, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.2962962962962963, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.125, 'translation_length': 27, 'reference_length': 24} Rouge: {'rouge1': 0.2978723404255319, 'rouge2': 0.08888888888888888, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.2978723404255319} Sari: {'sari': 36.39978734715577} Flesh Reading Ease: 86.6 ---------------------------------------- Source: ['Des Kaisers neue Kleider.'] Prediction: ['Die Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizerinnen und Schweizer Schweizerinnen und Schweizer Schweizer.\nSie sind eine neue Kleider.\nSie sind eine neue Kleider, die sie sind nicht mehr gewesen.'] Label: [['Neue Kleider für den Kaiser.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.0, 'translation_length': 36, 'reference_length': 6} Rouge: {'rouge1': 0.10526315789473684, 'rouge2': 0.05555555555555555, 'rougeL': 0.10526315789473684, 'rougeLsum': 0.10526315789473684} Sari: {'sari': 55.55555555555555} Flesh Reading Ease: 69.85 ---------------------------------------- Source: ['Und wirklich, am anderen Morgen kam ein Wagen herangefahren, mit acht weißen Pferden bespannt, die hatten weiße Straußfedern auf dem Kopf und gingen in goldenen Ketten. Er erzählte ihr, er wäre von einer bösen Hexe verwünscht worden, und niemand hätte ihn aus dem Brunnen erlösen können als sie allein, und morgen wollten sie mitsammen in sein Reich gehen.'] Prediction: ['Am Morgen kam es in der Nacht auf Sonntag zu einem Wagen.\nEin Wagen wurde von einer bösen Hexe verwünscht.\nDie Pferden wollten mitsammen in sein Reich gehen.'] Label: [['Sie fahren zusammen in das Land, in dem der Königs-Sohn lebt.\nDie Königs-Tochter und der Königs-Sohn steigen ein.\nAm nächsten Tag kommt eine Kutsche mit acht weißen Pferden.\nUnd nur sie, die schönste Königs-Tochter, konnte ihn retten.\nDer Königs-Sohn erzählt, dass er von einer bösen Hexe verzaubert wurde.']] Sacrebleu: {'score': 4.770322891822761, 'counts': [14, 4, 2, 1], 'totals': [31, 30, 29, 28], 'precisions': [45.16129032258065, 13.333333333333334, 6.896551724137931, 3.5714285714285716], 'bp': 0.432267928804797, 'sys_len': 31, 'ref_len': 57} Bleu: {'bleu': 0.047703228918227605, 'precisions': [0.45161290322580644, 0.13333333333333333, 0.06896551724137931, 0.03571428571428571], 'brevity_penalty': 0.432267928804797, 'length_ratio': 0.543859649122807, 'translation_length': 31, 'reference_length': 57} Rouge: {'rouge1': 0.27956989247311825, 'rouge2': 0.08791208791208792, 'rougeL': 0.17204301075268816, 'rougeLsum': 0.25806451612903225} Sari: {'sari': 44.04954611313548} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['Als er aber herabfiel, war er kein Frosch mehr, sondern ein Königssohn mit schönen freundlichen Augen.'] Prediction: ['Ein Königssohn hat sich mit schönen freundlichen Augen geschlossen.\nDas hat er seinen Frosch mehr geschlossen.\nDas hat er mit schönen freundlichen Augen geschlossen.'] Label: [['Er hat ein freundliches Gesicht.\nAber dann ... steht plötzlich ein Königs-Sohn im Zimmer.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 27, 'reference_length': 18} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.04878048780487805, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.18604651162790697} Sari: {'sari': 36.45833333333334} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Da wurde sie bitterböse, holte ihn herauf und warf ihn gegen die Wand.'] Prediction: ['Eine Frau wurde bitterböse, warf ihn gegen die Wand.\nSie warf ihn gegen die Wand.\nDie Frau warf ihn herauf und warf ihn gegen die Wand.'] Label: [['Sie nimmt den Frosch und wirft ihn an die Wand.\nDie Königs-Tochter wird wütend.']] Sacrebleu: {'score': 9.24272533424404, 'counts': [8, 3, 2, 1], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 10.344827586206897, 7.142857142857143, 3.7037037037037037], 'bp': 1.0, 'sys_len': 30, 'ref_len': 16} Bleu: {'bleu': 0.09242725334244041, 'precisions': [0.26666666666666666, 0.10344827586206896, 0.07142857142857142, 0.037037037037037035], 'brevity_penalty': 1.0, 'length_ratio': 1.875, 'translation_length': 30, 'reference_length': 16} Rouge: {'rouge1': 0.27272727272727276, 'rouge2': 0.09523809523809525, 'rougeL': 0.22727272727272727, 'rougeLsum': 0.27272727272727276} Sari: {'sari': 45.67890442890443} Flesh Reading Ease: 83.55 ---------------------------------------- Source: ['Als sie aber im Bette lag, kam er gekrochen und sprach: »Ich will schlafen so gut wie du.'] Prediction: ['Ein Mann hatte sich im Bette gegen die Schweizerin aufgefunden.\nDer Bette-Profi spricht von seinem ehemaligen Mann und sprach von seinem ehemaligen Bette-Profi.\nDer Mann will schlafen so gut wie du.'] Label: [['„Ich will in deinem Bett schlafen“, sagt er.\nAber der Frosch kriecht zu ihr hin.\nDann legt sie sich ins Bett.']] Sacrebleu: {'score': 1.6276888006478718, 'counts': [5, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.36, 'translation_length': 34, 'reference_length': 25} Rouge: {'rouge1': 0.14814814814814814, 'rouge2': 0.0, 'rougeL': 0.07407407407407407, 'rougeLsum': 0.14814814814814814} Sari: {'sari': 33.0718954248366} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Da packte sie den Frosch mit zwei Fingern, trug ihn hinauf in ihr Kämmerlein und setzte ihn dort in eine Ecke.'] Prediction: ['Eine Frau wurde in eine Ecke gefunden.\nSie trug ihn hinauf in ihr Kämmerlein und setzte ihn dort in eine Ecke.\nDie Frau wurde dabei verletzt.'] Label: [['Das Mädchen nimmt den Frosch mit zwei Fingern und setzt ihn in eine Ecke von ihrem Zimmer.']] Sacrebleu: {'score': 5.695928476566283, 'counts': [6, 2, 1, 0], 'totals': [29, 28, 27, 26], 'precisions': [20.689655172413794, 7.142857142857143, 3.7037037037037037, 1.9230769230769231], 'bp': 1.0, 'sys_len': 29, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.20689655172413793, 0.07142857142857142, 0.037037037037037035, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6111111111111112, 'translation_length': 29, 'reference_length': 18} Rouge: {'rouge1': 0.22222222222222224, 'rouge2': 0.0930232558139535, 'rougeL': 0.22222222222222224, 'rougeLsum': 0.22222222222222224} Sari: {'sari': 26.347117794486213} Flesh Reading Ease: 83.55 ---------------------------------------- Source: ['Der König aber wurde zornig und sprach: »Wer dir geholfen hat, als du in Not warst, den sollst du hernach nicht verachten!«'] Prediction: ['Der König sprach, als er in Not warst, den sollst du hernach nicht verachten.\nDer König wurde zornig und sprach: Wer dir geholfen hat, als du in Not warst, den sollst du hernach nicht verachten!'] Label: [['Aber der König sagt: „Der Frosch hat dir geholfen, als dein Ball weg war.']] Sacrebleu: {'score': 2.9374336289654015, 'counts': [8, 2, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [19.047619047619047, 4.878048780487805, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.19047619047619047, 0.04878048780487805, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4705882352941178, 'translation_length': 42, 'reference_length': 17} Rouge: {'rouge1': 0.3076923076923077, 'rouge2': 0.12, 'rougeL': 0.2692307692307693, 'rougeLsum': 0.23076923076923078} Sari: {'sari': 38.26081658473855} Flesh Reading Ease: 86.45 ---------------------------------------- Source: ['« Die Königstochter fing an zu weinen und fürchtete sich vor dem kalten Frosch, den sie sich nicht anzurühren getraute und der nun in ihrem schönen, reinen Bettlein schlafen sollte.'] Prediction: ['Eine Königstochter fing an zu weinen und fürchtete sich vor dem kalten Frosch, den sie sich nicht anzurühren getraute hatte.\nDie Königstochter fing an zu weinen und fürchtete sich vor dem kalten Frosch, den sie sich nicht anzurühren getraute.'] Label: [['Die Königs-Tochter beginnt zu weinen.']] Sacrebleu: {'score': 2.0269923170348023, 'counts': [4, 1, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [9.30232558139535, 2.380952380952381, 1.2195121951219512, 0.625], 'bp': 1.0, 'sys_len': 43, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.09302325581395349, 0.023809523809523808, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.166666666666667, 'translation_length': 43, 'reference_length': 6} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.08, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 36.94444444444444} Flesh Reading Ease: 61.05 ---------------------------------------- Source: ['Nun trag mich in dein Kämmerlein und mach dein seidenes Bettlein zurecht! »Ich habe mich satt gegessen und bin müde.'] Prediction: ['Ein seidenes Bettlein hat sich in einem Kämmerlein zurecht.\nDer Mann hatte sich sich satt gegessen und bin müde.\nDie Täterin hatte sich sich satt gegessen und bin müde.'] Label: [['Danach will der Frosch mit in ihr Zimmer, um in ihrem Bett zu schlafen.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 32, 'reference_length': 16} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.0, 'rougeL': 0.0425531914893617, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 36.655011655011656} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ["Der Frosch ließ sich's gut schmecken, ihr aber blieb fast jeder Bissen im Halse stecken. »Nun schieb mir dein goldenes Tellerlein näher, damit wir mitsammen essen können.«"] Prediction: ['Der Frosch hat sich in der Nacht auf Sonntag im Alter von 99 Jahren verlassen.\nDer Frosch war seit seinem Tod gewesen.\nIm Herbst war er seit einigen Tagen geschickt.'] Label: [['So eklig findet sie den Frosch.\nAber sie selbst will jetzt nichts mehr essen.\nSie lässt ihn von ihrem Teller essen.\nDarum nimmt sie den Frosch und setzt ihn auf den Tisch.']] Sacrebleu: {'score': 1.6680592900519737, 'counts': [7, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.9131007162822624, 'sys_len': 33, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.21212121212121213, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9131007162822622, 'length_ratio': 0.9166666666666666, 'translation_length': 33, 'reference_length': 36} Rouge: {'rouge1': 0.126984126984127, 'rouge2': 0.0, 'rougeL': 0.09523809523809525, 'rougeLsum': 0.126984126984127} Sari: {'sari': 54.698079698079695} Flesh Reading Ease: 88.1 ---------------------------------------- Source: ['Dort blieb er sitzen und rief: »Heb mich hinauf zu dir!« Sie zauderte, bis es endlich der König befahl.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Bern befahren.\nDer König war zuvor befahren und die König befahl.\nDer König war seit dem Tod befahren.'] Label: [['Die Königs-Tochter will das nicht, aber der König blickt sie streng an.\n„Heb mich hoch“, sagt der Frosch.']] Sacrebleu: {'score': 1.533227700920213, 'counts': [5, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [13.88888888888889, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.1388888888888889, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 36, 'reference_length': 22} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.10909090909090909, 'rougeL': 0.17543859649122806, 'rougeLsum': 0.17543859649122806} Sari: {'sari': 49.63771104878183} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Sie ging und öffnete die Tür.'] Prediction: ['Eine Frau öffnete die Tür, weil sie sie sich ging und öffnete die Tür öffnete.\nSie ging und öffnete die Tür.'] Label: [['Das Mädchen öffnet die Tür und lässt den Frosch herein.']] Sacrebleu: {'score': 3.7419436034576044, 'counts': [4, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1818181818181817, 'translation_length': 24, 'reference_length': 11} Rouge: {'rouge1': 0.21621621621621623, 'rouge2': 0.11428571428571427, 'rougeL': 0.21621621621621623, 'rougeLsum': 0.21621621621621623} Sari: {'sari': 41.77489177489178} Flesh Reading Ease: 87.6 ---------------------------------------- Source: ['Da sagte der König: »Was du versprochen hast, das mußt du auch halten!'] Prediction: ['Ein königspäsident im Königstein ist auf der Suche nach der Überraschung des Königs.\nDas königliche Gespräch ist derzeit nicht mehr, sondern auch der König.'] Label: [['„Du musst immer das tun, was du versprochen hast, mein Kind.“ „Tja“, sagt der König.']] Sacrebleu: {'score': 5.869760893038728, 'counts': [5, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [18.51851851851852, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.18518518518518517, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2857142857142858, 'translation_length': 27, 'reference_length': 21} Rouge: {'rouge1': 0.1702127659574468, 'rouge2': 0.08888888888888888, 'rougeL': 0.1702127659574468, 'rougeLsum': 0.1702127659574468} Sari: {'sari': 37.89971487721697} Flesh Reading Ease: 68.55 ---------------------------------------- Source: ['Königstochter, jüngste, mach mir auf!«'] Prediction: ['Im Alter von 99 Jahren ist der französische Königstochter aufgefunden.\nIm Interview mit dem 20-Minuten-Radio-Host Andrea spricht über ihre Worte, die sich über ihre Worte zu verhindern.'] Label: [['Lass mich herein!“']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 32, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.4, 'translation_length': 32, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 57.14285714285715} Flesh Reading Ease: 49.5 ---------------------------------------- Source: ['Weißt du nicht, was gestern Du zu mir gesagt bei dem kühlen Brunnenwasser?'] Prediction: ['Du ist ein Brunnenwasser?\nDer Brunnenwasser ist nicht mehr gesagt.\nDer Brunnenwasser ist nicht mehr gesagt.'] Label: [['Du hast mir gestern etwas versprochen.']] Sacrebleu: {'score': 2.4074859035470344, 'counts': [2, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [10.526315789473685, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7142857142857144, 'translation_length': 19, 'reference_length': 7} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 51.43518518518518} Flesh Reading Ease: 75.25 ---------------------------------------- Source: ['»Königstochter, jüngste, mach mir auf!'] Prediction: ['Im Interview mit dem 20-Minuten-Radio-Host Andrea äussert sich über ihre Frage, die sich über ihre Welt bekommen.\nIn der Folge wurde der Radio-Host auf dem 20.\nJuni über ihre Frage geschickt.'] Label: [['„Jüngste Königs-Tochter, mach mir auf.']] Sacrebleu: {'score': 1.3113617852675474, 'counts': [3, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [8.108108108108109, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.08108108108108109, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.285714285714286, 'translation_length': 37, 'reference_length': 7} Rouge: {'rouge1': 0.04651162790697674, 'rouge2': 0.0, 'rougeL': 0.04651162790697674, 'rougeLsum': 0.04651162790697674} Sari: {'sari': 27.323633156966487} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Da klopfte es zum zweiten Mal, und eine Stimme rief:'] Prediction: ['Im zweiten Mal klopfte es zum zweiten Mal, und eine Stimme rief.\nDas klopfte es zum zweiten Mal, und eine Stimme rief.'] Label: [['Da klopft der Frosch wieder an die Tür:']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 26, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.888888888888889, 'translation_length': 26, 'reference_length': 9} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 25.0} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['»Ach, nein«, antwortete sie, »es ist kein Riese, sondern ein garstiger Frosch.«'] Prediction: ['Ein garstiger Frosch ist in der Schweiz ein Mann, der sich mit einem garstiger Frosch verstorben hat.\nDer Mann war mit einem garstigen Frosch geschickt.\nDie beiden waren nicht nur, sondern auch ein garstiger Frosch.'] Label: [['„Nein, mein Vater, es ist ein ekliger und gruseliger Frosch“, antwortet das Mädchen.']] Sacrebleu: {'score': 1.3737889784665156, 'counts': [5, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [12.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3529411764705883, 'translation_length': 40, 'reference_length': 17} Rouge: {'rouge1': 0.12244897959183673, 'rouge2': 0.0, 'rougeL': 0.12244897959183673, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 38.0571249215317} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['Steht etwa ein Riese vor der Tür und will dich holen?«'] Prediction: ['Im Alter von 99 Jahren ist es zu einem Riesen in der Schweiz gekommen.\nIm Moment wird der Täter eine Riese geschickt.\nDie Täter wollten sich mit ihrem Mann auf die Täter holen.'] Label: [['„Steht ein Riese vor der Tür?“']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.5, 'translation_length': 36, 'reference_length': 8} Rouge: {'rouge1': 0.13953488372093023, 'rouge2': 0.048780487804878044, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.09302325581395349} Sari: {'sari': 26.986531986531986} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['Der König sah wohl, daß ihr das Herz gewaltig klopfte, und sprach: »Mein Kind, was fürchtest du dich?'] Prediction: ['Der König sah wohl, daß ihr das Herz gewaltig klopfte, und sprach: "Mein Kind, was fürchtest du dich?"\nDer König sah wohl, daß ihr das Herz gewaltig klopfte, und sprach: "Mein Kind, was fürchtest du dich?"'] Label: [['„Was hast du, meine Tochter?“, fragt der König.']] Sacrebleu: {'score': 1.0903632681147193, 'counts': [5, 0, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [10.0, 1.0204081632653061, 0.5208333333333334, 0.26595744680851063], 'bp': 1.0, 'sys_len': 50, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8461538461538463, 'translation_length': 50, 'reference_length': 13} Rouge: {'rouge1': 0.20408163265306123, 'rouge2': 0.0851063829787234, 'rougeL': 0.20408163265306123, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 37.28013728013728} Flesh Reading Ease: 85.95 ---------------------------------------- Source: ['Da warf sie die Tür hastig zu, setzte sich wieder an den Tisch, und es war ihr ganz ängstlich zumute.'] Prediction: ['Eine Frau warf sich in der Tür hastig zu, setzte sich wieder an den Tisch.\nDie Tür warf sie hastig zu, setzte sich wieder an den Tisch.\nDie Frau warf sie die Tür hastig zu, setzte sich wieder an den Tisch.'] Label: [['Sie zittert vor Angst.\nSchnell schlägt sie die Tür wieder zu und geht zurück an den Tisch.']] Sacrebleu: {'score': 7.693830154594352, 'counts': [10, 5, 3, 1], 'totals': [47, 46, 45, 44], 'precisions': [21.27659574468085, 10.869565217391305, 6.666666666666667, 2.272727272727273], 'bp': 1.0, 'sys_len': 47, 'ref_len': 19} Bleu: {'bleu': 0.07693830154594351, 'precisions': [0.2127659574468085, 0.10869565217391304, 0.06666666666666667, 0.022727272727272728], 'brevity_penalty': 1.0, 'length_ratio': 2.473684210526316, 'translation_length': 47, 'reference_length': 19} Rouge: {'rouge1': 0.3125, 'rouge2': 0.16129032258064516, 'rougeL': 0.28125000000000006, 'rougeLsum': 0.28125000000000006} Sari: {'sari': 46.96693305113608} Flesh Reading Ease: 90.25 ---------------------------------------- Source: ['Als sie aber aufmachte, saß der Frosch vor der Tür.'] Prediction: ['Eine Frau aufmachte sich auf dem Frosch vor der Tür.\nDer Frosch war nicht mehr gefragt, sondern auch der Frosch.\nDer Frosch war nicht mehr gefragt, sondern auch der Frosch.'] Label: [['Da sieht sie den ekligen Frosch.']] Sacrebleu: {'score': 2.1119434356341635, 'counts': [2, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [5.714285714285714, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.05714285714285714, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 35, 'reference_length': 7} Rouge: {'rouge1': 0.05405405405405405, 'rouge2': 0.0, 'rougeL': 0.05405405405405405, 'rougeLsum': 0.05405405405405405} Sari: {'sari': 35.34090909090909} Flesh Reading Ease: 99.8 ---------------------------------------- Source: ['Sie lief und wollte sehen, wer draußen wäre.'] Prediction: ['Eine Frau wollte sehen, wer draußen wäre.\nSie lief und wollte sehen, wer draußen wäre.\nDie Frau wollte sie draußen und draußen wäre.'] Label: [['Das Mädchen öffnet die Tür.']] Sacrebleu: {'score': 1.3353534059549443, 'counts': [1, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [3.5714285714285716, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.03571428571428571, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.666666666666667, 'translation_length': 28, 'reference_length': 6} Rouge: {'rouge1': 0.05405405405405406, 'rouge2': 0.0, 'rougeL': 0.05405405405405406, 'rougeLsum': 0.05405405405405406} Sari: {'sari': 36.93181818181818} Flesh Reading Ease: 78.7 ---------------------------------------- Source: ['»Königstochter, jüngste, mach mir auf«'] Prediction: ['Im Alter von 99 Jahren ist es zu sehen, wie es sich um den Tod der Schweizerin geht.\nDie Schweizerin hatte sich mit dem Tod einer Frau aufgefunden.\nDie Frau war mit ihrem Mann aufgefunden, dass sie sich auf dem Tod einer Frau aufgefunden hatte.'] Label: [['Eine Stimme sagt: „Jüngste Königs-Tochter, mach mir auf.“']] Sacrebleu: {'score': 0.959641509636166, 'counts': [3, 0, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [6.0, 1.0204081632653061, 0.5208333333333334, 0.26595744680851063], 'bp': 1.0, 'sys_len': 50, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.06, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.166666666666667, 'translation_length': 50, 'reference_length': 12} Rouge: {'rouge1': 0.03571428571428571, 'rouge2': 0.0, 'rougeL': 0.03571428571428571, 'rougeLsum': 0.03571428571428571} Sari: {'sari': 38.05555555555556} Flesh Reading Ease: 77.25 ---------------------------------------- Source: ['Als es oben angelangt war, klopfte es an die Tür und rief. Am andern Tag, als sie sich mit dem König und allen Hofleuten zur Tafel gesetzt hatte und eben von ihrem goldenen Tellerlein aß, da kam, plitsch platsch, plitsch platsch, etwas die Marmortreppe heraufgekrochen.'] Prediction: ['Am andern Tag hatte sich eine Frau in der Nacht auf Sonntag einen goldenen Tellerlein aus dem König gesetzt.\nDer König hatte sich mit dem König und allen Hofleuten zur Tafel gesetzt.\nDer König rief dabei, plitsch platsch, plitsch platsch, etwas die Marmortreppe heraufgekrochen zu haben.'] Label: [['Da klopft es an die Tür.\nSie essen von goldenen Tellern.\nAm nächsten Tag sind der König, die Königin und die sechs Töchter im großen Speise-Saal.']] Sacrebleu: {'score': 1.2753173755527876, 'counts': [11, 0, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [21.153846153846153, 0.9803921568627451, 0.5, 0.25510204081632654], 'bp': 1.0, 'sys_len': 52, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.21153846153846154, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 52, 'reference_length': 30} Rouge: {'rouge1': 0.21686746987951808, 'rouge2': 0.04938271604938272, 'rougeL': 0.19277108433734938, 'rougeLsum': 0.21686746987951808} Sari: {'sari': 32.331837703296415} Flesh Reading Ease: 71.1 ---------------------------------------- Source: ['Sie hörte nicht darauf, eilte nach Hause und hatte den Frosch bald vergessen.'] Prediction: ['Eine Frau hatte den Frosch bald vergessen.\nSie hatte den Frosch bald vergessen.'] Label: [['Aber die Königs-Tochter hört ihn nicht.']] Sacrebleu: {'score': 2.627961710408444, 'counts': [1, 0, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [6.666666666666667, 3.5714285714285716, 1.9230769230769231, 1.0416666666666667], 'bp': 1.0, 'sys_len': 15, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 15, 'reference_length': 7} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.14351851851852} Flesh Reading Ease: 85.75 ---------------------------------------- Source: ['»Warte, warte!« rief der Frosch.'] Prediction: ['Der Frosch-Kollegen hat einen ähnlichen Vorfall.\nEr hat sich mit seinem ähnlichen Vorfall zu sehen geschrieben.\nDie beiden waren nicht mehr, sondern auch über den Vorfall.'] Label: [['„Warte, warte“, ruft der Frosch.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.125, 'rouge2': 0.06666666666666668, 'rougeL': 0.125, 'rougeLsum': 0.125} Sari: {'sari': 44.14682539682539} Flesh Reading Ease: 71.85 ---------------------------------------- Source: ['Die Königstochter war voll Freude, als sie ihr schönes Spielzeug wiedererblickte, hob es auf und sprang damit fort.'] Prediction: ['Die Königstochter sprang am Sonntagabend fort.\nSie sprang damit fort.\nSie sprang damit fort.'] Label: [['Sie nimmt den Ball und rennt weg.\nDas Mädchen ist sehr froh.']] Sacrebleu: {'score': 3.0098043843528286, 'counts': [3, 0, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [17.647058823529413, 3.125, 1.6666666666666667, 0.8928571428571429], 'bp': 1.0, 'sys_len': 17, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2142857142857142, 'translation_length': 17, 'reference_length': 14} Rouge: {'rouge1': 0.07142857142857144, 'rouge2': 0.0, 'rougeL': 0.07142857142857144, 'rougeLsum': 0.07142857142857144} Sari: {'sari': 36.02564102564103} Flesh Reading Ease: 87.55 ---------------------------------------- Source: ['Als der Frosch das Versprechen der Königstochter erhalten hatte, tauchte er seinen Kopf unter, sank hinab, und über ein Weilchen kam er wieder heraufgerudert, hatte die Kugel im Maul und warf sie ins Gras.'] Prediction: ['Ein Königstochter hat einen Frosch das Versprechen der Königstochter erhalten.\nEr tauchte seinen Kopf unter, sank hinab und warf sie ins Gras.\nDie Kugel warf sie ins Gras.'] Label: [['Er hat den Ball in seinem Maul.\nKurze Zeit später ist er zurück.\nDer Frosch springt ins Wasser.']] Sacrebleu: {'score': 1.886782264636293, 'counts': [7, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [21.875, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.21875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5238095238095237, 'translation_length': 32, 'reference_length': 21} Rouge: {'rouge1': 0.2, 'rouge2': 0.0, 'rougeL': 0.12, 'rougeLsum': 0.16} Sari: {'sari': 34.9997224997225} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['»Ach, ja«, sagte sie, »ich verspreche dir alles, was du willst, wenn du mir nur die Kugel wiederbringst.'] Prediction: ['Eine Frau verspreche dir alles, was du willst, wenn du mir nur die Kugel wiederbringst.\nDie Frau verspreche dir alles, was du willst, wenn du mir nur die Kugel wiederbringst.'] Label: [['„Ich verspreche dir alles, wenn du mir nur den Ball bringst.“ „Oh, das ist gut“, sagt die Königs-Tochter sofort.']] Sacrebleu: {'score': 17.62756449517001, 'counts': [13, 7, 5, 3], 'totals': [36, 35, 34, 33], 'precisions': [36.111111111111114, 20.0, 14.705882352941176, 9.090909090909092], 'bp': 1.0, 'sys_len': 36, 'ref_len': 25} Bleu: {'bleu': 0.17627564495170006, 'precisions': [0.3611111111111111, 0.2, 0.14705882352941177, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 1.44, 'translation_length': 36, 'reference_length': 25} Rouge: {'rouge1': 0.3137254901960784, 'rouge2': 0.20408163265306123, 'rougeL': 0.3137254901960784, 'rougeLsum': 0.3137254901960784} Sari: {'sari': 51.3892640325153} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['Aber wenn du mich liebhaben willst und ich dein Geselle und Spielkamerad sein darf, wenn ich an deinem Tischlein neben dir sitzen, von deinem goldenen Tellerlein essen, aus deinem Becherlein trinken, in deinem Bettlein schlafen darf, dann will ich hinuntersteigen und dir die goldene Kugel heraufholen.«'] Prediction: ['Du findest hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier hier'] Label: [['Ich will in deinem Bett schlafen.“ Ich will von deinem Teller essen und aus deinem Becher trinken.\nIch will mit dir spielen.\nIch will dein Freund sein.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [449, 448, 447, 446], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 449, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 14.03125, 'translation_length': 449, 'reference_length': 32} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 46.750300997592014} Flesh Reading Ease: -327.51 ---------------------------------------- Source: ['»Deine Kleider, deine Perlen und Edelsteine und deine goldene Krone, die mag ich nicht. Der Frosch antwortete:'] Prediction: ['Eine Kleider, deine Perlen und Edelsteine und deine goldene Krone, die mag ich nicht, waren in den letzten Tagen geschickt.\nDer Frosch antwortete den Frosch, der sich mit einer goldene Krone geschickt hatte.\nDie Kleider und Perlen sind sich nicht ganz nicht.'] Label: [['„Deine schönen Dinge will ich nicht.\n„Nein“, antwortet der Frosch.']] Sacrebleu: {'score': 2.422067601474124, 'counts': [7, 2, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [14.285714285714286, 4.166666666666667, 1.0638297872340425, 0.5434782608695652], 'bp': 1.0, 'sys_len': 49, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.041666666666666664, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.769230769230769, 'translation_length': 49, 'reference_length': 13} Rouge: {'rouge1': 0.18867924528301885, 'rouge2': 0.07843137254901962, 'rougeL': 0.18867924528301885, 'rougeLsum': 0.18867924528301885} Sari: {'sari': 37.894518272425245} Flesh Reading Ease: 72.4 ---------------------------------------- Source: ['Was du haben willst, lieber Frosch«, sagte sie, »meine Kleider, meine Perlen und Edelsteine, auch noch die goldene Krone, die ich trage.«'] Prediction: ['Eine goldene Krone trug sich auf, wie sie sich auf ihrem Gold-Risiko-Kollegen will.\nDie Krone haben sich auf ihre Kleider und Perlen und Edelsteine geschickt.\nSie trug sie auf ihre Kleider und Perlen, die sie sich tragen.'] Label: [['Auch meine goldene Krone gebe ich dir.“ Oder meine goldene Kette.\n„Du kannst meinen goldenen Armreif haben.\n„Ich gebe dir alles, was du willst, lieber Frosch“, sagt die Königs-Tochter froh.']] Sacrebleu: {'score': 2.54389214461475, 'counts': [9, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [21.428571428571427, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.105263157894737, 'translation_length': 42, 'reference_length': 38} Rouge: {'rouge1': 0.11267605633802817, 'rouge2': 0.02898550724637681, 'rougeL': 0.11267605633802817, 'rougeLsum': 0.11267605633802817} Sari: {'sari': 41.85125129234324} Flesh Reading Ease: 74.1 ---------------------------------------- Source: ['Aber was gibst du mir, wenn ich dein Spielzeug wieder heraufhole?« »Sei still und weine nicht«, antwortete der Frosch, »ich kann wohl Rat schaffen.'] Prediction: ['Der Frosch hat einen Spielzeug wieder heraufhole.\nDer Frosch kann wohl Rat schaffen.\nDer Frosch warnt vor einem Jahr, wenn er sich wieder heraufhole ist.'] Label: [['„Was bekomme ich, wenn ich das für dich mache?“ „Ich kann den Ball für dich holen“, antwortet der Frosch.']] Sacrebleu: {'score': 3.235912122544166, 'counts': [5, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2083333333333333, 'translation_length': 29, 'reference_length': 24} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.04545454545454545, 'rougeL': 0.13043478260869565, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 38.91090527119939} Flesh Reading Ease: 89.8 ---------------------------------------- Source: ['»Ich weine über meine goldene Kugel, die mir in den Brunnen hinabgefallen ist.«'] Prediction: ['Der Brunnen ist in den Brunnen hinabgefallen.\nDie Brunnen weisen über meine goldene Kugel.\nDie Brunnen weisen über meine goldene Kugel, die in den Brunnen hinabgefallen ist.'] Label: [['„Mein goldener Ball ist in den Teich gefallen.']] Sacrebleu: {'score': 4.797392517011848, 'counts': [4, 2, 1, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 6.666666666666667, 3.4482758620689653, 1.7857142857142858], 'bp': 1.0, 'sys_len': 31, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.06666666666666667, 0.034482758620689655, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4444444444444446, 'translation_length': 31, 'reference_length': 9} Rouge: {'rouge1': 0.17142857142857143, 'rouge2': 0.12121212121212123, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.17142857142857143} Sari: {'sari': 40.82887700534759} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Sie sah sich um, woher die Stimme käme, da erblickte sie einen Frosch, der seinen dicken, häßlichen Kopf aus dem Wasser streckte.'] Prediction: ['Eine Frau hat sich in einem Wasser in einen dicken, häßlichen Kopf aus dem Wasser streckt.\nSie sah sich um, woher die Stimme käme, da erblickte sie einen Frosch, der seinen dicken, häßlichen Kopf aus dem Wasser streckte.'] Label: [['Er kriecht gerade aus dem Teich heraus.\nEs ist ein Frosch.']] Sacrebleu: {'score': 2.0446749214858784, 'counts': [5, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [11.11111111111111, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4615384615384617, 'translation_length': 45, 'reference_length': 13} Rouge: {'rouge1': 0.11538461538461536, 'rouge2': 0.04000000000000001, 'rougeL': 0.11538461538461536, 'rougeLsum': 0.11538461538461536} Sari: {'sari': 36.41975308641975} Flesh Reading Ease: 73.25 ---------------------------------------- Source: ['»Was hast du nur, Königstochter?'] Prediction: ['Der Königstochter ist eine neue Frau.\nDer frühere Frau hatte sich mit dem Interview mit dem 20-Minuten-Radio-Host Andrea überrascht.\nIm Interview mit Andrea überrascht sie, dass sie sich nicht mehr überrascht hatte.'] Label: [['Warum bist du so traurig?“ „Königs-Tochter, was ist los?']] Sacrebleu: {'score': 1.1524538390587937, 'counts': [2, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [5.2631578947368425, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.923076923076923, 'translation_length': 38, 'reference_length': 13} Rouge: {'rouge1': 0.08333333333333334, 'rouge2': 0.0, 'rougeL': 0.08333333333333334, 'rougeLsum': 0.08333333333333334} Sari: {'sari': 58.87096774193549} Flesh Reading Ease: 69.85 ---------------------------------------- Source: ['Als sie so klagte, rief ihr plötzlich jemand zu:'] Prediction: ['Eine Frau, die sich in der Nacht auf Sonntag in die Nacht auf Sonntag klagte, rief ihr plötzlich jemand zu.\nDie Frau war so viel, dass sie ihr plötzlich jemand zu klagte.'] Label: [['Diese Stimme sagt: Da hört sie plötzlich eine Stimme.']] Sacrebleu: {'score': 1.3113617852675474, 'counts': [3, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [8.108108108108109, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.08108108108108109, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3636363636363638, 'translation_length': 37, 'reference_length': 11} Rouge: {'rouge1': 0.17777777777777776, 'rouge2': 0.04651162790697675, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 33.61111111111111} Flesh Reading Ease: 87.95 ---------------------------------------- Source: ['Da fing die Prinzessin an zu weinen und weinte immer lauter und konnte sich gar nicht trösten.'] Prediction: ['Prinzessin Elizabeth hat sich in der Nacht auf Sonntag zu Gast geschickt.\nDie Prinzessin fing sich an zu weinen und weinte sich gar nicht trösten.\nDie Welt ist nicht bekannt, sondern auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch'] Label: [['„Mein schöner Ball ist weg!“ Das Mädchen jammert und weint:']] Sacrebleu: {'score': 0.1872843748912367, 'counts': [2, 0, 0, 0], 'totals': [226, 225, 224, 223], 'precisions': [0.8849557522123894, 0.2222222222222222, 0.11160714285714286, 0.05605381165919283], 'bp': 1.0, 'sys_len': 226, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.008849557522123894, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 17.384615384615383, 'translation_length': 226, 'reference_length': 13} Rouge: {'rouge1': 0.01694915254237288, 'rouge2': 0.0, 'rougeL': 0.00847457627118644, 'rougeLsum': 0.01694915254237288} Sari: {'sari': 33.47442680776014} Flesh Reading Ease: 41.35 ---------------------------------------- Source: ['Nun trug es sich einmal zu, daß die goldene Kugel der Königstochter nicht in die Händchen fiel, sondern auf die Erde schlug und gerade in den Brunnen hineinrollte.'] Prediction: ['Die goldene Kugel der Königstochter ist nicht in die Händchen geworden.\nDas trug es sich einmal zu, da sie sich auf die Erde schlug und gerade in den Brunnen hineinrollte.'] Label: [['Der goldene Ball fällt in einen Teich.\nAber ein Mal geht es schief.']] Sacrebleu: {'score': 1.6794256847485503, 'counts': [5, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [15.151515151515152, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.15151515151515152, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 33, 'reference_length': 15} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.13043478260869562, 'rougeLsum': 0.13043478260869562} Sari: {'sari': 36.06060606060606} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Und wenn sie Langeweile hatte, nahm sie eine goldene Kugel, warf sie in die Höhe und fing sie wieder auf. Wenn nun der Tag recht heiß war, ging die jüngste Prinzessin hinaus in den Wald und setzte sich an den Rand des kühlen Brunnens.'] Prediction: ['Eine jüngste Prinzessin ging in den Wald und setzte sich an den Rand des kühlen Brunnens.\nDie jüngste Prinzessin ging hinaus in den Wald und setzte sich an den Rand des kühlen Brunnens.'] Label: [['Sie wirft ihn hoch und fängt ihn wieder auf.\nDie jüngste Königs-Tochter spielt mit einem kleinen Ball aus Gold.\nDiese Geschichte beginnt im Wald.']] Sacrebleu: {'score': 4.674499231292217, 'counts': [6, 2, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 5.882352941176471, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.17142857142857143, 0.058823529411764705, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2962962962962963, 'translation_length': 35, 'reference_length': 27} Rouge: {'rouge1': 0.1846153846153846, 'rouge2': 0.06349206349206349, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.1846153846153846} Sari: {'sari': 35.96897723735959} Flesh Reading Ease: 81.6 ---------------------------------------- Source: ['Die jüngste von ihnen war so schön, daß die Sonne selber, die doch so vieles schon gesehen hat, sich verwundene, sooft sie ihr ins Gesicht schien.'] Prediction: ['Eine Sonne hat sich selber verwunden, die sich verwundene, sooft sie ihr ins Gesicht schien.\nDie jüngste von ihnen war so schön, daß die Sonne selber, die doch so vieles schon gesehen hat, sich verwundene, sooft sie ihr ins Gesicht schien.'] Label: [['Aber die jüngste Tochter war die Schönste von allen.']] Sacrebleu: {'score': 1.1652512227907519, 'counts': [6, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [12.244897959183673, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.12244897959183673, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.9, 'translation_length': 49, 'reference_length': 10} Rouge: {'rouge1': 0.2592592592592593, 'rouge2': 0.07692307692307693, 'rougeL': 0.18518518518518515, 'rougeLsum': 0.18518518518518515} Sari: {'sari': 36.49269058837743} Flesh Reading Ease: 71.75 ---------------------------------------- Source: ['In alten Zeiten, als das Wünschen noch geholfen hat, lebte einmal ein König, der hatte wunderschöne Töchter.'] Prediction: ['Ein König hatte einen Wünschen noch geholfen.\nDer Mann hatte wunderschöne Töchter.'] Label: [['Alle seine Töchter waren schön.\nEs war einmal ... vor sehr langer Zeit ... in einem Land weit weg von hier ... ein König mit sechs Töchtern.']] Sacrebleu: {'score': 0.8961216124939043, 'counts': [4, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [28.571428571428573, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 0.22313016014842982, 'sys_len': 14, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 0.22313016014842982, 'length_ratio': 0.4, 'translation_length': 14, 'reference_length': 35} Rouge: {'rouge1': 0.22727272727272727, 'rouge2': 0.14285714285714285, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.22727272727272727} Sari: {'sari': 38.02910052910053} Flesh Reading Ease: 68.7 ---------------------------------------- Source: ['Der Froschkönig oder der eiserne Heinrich.'] Prediction: ['Der Froschkönig ist der ehemalige Heinrich.\nDer Froschkönig ist der ehemalige Froschkönig.\nEr ist der ehemalige Froschkönig.'] Label: [['Der Froschkönig.']] Sacrebleu: {'score': 5.039518688486958, 'counts': [3, 2, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [15.0, 10.526315789473685, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 3} Bleu: {'bleu': 0.0, 'precisions': [0.15, 0.10526315789473684, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.666666666666667, 'translation_length': 20, 'reference_length': 3} Rouge: {'rouge1': 0.25, 'rouge2': 0.18181818181818182, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 63.63247863247864} Flesh Reading Ease: 51.45 ---------------------------------------- Source: ['Als ich sechs Jahre alt war, habe ich in einem Buch über den Urwald, das den Titel "Erlebte Geschichten" trug, das erste Mal ein wunderschönes Bild gesehen.'] Prediction: ['Ein Buch über den Urwald, das den Titel "Erlebte Geschichten" trug, hatte ein wunderschönes Bild gesehen.\nDer Urwald hatte sechs Jahre alt, das den Titel "Erlebte Geschichten" trug.'] Label: [['Als ich sechs Jahre alt war, sah ich in ein Buch.\nDer Titel von dem Buch war „Wahre Geschichten“.']] Sacrebleu: {'score': 5.546385070864082, 'counts': [10, 3, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [27.027027027027028, 8.333333333333334, 2.857142857142857, 1.4705882352941178], 'bp': 1.0, 'sys_len': 37, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.2702702702702703, 0.08333333333333333, 0.02857142857142857, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6818181818181819, 'translation_length': 37, 'reference_length': 22} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.13043478260869565, 'rougeL': 0.20833333333333334, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 31.07302810482852} Flesh Reading Ease: 66.55 ---------------------------------------- Source: ['Im Buch hieß es: "Riesenschlangen verschlingen ihre Beute in einem Stück, ohne sie zu zerkauen.'] Prediction: ['Im Buch verschlingen ihre Beute in einem Stück.\nDie Beute verschlingen ihre Beute in einem Stück.\nDie Buchschaft hatte ihre Beute in einem Stück zerkauen.'] Label: [['Sie frisst andere Tiere.\nSie verschlingt sie einfach.\nSie kaut nicht einmal!']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8666666666666667, 'translation_length': 28, 'reference_length': 15} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.7962962962963} Flesh Reading Ease: 72.25 ---------------------------------------- Source: ['Danach können sie sich nicht mehr bewegen und halten sechs Monate lang Verdauungsschlaf."'] Prediction: ['Sechs Monate lang halten sechs Monate lang Verdauungsschlaf.\nDanach können sie sich nicht mehr bewegen und halten sechs Monate lang Verdauungsschlaf.'] Label: [['Danach wartet sie sechs Monate.\nIn diesen sechs Monaten verdaut sie ihre Beute.']] Sacrebleu: {'score': 4.504556737153658, 'counts': [7, 1, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [30.434782608695652, 4.545454545454546, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.30434782608695654, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5333333333333334, 'translation_length': 23, 'reference_length': 15} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.060606060606060615, 'rougeL': 0.2285714285714286, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 38.90977443609023} Flesh Reading Ease: 58.35 ---------------------------------------- Source: ['Es zeigte eine Riesenschlange, die einen Elefanten verdaut.'] Prediction: ['Eine Riesenschlange zeigte einen Elefanten.\nDas zeigte eine Riesenschlange, die einen Elefanten verdaut.'] Label: [['Es war eine Boa constrictor mit einem Elefanten im Bauch.']] Sacrebleu: {'score': 3.21858262703621, 'counts': [3, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 16, 'reference_length': 11} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 28.84615384615385} Flesh Reading Ease: 44.8 ---------------------------------------- Source: ['Dabei war auf meinem Bild gar kein Hut.'] Prediction: ['Ein Mann hat in einem Bild einen Hut gefunden.\nDas war auf seinem Bild gar kein Hut.'] Label: [['Aber das war kein Hut.']] Sacrebleu: {'score': 8.097785064266205, 'counts': [4, 2, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [21.05263157894737, 11.11111111111111, 5.882352941176471, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.1111111111111111, 0.058823529411764705, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1666666666666665, 'translation_length': 19, 'reference_length': 6} Rouge: {'rouge1': 0.3636363636363636, 'rouge2': 0.2, 'rougeL': 0.3636363636363636, 'rougeLsum': 0.3636363636363636} Sari: {'sari': 50.879329004329} Flesh Reading Ease: 101.3 ---------------------------------------- Source: ['Die Erwachsenen haben mir geraten, mich nicht mehr mit offenen oder geschlossenen Riesenschlangen zu beschäftigen, sondern mich stattdessen mehr für Geografie, Geschichte, Mathe und Grammatik zu interessieren.'] Prediction: ['Der Schweizer Erwachsene hat sich mit offenen oder geschlossenen Riesenschlangen zu beschäftigen.\nEr wollte sich für Geografie, Geschichte, Mathe und Grammatik interessieren.\nWir haben sich mit offenen oder geschlossenen Riesenschlangen geraten, mich nicht mehr mit offenen oder geschlossenen Riesenschlangen zu beschäftigen, sondern mich stattdessen mehr für Geografie, Geschichte, Mathe und Grammatik zu interessieren.'] Label: [['Doch auch da haben die großen Leute gesagt, dass ich besser aufhören sollte zu zeichnen.\nSie fanden, dass ich besser rechnen und schreiben sollte.']] Sacrebleu: {'score': 0.9507105644202, 'counts': [7, 0, 0, 0], 'totals': [62, 61, 60, 59], 'precisions': [11.290322580645162, 0.819672131147541, 0.4166666666666667, 0.211864406779661], 'bp': 1.0, 'sys_len': 62, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.11290322580645161, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2142857142857144, 'translation_length': 62, 'reference_length': 28} Rouge: {'rouge1': 0.07228915662650602, 'rouge2': 0.0, 'rougeL': 0.07228915662650602, 'rougeLsum': 0.07228915662650602} Sari: {'sari': 32.96519410977242} Flesh Reading Ease: 33.6 ---------------------------------------- Source: ['Wenn ich einen traf, der mir ein bisschen heller vorkam, dann testete ich ihn mit meiner Zeichnung Nr. 1, die ich immer bei mir trug.'] Prediction: ['Im Interview mit dem 20-Minuten-Radio-Host Andrea spricht über ihre ersten Lebens-Radio-Hosts über ihre Lebens-Radio-Hosts über ihre Lebens-Radio-Hosts über ihre Lebens-Radio-Hosts über ihre Lebens-Radio-Hosts über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts und ihre Lebens-Hosts, über ihre Lebens-Hosts, über ihre Lebens-Hosts, über i'] Label: [['Manchmal glaubte ich, dass einer davon klug war.\nDann zeigte ich ihm die Zeichnung.']] Sacrebleu: {'score': 0.26287405681162307, 'counts': [1, 0, 0, 0], 'totals': [136, 135, 134, 133], 'precisions': [0.7352941176470589, 0.37037037037037035, 0.1865671641791045, 0.09398496240601503], 'bp': 1.0, 'sys_len': 136, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.007352941176470588, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.0, 'translation_length': 136, 'reference_length': 17} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 57.75613275613276} Flesh Reading Ease: -57.86 ---------------------------------------- Source: ['Aber immer erhielt ich die Antwort: "Es ist ein Hut."'] Prediction: ['Ein Hut ist in der Nacht auf Sonntag in der Nacht auf Sonntag gestorben.\nDer Hut ist ein Hut.\nDie Antwort war auf einen Tag, in dem es sich um einen Hut handelt.'] Label: [['„Das ist ein Hut“, sagten sie immer.']] Sacrebleu: {'score': 2.369898273250278, 'counts': [4, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [10.81081081081081, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.10810810810810811, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.111111111111111, 'translation_length': 37, 'reference_length': 9} Rouge: {'rouge1': 0.15000000000000002, 'rouge2': 0.10526315789473684, 'rougeL': 0.15000000000000002, 'rougeLsum': 0.15000000000000002} Sari: {'sari': 40.70042530568847} Flesh Reading Ease: 98.8 ---------------------------------------- Source: ['Und der Erwachsene war zufrieden, auf einen so vernünftigen Mann zu treffen.'] Prediction: ['Ein so vernünftiger Mann wurde in der Nacht auf Sonntag in Zürich vernünftig getötet.\nEr war auf einen so vernünftigen Mann zu treffen.\nDer Mann war auf einen so vernünftigen Mann zu treffen.'] Label: [['Die großen Leute hielten mich immer für sehr vernünftig.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6, 'translation_length': 36, 'reference_length': 10} Rouge: {'rouge1': 0.07843137254901959, 'rouge2': 0.04081632653061224, 'rougeL': 0.07843137254901959, 'rougeLsum': 0.07843137254901959} Sari: {'sari': 35.72567783094099} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['So sprach ich weder von Riesenschlangen, noch vom Urwald oder von Sternen. Ich ließ mich auf ihn ein. Ich sprach über Bridge, Golf, über Politik und Krawatten.'] Prediction: ['Der US-Präsident Barack Obama sprach weder von Riesenschlangen, noch vom Urwald oder von Sternen.\nSeine Wahlkampfbewegung ist über die Schweiz und der Krawatten.\nSeine Wahlkampfbewegung ist über die Schweiz und der Krawatten.'] Label: [['Ich sprach mit den Leuten dann immer über andere Dinge.\nDoch niemals über Schlangen.\nEs ging immer um Krawatten und um Politik.']] Sacrebleu: {'score': 1.7243945943080494, 'counts': [8, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.44, 'translation_length': 36, 'reference_length': 25} Rouge: {'rouge1': 0.17857142857142858, 'rouge2': 0.0, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 35.41152263374486} Flesh Reading Ease: 64.0 ---------------------------------------- Source: ['So lebte ich allein, ohne jemanden, mit dem ich wirklich hätte sprechen können, bis ich vor sechs Jahren eine Panne in der Wüste Sahara hatte.'] Prediction: ['Eine Panne in der Wüste Sahara hatte vor sechs Jahren eine Panne in der Wüste Sahara.\nNun hatte sich der Mann allein gefunden, ohne jemanden, mit dem er wirklich hätte sprechen können.'] Label: [['Viele Jahre wohnte ich allein.\nIch arbeitete als Pilot.\nIch lenkte kleine Flugzeuge.\nEines Tages flog ich über die Sahara-Wüste.\nDa fiel plötzlich mein Motor aus.\nIch stürzte über der Sahara ab.']] Sacrebleu: {'score': 1.4503712616756257, 'counts': [5, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [13.88888888888889, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 0.9459594689067654, 'sys_len': 36, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.1388888888888889, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9459594689067654, 'length_ratio': 0.9473684210526315, 'translation_length': 36, 'reference_length': 38} Rouge: {'rouge1': 0.16666666666666666, 'rouge2': 0.02857142857142857, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 33.290043290043286} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['Irgendetwas an meinem Motor war kaputt gegangen.'] Prediction: ['Ein Motor war kaputt gegangen.\nDer Motor war kaputt gegangen.'] Label: [['Der Motor war kaputt, aber ich lebte noch.']] Sacrebleu: {'score': 22.416933501922287, 'counts': [5, 3, 2, 1], 'totals': [12, 11, 10, 9], 'precisions': [41.666666666666664, 27.272727272727273, 20.0, 11.11111111111111], 'bp': 1.0, 'sys_len': 12, 'ref_len': 10} Bleu: {'bleu': 0.22416933501922287, 'precisions': [0.4166666666666667, 0.2727272727272727, 0.2, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 12, 'reference_length': 10} Rouge: {'rouge1': 0.4444444444444445, 'rouge2': 0.375, 'rougeL': 0.4444444444444445, 'rougeLsum': 0.4444444444444445} Sari: {'sari': 57.11700336700337} Flesh Reading Ease: 69.7 ---------------------------------------- Source: ['Und weil ich weder einen Mechaniker, noch Passagiere bei mir hatte, bereitete ich mich darauf vor, die schwierige Reparatur ganz allein vorzunehmen.'] Prediction: ['Ein Mechaniker, der noch Passagiere bei ihn hatte, bereitete sich vor, die schwierige Reparatur ganz allein vorzunehmen.\nDer Mechaniker bereitete sich darauf vor, die schwierige Reparatur ganz allein vorzunehmen.'] Label: [['Es gab nur keinen Menschen, der mir helfen konnte.']] Sacrebleu: {'score': 2.3372496156461082, 'counts': [3, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1818181818181817, 'translation_length': 35, 'reference_length': 11} Rouge: {'rouge1': 0.05263157894736842, 'rouge2': 0.0, 'rougeL': 0.05263157894736842, 'rougeLsum': 0.05263157894736842} Sari: {'sari': 35.55996472663139} Flesh Reading Ease: 36.8 ---------------------------------------- Source: ['Am ersten Abend schlief ich im Sand ein, tausende Meilen entfernt von besiedeltem Gebiet.'] Prediction: ['Im Sand in der Nähe des Gebiets ist ein tausender Mann in einem Sand gefunden.\nEr schlief ein, tausende Meilen entfernt von besiedeltem Gebiet.\nDer Mann schlief ein, tausende Meilen entfernt von besiedeltem Gebiet.'] Label: [['In dieser Nacht schlief ich im Sand.']] Sacrebleu: {'score': 1.2413584734794654, 'counts': [3, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [7.6923076923076925, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.875, 'translation_length': 39, 'reference_length': 8} Rouge: {'rouge1': 0.19047619047619044, 'rouge2': 0.05, 'rougeL': 0.09523809523809522, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 31.40172735760971} Flesh Reading Ease: 69.25 ---------------------------------------- Source: ['So könnt ihr euch vorstellen, wie überrascht ich war, als ich bei Sonnenaufgang von einer leisen, lustigen Stimme geweckt wurde.'] Prediction: ['Der Sonnenaufgang wurde von einer leisen, lustigen Stimme geweckt.\nSo könnte der Sonnenaufgang vorstellen, wie überrascht ich war, als ich bei Sonnenaufgang von einer leisen, lustigen Stimme geweckt wurde.'] Label: [['Am nächsten Morgen wurde ich von einer Stimme geweckt.\nVor meiner Nase stand ein kleiner Mann.\nMitten in der Wüste!\nWer hätte so was erwartet?']] Sacrebleu: {'score': 5.725068959849069, 'counts': [9, 3, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [25.714285714285715, 8.823529411764707, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2571428571428571, 0.08823529411764706, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.206896551724138, 'translation_length': 35, 'reference_length': 29} Rouge: {'rouge1': 0.2758620689655172, 'rouge2': 0.07142857142857142, 'rougeL': 0.20689655172413796, 'rougeLsum': 0.2758620689655172} Sari: {'sari': 41.520817991406226} Flesh Reading Ease: 54.35 ---------------------------------------- Source: ['Und die sagte: - "Bitte ... zeichne mir ein Schaf!"'] Prediction: ['Eine Frau hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag zu Gast geschickt.\nDie Frau war dabei, dass sie ihn ein Schaf zeichne.\nDie Frau war zuvor auf dem TV-Sender "Unchained" bekannt und sagte: "Bitte... zeichne mir ein Schaf!"'] Label: [['„Zeichne mir ein Schaf“, sagte er.']] Sacrebleu: {'score': 1.6623064449736842, 'counts': [5, 1, 0, 0], 'totals': [55, 54, 53, 52], 'precisions': [9.090909090909092, 1.8518518518518519, 0.9433962264150944, 0.4807692307692308], 'bp': 1.0, 'sys_len': 55, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.018518518518518517, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.875, 'translation_length': 55, 'reference_length': 8} Rouge: {'rouge1': 0.19999999999999998, 'rouge2': 0.125, 'rougeL': 0.16, 'rougeLsum': 0.16} Sari: {'sari': 39.08895720489924} Flesh Reading Ease: 93.15 ---------------------------------------- Source: ['- "Zeichne mir ein Schaf."'] Prediction: ['Im Interview mit "Unchained" mit Host Stefan über 20 Minuten Radio diskutieren sich über 20 Minuten Radio, die ihre Leistungen auf ihre Radio-Hosts und ihre Leistungen auf ihre Radio-Hosts "Unchained" und "Unchained" über 20 Minuten Radio, sowie ihre Radio-Hosts "Unchained" und "Unchained" über 20 Minuten Radio, sowie ihre Leistungen auf ihre Radio-Hosts und ihre Leistungen auf Spotify und Apple Podcasts.\nIm Interview mit Host Stefan über 20 Minuten Radio, sowie ihnen auf ihre Leistungen, sowie ihnen auf ihre Leistungen, sowie ihnen auf ihre Leistungen, sowie ihnen auf ihre Leistungen, sowie ihnen auf ihre Radio-Hosts, sowie ihnen im Podcast "Unchained" und "Unchained" sowie ihnen, Oprah Winfrey, sowie ihnen, ihnen und ihnen im Direktstream.\nIm Interview mit Host Stefan über 20 Minuten Radio, sowie ihnen und ihnen im Direktstream und in der Radio-Section deiner 20-Minuten-App sowie ihnen, sowie ihnen im Direktstream.'] Label: [['Zeichne ein Schaf für mich.“']] Sacrebleu: {'score': 0.20736715085908453, 'counts': [1, 0, 0, 0], 'totals': [172, 171, 170, 169], 'precisions': [0.5813953488372093, 0.29239766081871343, 0.14705882352941177, 0.07396449704142012], 'bp': 1.0, 'sys_len': 172, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.005813953488372093, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 24.571428571428573, 'translation_length': 172, 'reference_length': 7} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 44.94047619047619} Flesh Reading Ease: 22.55 ---------------------------------------- Source: ['So absurd es mir erschien, holte ich tausend Meilen entfernt von jeder Zivilisation meinen Farbstift hervor, ein Blatt Papier und einen Füller.'] Prediction: ['Immer mehr Menschen wurden in der Schweiz verletzt, dass sie sich in der Schweiz einen Farbstift hervorreiben.\nDas hat sich nun erschienen, wie es sich erschien.'] Label: [['Ich nahm meinen Stift und mein Papier.']] Sacrebleu: {'score': 1.2414943415352928, 'counts': [1, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [3.3333333333333335, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.03333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 57.99663299663299} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Ich will keinen Elefanten in einer Riesenschlage. Eine Riesenschlange ist sehr gefährlich und ein Elefant nimmt viel Platz weg. Bei mir ist es ganz klein. Ich brauche ein Schaf. Zeichne mir ein Schaf."'] Prediction: ['Am 23.\nApril startet in der Nähe des Jahres eine Riesenschlage.\nBei den Elefanten ist es ganz klein.\nDer Bernerin will keinen Elefanten in einer Riesenschlage.'] Label: [['„Eine Boa ist viel zu gefährlich!\nUnd ein Elefant ist viel zu groß!\nIch habe nicht viel Platz.\nIch brauche ein Schaf!“']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1111111111111112, 'translation_length': 30, 'reference_length': 27} Rouge: {'rouge1': 0.07999999999999999, 'rouge2': 0.0, 'rougeL': 0.07999999999999999, 'rougeLsum': 0.07999999999999999} Sari: {'sari': 25.6716992033084} Flesh Reading Ease: 71.85 ---------------------------------------- Source: ['Dieses ist schon sehr krank.'] Prediction: ['Der Mann ist sehr krank.\nEr ist sehr krank.\nEr ist sehr krank.'] Label: [['„Dieses Schaf ist krank“, sagte der kleine Mann.']] Sacrebleu: {'score': 3.21858262703621, 'counts': [3, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 16, 'reference_length': 10} Rouge: {'rouge1': 0.380952380952381, 'rouge2': 0.0, 'rougeL': 0.1904761904761905, 'rougeLsum': 0.1904761904761905} Sari: {'sari': 50.252525252525245} Flesh Reading Ease: 117.2 ---------------------------------------- Source: ['Zeichne ein anderes." - "Das da ist zu alt.'] Prediction: ['Der frühere US-Präsident Donald Trump hat sich mit seinem ehemaligen Freund auf Twitter zu Gast geschickt.\nEr hat sich in der Nacht auf dem 3.\nJuni zu Gast geschickt.\nSeine Frau, die sich nicht zu Gast geschickt hat, hat sich mit ihrem Freund zu Gast geschickt.'] Label: [['„Dieses Schaf ist zu alt“, sagte er.']] Sacrebleu: {'score': 0.9216168770877762, 'counts': [3, 0, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [5.769230769230769, 0.9803921568627451, 0.5, 0.25510204081632654], 'bp': 1.0, 'sys_len': 52, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.057692307692307696, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.777777777777778, 'translation_length': 52, 'reference_length': 9} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 55.27208358090711} Flesh Reading Ease: 86.6 ---------------------------------------- Source: ['Da ich meinen Motor endlich auseinander bauen wollte, schluderte ich ungeduldig dieses Bild hin:'] Prediction: ['Ein Motor hat in der Nacht auf Sonntag meinen Motor auseinander bauen.\nDas Bild schluderte der Mann hin und schluderte den Motor hin.'] Label: [['Meine Geduld war bald am Ende.\nDer Motor von meinem Flugzeug war kaputt.\nIch musste ihn doch reparieren.\nUngeduldig zeichnete ich ein Viereck.']] Sacrebleu: {'score': 1.82985349484955, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 0.9231163463866358, 'sys_len': 25, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9231163463866358, 'length_ratio': 0.9259259259259259, 'translation_length': 25, 'reference_length': 27} Rouge: {'rouge1': 0.13043478260869565, 'rouge2': 0.0, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.13043478260869565} Sari: {'sari': 51.04472140762463} Flesh Reading Ease: 74.9 ---------------------------------------- Source: ['Und sagte: - "Das hier ist eine Kiste.'] Prediction: ['Eine Frau aus der Nähe der Schweiz ist auf dem Kiste gefragt.\nSie sagte: "Das hier ist eine Kiste".'] Label: [['„Das ist eine Kiste“, sagte ich.']] Sacrebleu: {'score': 3.7419436034576044, 'counts': [4, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 24, 'reference_length': 8} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.16666666666666666, 'rougeL': 0.30769230769230765, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 40.84249084249085} Flesh Reading Ease: 88.6 ---------------------------------------- Source: ['Das Schaf ist da drin."'] Prediction: ['Das Schaf ist da drin.\nDas Schaf ist da drin.'] Label: [['„Das Schaf ist darin.“']] Sacrebleu: {'score': 7.495553473355845, 'counts': [3, 1, 0, 0], 'totals': [12, 11, 10, 9], 'precisions': [25.0, 9.090909090909092, 5.0, 2.7777777777777777], 'bp': 1.0, 'sys_len': 12, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.09090909090909091, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 12, 'reference_length': 6} Rouge: {'rouge1': 0.4285714285714285, 'rouge2': 0.3333333333333333, 'rougeL': 0.4285714285714285, 'rougeLsum': 0.4285714285714285} Sari: {'sari': 41.66666666666667} Flesh Reading Ease: 116.5 ---------------------------------------- Source: ['- "Genauso wollte ich es!'] Prediction: ['Die "Genauso"-Paar wollte ich es gegen ihren Partner auf ihren Partnern gegen ihren Partnern gegenüber dem Coronavirus.\nDie beiden wollten sich auf ihren Partnern gegen ihre Partnern gegenüber dem Coronavirus nicht mehr aufgehen.'] Label: [['„Das ist genau richtig!“, rief er glücklich.']] Sacrebleu: {'score': 0.969094302009921, 'counts': [1, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [2.6315789473684212, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.02631578947368421, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4545454545454546, 'translation_length': 38, 'reference_length': 11} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 38.095238095238095} Flesh Reading Ease: 46.5 ---------------------------------------- Source: ['Glaubst Du, man braucht viel Gras für dieses Schaf?"'] Prediction: ['Du findest hier aktuelle Gras für die Schaf?\nWir haben sie sich mit dem Schaf geschafft.\nWir haben sie sich mit dem Schaf geschafft.'] Label: [['„Glaubst du, ein Schaf frisst viel Gras?“, fragte er dann.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 27, 'reference_length': 15} Rouge: {'rouge1': 0.17142857142857143, 'rouge2': 0.0, 'rougeL': 0.11428571428571428, 'rougeLsum': 0.11428571428571428} Sari: {'sari': 52.66113516113515} Flesh Reading Ease: 95.95 ---------------------------------------- Source: ['Der kleine Prinz stellte mir viele Fragen, aber schien meine zu überhören.'] Prediction: ['Prinz Elizabeth (95) hat sich am Freitagabend in der Nacht auf Sonntagabend über ihre Fragen geschickt.\nSie war zuvor nicht mehr geworden, sondern auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch a'] Label: [['Der kleine Prinz antwortete nicht auf meine Fragen.\nMir stellte er aber sehr wohl Fragen.']] Sacrebleu: {'score': 0.2376145197220254, 'counts': [5, 0, 0, 0], 'totals': [224, 223, 222, 221], 'precisions': [2.232142857142857, 0.2242152466367713, 0.11261261261261261, 0.05656108597285068], 'bp': 1.0, 'sys_len': 224, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.022321428571428572, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 13.176470588235293, 'translation_length': 224, 'reference_length': 17} Rouge: {'rouge1': 0.04255319148936171, 'rouge2': 0.0, 'rougeL': 0.02553191489361702, 'rougeLsum': 0.03404255319148936} Sari: {'sari': 40.933557183557184} Flesh Reading Ease: 5.65 ---------------------------------------- Source: ['- "Was ist dieses Ding?"'] Prediction: ['Im Interview mit der "New Yorker 20-Minuten-App" mit Host Andrea über ihre Lebens-Infektion "Was ist dieses Ding?"\nüber ihn, was ist dieses Ding?\nWir haben sich über ihn und ihn zu tun, was was dieses Ding hat?'] Label: [['„Was ist das?“ „']] Sacrebleu: {'score': 0.9044512123285878, 'counts': [2, 0, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [4.166666666666667, 1.0638297872340425, 0.5434782608695652, 0.2777777777777778], 'bp': 1.0, 'sys_len': 48, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.041666666666666664, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.0, 'translation_length': 48, 'reference_length': 6} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.048780487804878044, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.09302325581395349} Sari: {'sari': 37.03703703703704} Flesh Reading Ease: 79.95 ---------------------------------------- Source: ['Das ist mein Flugzeug."'] Prediction: ['Ein Flugzeug ist in der Nacht auf Sonntag in der Nacht auf Sonntag gestorben.\nDer Mann ist nicht mehr, sondern auch der Flugzeug.\nDas ist mein Flugzeug, der sich nicht mehr verkauft hat.'] Label: [['Mein Flugzeug.']] Sacrebleu: {'score': 1.9381886040198417, 'counts': [2, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [5.2631578947368425, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 3} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 12.666666666666666, 'translation_length': 38, 'reference_length': 3} Rouge: {'rouge1': 0.1142857142857143, 'rouge2': 0.06060606060606061, 'rougeL': 0.1142857142857143, 'rougeLsum': 0.1142857142857143} Sari: {'sari': 40.972222222222214} Flesh Reading Ease: 92.95 ---------------------------------------- Source: ['Aber er rief: Du bist vom Himmel gefallen?"'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag gefeiert.\nEr rief, dass er bist vom Himmel gefallen wurde.\nDer Mann rief: "Du bist vom Himmel gefallen?"'] Label: [['„Dann bist du vom Himmel gefallen!“, rief er.']] Sacrebleu: {'score': 4.486776015336413, 'counts': [8, 2, 1, 0], 'totals': [39, 38, 37, 36], 'precisions': [20.512820512820515, 5.2631578947368425, 2.7027027027027026, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.20512820512820512, 0.05263157894736842, 0.02702702702702703, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.25, 'translation_length': 39, 'reference_length': 12} Rouge: {'rouge1': 0.35, 'rouge2': 0.10526315789473685, 'rougeL': 0.25, 'rougeLsum': 0.2} Sari: {'sari': 48.061575507395936} Flesh Reading Ease: 93.25 ---------------------------------------- Source: ['Und der kleine Prinz brach in ein herzliches Lachen aus, das mich sehr verärgerte.'] Prediction: ['Prinz Elizabeth brach in ein herzliches Lachen aus und brach in ein herzliches Lachen aus.\nDer kleine Prinz brach in ein herzliches Lachen aus und brach in ein herzliches Lachen aus.'] Label: [['Der Prinz lachte.']] Sacrebleu: {'score': 1.4780822562194806, 'counts': [3, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [9.090909090909092, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.25, 'translation_length': 33, 'reference_length': 4} Rouge: {'rouge1': 0.1176470588235294, 'rouge2': 0.0, 'rougeL': 0.1176470588235294, 'rougeLsum': 0.1176470588235294} Sari: {'sari': 36.904761904761905} Flesh Reading Ease: 76.75 ---------------------------------------- Source: ['Von welchem Planeten stammst du?"'] Prediction: ['Von welchem Planeten stammst du, stammst du auf dem Coronavirus?\nWir haben die Wirbel-Pandemie aufgefordert, wie es sich um den Virus geht.\nWir haben die Wirbel-Pandemie aufgefordert, wie es sich um den Virus geht.'] Label: [['„Von welchem Planeten?“']] Sacrebleu: {'score': 2.033435199928181, 'counts': [3, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [7.5, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.075, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.0, 'translation_length': 40, 'reference_length': 5} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.1081081081081081, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 42.22222222222222} Flesh Reading Ease: 69.25 ---------------------------------------- Source: ['- "Du stammst also von einem anderen Planeten?"'] Prediction: ['Ein anderer Planeten-Konzern stammt von einem anderen Planeten.\nEr stammt von einem anderen Planeten.'] Label: [['Von welchem Planeten kommst du?“, fragte ich.']] Sacrebleu: {'score': 2.908317710573757, 'counts': [2, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [12.5, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 16, 'reference_length': 11} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.0, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 36.004273504273506} Flesh Reading Ease: 50.15 ---------------------------------------- Source: ['Aber er antwortete mir nicht.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in der Nacht auf Sonntag geschickt.\nEr war nicht mehr gefragt, sondern auch nicht mehr geschickt.\nDer Mann war nicht mehr gefragt, sondern auch nicht mehr geschickt.'] Label: [['Doch der kleine Prinz sagte nicht, woher er kam.']] Sacrebleu: {'score': 1.2663302792223932, 'counts': [4, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [9.75609756097561, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.0975609756097561, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.727272727272727, 'translation_length': 41, 'reference_length': 11} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.08888888888888888, 'rougeLsum': 0.08888888888888888} Sari: {'sari': 68.05555555555554} Flesh Reading Ease: 91.95 ---------------------------------------- Source: ['Er holte das Schaf aus seiner Tasche und bewunderte lange Zeit seinen Schatz.'] Prediction: ['Ein Mann hatte sich am Freitagabend in seiner Tasche einen Schatz gefunden.\nEr wurde dabei verletzt.\nEr wurde dabei seinen Schatz verletzt.'] Label: [['Er betrachtete die Zeichnung, die ich für ihn gemacht hatte.']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0833333333333335, 'translation_length': 25, 'reference_length': 12} Rouge: {'rouge1': 0.12121212121212123, 'rouge2': 0.0, 'rougeL': 0.060606060606060615, 'rougeLsum': 0.12121212121212123} Sari: {'sari': 54.960317460317455} Flesh Reading Ease: 79.1 ---------------------------------------- Source: ['- "Das Gute an der Kiste, die du mir gegeben hast, ist, dass sie ihm als Haus dienen wird in der Nacht."'] Prediction: ['Am Sonntagabend wird der 20-jährige Sänger überrascht.\nEr wird als Haus dienen.\nDie beiden werden in der Nacht geschickt.'] Label: [['„Praktisch“, sagte er.\n„So hat das Schaf auch direkt ein Haus.“']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 24, 'reference_length': 15} Rouge: {'rouge1': 0.12121212121212123, 'rouge2': 0.0, 'rougeL': 0.12121212121212123, 'rougeLsum': 0.12121212121212123} Sari: {'sari': 44.08730158730159} Flesh Reading Ease: 80.1 ---------------------------------------- Source: ['Und wenn du nett bist, gebe ich dir auch einen Strick, um es nachts festzubinden.'] Prediction: ['Ein Strick hat in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich eingeführt.\nDer Mann hatte sich nach einem Strick festgenommen und musste nachts festzubinden.\nDie beiden waren nachts festzubinden.'] Label: [['Ich sagte, dass ich ihm noch ein Seil zeichne.\n„Dann kannst du das Schaf an einen Zaun binden.“']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 36, 'reference_length': 22} Rouge: {'rouge1': 0.03773584905660377, 'rouge2': 0.0, 'rougeL': 0.03773584905660377, 'rougeLsum': 0.03773584905660377} Sari: {'sari': 41.392973856209146} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Was für eine merkwürdige Idee."'] Prediction: ['Am 23.\nJuni findet die 14.\nJuni statt.\nIm Alter von 99 Jahren ist der Titel "Die Idee" auf dem Streamingdienst.\nIm Interview mit dem 20-Minuten-App spricht der Schweizer Musiker über die Geschichte.'] Label: [['„Was für eine verrückte Idee!“, rief er aus.']] Sacrebleu: {'score': 1.038539619163422, 'counts': [2, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [4.761904761904762, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.047619047619047616, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 42, 'reference_length': 12} Rouge: {'rouge1': 0.04444444444444444, 'rouge2': 0.0, 'rougeL': 0.04444444444444444, 'rougeLsum': 0.04444444444444444} Sari: {'sari': 49.20634920634921} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['- "Aber wenn du es nicht festbindest, kann es überall hingehen und sich verlaufen ..."'] Prediction: ['Im Interview mit 20 Minuten mit Host Andrea äusserte sich über ihre Fragen, die sich überall hingehen und sich verlaufen haben.\nDie beiden werden von ihrem Podcast "Unchained" auf Spotify veröffentlicht.\nHier gibts auf den Direktlink zum Podcast, in dem alle 20 Minuten-Radio-Hosts ihre Leute auf Spotify berichtet werden.'] Label: [['„Wenn du es nicht festbindest, dann läuft es weg“, erklärte ich.']] Sacrebleu: {'score': 0.8539456561476954, 'counts': [3, 0, 0, 0], 'totals': [56, 55, 54, 53], 'precisions': [5.357142857142857, 0.9090909090909091, 0.46296296296296297, 0.2358490566037736], 'bp': 1.0, 'sys_len': 56, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.05357142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 56, 'reference_length': 14} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 25.76232247284879} Flesh Reading Ease: 58.4 ---------------------------------------- Source: ['- "Das macht nichts, es ist so klein bei mir!"'] Prediction: ['Im Interview mit "Unchained" mit Host Stefan über 20 Minuten Radio und 20 Minuten Radio, die ihre Leute auf ihre Radio-Hosts diskutieren.\nIn der Leiste wird der Comedian über die zweite Single "Unchained" bekannt.\nIm Interview spricht der Comedian über die zweite Single, in der sich über 20 Minuten Radio zum Podcast mit Stefan über 20 Minuten Radio und 20 Minuten Radio veröffentlicht.'] Label: [['„Mein Planet ist ganz klein“, sagte er.\n„Das Schaf kann nirgendwohin laufen.“']] Sacrebleu: {'score': 0.6600864627595707, 'counts': [3, 0, 0, 0], 'totals': [72, 71, 70, 69], 'precisions': [4.166666666666667, 0.704225352112676, 0.35714285714285715, 0.18115942028985507], 'bp': 1.0, 'sys_len': 72, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.041666666666666664, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.5, 'translation_length': 72, 'reference_length': 16} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 62.121212121212125} Flesh Reading Ease: 53.7 ---------------------------------------- Source: ['Manchmal reicht es aus, das Gemüse auf eine andere Weise zuzubereiten, zum Beispiel als Happen mit einem Dipp oder püriert als Soße.'] Prediction: ['Manchmal reicht es aus, das Gemüse auf eine andere Weise zuzubereiten, zum Beispiel als Happen mit einem Dipp oder püriert als Soße.\nDer Gemüse wird auf eine andere Weise zuzubereiten, zum Beispiel als Happen mit einem Dipp oder püriert als Soße.'] Label: [['Spaghetti mit Linsen-Bolognese, fein geraspeltes Gemüse in der Frikadelle, püriertes Gemüse in der Soße – es gibt jede Menge Möglichkeiten, Gemüse fast unbemerkt im Essen unterzubringen.']] Sacrebleu: {'score': 1.3765524524133157, 'counts': [9, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [19.565217391304348, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.1956521739130435, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5333333333333334, 'translation_length': 46, 'reference_length': 30} Rouge: {'rouge1': 0.25316455696202533, 'rouge2': 0.07792207792207793, 'rougeL': 0.1772151898734177, 'rougeLsum': 0.12658227848101267} Sari: {'sari': 37.614942528735625} Flesh Reading Ease: 54.2 ---------------------------------------- Source: ['Sollten sich Eltern allerdings längerfristig Sorgen um die Entwicklung ihres Kindes machen, ist es ratsam einen Kinderarzt aufzusuchen.'] Prediction: ['Ein Kind aus den Kindern ist gestorben, weil er sich längerfristig Sorgen um die Entwicklung ihres Kindes machen sollte.\nDas Kind ist einen Kinderarzt aufzusuchen.'] Label: [['Bevor Ihr Kind merkt, dass das Essverhalten Ihnen Kummer bereitet, lassen Sie sich bei einer Beratungsstelle oder vom Kinderarzt beraten.']] Sacrebleu: {'score': 1.996819088094332, 'counts': [5, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.17857142857142858, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2173913043478262, 'translation_length': 28, 'reference_length': 23} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.13043478260869565, 'rougeLsum': 0.13043478260869565} Sari: {'sari': 38.03258145363409} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Statt darüber zu reden, ist es ratsam zu zeigen, dass Gemüse selbstverständlich zu Mahlzeit dazugehört und lecker schmeckt.'] Prediction: ['Gemüse selbstverständlich zu Mahlzeit lecker schmeckt sich in den Gemüse.\nDas ist nicht bekannt, sondern auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch'] Label: [['Leben Sie dem Kind stattdessen vor, dass Sie selbst gern Gemüse essen und dass für Sie Gemüse zu einer Mahlzeit einfach dazugehört.']] Sacrebleu: {'score': 0.2532486059091671, 'counts': [6, 0, 0, 0], 'totals': [220, 219, 218, 217], 'precisions': [2.727272727272727, 0.228310502283105, 0.11467889908256881, 0.0576036866359447], 'bp': 1.0, 'sys_len': 220, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.02727272727272727, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 9.166666666666666, 'translation_length': 220, 'reference_length': 24} Rouge: {'rouge1': 0.048582995951417, 'rouge2': 0.016326530612244896, 'rougeL': 0.032388663967611336, 'rougeLsum': 0.032388663967611336} Sari: {'sari': 34.305369875222816} Flesh Reading Ease: 6.65 ---------------------------------------- Source: ['Eltern sind für ihre Kinder das wichtigste Vorbild, die sie gerne imitieren.'] Prediction: ['Ein wichtiges Vorbild, die sie gerne imitieren, ist für ihre Kinder gerne imitieren.\nDas wichtigste Vorbild, die sie gerne imitieren, ist für ihre Kinder das wichtigste Vorbild.'] Label: [['Probieren Sie selbst auch Neues aus.\nSie sind das beste Vorbild:']] Sacrebleu: {'score': 1.4780822562194806, 'counts': [3, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [9.090909090909092, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5384615384615383, 'translation_length': 33, 'reference_length': 13} Rouge: {'rouge1': 0.2, 'rouge2': 0.0, 'rougeL': 0.2, 'rougeLsum': 0.2} Sari: {'sari': 33.088235294117645} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['Eltern sollten sich nicht aus der Ruhe bringen lassen und Essen möglichst nicht thematisieren.'] Prediction: ['Derzeit sollen sich in der Schweiz einige Menschen nicht aus der Ruhe bringen lassen.\nDas sollen sie nicht aus der Ruhe bringen lassen.'] Label: [['Sprechen Sie auch nicht dauernd über das Thema Gemüse essen.']] Sacrebleu: {'score': 1.7911710595643588, 'counts': [2, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [8.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.08, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.272727272727273, 'translation_length': 25, 'reference_length': 11} Rouge: {'rouge1': 0.1764705882352941, 'rouge2': 0.0, 'rougeL': 0.1176470588235294, 'rougeLsum': 0.1176470588235294} Sari: {'sari': 36.46680216802168} Flesh Reading Ease: 80.75 ---------------------------------------- Source: ['Stattdessen sind viel Geduld und Durchhaltevermögen gefragt.'] Prediction: ['In den USA sind viele Geduld und Durchhaltevermögen gefragt.\nDie Geduld und Durchhaltevermögen sind viel Geduld und Durchhaltevermögen gefragt.'] Label: [['Drängen Sie es zu nichts.\nBleiben Sie gelassen, wenn Ihr Kind Gemüse ablehnt.']] Sacrebleu: {'score': 2.159701133933343, 'counts': [2, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [9.523809523809524, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 35.41666666666667} Flesh Reading Ease: 47.65 ---------------------------------------- Source: ['Vielleicht nascht das Kind schon bei der Zubereitung etwas Gemüse und ist zumindest stolz auf das selbstgemachte Essen.'] Prediction: ['Ein selbstgemachter Kind ist in der Zubereitung etwas Gemüse.\nDas Kind ist zumindest stolz auf das selbstgemachte Essen.'] Label: [['Am Ende sind die Kinder stolz auf ihr Werk und essen auch lieber davon.\nBeim Gemüseschnippeln passiert das Probieren fast von allein.']] Sacrebleu: {'score': 3.9421654936713777, 'counts': [5, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 0.8187307530779819, 'sys_len': 20, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 0.8187307530779819, 'length_ratio': 0.8333333333333334, 'translation_length': 20, 'reference_length': 24} Rouge: {'rouge1': 0.23809523809523808, 'rouge2': 0.049999999999999996, 'rougeL': 0.14285714285714288, 'rougeLsum': 0.23809523809523808} Sari: {'sari': 37.13164251207729} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Das kann bereits beim Gemüseanbau im Garten oder auf dem Balkon beginnen, über den gemeinsamen Einkauf bis hin zum gemeinsamen Schnippeln von Gemüse und kochen.'] Prediction: ['Das kann bereits beim Gemüseanbau im Garten oder auf dem Balkon beginnen, über den gemeinsamen Einkauf bis hin zum gemeinsamen Schnippeln von Gemüse und kochen.\nDas kann bereits beim Gemüseanbau im Garten oder auf dem Balkon beginnen, über den gemeinsamen Einkauf bis hin zum gemeinsamen Schnippeln von Gemüse und kochen.'] Label: [['Lassen Sie Ihre Kinder beim Zubereiten der Mahlzeiten helfen.\nNehmen Sie die Kinder auch mit zum Einkaufen, wenn sie das mögen.']] Sacrebleu: {'score': 1.0072487110349273, 'counts': [5, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [9.25925925925926, 0.9433962264150944, 0.4807692307692308, 0.24509803921568626], 'bp': 1.0, 'sys_len': 54, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.09259259259259259, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 54, 'reference_length': 24} Rouge: {'rouge1': 0.07894736842105263, 'rouge2': 0.0, 'rougeL': 0.07894736842105263, 'rougeLsum': 0.05263157894736842} Sari: {'sari': 36.02150537634408} Flesh Reading Ease: 49.7 ---------------------------------------- Source: ['Empfehlen Sie den Eltern, ihren Nachwuchs schon frühzeitig in die Mahlzeitengestaltung einzubeziehen.'] Prediction: ['Im Rahmen der Mahlzeitengestaltung in Zürich wurde ein Nachwuchs eingeführt.\nDie Eltern wollten ihren Nachwuchs in die Mahlzeitengestaltung einziehen.\nDie Mahlzeitengestaltung wurde für den Eltern eine Mahlzeitengestaltung eingeführt.'] Label: [['Überlegen Sie gemeinsam mit den Kindern, was es in den nächsten Tagen zu essen geben soll.']] Sacrebleu: {'score': 1.5784309053930103, 'counts': [3, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [9.67741935483871, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.0967741935483871, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7222222222222223, 'translation_length': 31, 'reference_length': 18} Rouge: {'rouge1': 0.08163265306122448, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.08163265306122448} Sari: {'sari': 42.73504273504273} Flesh Reading Ease: 36.15 ---------------------------------------- Source: ['Die Geschmacksvorlieben der Kinder ändern sich und an manche Geschmacksrichtungen gewöhnen sie sich erst.'] Prediction: ['Eine Geschmacksvorlieb der Kinder ändern sich und an manche Geschmacksrichtungen gewöhnen sie sich erst.\nDie Geschmacksvorlieben der Kinder ändern sich und an manche Geschmacksrichtungen gewöhnen sie sich erst.'] Label: [['Gerade der kindliche Geschmack ist noch sehr veränderlich.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3333333333333335, 'translation_length': 30, 'reference_length': 9} Rouge: {'rouge1': 0.05128205128205128, 'rouge2': 0.0, 'rougeL': 0.05128205128205128, 'rougeLsum': 0.05128205128205128} Sari: {'sari': 35.41666666666667} Flesh Reading Ease: 54.85 ---------------------------------------- Source: ['Es hilft auch, das abgelehnte Gemüse nicht gleich vom Speiseplan zu streichen, sondern immer wieder anzubieten.'] Prediction: ['Das abgelehnte Gemüse in der Nähe des Kantons Bern ist nicht nur wieder angeboten.\nDas Gemüse ist nicht nur wieder angeboten, sondern immer wieder anzubieten.'] Label: [['Und auch wenn der Brokkoli beim ersten Mal abgelehnt wird: Ermutigen Sie Ihr Kind, ab und zu neu zu probieren, was beim letzten Mal nicht geschmeckt hat.']] Sacrebleu: {'score': 1.6966007891337822, 'counts': [4, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 0.898397321348071, 'sys_len': 28, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 0.898397321348071, 'length_ratio': 0.9032258064516129, 'translation_length': 28, 'reference_length': 31} Rouge: {'rouge1': 0.07272727272727272, 'rouge2': 0.0, 'rougeL': 0.07272727272727272, 'rougeLsum': 0.07272727272727272} Sari: {'sari': 34.23611111111111} Flesh Reading Ease: 56.35 ---------------------------------------- Source: ['Motivieren Sie die Eltern, gelassen zu bleiben und das Essverhalten nicht ständig zu thematisieren, sondern eine angenehme und positive Situation am Esstisch zu schaffen.'] Prediction: ['Eine angenehme und positive Situation am Esstisch zu schaffen.\nDie Eltern, die sich in der Schweiz eine angenehme und positive Situation am Esstisch zu schaffen, sollen sie eine angenehme und positive Situation am Esstisch zu schaffen.'] Label: [['Eine fröhliche und entspannte Stimmung macht die Familien-Mahlzeit zu einem schönen Erlebnis.\nBleiben Sie gelassen und setzen Sie Ihr Kind nicht unter Druck.']] Sacrebleu: {'score': 1.494348998143061, 'counts': [7, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [17.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.175, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 40, 'reference_length': 25} Rouge: {'rouge1': 0.1935483870967742, 'rouge2': 0.0, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.16129032258064516} Sari: {'sari': 34.66715614292706} Flesh Reading Ease: 39.15 ---------------------------------------- Source: ['Je mehr die Eltern die Kinder zum Gemüseessen drängen, desto mehr Stress entsteht am Tisch.'] Prediction: ['Die Eltern der Gemüseessen in den USA sind sich mit Stress aufgeboten.\nSie sind dabei, dass sie sich mit Stress aufgeboten werden.\nDie Eltern sind dabei zum Gemüseessen drängen, desto mehr Stress entsteht am Tisch.'] Label: [['Sonst kommen Stress und Ärger beim Essen auf.\nZwingen Sie Ihr Kind nicht, etwas zu essen, was ihm nicht schmeckt.\nDa passt es nicht, wenn Sie Druck auf Ihre Kinder ausüben, weil sie auch von dem gesunden Gemüse essen sollen.']] Sacrebleu: {'score': 1.2970254241473018, 'counts': [8, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [20.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 0.8394570207692074, 'sys_len': 40, 'ref_len': 47} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8394570207692074, 'length_ratio': 0.851063829787234, 'translation_length': 40, 'reference_length': 47} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 33.88432892536859} Flesh Reading Ease: 74.7 ---------------------------------------- Source: ['Es ist ganz normal und gehört zur Entwicklung dazu, dass Kinder phasenweise sehr einseitig essen und nur wenige Gemüsearten mögen.'] Prediction: ['Kinder phasenweise mögen sehr einseitig essen und nur wenige Gemüsearten mögen.\nEs ist ganz normal und gehört zur Entwicklung dazu, dass Kinder phasenweise sehr einseitig essen und nur wenige Gemüsearten mögen.'] Label: [['Dabei ist es normal, wenn Kinder eine Zeit lang bestimmte Lebensmittel nicht essen.']] Sacrebleu: {'score': 1.7035962947530545, 'counts': [6, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [17.647058823529413, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2666666666666666, 'translation_length': 34, 'reference_length': 15} Rouge: {'rouge1': 0.2, 'rouge2': 0.0, 'rougeL': 0.16, 'rougeLsum': 0.16} Sari: {'sari': 37.5} Flesh Reading Ease: 41.65 ---------------------------------------- Source: ['Und was gibt es Schöneres, als mit Freunden zu kochen, gemeinsam am Tisch zu sitzen und das Essen in geselliger Runde zu genießen.'] Prediction: ['Schöneres gibt es in geselliger Runde.\nDas Essen in geselliger Runde zu genießen.'] Label: [['Kochen Sie selbst, ob allein oder mit Familie und Freunden.']] Sacrebleu: {'score': 2.627961710408444, 'counts': [1, 0, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [6.666666666666667, 3.5714285714285716, 1.9230769230769231, 1.0416666666666667], 'bp': 1.0, 'sys_len': 15, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 15, 'reference_length': 12} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 31.5359477124183} Flesh Reading Ease: 50.65 ---------------------------------------- Source: ['Schon das Stöbern in Rezeptdatenbanken, um mal etwas Neues auszuprobieren und selbst die Planung samt Einkauf können Spaß machen.'] Prediction: ['In Rezeptdatenbanken können neue Neues ausgebaut werden.\nDas Stöbern in Rezeptdatenbanken kann das Stöbern in Rezeptdatenbanken selbst die Planung samt Einkauf machen.'] Label: [['Machen Sie schon den Einkauf zu einem Genusserlebnis, zum Beispiel auf dem Wochenmarkt.']] Sacrebleu: {'score': 1.8709718017288024, 'counts': [2, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [8.333333333333334, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.08333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 24, 'reference_length': 15} Rouge: {'rouge1': 0.10526315789473685, 'rouge2': 0.0, 'rougeL': 0.052631578947368425, 'rougeLsum': 0.052631578947368425} Sari: {'sari': 34.02777777777777} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Nehmen Sie sich Zeit fürs Essen.'] Prediction: ['Eine Frau wurde in der Nacht auf Sonntag verhaftet.\nSie war dabei, dass sie sich fürs Essen verhaftet hat.\nSie war dabei, dass sie sich fürs Essen verhaftet hat.'] Label: [['Nehmen sie sich Zeit für Ihre Mahlzeiten.']] Sacrebleu: {'score': 2.4092489848483223, 'counts': [3, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.25, 'translation_length': 34, 'reference_length': 8} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.05405405405405406, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 23.75} Flesh Reading Ease: 88.4 ---------------------------------------- Source: ['Sportvereine und Fitnessstudios bieten ein vielfältiges Kursangebot.'] Prediction: ['Die Schweizer Sportvereine und Fitnessstudios bieten ein vielfältiges Kursangebot.\nSie bieten ein vielfältiges Kursangebot.'] Label: [['In Sportvereinen, in Fitness-Studios, bei Lauftreffs oder in Kursen der Volkshochschule bietet sich die Gelegenheit dafür.']] Sacrebleu: {'score': 2.0274685852177114, 'counts': [1, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [6.25, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 0.8290291181804004, 'sys_len': 16, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8290291181804004, 'length_ratio': 0.8421052631578947, 'translation_length': 16, 'reference_length': 19} Rouge: {'rouge1': 0.058823529411764705, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.058823529411764705} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 15.05 ---------------------------------------- Source: ['Wer hingegen in seinen besten Jahren Bewegung als festen Bestandteil in sein Leben integriert, trägt dazu bei, die Muskelmasse zu erhalten oder sogar zu steigern.'] Prediction: ['Wer hingegen in seinen besten Jahren Bewegung als festen Bestandteil in sein Leben integriert hat, trägt dazu bei, die Muskelmasse zu erhalten oder sogar zu steigern.\nDas hat eine neue Folge, in dem die Muskelmasse zu erhalten oder sogar zu steigern trägt.'] Label: [['Bewegung schützt Knochen und Gelenke und erhält die Muskeln oder baut sie wieder auf.']] Sacrebleu: {'score': 1.099233067148683, 'counts': [4, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [8.51063829787234, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.0851063829787234, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1333333333333333, 'translation_length': 47, 'reference_length': 15} Rouge: {'rouge1': 0.09999999999999999, 'rouge2': 0.0, 'rougeL': 0.09999999999999999, 'rougeLsum': 0.09999999999999999} Sari: {'sari': 35.632183908045974} Flesh Reading Ease: 59.55 ---------------------------------------- Source: ['Das können einfache Alltagsbewegungen sein wie Treppensteigen oder zügiges Gehen beim Einkauf – nach dem Motto „Jeder Schritt hält fit“, aber auch sportliche Aktivitäten, sei es Fahrradfahren, Gymnastik oder gezieltes Muskeltraining.'] Prediction: ['Jeder Schritt hält fit, sei es Fahrradfahren, Gymnastik oder gezieltes Muskeltraining.\nAuch Sportliche Aktivitäten können einfache Alltagsbewegungen sein.'] Label: [['Zum Beispiel kleine Dinge wie die Treppe zu steigen statt den Aufzug zu benutzen.\nSchon das bewusste Einbauen von Bewegung in den Alltag tut gut.']] Sacrebleu: {'score': 1.6364503036957179, 'counts': [2, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [9.090909090909092, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 0.7967034698934615, 'sys_len': 22, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7967034698934615, 'length_ratio': 0.8148148148148148, 'translation_length': 22, 'reference_length': 27} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.08531746031746} Flesh Reading Ease: 30.6 ---------------------------------------- Source: ['können Trinkrituale dabei unterstützen. Falls es Ihnen schwerfällt, die empfohlene Menge von etwa 1, 5 Litern aufzunehmen'] Prediction: ['Derzeit hat die Menge von etwa 1, 5 Litern aufgeführt.\nDas hat die empfohlene Menge von etwa 1, 5 Litern aufgeführt.'] Label: [['Bauen Sie feste Gewohnheiten in den Tagesablauf ein.\nFalls Sie dazu neigen, zu wenig zu trinken, achten Sie eine Weile mal ganz bewusst auf Ihr Trinkverhalten.\nEin und ein halber Liter sollten es auf den Tag verteilt sein.']] Sacrebleu: {'score': 1.0368180173417778, 'counts': [4, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 0.4867522559599717, 'sys_len': 25, 'ref_len': 43} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.0, 0.0, 0.0], 'brevity_penalty': 0.4867522559599717, 'length_ratio': 0.5813953488372093, 'translation_length': 25, 'reference_length': 43} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.22390572390572} Flesh Reading Ease: 70.05 ---------------------------------------- Source: ['Beispielsweise zu jeder Mahlzeit ein Getränk oder nach dem Aufstehen direkt ein Glas Wasser leeren, kann leicht zur Gewohnheit werden.'] Prediction: ['Ein Getränk oder ein Glas Wasser kann leicht zur Gewohnheit werden.\nDas kann leicht zur Gewohnheit werden.'] Label: [['Nehmen Sie bei jeder Mahlzeit auf jeden Fall ein Getränk zu sich.\nTrinken Sie zum Beispiel ein großes Glas Wasser nach dem Aufstehen.']] Sacrebleu: {'score': 3.8857149428066826, 'counts': [6, 1, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [31.57894736842105, 5.555555555555555, 2.9411764705882355, 1.5625], 'bp': 0.729212952525235, 'sys_len': 19, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.3157894736842105, 0.05555555555555555, 0.0, 0.0], 'brevity_penalty': 0.729212952525235, 'length_ratio': 0.76, 'translation_length': 19, 'reference_length': 25} Rouge: {'rouge1': 0.27906976744186046, 'rouge2': 0.14634146341463414, 'rougeL': 0.27906976744186046, 'rougeLsum': 0.27906976744186046} Sari: {'sari': 32.00396825396825} Flesh Reading Ease: 83.75 ---------------------------------------- Source: ['Gerade weil ältere Menschen Durst weniger stark empfinden, hilft es, wenn sie sich eine Zeitlang aufs Trinken zu konzentrieren.'] Prediction: ['ältere Menschen wollen sich aufs Trinken konzentrieren.\nDas kann sie sich eine Zeitlang aufs Trinken zu konzentrieren.'] Label: [['Im Alter verringert sich bei vielen Menschen das Durstgefühl.']] Sacrebleu: {'score': 2.6643211213888947, 'counts': [3, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [15.789473684210526, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 19, 'reference_length': 10} Rouge: {'rouge1': 0.22222222222222224, 'rouge2': 0.0, 'rougeL': 0.14814814814814817, 'rougeLsum': 0.07407407407407408} Sari: {'sari': 38.57142857142858} Flesh Reading Ease: 66.2 ---------------------------------------- Source: ['Eine Orientierung bietet die Ernährungspyramide.'] Prediction: ['Die Orientierung der Schweizer Ernährungspyramide bietet in der Schweiz eine Orientierung.\nDie Orientierung bietet die Ernährungspyramide.'] Label: [['Welche Lebensmittel Ihr Körper braucht, lesen Sie in den Texten Die Ernährungspyramide Teil 1 und Die Ernährungspyramide Teil 2.']] Sacrebleu: {'score': 2.8452945919185098, 'counts': [6, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [33.333333333333336, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 0.846481724890614, 'sys_len': 18, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 0.846481724890614, 'length_ratio': 0.8571428571428571, 'translation_length': 18, 'reference_length': 21} Rouge: {'rouge1': 0.35000000000000003, 'rouge2': 0.15789473684210528, 'rougeL': 0.3, 'rougeLsum': 0.3} Sari: {'sari': 42.54385964912281} Flesh Reading Ease: 19.9 ---------------------------------------- Source: ['Wählen Sie bewusst aus, was Sie essen und setzen Sie auf besonders nährstoffreiche Lebensmittel.'] Prediction: ['Im Alter von 99 Jahren ist es am frühen Freitag zu einem grossen Lebensmittel gekommen.\nDie Woche veröffentlicht die Welt und setzen sie auf besonders nährstoffreiche Lebensmittel.\nDie Welt ist auf besonders nährstoffreiche Lebensmittel.'] Label: [['Greifen Sie häufig bei nährstoffreichem Gemüse zu.']] Sacrebleu: {'score': 1.184949136625139, 'counts': [2, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [5.405405405405405, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05405405405405406, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.625, 'translation_length': 37, 'reference_length': 8} Rouge: {'rouge1': 0.125, 'rouge2': 0.0, 'rougeL': 0.08333333333333333, 'rougeLsum': 0.125} Sari: {'sari': 36.76587301587302} Flesh Reading Ease: 57.55 ---------------------------------------- Source: ['Die Krux: Der Körper braucht zwar weniger Energie, aber noch genauso viele Nährstoffe wie in jungen Jahren und teilweise sogar noch etwas mehr.'] Prediction: ['Die Krux braucht weniger Energie, aber noch genauso viele Nährstoffe wie in jungen Jahren.\nDas ist der Körper in der Schweiz.\nDer Körper braucht weniger Energie, aber noch genauso viele Nährstoffe wie in jungen Jahren.'] Label: [['Ihr Körper braucht jetzt weniger Energie, aber genauso viele Nährstoffe wie in jungen Jahren.']] Sacrebleu: {'score': 24.094227672998066, 'counts': [14, 11, 8, 6], 'totals': [40, 39, 38, 37], 'precisions': [35.0, 28.205128205128204, 21.05263157894737, 16.216216216216218], 'bp': 1.0, 'sys_len': 40, 'ref_len': 16} Bleu: {'bleu': 0.24094227672998075, 'precisions': [0.35, 0.28205128205128205, 0.21052631578947367, 0.16216216216216217], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 40, 'reference_length': 16} Rouge: {'rouge1': 0.509090909090909, 'rouge2': 0.4150943396226416, 'rougeL': 0.509090909090909, 'rougeLsum': 0.509090909090909} Sari: {'sari': 62.46921596921597} Flesh Reading Ease: 74.7 ---------------------------------------- Source: ['Doch wenn die Ernährung nicht angepasst wird, kann das Körpergewicht steigen und damit verbunden auch das Risiko für Herz-Kreislauf-Krankheiten und chronischer Erkrankungen wie Diabetes mellitus Typ 2.'] Prediction: ['Das Körpergewicht steigt auch für Herz-Kreislauf-Krankheiten und chronischer Erkrankungen wie Diabetes mellitus Typ 2.\nDie Ernährung wird nicht angepasst.\nDas Risiko für Herz-Kreislauf-Krankheiten und chronischer Erkrankungen wie Diabetes mellitus Typ 2 verbunden auch das Risiko für Herz-Kreislauf-Krankheiten und chronischer Erkrankungen.'] Label: [['Ein höheres Körpergewicht erhöht das Risiko für Herz-Kreislauf-Krankheiten oder Diabetes.\nWenn wir unsere Essgewohnheiten nicht ändern, nehmen wir zu.']] Sacrebleu: {'score': 6.534434987768791, 'counts': [9, 3, 2, 1], 'totals': [43, 42, 41, 40], 'precisions': [20.930232558139537, 7.142857142857143, 4.878048780487805, 2.5], 'bp': 1.0, 'sys_len': 43, 'ref_len': 22} Bleu: {'bleu': 0.06534434987768793, 'precisions': [0.20930232558139536, 0.07142857142857142, 0.04878048780487805, 0.025], 'brevity_penalty': 1.0, 'length_ratio': 1.9545454545454546, 'translation_length': 43, 'reference_length': 22} Rouge: {'rouge1': 0.2894736842105263, 'rouge2': 0.1891891891891892, 'rougeL': 0.2631578947368421, 'rougeLsum': 0.2894736842105263} Sari: {'sari': 40.67505539727762} Flesh Reading Ease: 32.15 ---------------------------------------- Source: ['Die körperlichen Veränderungen sind im gewissen Umfang normal.'] Prediction: ['Die körperlichen Veränderungen sind im gewissen Umfang normal.\nDie körperlichen Veränderungen sind im gewissen Umfang normal.'] Label: [['Das alles sind normale Entwicklungen.']] Sacrebleu: {'score': 2.5540496664715904, 'counts': [2, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [11.11111111111111, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 18, 'reference_length': 6} Rouge: {'rouge1': 0.08000000000000002, 'rouge2': 0.0, 'rougeL': 0.08000000000000002, 'rougeLsum': 0.08000000000000002} Sari: {'sari': 36.36363636363636} Flesh Reading Ease: 31.6 ---------------------------------------- Source: ['Mit zunehmendem nehmen Muskel- und Knochenmasse sowie der Wasseranteil ab, gleichzeitig steigt der Fettanteil.'] Prediction: ['Mit nehmen Muskel und Knochenmasse und Wasseranteil ab steigt der Fettanteil.\nDie Muskel und Knochenmasse steigen gleichzeitig ab.'] Label: [['Dafür steigt der Fettanteil im Körper leichter an.\nDie Muskelkraft lässt nach.\nDie Knochen sind nicht mehr so stabil wie in jungen Jahren.\nWenn wir älter werden, verändert sich unser Körper.']] Sacrebleu: {'score': 4.214526472194399, 'counts': [6, 3, 1, 0], 'totals': [20, 19, 18, 17], 'precisions': [30.0, 15.789473684210526, 5.555555555555555, 2.9411764705882355], 'bp': 0.44932896411722156, 'sys_len': 20, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.15789473684210525, 0.05555555555555555, 0.0], 'brevity_penalty': 0.4493289641172217, 'length_ratio': 0.5555555555555556, 'translation_length': 20, 'reference_length': 36} Rouge: {'rouge1': 0.14814814814814814, 'rouge2': 0.07692307692307693, 'rougeL': 0.14814814814814814, 'rougeLsum': 0.14814814814814814} Sari: {'sari': 45.43762750659303} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Wer abwechlungsreich isst, ein normales Gewicht hält und sich regelmäßig bewegt, kann vielen Beschwerden vorbeugen.'] Prediction: ['Wer abwechlungsreich isst, ein normales Gewicht hält und sich regelmäßig bewegt, kann vielen Beschwerden vorbeugen.\nDas ist ein normales Gewicht, der abwechlungsreich ist.'] Label: [['Unterstützen Sie Ihren Körper mit ausgewogener Ernährung und viel Bewegung.']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5454545454545454, 'translation_length': 28, 'reference_length': 11} Rouge: {'rouge1': 0.052631578947368425, 'rouge2': 0.0, 'rougeL': 0.052631578947368425, 'rougeLsum': 0.052631578947368425} Sari: {'sari': 35.08771929824561} Flesh Reading Ease: 57.35 ---------------------------------------- Source: ['Menschen im besten Alter sind leistungsfähiger, mobiler und gesünder als noch die Generationen vor ihnen.'] Prediction: ['Menschen im besten Alter sind leistungsfähiger, mobiler und gesünder als noch die Generationen vor ihnen.\nDas ist der erste Mal in der Schweiz.'] Label: [['Heutzutage bleiben die meisten Menschen fit und aktiv, wenn sie älter werden.']] Sacrebleu: {'score': 2.1601524349994397, 'counts': [5, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.16216216216216217, 'rouge2': 0.0, 'rougeL': 0.10810810810810811, 'rougeLsum': 0.10810810810810811} Sari: {'sari': 37.12121212121212} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['Nur wer sich auf die Veränderungen einstellt und auch im Alter aktiv bleibt und sich bewusst ernährt, erhöht seine Chancen auf ein langes vitales und selbstbestimmtes Leben.'] Prediction: ['Wer sich auf die Veränderungen einstellt und auch im Alter aktiv bleibt und sich bewusst ernährt, erhöht seine Chancen auf ein langes vitales und selbstbestimmtes Leben.\nDas Leben erhöht seine Chancen auf ein langes vitales und selbstbestimmtes Leben.'] Label: [['Durch bewusste Ernährung können wir uns im Alter viel Gutes tun.\nEs tut gut, auch das Essen dem Alter anzupassen.\nDarauf können wir uns gut einstellen, wenn wir auf die Signale von unserem Körper achten.']] Sacrebleu: {'score': 3.0118579559893055, 'counts': [8, 2, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [19.51219512195122, 5.0, 1.2820512820512822, 0.6578947368421053], 'bp': 1.0, 'sys_len': 41, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.1951219512195122, 0.05, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.025, 'translation_length': 41, 'reference_length': 40} Rouge: {'rouge1': 0.1728395061728395, 'rouge2': 0.05063291139240506, 'rougeL': 0.09876543209876541, 'rougeLsum': 0.14814814814814817} Sari: {'sari': 38.70133785566234} Flesh Reading Ease: 55.7 ---------------------------------------- Source: ['Unser Körper verändert sich zwar mit dem Alter – ob wir wollen oder nicht!'] Prediction: ['Unser Körper verändert sich mit dem Alter.\nOb wir wollen oder nicht wollen oder wir wollen oder wollen oder wollen oder nicht?'] Label: [['Mit zunehmendem Alter verändert sich der Körper.']] Sacrebleu: {'score': 3.9566236357113054, 'counts': [5, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.20833333333333334, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 24, 'reference_length': 8} Rouge: {'rouge1': 0.42424242424242425, 'rouge2': 0.19354838709677416, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 43.23529411764706} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['Deshalb gehört das Pausenfrühstück auch zum Alltag in Kita und Grundschule.'] Prediction: ['Deshalb gehört das Pausenfrühstück auch zum Alltag in Kita und Grundschule.\nDas Alltag in Kita und Grundschule gehört das Pausenfrühstück auch zum Alltag in Kita und Grundschule.'] Label: [['Auch Kinder brauchen ausreichend Flüssigkeit.\nEine vollwertige Zwischenmahlzeit setzt sich aus vier Bestandteilen zusammen: Deshalb ist ein zweites Frühstück in der Schulpause oder in der Kita genauso wichtig wie das Frühstück zu Hause.']] Sacrebleu: {'score': 1.6440935616933439, 'counts': [7, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 0.7855436050549208, 'sys_len': 29, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7855436050549208, 'length_ratio': 0.8055555555555556, 'translation_length': 29, 'reference_length': 36} Rouge: {'rouge1': 0.28169014084507044, 'rouge2': 0.057971014492753624, 'rougeL': 0.2535211267605634, 'rougeLsum': 0.2535211267605634} Sari: {'sari': 38.88888888888889} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['Jetzt gehören gezuckerter Früchtetee, unverdünnte Säfte, Croissants, süße Teilchen und/oder Kindermilchprodukte nicht mehr dazu.'] Prediction: ['Einige Schweizer Produkte sind in den letzten Tagen nicht mehr dazu.\nDie Produktion ist nicht mehr dazu.'] Label: [['Nicht geeignet sind Limonaden und Cola-Getränke, Eistee und andere gezuckerte Getränke.']] Sacrebleu: {'score': 2.4074859035470344, 'counts': [2, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [10.526315789473685, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4615384615384615, 'translation_length': 19, 'reference_length': 13} Rouge: {'rouge1': 0.12903225806451615, 'rouge2': 0.0, 'rougeL': 0.06451612903225808, 'rougeLsum': 0.06451612903225808} Sari: {'sari': 37.58354218880535} Flesh Reading Ease: 72.05 ---------------------------------------- Source: ['Damit das gemeinsame Klassenfrühstück nicht zur Kampf-, sondern zur Wohlfühlzone wird, müssen alle an einem Strang ziehen.'] Prediction: ['In den vergangenen Tagen müssen alle an einem Strang ziehen.\nDas gemeinsame Klassenfrühstück wird nicht zur Kampf-, sondern zur Wohlfühlzone wird.\nDie Wohlfühlzone muss sich an einem Strang ziehen.'] Label: [['Vollkornbrot bietet viel mehr Inhaltsstoffe als Backwaren aus Weißmehl.']] Sacrebleu: {'score': 1.123099644603982, 'counts': [1, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [3.0303030303030303, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.030303030303030304, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3, 'translation_length': 33, 'reference_length': 10} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.25925925925925} Flesh Reading Ease: 65.0 ---------------------------------------- Source: ['Schritt 1: Ein erster Meilenstein ist es, wenn alle oder möglichst viele Schülerinnen und Schüler ein vollständiges Pausenfrühstück mit allen vier Bestandteilen dabei haben.'] Prediction: ['Am Mittwochabend gab es in der Schweiz einen ersten Meilenstein.\nDer Pausenfrühstück mit allen vier Bestandteilen haben sie dabei.\nDie Schülerinnen und Schüler haben ein erster Meilenstein.'] Label: [['Kinder brauchen Nachschub in Form von Zwischenmahlzeiten.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.052631578947368425, 'rouge2': 0.0, 'rougeL': 0.052631578947368425, 'rougeLsum': 0.052631578947368425} Sari: {'sari': 35.35539215686274} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Nein! Diese Information gibt es auch in einfacher Sprache'] Prediction: ['Eine Sprache-Funktion gibt es in einfacher Sprache.\nSie gibt es in einfacher Sprache.'] Label: [['Auch zwischendurch müssen die Energiespeicher wieder aufgefüllt werden.\nDas Pausenfrühstück in der Schule oder Kita wird meistens von zu Hause mitgebracht.']] Sacrebleu: {'score': 2.028969988565578, 'counts': [3, 0, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [20.0, 3.5714285714285716, 1.9230769230769231, 1.0416666666666667], 'bp': 0.5866462195100317, 'sys_len': 15, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5866462195100318, 'length_ratio': 0.6521739130434783, 'translation_length': 15, 'reference_length': 23} Rouge: {'rouge1': 0.05128205128205128, 'rouge2': 0.0, 'rougeL': 0.05128205128205128, 'rougeLsum': 0.05128205128205128} Sari: {'sari': 43.07539682539682} Flesh Reading Ease: 68.2 ---------------------------------------- Source: ['Hierbei helfen die BZfE-Materialien rund um die Ernährungspyramide, die Methode SinnExperimente und der Baustein "Dem Zucker auf der Spur“. Falls möglich, gehen Sie anschließend noch einen Schritt weiter und bringen Sie die Kinder auf den Geschmack von ungesüßten Getränken, frischem Obst und Gemüse, (Vollkorn)-Brot und Milch.'] Prediction: ['Eine BZfE-Methode ist auf der Spur gekommen.\nDie BZfE-Materialien sind dabei um die Ernährungspyramide.\nDie Methode ist auch die Methode SinnExperimente und der Baustein "Dem Zucker auf der Spur".'] Label: [['Dabei gilt: Je mehr Bestandteile vom Getreidekorn enthalten sind, desto besser.']] Sacrebleu: {'score': 1.2944532586971997, 'counts': [2, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [5.882352941176471, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.058823529411764705, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.0, 'rougeL': 0.046511627906976744, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 35.486111111111114} Flesh Reading Ease: 47.45 ---------------------------------------- Source: ['Ebenso haben Frauen kleinere Hände als Männer, sie essen auch kleinere Portionen.'] Prediction: ['Frauen haben kleinere Hände als Männer, sie essen auch kleinere Portionen.\nEbenso haben Frauen kleinere Hände als Männer, sie essen auch kleinere Portionen.'] Label: [['Sie essen oft auch etwas kleinere Portionen, denn ihr Körper braucht etwas weniger Energie.\nFrauen haben oft etwas kleinere Hände als Männer.']] Sacrebleu: {'score': 13.254512146117515, 'counts': [13, 5, 2, 1], 'totals': [27, 26, 25, 24], 'precisions': [48.148148148148145, 19.23076923076923, 8.0, 4.166666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 25} Bleu: {'bleu': 0.13254512146117509, 'precisions': [0.48148148148148145, 0.19230769230769232, 0.08, 0.041666666666666664], 'brevity_penalty': 1.0, 'length_ratio': 1.08, 'translation_length': 27, 'reference_length': 25} Rouge: {'rouge1': 0.5, 'rouge2': 0.32, 'rougeL': 0.4615384615384615, 'rougeLsum': 0.5} Sari: {'sari': 50.52645502645502} Flesh Reading Ease: 45.65 ---------------------------------------- Source: ['Kleine Kinder, die weniger Nahrung brauchen, haben kleinere Hände, größere Kinder die größeren Hände und den größeren Appetit.'] Prediction: ['Kleine Kinder brauchen kleinere Hände, größere Kinder die größeren Hände und den größeren Appetit.\nDas ist ein neuer Appetit, der sich nicht mehr aufmerksam ist.'] Label: [['Größere Kinder brauchen schon mehr, ihre Hände wachsen mit.\nKleine Kinder brauchen weniger Nahrung, sie haben kleine Hände.']] Sacrebleu: {'score': 6.627883802743566, 'counts': [11, 2, 1, 0], 'totals': [29, 28, 27, 26], 'precisions': [37.93103448275862, 7.142857142857143, 3.7037037037037037, 1.9230769230769231], 'bp': 1.0, 'sys_len': 29, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.3793103448275862, 0.07142857142857142, 0.037037037037037035, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3181818181818181, 'translation_length': 29, 'reference_length': 22} Rouge: {'rouge1': 0.4313725490196078, 'rouge2': 0.24489795918367346, 'rougeL': 0.27450980392156865, 'rougeLsum': 0.4313725490196078} Sari: {'sari': 35.08227543154014} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Sie ist individuell, wächst mit und berücksichtigt somit den unterschiedlichen Bedarf eines Menschen – je nach Alter und Geschlecht.'] Prediction: ['Eine Frau ist individuell, wächst mit und berücksichtigt den unterschiedlichen Bedarf eines Menschen.\nSie ist individuell und berücksichtigt somit den unterschiedlichen Bedarf eines Menschen.'] Label: [['Zweitens: Die Größe einer Hand zeigt, welche Menge für den Körper richtig ist.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6875, 'translation_length': 27, 'reference_length': 16} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.0, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 36.8421052631579} Flesh Reading Ease: 33.45 ---------------------------------------- Source: ['Das große Plus: Die Hand ist immer dabei, wenn es ums Essen geht.'] Prediction: ['Das große Plus: Die Hand ist immer dabei, wenn es ums Essen geht.\nDas große Plus: Die Hand ist immer dabei, wenn es ums Essen geht.'] Label: [['Erstens: Sie haben Ihre Hand immer dabei, also können Sie leicht messen.\nDie eigene Hand hat große Vorteile.']] Sacrebleu: {'score': 5.8343471803385185, 'counts': [10, 2, 1, 0], 'totals': [32, 31, 30, 29], 'precisions': [31.25, 6.451612903225806, 3.3333333333333335, 1.7241379310344827], 'bp': 1.0, 'sys_len': 32, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.3125, 0.06451612903225806, 0.03333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 32, 'reference_length': 22} Rouge: {'rouge1': 0.2916666666666667, 'rouge2': 0.08695652173913043, 'rougeL': 0.20833333333333331, 'rougeLsum': 0.20833333333333331} Sari: {'sari': 41.96078431372549} Flesh Reading Ease: 90.95 ---------------------------------------- Source: ['Die Ernährungspyramide verwendet deshalb die eigene Hand als einfaches Maß. Auch exakte Mengenangaben in Gramm für Portionen sind unpraktisch und haben sich im Alltag nicht bewährt.'] Prediction: ['Im Alltag fanden sich in der Schweiz mehrere Mengenangaben in Gramm für Portionen ein.\nAuch exakte Mengenangaben in Gramm für Portionen sind unpraktisch.\nDie eigene Hand verwendet deshalb die eigene Hand als einfaches Maß.'] Label: [['Sie können ganz einfach Ihre Hand als Messhilfe nehmen.\nAber es geht viel praktischer.\nNatürlich können Sie alles ganz genau mit einer Waage abmessen.']] Sacrebleu: {'score': 2.5058623314122577, 'counts': [5, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [13.513513513513514, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.13513513513513514, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3703703703703705, 'translation_length': 37, 'reference_length': 27} Rouge: {'rouge1': 0.06349206349206349, 'rouge2': 0.03278688524590164, 'rougeL': 0.06349206349206349, 'rougeLsum': 0.06349206349206349} Sari: {'sari': 36.29385964912281} Flesh Reading Ease: 57.55 ---------------------------------------- Source: ['Denn das Maß für eine Portion kann die eigene Hand sein.'] Prediction: ['Das Maß für eine Portion kann die eigene Hand sein.\nDas Maß kann die eigene Hand sein.'] Label: [['Im Artikel ‚Wie kann ich sehen, wie groß eine Portion ist?\n’ lesen Sie, wie Sie mit der Hand verschiedene Portionen messen können.']] Sacrebleu: {'score': 3.3416458205245885, 'counts': [5, 1, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [26.31578947368421, 5.555555555555555, 2.9411764705882355, 1.5625], 'bp': 0.6563555554708402, 'sys_len': 19, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.05555555555555555, 0.0, 0.0], 'brevity_penalty': 0.6563555554708402, 'length_ratio': 0.7037037037037037, 'translation_length': 19, 'reference_length': 27} Rouge: {'rouge1': 0.1951219512195122, 'rouge2': 0.05128205128205128, 'rougeL': 0.14634146341463414, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 40.05681818181818} Flesh Reading Ease: 89.6 ---------------------------------------- Source: ['Das Modell zeigt, wie ausgewogenes Essen am Tag aussehen kann.'] Prediction: ['Das Modell zeigt, wie ausgewogenes Essen am Tag aussehen kann.\nDas Modell zeigt, wie ausgewogenes Essen am Tag aussehen kann.'] Label: [['Die Portionen können Sie natürlich über verschiedene Mahlzeiten verteilen.\nDie Pyramide zeigt 22 Portionen für einen Tag.']] Sacrebleu: {'score': 2.224972978585352, 'counts': [4, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.263157894736842, 'translation_length': 24, 'reference_length': 19} Rouge: {'rouge1': 0.10000000000000002, 'rouge2': 0.0, 'rougeL': 0.10000000000000002, 'rougeLsum': 0.10000000000000002} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Sie liefert einen Rahmen, den Sie nach Ihren eigenen Bedürfnissen, Ihrem Geschmack und Gewohnheiten ohne großen Verzicht füllen können.'] Prediction: ['Eine Frau liefert einen Rahmen, den Sie nach Ihren eigenen Bedürfnissen, Ihrem Geschmack und Gewohnheiten ohne großen Verzicht füllen können.\nSie liefert einen Rahmen, den Sie nach Ihren eigenen Bedürfnissen, Ihrem Geschmack und Gewohnheiten ohne großen Verzicht füllen können können.'] Label: [['An der Pyramidenform können Sie sehen, was sie reichlich essen können und was Sie nicht zu oft nehmen sollten.']] Sacrebleu: {'score': 1.2927264865780022, 'counts': [7, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [15.217391304347826, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.15217391304347827, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1904761904761907, 'translation_length': 46, 'reference_length': 21} Rouge: {'rouge1': 0.22857142857142856, 'rouge2': 0.08823529411764706, 'rougeL': 0.1714285714285714, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 36.394557823129254} Flesh Reading Ease: 43.0 ---------------------------------------- Source: ['Ein großer Vorteil der Ernährungspyramide: Sie ist vielseitig. Die Ernährungspyramide hilft Ihnen dabei. Es mangelt aber oftmals daran, dieses Wissen auch in ein entsprechendes Verhalten, eben in die alltägliche Ernährungspraxis umzusetzen.'] Prediction: ['Ein großer Vorteil der Ernährungspyramide: Sie ist vielseitig.\nEs mangelt aber oftmals daran, dieses Wissen auch in ein entsprechendes Verhalten, eben in die alltägliche Ernährungspraxis umzusetzen.'] Label: [['Sie kann Ihnen helfen, gesund und mit Abwechslung zu essen.\nDie Pyramide ist eine Orientierungshilfe.']] Sacrebleu: {'score': 1.793443763338368, 'counts': [5, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7222222222222223, 'translation_length': 31, 'reference_length': 18} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.08888888888888888, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 30.103359173126616} Flesh Reading Ease: 38.3 ---------------------------------------- Source: ['Und die Ampelfarben grün, gelb, rot geben bei der Auswahl der Lebensmittel eine erste Orientierung für den Tag.'] Prediction: ['Am 19.\nMai findet in der Nacht auf Sonntag statt.\nDie Lebensmittel findet in der Nacht auf Sonntag statt.\nDie Ampelfarben grün, gelb, rot und geben eine erste Orientierung für den Tag.'] Label: [['Die Ampelfarben zeigen auf einen Blick, bei welchen Lebensmitteln alles im grünen Bereich ist (grün) und wo Sie aufpassen sollten (rot).\nDie Pyramide hat drei Farben: grün, gelb und rot.']] Sacrebleu: {'score': 5.909286437792269, 'counts': [12, 4, 1, 0], 'totals': [38, 37, 36, 35], 'precisions': [31.57894736842105, 10.81081081081081, 2.7777777777777777, 1.4285714285714286], 'bp': 0.9740274534203012, 'sys_len': 38, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.3157894736842105, 0.10810810810810811, 0.027777777777777776, 0.0], 'brevity_penalty': 0.9740274534203012, 'length_ratio': 0.9743589743589743, 'translation_length': 38, 'reference_length': 39} Rouge: {'rouge1': 0.26865671641791045, 'rouge2': 0.0923076923076923, 'rougeL': 0.20895522388059704, 'rougeLsum': 0.23880597014925375} Sari: {'sari': 40.023513336541164} Flesh Reading Ease: 81.55 ---------------------------------------- Source: ['Folgende Ansätze des Stressmanagements können hierbei helfen:'] Prediction: ['Folgende Ansätze des Stressmanagements können hierbei helfen: Folgende Ansätze des Stressmanagements können hierbei helfen:'] Label: [['Diese Methoden können helfen, besser mit Stress zurechtzukommen:']] Sacrebleu: {'score': 3.21858262703621, 'counts': [3, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 16, 'reference_length': 10} Rouge: {'rouge1': 0.2222222222222222, 'rouge2': 0.07999999999999999, 'rougeL': 0.2222222222222222, 'rougeLsum': 0.2222222222222222} Sari: {'sari': 37.878787878787875} Flesh Reading Ease: 13.9 ---------------------------------------- Source: ['Diese Lebensmittel sind gut zu schlucken und helfen die Appetitlosigkeit zu überwinden. Stresshungerern fällt es unter Druck leichter, flüssige oder weiche Lebensmittel zu essen wie püriertes Obst, Buttermilch, Joghurt oder ein Glas Saft.'] Prediction: ['Eine Appetitlosigkeit helfen Stresshungerern leichter, flüssige oder weiche Lebensmittel zu essen wie püriertes Obst, Buttermilch, Joghurt oder ein Glas Saft.\nDas ist der erste Lebensmittel in der Schweiz.'] Label: [['Ohne Kauen fällt das Essen manchmal leichter.\nWenn Ihnen widerstrebt zu essen, probieren Sie weiche oder flüssige Lebensmittel wie Joghurt, püriertes Obst oder Gemüsesuppen.']] Sacrebleu: {'score': 4.492398578415927, 'counts': [16, 2, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [48.484848484848484, 6.25, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.48484848484848486, 0.0625, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1785714285714286, 'translation_length': 33, 'reference_length': 28} Rouge: {'rouge1': 0.5172413793103449, 'rouge2': 0.14285714285714285, 'rougeL': 0.3103448275862069, 'rougeLsum': 0.3448275862068965} Sari: {'sari': 41.01774910639147} Flesh Reading Ease: 49.0 ---------------------------------------- Source: ['Stressessern können Sie beispielsweise empfehlen, Gemüsesticks zu knabbern oder – wer es mag und nicht Hunger davon bekommt – zuckerfreies Kaugummi zu kauen.'] Prediction: ['Kaugummi kannst du zu einer Hunger-Pandemie kaufen.\nDie Zukunft ist eine grosse Woche, dass sie sich zu einer Woche empfehlen und Gemüsesticks zu knabbern oder wer es mag und nicht Hunger davon bekommt.\nDie Zukunft ist eine Woche in der Schweiz.'] Label: [['Dann hilft manchen auch das Kauen von zuckerfreiem Kaugummi.\nEssen Sie eher zur Beruhigung oder Ablenkung?']] Sacrebleu: {'score': 1.0700143107304574, 'counts': [3, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [6.666666666666667, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 45, 'reference_length': 18} Rouge: {'rouge1': 0.10169491525423728, 'rouge2': 0.0, 'rougeL': 0.10169491525423728, 'rougeLsum': 0.10169491525423728} Sari: {'sari': 34.974747474747474} Flesh Reading Ease: 72.7 ---------------------------------------- Source: ['Sie leiden unter Appetitlosigkeit und Übelkeit und verlieren bei anhaltendem Stress häufig an Gewicht. Sogenannte Stresshungerer schlagen Kummer, Ärger oder Hektik auf den Magen.'] Prediction: ['Sogenannte Stresshungerer schlagen Kummer, Ärger oder Hektik auf den Magen.\nSie leiden unter Appetitlosigkeit und Übelkeit und verlieren bei anhaltendem Stress häufig an Gewicht.'] Label: [['Ist der Stress groß, kann er Übelkeit oder eine Abneigung vor dem Essen auslösen.\nSie bemerken gar nicht mehr, dass sie Hunger haben.\nAndere Menschen verlieren bei Stress den Appetit.']] Sacrebleu: {'score': 3.670143667836929, 'counts': [10, 2, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [37.03703703703704, 7.6923076923076925, 2.0, 1.0416666666666667], 'bp': 0.7435670792059064, 'sys_len': 27, 'ref_len': 35} Bleu: {'bleu': 0.0, 'precisions': [0.37037037037037035, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 0.7435670792059064, 'length_ratio': 0.7714285714285715, 'translation_length': 27, 'reference_length': 35} Rouge: {'rouge1': 0.25, 'rouge2': 0.037037037037037035, 'rougeL': 0.17857142857142855, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 38.87631975867269} Flesh Reading Ease: 45.15 ---------------------------------------- Source: ['Sie neigen dazu, bei Dauerstress Übergewicht zu entwickeln. Es gibt so genannte Stressesser, die hemmungslos futtern und fett- und zuckerreiche Speisen in kurzer Zeit verschlingen.'] Prediction: ['Dauerstress Übergewicht ist eine neue Dauerstress.\nSie neigen dazu, bei Dauerstress Übergewicht zu entwickeln.\nEs gibt so genannte Stressesser, die hemmungslos futtern und fett- und zuckerreiche Speisen in kurzer Zeit verschlingen.'] Label: [['Dadurch nehmen diese sogenannten Stress-Esser bei Stress häufig an Gewicht zu.\nSie essen dann gerne fette und süße Speisen.']] Sacrebleu: {'score': 2.8048598302198355, 'counts': [7, 1, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [19.444444444444443, 2.857142857142857, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.19444444444444445, 0.02857142857142857, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 36, 'reference_length': 21} Rouge: {'rouge1': 0.18867924528301885, 'rouge2': 0.0, 'rougeL': 0.1509433962264151, 'rougeLsum': 0.18867924528301885} Sari: {'sari': 36.884411884411875} Flesh Reading Ease: 58.55 ---------------------------------------- Source: ['Genuss und Wertschätzung bleiben dabei allerdings auf der Strecke und auch Auswahl und Zusammensetzung des Essens finden wenig Beachtung.'] Prediction: ['Der Essen wird auf der Strecke wenig Beachtung geschlossen.\nDas ist auch der erste Mal, dass der Essen wenig Beachtung bleibt.'] Label: [['Und oft wählt man unbewusst andere Lebensmittel aus als sonst.\nAber so fehlt der Genuss beim Essen.']] Sacrebleu: {'score': 2.224972978585352, 'counts': [4, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.263157894736842, 'translation_length': 24, 'reference_length': 19} Rouge: {'rouge1': 0.10256410256410256, 'rouge2': 0.0, 'rougeL': 0.10256410256410256, 'rougeLsum': 0.10256410256410256} Sari: {'sari': 44.38131313131313} Flesh Reading Ease: 75.9 ---------------------------------------- Source: ['Morgens in der S-Bahn auf dem Weg zur Arbeit, mittags zwischen zwei Terminen am Schreibtisch und abends vor dem Fernseher – für viele Menschen ist Essen zur Nebensache geworden.'] Prediction: ['In der S-Bahn wurden für viele Menschen Essen zur Nebensache geworden.\nDie Nebensache ist für viele Menschen zur Nebensache geworden.'] Label: [['Oder sie essen unterwegs.\nViele Menschen essen dann nebenher, während sie etwas anderes tun.']] Sacrebleu: {'score': 2.2731543567022867, 'counts': [3, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [13.636363636363637, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2941176470588236, 'translation_length': 22, 'reference_length': 17} Rouge: {'rouge1': 0.15789473684210528, 'rouge2': 0.1111111111111111, 'rougeL': 0.15789473684210528, 'rougeLsum': 0.15789473684210528} Sari: {'sari': 39.958479365981496} Flesh Reading Ease: 53.0 ---------------------------------------- Source: ['Säureregulatoren (Kaliumlactat, Natriumacetate) sorgen dafür, dass das Produkt länger haltbar ist. Je nach Produkt kommen diverse Zusatzstoffe dazu wie Verdickungsmittel (z. B. Carrageen, Guarkernmehl, Johannisbrotkernmehl), Farbstoffe oder Aromen. Außer diesen pflanzlichen „Grundstoffen“ sorgen weitere Zutaten für die gewünschte Konsistenz, die Optik und den Geschmack, zum Beispiel Rapsöl, Sojaproteinkonzentrat (Wasser- und Fettbindemittel) und Sojaprotein-Isolat (Emulgator). Dafür verwenden sie unterschiedliche „Grundstoffe“.'] Prediction: ['Zusatzstoffe sind länger haltbar.\nDas Produkt kommt länger haltbar.\nDafür sind weitere Zutaten für die gewünschte Konsistenz, die Optik und den Geschmack.'] Label: [['Dafür müssen diese Produkte aber stark verarbeitet werden und brauchen oft viele Zusatzstoffe.']] Sacrebleu: {'score': 2.042946039568498, 'counts': [4, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.19047619047619047, 'rouge2': 0.05, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.19047619047619047} Sari: {'sari': 35.59027777777777} Flesh Reading Ease: 61.55 ---------------------------------------- Source: ['Hersteller möchten den veganen Alternativen eine möglichst fleisch- und wurstähnliche Konsistenz, Textur und Geschmack verleihen.'] Prediction: ['Hersteller möchten eine möglichst fleisch und wurstähnliche Konsistenz, Textur und Geschmack verleihen.\nSie möchten eine möglichst fleisch und wurstähnliche Konsistenz, Textur und Geschmack verleihen.'] Label: [['Sie werden so hergestellt, dass sie Fleisch oder Würstchen möglichst ähnlich sind.\nIm Supermarktregal gibt es eine große Palette Fleischersatzprodukte.']] Sacrebleu: {'score': 2.0899410246084282, 'counts': [6, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [21.428571428571427, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2173913043478262, 'translation_length': 28, 'reference_length': 23} Rouge: {'rouge1': 0.18867924528301885, 'rouge2': 0.0392156862745098, 'rougeL': 0.11320754716981132, 'rougeLsum': 0.15094339622641512} Sari: {'sari': 39.25438596491228} Flesh Reading Ease: 39.3 ---------------------------------------- Source: ['Im unreifen Zustand hat das Fruchtfleisch eine sehr faserige Konsistenz (ähnlich wie Hähnchenfleisch) und ist geschmacksneutral.'] Prediction: ['Im Zustand hat das Fruchtfleisch eine sehr faserige Konsistenz geschmacksneutral.\nDas Fruchtfleisch ist geschmacksneutral.'] Label: [['Das Fruchtfleisch von dieser großen Frucht wird ebenfalls als Fleischersatz angeboten.']] Sacrebleu: {'score': 5.412989186545263, 'counts': [3, 1, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 6.666666666666667, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 16, 'reference_length': 12} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.08333333333333334, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 38.33333333333333} Flesh Reading Ease: 50.15 ---------------------------------------- Source: ['Sie wächst in vielen tropischen Ländern, vor allem in Südostasien. Jackfrucht ist die größte Baumfrucht der Welt.'] Prediction: ['In der Schweiz wächst eine größte Baumfrucht der Welt.\nJackfrucht ist die größte Baumfrucht der Welt.'] Label: [['Die weiten Transportwege sind auch bei der Jackfruit problematisch.']] Sacrebleu: {'score': 2.5540496664715904, 'counts': [2, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [11.11111111111111, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 18, 'reference_length': 10} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.0, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['Der Vorteil von Süßlupinen gegenüber Soja ist, dass sie auch in Deutschland angebaut und von Sojaallergikern vertragen werden.'] Prediction: ['Die 20-Minuten-Radio-Hostin Andrea äusserte sich am Freitagabend mit Süßlupinen in der Radio-Section der 20-Minuten-App (ganz unten in der Leiste), bei der sie auch in Deutschland angebaut werden.\nIn der Leiste wird sie von Sojaallergikern vertragen.'] Label: [['Bei Seitan und Lopino fallen die langen Transportwege für den Grundstoff Soja weg.']] Sacrebleu: {'score': 0.8321783954793125, 'counts': [1, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [2.272727272727273, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.022727272727272728, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.142857142857143, 'translation_length': 44, 'reference_length': 14} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.03571428571428571, 'rougeLsum': 0.03571428571428571} Sari: {'sari': 33.10515873015873} Flesh Reading Ease: 39.65 ---------------------------------------- Source: ['Bei der Seitan-Herstellung wird Weizenmehl mit Wasser vermischt und zu einem festen Teig vermengt. Es hat eine fleischähnliche Konsistenz. Seitan besteht nicht aus Soja, sondern aus Weizenprotein (Weizengluten).'] Prediction: ['Seitan ist eine fleischähnliche Konsistenz.\nEs ist seit einigen Tagen aus Soja und Weizenprotein.\nSeitan besteht nicht aus Soja, sondern aus Weizenprotein (Weizengluten).'] Label: [['Seitan ist ein Fleischersatz aus Weizenmehl und Wasser.']] Sacrebleu: {'score': 3.235912122544166, 'counts': [5, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2222222222222223, 'translation_length': 29, 'reference_length': 9} Rouge: {'rouge1': 0.25, 'rouge2': 0.06666666666666667, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 37.67195767195768} Flesh Reading Ease: 49.45 ---------------------------------------- Source: ['Die Samen der Süßlupinen enthalten wie Sojabohnen sehr viel Eiweiß und können zu einem tofuähnlichen Produkt, dem so genannten Lopino, verarbeitet werden.'] Prediction: ['In Sojabohnen können vegane Produkt verarbeitet werden.\nSojabohnen können zu einem tofuähnlichen Produkt, dem so genannten Lopino, verarbeitet werden.'] Label: [['Es ähnelt Tofu und lässt sich auch so verarbeiten.\nDieses Produkt heißt Lopino.\nEs gibt auch Fleischersatz aus Lupinensamen.']] Sacrebleu: {'score': 2.4623373672221804, 'counts': [5, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0454545454545454, 'translation_length': 23, 'reference_length': 22} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.0, 'rougeL': 0.1395348837209302, 'rougeLsum': 0.18604651162790697} Sari: {'sari': 36.00877192982456} Flesh Reading Ease: 18.4 ---------------------------------------- Source: ['Während Tofu aus Sojaflüssigkeit hergestellt wird, verwendet man für Tempeh ganze Sojabohnen.'] Prediction: ['In Tofu wird auch die Sojabohnen von der Nähe des Landes hergestellt.\nDie Nähe des Landes wird aus Sojaflüssigkeit hergestellt.\nDie Nähe des Landes wird aufgezeichnet.'] Label: [['Tofu wird aus Sojaflüssigkeit hergestellt, Tempeh aus ganzen Sojabohnen.']] Sacrebleu: {'score': 9.955744015810279, 'counts': [7, 4, 2, 1], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 14.285714285714286, 7.407407407407407, 3.8461538461538463], 'bp': 1.0, 'sys_len': 29, 'ref_len': 11} Bleu: {'bleu': 0.09955744015810275, 'precisions': [0.2413793103448276, 0.14285714285714285, 0.07407407407407407, 0.038461538461538464], 'brevity_penalty': 1.0, 'length_ratio': 2.6363636363636362, 'translation_length': 29, 'reference_length': 11} Rouge: {'rouge1': 0.35, 'rouge2': 0.26315789473684215, 'rougeL': 0.3, 'rougeLsum': 0.3} Sari: {'sari': 63.303932178932186} Flesh Reading Ease: 66.0 ---------------------------------------- Source: ['Die meisten von ihnen werden auf der Basis von Sojabohnen produziert, zum Beispiel Tofu, Tempeh und Sojafleisch (texturiertes Soja).'] Prediction: ['Im Sojabohn werden meisten von ihnen produziert, zum Beispiel Tofu, Tempeh und Sojafleisch.\nDie meisten von ihnen werden auf der Basis von Sojabohnen produziert, zum Beispiel Tofu, Tempeh und Sojafleisch.'] Label: [['Dazu gehören Tofu, Tempeh und Sojafleisch.\nViele Produkte werden aus Soja hergestellt.']] Sacrebleu: {'score': 13.574363003136735, 'counts': [8, 5, 4, 3], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 14.285714285714286, 11.764705882352942, 9.090909090909092], 'bp': 1.0, 'sys_len': 36, 'ref_len': 15} Bleu: {'bleu': 0.13574363003136736, 'precisions': [0.2222222222222222, 0.14285714285714285, 0.11764705882352941, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 36, 'reference_length': 15} Rouge: {'rouge1': 0.2325581395348837, 'rouge2': 0.14634146341463414, 'rougeL': 0.2325581395348837, 'rougeLsum': 0.2325581395348837} Sari: {'sari': 45.693380433548974} Flesh Reading Ease: 59.7 ---------------------------------------- Source: ['Der Handel bietet eine ganze Reihe von pflanzlichen Fleischalternativen an.'] Prediction: ['Der Handel bietet eine ganze Reihe von pflanzlichen Fleischalternativen an.\nDie ganze Reihe von pflanzlichen Fleischalternativen bietet eine ganze Reihe von pflanzlichen Fleischalternativen an.'] Label: [['Es gibt mittlerweile eine ganze Reihe Produkte, um Fleisch zu ersetzen.']] Sacrebleu: {'score': 5.778323992708342, 'counts': [4, 2, 1, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 8.0, 4.166666666666667, 2.1739130434782608], 'bp': 1.0, 'sys_len': 26, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.08, 0.041666666666666664, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 26, 'reference_length': 13} Rouge: {'rouge1': 0.17142857142857143, 'rouge2': 0.12121212121212122, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.17142857142857143} Sari: {'sari': 42.22222222222222} Flesh Reading Ease: 33.45 ---------------------------------------- Source: ['In feuchten Teigen, wie einem Rührteig, kann man statt einem Ei 80 Gramm Apfelmus verwenden.'] Prediction: ['Der Schweizer Musiker hat einen neuen Rührteig mit 80 Gramm Apfelmus verwendet.\nDer Rührteig hatte einen Rührteig mit dem 80-Jährigen verwendet.'] Label: [['Oder man nimmt statt einem Ei jeweils 80 Gramm Apfelmus.']] Sacrebleu: {'score': 6.024757292375468, 'counts': [4, 2, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 8.333333333333334, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.08333333333333333, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.272727272727273, 'translation_length': 25, 'reference_length': 11} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.11764705882352941, 'rougeL': 0.16666666666666669, 'rougeLsum': 0.16666666666666669} Sari: {'sari': 53.58780108780108} Flesh Reading Ease: 64.2 ---------------------------------------- Source: ['Laut Angaben des Vegetarierbund Deutschland lässt sich im Kuchen ein Ei durch eine halbe reife zerdrückte Banane ersetzen. Bei einem Kuchenteig, der nur ein Ei beinhaltet (z. B. Mürbeteig und Hefeteig), kann man das Ei oft einfach weglassen.'] Prediction: ['In Deutschland ist ein Ei durch eine halbe reife zerdrückte Banane ersetzen.\nDas Ei kann oft einfach weglassen.'] Label: [['Beim Backen von Rührteig kann man pro Ei auch eine halbe reife Banane zerdrücken und zum Teig mischen.']] Sacrebleu: {'score': 8.808424865565325, 'counts': [7, 2, 1, 0], 'totals': [20, 19, 18, 17], 'precisions': [35.0, 10.526315789473685, 5.555555555555555, 2.9411764705882355], 'bp': 1.0, 'sys_len': 20, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.35, 0.10526315789473684, 0.05555555555555555, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0526315789473684, 'translation_length': 20, 'reference_length': 19} Rouge: {'rouge1': 0.358974358974359, 'rouge2': 0.10810810810810811, 'rougeL': 0.25641025641025644, 'rougeLsum': 0.3076923076923077} Sari: {'sari': 39.766474113236164} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Das Ei-Ersatzpulver wird mit Wasser vermischt und unter den Teig gerührt.'] Prediction: ['Ein Ei-Ersatzpulver wird mit Wasser vermischt und unter den Teig gerührt.\nDas Ei-Ersatzpulver wird mit Wasser vermischt und unter den Teig gerührt.'] Label: [['Dieses Pulver wird dann mit Wasser angerührt und statt Ei verwendet.']] Sacrebleu: {'score': 3.9566236357113054, 'counts': [5, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.20833333333333334, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 24, 'reference_length': 12} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.05555555555555555, 'rougeL': 0.2631578947368421, 'rougeLsum': 0.21052631578947367} Sari: {'sari': 39.624183006535944} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Im Reformhaus, Bioladen oder in gut sortierten Supermärkten gibt es Ei-Ersatzpulver.'] Prediction: ['Im Reformhaus, in gut sortierten Supermärkten gibt es Ei-Ersatzpulver.\nIn der Schweiz gibt es in der Schweiz eine Ersatzpulver-Geschichte.'] Label: [['Es gibt Ei-Ersatzpulver zu kaufen.']] Sacrebleu: {'score': 2.2731543567022867, 'counts': [3, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [13.636363636363637, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6666666666666665, 'translation_length': 22, 'reference_length': 6} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.07692307692307693, 'rougeL': 0.21428571428571427, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 37.77777777777778} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Viele pflanzliche Brotaufstriche kann man auch gut selbst herstellen.'] Prediction: ['Viele pflanzliche Brotaufstriche kann man auch gut selbst herstellen.\nDie pflanzlichen Brotaufstriche kann man auch gut selbst herstellen.'] Label: [['Pflanzliche Brotaufstriche lassen sich sehr gut selbst herstellen.']] Sacrebleu: {'score': 12.673718536830808, 'counts': [5, 3, 2, 1], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 15.789473684210526, 11.11111111111111, 5.882352941176471], 'bp': 1.0, 'sys_len': 20, 'ref_len': 9} Bleu: {'bleu': 0.12673718536830808, 'precisions': [0.25, 0.15789473684210525, 0.1111111111111111, 0.058823529411764705], 'brevity_penalty': 1.0, 'length_ratio': 2.2222222222222223, 'translation_length': 20, 'reference_length': 9} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.25, 'rougeL': 0.3846153846153846, 'rougeLsum': 0.3846153846153846} Sari: {'sari': 50.128205128205124} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Man muss wissen: Ohne Zusatzstoffe wie Stabilisatoren, Aromen, Farbstoffe oder Konservierungsstoffe kommen Käsealternativen häufig nicht aus.'] Prediction: ['Käsealternativen kommen häufig nicht aus.\nDas muss wissen: Ohne Zusatzstoffe wie Stabilisatoren, Aromen, Farbstoffe oder Konservierungsstoffe kommen Käsealternativen häufig nicht aus.'] Label: [['Damit diese Produkte dem Aufschnitt aus tierischen Produkten ähnlich sind, verwendet man bei der Herstellung Zusatzstoffe.']] Sacrebleu: {'score': 2.042946039568498, 'counts': [4, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.09756097560975609, 'rouge2': 0.0, 'rougeL': 0.09756097560975609, 'rougeLsum': 0.048780487804878044} Sari: {'sari': 27.607076350093113} Flesh Reading Ease: 11.55 ---------------------------------------- Source: ['Manche Produkte enthalten auch Mandeln, Cashewkerne, Soja und Hefeflocken. Käsealternativen werden nicht aus Milch hergestellt, sondern beispielsweise aus Wasser, pflanzlichem Öl, Kartoffelstärke, Salz und weiteren Zutaten.'] Prediction: ['Manche Produkte enthalten auch Mandeln, Cashewkerne, Soja und Hefeflocken.\nKäsealternativen werden nicht aus Milch hergestellt, sondern beispielsweise aus Wasser, pflanzlichem Öl, Kartoffelstärke, Salz und weiteren Zutaten.'] Label: [['Aus Cashewkernen lässt sich Käse-Ersatz herstellen, der entweder Frischkäse oder Schnittkäse ähnelt.']] Sacrebleu: {'score': 1.2944532586971997, 'counts': [2, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [5.882352941176471, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.058823529411764705, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.08888888888888889, 'rougeLsum': 0.08888888888888889} Sari: {'sari': 34.04907975460123} Flesh Reading Ease: 26.6 ---------------------------------------- Source: ['Das können zum Beispiel Erdnuss-, Mandel- oder Haselnussmus sein oder Aufstriche, die auf einer Gemüsebasis und pflanzlichem Öl basieren.'] Prediction: ['Der Beispiel Erdnuss-, Mandel oder Haselnussmus kann auf einer Gemüsebasis und pflanzlichem Öl basieren.\nDas kann zum Beispiel Erdnuss-, Mandel oder Haselnussmus sein oder Aufstriche sein.\nDas kann auf einer Gemüsebasis und pflanzlichem Öl basieren.'] Label: [['Auch Mus aus Erdnüssen, Mandeln oder Haselnüssen ist lecker auf dem Brot.']] Sacrebleu: {'score': 1.2992493989257516, 'counts': [4, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [10.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.857142857142857, 'translation_length': 40, 'reference_length': 14} Rouge: {'rouge1': 0.0784313725490196, 'rouge2': 0.0, 'rougeL': 0.0784313725490196, 'rougeLsum': 0.0784313725490196} Sari: {'sari': 35.833333333333336} Flesh Reading Ease: 57.15 ---------------------------------------- Source: ['Anstelle von Wurst oder Käse als Brotbelag greifen viele Veganer auch zu pflanzlichen Brotaufstrichen.'] Prediction: ['Viele Veganer greifen auch zu pflanzlichen Brotaufstrichen.\nDie Wurst oder Käse als Brotbelag greifen auch zu pflanzlichen Brotaufstrichen.'] Label: [['Als Brotbelag wählen die meisten Veganer Pflanzenaufstriche.']] Sacrebleu: {'score': 2.5197593442434796, 'counts': [3, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [15.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.15, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 20, 'reference_length': 8} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.08, 'rougeL': 0.14814814814814814, 'rougeLsum': 0.22222222222222218} Sari: {'sari': 42.10338680926917} Flesh Reading Ease: 54.0 ---------------------------------------- Source: ['Durch die Milchsäuregärung (Fermentation) gerinnt die Sojaflüssigkeit, sie erhält eine dickflüssige Konsistenz und einen leicht säuerlichen Geschmack.'] Prediction: ['Die Sojaflüssigkeit ist eine dickflüssige Konsistenz.\nDurch die Milchsäuregärung (Fermentation) gerinnt die Sojaflüssigkeit, sie erhält eine dickflüssige Konsistenz und einen leicht säuerlichen Geschmack.'] Label: [['Sojagurt gibt es wie Joghurt in verschiedenen Geschmacksrichtungen.']] Sacrebleu: {'score': 1.3353534059549443, 'counts': [1, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [3.5714285714285716, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.03571428571428571, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.111111111111111, 'translation_length': 28, 'reference_length': 9} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.12698412698412} Flesh Reading Ease: 22.25 ---------------------------------------- Source: ['Für Sojagurt versetzt man die Sojaflüssigkeit (s. Milchalternativen) mit Milchsäurebakterien.'] Prediction: ['Für Sojagurt versetzt man die Sojaflüssigkeit mit Milchsäurebakterien.\nDie Sojaflüssigkeit versetzt man die Sojaflüssigkeit mit Milchsäurebakterien.'] Label: [['Für den Sojagurt verarbeitet man Flüssigkeit, die aus Sojabohnen hergestellt wird.']] Sacrebleu: {'score': 3.211547431691929, 'counts': [5, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3846153846153846, 'translation_length': 18, 'reference_length': 13} Rouge: {'rouge1': 0.3428571428571428, 'rouge2': 0.060606060606060615, 'rougeL': 0.3428571428571428, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 38.88888888888889} Flesh Reading Ease: 8.2 ---------------------------------------- Source: ['Diese Bezeichnungen sind nur Milch tierischen Ursprungs und daraus produzierten Milcherzeugnissen vorbehalten (Urteil des Europäischen Gerichtshofs (EuGH) vom 14. Juni 2017). Rein pflanzliche Produkte dürfen nicht unter Bezeichnungen wie „Milch“, „Rahm“, „Butter“, „Käse“, „Molke“, „Buttermilch“ oder „Joghurt“ vermarktet werden.'] Prediction: ['Nur Milch-Ursprungs und daraus produzierten Milcherzeugnissen sind vorbehalten.\nRein pflanzliche Produkte dürfen nicht unter Bezeichnungen wie "Milch“, „Rahm“, „Butter“, „Molke“, „Buttermilch“ oder „Buttermilch“ vermarktet werden.'] Label: [['All diese Drinks dürfen nicht als „Milch“ verkauft werden, denn Milch ist die Bezeichnung für das tierische Produkt.']] Sacrebleu: {'score': 2.9171735901692597, 'counts': [5, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [15.625, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 1.0, 'sys_len': 32, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.15625, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 32, 'reference_length': 20} Rouge: {'rouge1': 0.25531914893617025, 'rouge2': 0.08888888888888889, 'rougeL': 0.2127659574468085, 'rougeLsum': 0.2127659574468085} Sari: {'sari': 34.190115440115434} Flesh Reading Ease: 38.8 ---------------------------------------- Source: ['Klassische Alternativen zu Kuhmilch sind vor allem Sojadrinks, Getreidedrinks (z. B. Hafer- und Reisdrinks) sowie Mandeldrinks.'] Prediction: ['Klassische Alternativen zu Kuhmilch sind vor allem Sojadrinks, Getreidedrinks (z.\nB. Hafer und Reisdrinks) sowie Mandeldrinks.\nDie Klassische Alternativen zu Kuhmilch sind vor allem Sojadrinks, Getreidedrinks (z.\nB. Hafer und Reisdrinks) sowie Mandeldrinks.'] Label: [['Es gibt eine ganze Reihe pflanzlicher Drinks, die gut statt Milch funktionieren, zum Beispiel aus Soja, Getreide wie Hafer oder Reis oder aus Mandeln.']] Sacrebleu: {'score': 1.1498052049318417, 'counts': [4, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [8.88888888888889, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.08888888888888889, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6071428571428572, 'translation_length': 45, 'reference_length': 28} Rouge: {'rouge1': 0.07017543859649122, 'rouge2': 0.0, 'rougeL': 0.07017543859649122, 'rougeLsum': 0.07017543859649122} Sari: {'sari': 35.81511839708561} Flesh Reading Ease: 54.7 ---------------------------------------- Source: ['So ist es beispielsweise möglich, dass ein Produkt einen Farbstoff enthält, der nicht-vegan ist.'] Prediction: ['Ein Farbstoff enthält einen nicht-veganen Produkt.\nDer nicht-vegan ist nicht-vegan.'] Label: [['Oder dass zum Beispiel ein nicht-veganer Farbstoff enthalten ist.\nEs kann also sein, dass trotzdem bei der Herstellung ein tierisches Produkt verwendet wurde.']] Sacrebleu: {'score': 1.5769448381039926, 'counts': [5, 0, 0, 0], 'totals': [12, 11, 10, 9], 'precisions': [41.666666666666664, 4.545454545454546, 2.5, 1.3888888888888888], 'bp': 0.31140322391459774, 'sys_len': 12, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.4166666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 0.31140322391459774, 'length_ratio': 0.46153846153846156, 'translation_length': 12, 'reference_length': 26} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.0, 'rougeL': 0.15789473684210525, 'rougeLsum': 0.2631578947368421} Sari: {'sari': 41.77350427350427} Flesh Reading Ease: 69.7 ---------------------------------------- Source: ['Die Kriterien dafür können von Unternehmen zu Unternehmen jedoch unterschiedlich ausfallen.'] Prediction: ['Unternehmen können sich unterschiedlich ausfallen.\nDie Kriterien dafür können dafür unterschiedlich ausfallen.'] Label: [['Allerdings gibt es für solche Logos keine genauen Vorschriften.']] Sacrebleu: {'score': 2.8398387225677895, 'counts': [1, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [7.142857142857143, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 14, 'reference_length': 10} Rouge: {'rouge1': 0.07692307692307693, 'rouge2': 0.0, 'rougeL': 0.07692307692307693, 'rougeLsum': 0.07692307692307693} Sari: {'sari': 35.18518518518518} Flesh Reading Ease: 16.05 ---------------------------------------- Source: ['Manche Lebensmittelhersteller kennzeichnen ihre veganen Produkte mit ihrem eigenen Logo.'] Prediction: ['Manche Lebensmittelhersteller kennzeichnen ihre veganen Produkte mit ihrem eigenen Logo.\nDie Lebensmittelhersteller kennzeichnen ihre veganen Produkte mit ihrem eigenen Logo.'] Label: [['Damit kennzeichnen sie ihre veganen Produkte.\nEinige Hersteller von Lebensmitteln haben eigene Logos entwickelt.']] Sacrebleu: {'score': 7.645949399477267, 'counts': [6, 2, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [27.272727272727273, 9.523809523809524, 5.0, 2.6315789473684212], 'bp': 1.0, 'sys_len': 22, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.09523809523809523, 0.05, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.375, 'translation_length': 22, 'reference_length': 16} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.125, 'rougeL': 0.23529411764705882, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 42.98611111111111} Flesh Reading Ease: 6.2 ---------------------------------------- Source: ['Der Einsatz von GVO muss deklariert werden.'] Prediction: ['Der Einsatz von GVO muss deklariert werden.\nDer Einsatz von GVO muss deklariert werden.'] Label: [['Das muss dann aber extra gekennzeichnet werden.']] Sacrebleu: {'score': 5.412989186545263, 'counts': [3, 1, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 6.666666666666667, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 16, 'reference_length': 8} Rouge: {'rouge1': 0.19047619047619047, 'rouge2': 0.0, 'rougeL': 0.19047619047619047, 'rougeLsum': 0.19047619047619047} Sari: {'sari': 39.96212121212121} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Produkte, die das Siegel Veganblume tragen, dürfen gentechnisch veränderte Organismen (GVO) enthalten, die nicht tierischen Ursprungs sind.'] Prediction: ['Gentechnisch veränderte Organismen dürfen veganblume enthalten, die nicht tierischen Ursprungs sind.\nDie GVO-Organisationen dürfen gentechnisch veränderte Organismen enthalten, die nicht tierischen Ursprungs sind.'] Label: [['Bei diesem Gütesiegel dürfen auch gentechnisch veränderte Pflanzen verwendet werden.\nDie Veganblume kennzeichnet vegane Lebensmittel.\nAuch die veganen Produkte mit dem V-Label sind streng geprüft.']] Sacrebleu: {'score': 4.498320834635685, 'counts': [8, 2, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [29.62962962962963, 7.6923076923076925, 2.0, 1.0416666666666667], 'bp': 0.9636404443012863, 'sys_len': 27, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.2962962962962963, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 0.9636404443012863, 'length_ratio': 0.9642857142857143, 'translation_length': 27, 'reference_length': 28} Rouge: {'rouge1': 0.3103448275862069, 'rouge2': 0.10714285714285715, 'rougeL': 0.2413793103448276, 'rougeLsum': 0.2758620689655172} Sari: {'sari': 39.9006910421581} Flesh Reading Ease: 10.55 ---------------------------------------- Source: ['Daher hat die Europäische Vegetarierunion (EVU) das sogenannte V-Label für vegetarische und vegane Produkte entwickelt.'] Prediction: ['Die Europäische Vegetarierunion hat das sogenannte V-Label für vegetarische und vegane Produkte entwickelt.\nDie Europäische Vegetarierunion hat das sogenannte V-Label für vegetarische und vegane Produkte entwickelt.'] Label: [['Das V-Label gibt es in einer Ausführung für vegetarische und für vegane Produkte.']] Sacrebleu: {'score': 7.02969566273961, 'counts': [8, 3, 1, 0], 'totals': [28, 27, 26, 25], 'precisions': [28.571428571428573, 11.11111111111111, 3.8461538461538463, 2.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.1111111111111111, 0.038461538461538464, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 28, 'reference_length': 14} Rouge: {'rouge1': 0.4489795918367347, 'rouge2': 0.25531914893617014, 'rougeL': 0.4489795918367347, 'rougeLsum': 0.3673469387755102} Sari: {'sari': 44.63203463203463} Flesh Reading Ease: -2.66 ---------------------------------------- Source: ['Sprechen Sie mit Ihrem Arzt oder einer Ernährungsfachkraft, wie sie sich mit allen notwendigen Nährstoffen in ausreichender Menge versorgen können. Wenn Sie vegan essen wollen, sollten Sie sich vorher gut informieren.'] Prediction: ['Eine Ernährungsfachkraft kann sich mit allen notwendigen Nährstoffen in ausreichender Menge versorgen.\nWenn Sie vegan essen wollen, sollten Sie sich vorher gut informieren.'] Label: [['Zum Beispiel, ob vegane Ernährung für einen selbst gut möglich ist und wie man alle Nährstoffe in ausreichender Menge zu sich nimmt.\nWer sich vegan ernähren möchte, lässt sich am besten dazu beraten.']] Sacrebleu: {'score': 4.759342049850077, 'counts': [10, 2, 1, 0], 'totals': [26, 25, 24, 23], 'precisions': [38.46153846153846, 8.0, 4.166666666666667, 2.1739130434782608], 'bp': 0.6550282443857736, 'sys_len': 26, 'ref_len': 37} Bleu: {'bleu': 0.0, 'precisions': [0.38461538461538464, 0.08, 0.041666666666666664, 0.0], 'brevity_penalty': 0.6550282443857737, 'length_ratio': 0.7027027027027027, 'translation_length': 26, 'reference_length': 37} Rouge: {'rouge1': 0.27692307692307694, 'rouge2': 0.06349206349206349, 'rougeL': 0.2153846153846154, 'rougeLsum': 0.24615384615384614} Sari: {'sari': 38.30657383726437} Flesh Reading Ease: 45.65 ---------------------------------------- Source: ['Kein Wunder, dass es immer mehr vegane Lebensmittel im Handel gibt.'] Prediction: ['Immer mehr vegane Lebensmittel im Handel gibt es immer mehr Lebensmittel im Handel.\nDas hat ein Wunder, dass es immer mehr vegane Lebensmittel im Handel gibt.'] Label: [['Die Auswahl an veganen Lebensmitteln wird immer größer.']] Sacrebleu: {'score': 1.5301683686839007, 'counts': [2, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [6.896551724137931, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.06896551724137931, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2222222222222223, 'translation_length': 29, 'reference_length': 9} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 35.714285714285715} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Veganer verzichten auf alle Lebensmittel tierischen Ursprungs.'] Prediction: ['Viele Lebensmittel tierischen Ursprungs verzichten auf alle Lebensmittel tierischen Ursprungs.\nDie Ursprungs-Vorschriften sind noch unklar.'] Label: [['Sie verzichten auf alle tierischen Produkte.\nVeganer essen ausschließlich pflanzliche Lebensmittel.']] Sacrebleu: {'score': 10.521495173810226, 'counts': [7, 2, 1, 0], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 12.5, 6.666666666666667, 3.5714285714285716], 'bp': 1.0, 'sys_len': 17, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.4117647058823529, 0.125, 0.06666666666666667, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3076923076923077, 'translation_length': 17, 'reference_length': 13} Rouge: {'rouge1': 0.35714285714285715, 'rouge2': 0.15384615384615383, 'rougeL': 0.28571428571428575, 'rougeLsum': 0.35714285714285715} Sari: {'sari': 39.08730158730159} Flesh Reading Ease: 32.1 ---------------------------------------- Source: ['Im Kühlschrank lagern die Speisen am besten im mittleren oder oberen Kühlschrankfach etwa drei bis vier Tage.'] Prediction: ['Im Kühlschrank lagern die Speisen am besten im mittleren oder oberen Kühlschrankfach etwa drei bis vier Tage.\nIm Kühlschrank lagern die Speisen am besten im mittleren oder oberen Kühlschrankfach etwa drei bis vier Tage.'] Label: [['Dort können sie drei oder vier Tage lang gelagert werden.\nDie einzelnen Behälter kommen dann in den Kühlschrank.']] Sacrebleu: {'score': 2.8048598302198355, 'counts': [7, 1, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [19.444444444444443, 2.857142857142857, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.19444444444444445, 0.02857142857142857, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 36, 'reference_length': 20} Rouge: {'rouge1': 0.2711864406779661, 'rouge2': 0.07017543859649122, 'rougeL': 0.2033898305084746, 'rougeLsum': 0.2033898305084746} Sari: {'sari': 39.120370370370374} Flesh Reading Ease: 69.4 ---------------------------------------- Source: ['Einige Lebensmittel schmecken eingekocht besonders lecker, zum Beispiel eine selbstgemachte Tomatensauce mit Tomaten aus dem eigenen Garten.'] Prediction: ['Einige Lebensmittel schmecken eingekocht besonders lecker.\nEinige Lebensmittel schmecken einige Tomatensauce mit Tomaten aus dem eigenen Garten.'] Label: [['Davon können Sie eine größere Menge einkochen und dann in Gläser abfüllen und aufbewahren.\nWie wäre es zum Beispiel mit fruchtiger Tomatensoße?']] Sacrebleu: {'score': 1.8504430829513174, 'counts': [2, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [10.526315789473685, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 0.7686205265937358, 'sys_len': 19, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7686205265937356, 'length_ratio': 0.7916666666666666, 'translation_length': 19, 'reference_length': 24} Rouge: {'rouge1': 0.044444444444444446, 'rouge2': 0.0, 'rougeL': 0.044444444444444446, 'rougeLsum': 0.044444444444444446} Sari: {'sari': 28.698830409356724} Flesh Reading Ease: 19.4 ---------------------------------------- Source: ['Vorgekochte Mahlzeiten lagern Sie am besten in wiederverwendbaren Vorratsboxen aus Glas oder Plastik oder in Twist-Off- oder Einmachgläsern (Weck-Gläsern).'] Prediction: ['Vorgekochte Mahlzeiten lagern sich am besten in wiederverwendbaren Vorratsboxen.\nSie lagern aus Glas oder Plastik oder in Twist-Off oder Einmachgläsern.'] Label: [['Die Boxen gibt es aus Kunststoff, Glas und Metall.\nGut geeignet sind Vorratsboxen mit fest schließendem Deckel.']] Sacrebleu: {'score': 2.5828020030551087, 'counts': [5, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [22.727272727272727, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.22727272727272727, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 22, 'reference_length': 20} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.09999999999999999, 'rougeLsum': 0.15} Sari: {'sari': 36.8421052631579} Flesh Reading Ease: 47.15 ---------------------------------------- Source: ['Meal Prepping ist für alle interessant, die viel unterwegs sind, eine Menge um die Ohren haben, alleine leben, weniger Lebensmittel wegwerfen oder die Eigenkreationen gerne „to go“ mitnehmen möchten.'] Prediction: ['Meal Prepping ist für alle interessant, die viel unterwegs sind, eine Menge um die Ohren haben, alleine leben, weniger Lebensmittel wegwerfen oder die Eigenkreationen gerne mitnehmen möchten.\nDie Prepping-Menge um die Ohren haben, alleine leben, weniger Lebensmittel wegwerfen oder die Eigenkreationen gerne mitnehmen möchten.'] Label: [['Insgesamt landet bei einem Wocheneinkauf mit Plan am Ende meist weniger Essen in der Abfalltonne.\nDenn für sie sind die üblichen Packungen oft zu groß.\nVor allem alleinlebende Menschen haben dadurch noch mehr Vorteile.\nDas spart Geld und Verpackungsmaterial.\nWer für mehrere Mahlzeiten einkauft, kann oft größere Packungen auswählen.\nDie vorgekochten Essen können Sie auch prima zur Arbeit mitnehmen.']] Sacrebleu: {'score': 1.5999896186400915, 'counts': [10, 1, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [19.23076923076923, 1.9607843137254901, 1.0, 0.5102040816326531], 'bp': 0.7639669352423403, 'sys_len': 52, 'ref_len': 66} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.0196078431372549, 0.0, 0.0], 'brevity_penalty': 0.76396693524234, 'length_ratio': 0.7878787878787878, 'translation_length': 52, 'reference_length': 66} Rouge: {'rouge1': 0.14285714285714288, 'rouge2': 0.018181818181818177, 'rougeL': 0.125, 'rougeLsum': 0.14285714285714288} Sari: {'sari': 36.973732625906536} Flesh Reading Ease: 23.45 ---------------------------------------- Source: ['Für die Zubereitung muss blanchiertes Gemüse nicht erst auftauen, sondern wandert direkt in die Pfanne.'] Prediction: ['Die Pfanne hat eine Zubereitung für die Gemüse geschafft.\nDie Gemüse müssen sich in der Pfanne für die Zubereitung auftaufen.'] Label: [['Sie können das Gemüse direkt aus dem Gefriergerät in einer Pfanne anbraten oder auch in Suppen geben.']] Sacrebleu: {'score': 2.4426633221059637, 'counts': [4, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [18.181818181818183, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2222222222222223, 'translation_length': 22, 'reference_length': 18} Rouge: {'rouge1': 0.17777777777777778, 'rouge2': 0.04651162790697675, 'rougeL': 0.17777777777777778, 'rougeLsum': 0.17777777777777778} Sari: {'sari': 46.2962962962963} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Nach dem Abtropfen können Sie alles gut verschlossen in einem wiederverwendbaren Plastik- oder Glasbehältnis im Gefriergerät lagern.'] Prediction: ['Im Gefriergerät wurden die Abtropfen verschlossen.\nSie können sich in einem wiederverwendbaren Plastik oder Glasbehältnis im Gefriergerät lagern.'] Label: [['Das blanchierte Gemüse in Portionen abfüllen und einfrieren.']] Sacrebleu: {'score': 2.276859592073037, 'counts': [2, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [10.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2222222222222223, 'translation_length': 20, 'reference_length': 9} Rouge: {'rouge1': 0.06250000000000001, 'rouge2': 0.0, 'rougeL': 0.06250000000000001, 'rougeLsum': 0.06250000000000001} Sari: {'sari': 35.55555555555556} Flesh Reading Ease: 36.45 ---------------------------------------- Source: ['Zum Blanchieren geben Sie gewaschenes und zerkleinertes Gemüse für eine bis maximal zwei Minuten in kochendes Wasser und danach für einige Sekunden in ein Eiswasserbad.'] Prediction: ['Die Gemüse für eine bis maximal zwei Minuten in kochendes Wasser geben sich in einige Sekunden.\nDie Gemüse geben sich für eine bis maximal zwei Minuten in kochendes Wasser und danach für einige Sekunden in ein Eiswasserbad.'] Label: [['Das nennt man blanchieren.\nAnschließend für ein paar Sekunden in Eiswasser tauchen.\nDann für ein bis zwei Minuten in kochendes Wasser geben.\nVerschiedene Gemüse putzen und kleinschneiden.']] Sacrebleu: {'score': 15.542648041488203, 'counts': [16, 6, 4, 3], 'totals': [39, 38, 37, 36], 'precisions': [41.02564102564103, 15.789473684210526, 10.81081081081081, 8.333333333333334], 'bp': 1.0, 'sys_len': 39, 'ref_len': 31} Bleu: {'bleu': 0.1554264804148821, 'precisions': [0.41025641025641024, 0.15789473684210525, 0.10810810810810811, 0.08333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.2580645161290323, 'translation_length': 39, 'reference_length': 31} Rouge: {'rouge1': 0.4657534246575342, 'rouge2': 0.2535211267605634, 'rougeL': 0.3287671232876712, 'rougeLsum': 0.4383561643835616} Sari: {'sari': 46.67882659218843} Flesh Reading Ease: 50.35 ---------------------------------------- Source: ['Geben Sie erst unmittelbar vor dem Verzehr nach Belieben Kräuter, Senf, Honig oder frischen Knoblauch hinzu.'] Prediction: ['Am Mittwochabend wurde die Verzehr nach Belieben Kräuter, Senf, Honig oder frischen Knoblauch geschickt.\nSie wurde unmittelbar verletzt.\nSie wurde unmittelbar vor dem Verzehr hinzu.'] Label: [['Dieses Grund-Dressing können Sie jeden Tag anders verfeinern, zum Beispiel mit Kräutern, Senf oder Honig.']] Sacrebleu: {'score': 3.3961882197738325, 'counts': [7, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [23.333333333333332, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.23333333333333334, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 30, 'reference_length': 18} Rouge: {'rouge1': 0.2272727272727273, 'rouge2': 0.0, 'rougeL': 0.13636363636363638, 'rougeLsum': 0.18181818181818185} Sari: {'sari': 38.98989898989899} Flesh Reading Ease: 54.7 ---------------------------------------- Source: ['Mischen Sie dazu Essig und Öl (zum Beispiel Balsamico und Olivenöl) etwa im Verhältnis 1: 2 mit etwas Wasser, Salz und Pfeffer.'] Prediction: ['Mischen Sie dazu Essig und Öl (zum Beispiel Balsamico und Olivenöl) 1: 2.\nDer Schweizer hatte mit einem 2:1 gewonnen.\nDer Schweizer hatte mit einem 3:2-Sieg gegen Essig und Öl eine Verhältnis-Verlängerung mit 2:2.'] Label: [['Mischen Sie 1 Teil Essig, 2 Teile Öl, etwas Wasser, Salz und Pfeffer zu einem Grundrezept.']] Sacrebleu: {'score': 2.215443967446686, 'counts': [9, 1, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [18.75, 2.127659574468085, 1.0869565217391304, 0.5555555555555556], 'bp': 1.0, 'sys_len': 48, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.02127659574468085, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 48, 'reference_length': 20} Rouge: {'rouge1': 0.27586206896551724, 'rouge2': 0.03571428571428571, 'rougeL': 0.20689655172413796, 'rougeLsum': 0.24137931034482757} Sari: {'sari': 26.40466601921933} Flesh Reading Ease: 63.4 ---------------------------------------- Source: ['Mit der richtigen Küchenhygiene geben Sie Mikroorganismen keine Chance.'] Prediction: ['Mikroorganismen sind mit der richtigen Küchenhygiene keine Chance.\nMit der richtigen Küchenhygiene geben Sie Mikroorganismen keine Chance.'] Label: [['Beim Meal Prepping ist es besonders wichtig, auf Hygiene und Sauberkeit in der Küche zu achten.']] Sacrebleu: {'score': 2.4074859035470344, 'counts': [2, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [10.526315789473685, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0555555555555556, 'translation_length': 19, 'reference_length': 18} Rouge: {'rouge1': 0.1111111111111111, 'rouge2': 0.0, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.1111111111111111} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 13.55 ---------------------------------------- Source: ['Als Kochevent mit der Familie oder Freunden macht Meal Prepping doppelt Spaß.'] Prediction: ['Meal Prepping ist ein vegan, vegan, vegan, vegan, vegan, vegan, vegan, und vegan geworden.\nWir haben mit der Familie und Freunden ein paar Prepping-Fälle geschehen.'] Label: [['Oder Sie laden Freunde zum Meal Prepping ein.\nMachen Sie aus dem Meal Prepping ein Erlebnis für die ganze Familie.\nVor allem macht es dann viel mehr Spaß!\nSchneller geht es, wenn mehrere Leute gemeinsam kochen.']] Sacrebleu: {'score': 2.5058801615127537, 'counts': [8, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 0.8139288269830024, 'sys_len': 34, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 0.8139288269830023, 'length_ratio': 0.8292682926829268, 'translation_length': 34, 'reference_length': 41} Rouge: {'rouge1': 0.21875, 'rouge2': 0.03225806451612904, 'rougeL': 0.15625, 'rougeLsum': 0.1875} Sari: {'sari': 47.30576441102757} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Etwa 1, 5 bis 3 Stunden dauern Vorbereitung, Kochen und Aufräumen, je nachdem, wie aufwendig die Gerichte sind.'] Prediction: ['Die Gerichte sind in der Schweiz nicht mehr geschlossen.\nDie Vorbereitung, Kochen und Aufräumen sind nicht mehr geschlossen.\nDie Gerichte sind auch aufwendig.'] Label: [['Sie brauchen zwischen anderthalb und drei Stunden Zeit, bis alles geschnippelt, gekocht und in einzelnen Portionen verpackt ist.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2857142857142858, 'translation_length': 27, 'reference_length': 21} Rouge: {'rouge1': 0.09523809523809525, 'rouge2': 0.0, 'rougeL': 0.04761904761904762, 'rougeLsum': 0.09523809523809525} Sari: {'sari': 35.231782106782106} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['Beim Einkauf lagern gekühlte und tiefgekühlte Lebensmittel kurzfristig am besten in einer Kühltasche.'] Prediction: ['Beim Einkauf lagern tiefgekühlte Lebensmittel am besten in einer Kühltasche.\nDer Lebensmittel lagern gekühlte und tiefgekühlte Lebensmittel kurzfristig am besten in einer Kühltasche.'] Label: [['So bringen Sie gekühlte Lebensmittel sicher nach Hause.\nBeim Einkauf ist eine Kühltasche nützlich.']] Sacrebleu: {'score': 4.1202784939919095, 'counts': [7, 1, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [28.0, 4.166666666666667, 2.1739130434782608, 1.1363636363636365], 'bp': 1.0, 'sys_len': 25, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.28, 0.041666666666666664, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5625, 'translation_length': 25, 'reference_length': 16} Rouge: {'rouge1': 0.3111111111111111, 'rouge2': 0.18604651162790697, 'rougeL': 0.22222222222222224, 'rougeLsum': 0.3111111111111111} Sari: {'sari': 39.523809523809526} Flesh Reading Ease: 33.95 ---------------------------------------- Source: ['Verständlich, wenn Kochen oder die Einkaufsplanung nebenbei erledigt werden und der Hunger unterwegs mit dem belegten Brötchen auf die Hand gestillt wird.'] Prediction: ['Eine Hunger wird unterwegs mit dem belegten Brötchen auf die Hand gestillt.\nDas ist der erste Mal, wenn Kochen oder die Einkaufsplanung nebenbei erledigt werden.'] Label: [['Das ist verständlich, denn man möchte ja irgendwann Feierabend haben.\nUnd sucht sich dort Lebensmittel, die „schnell gehen“.\nAlso saust man nach der Arbeit gestresst durch den Supermarkt.\nDa bleibt wenig Zeit für das Einkaufen und Kochen übrig.']] Sacrebleu: {'score': 2.1329119948818493, 'counts': [8, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [28.571428571428573, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 0.5647181220077593, 'sys_len': 28, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 0.5647181220077593, 'length_ratio': 0.6363636363636364, 'translation_length': 28, 'reference_length': 44} Rouge: {'rouge1': 0.1492537313432836, 'rouge2': 0.030769230769230767, 'rougeL': 0.11940298507462689, 'rougeLsum': 0.1492537313432836} Sari: {'sari': 27.823622917962542} Flesh Reading Ease: 68.05 ---------------------------------------- Source: ['Ob Single-Haushalt, Wohngemeinschaft oder Familie – für viele Menschen besteht der Alltag aus Beruf, Familie und dem berühmten Freizeitstress.'] Prediction: ['Der Alltag der Single-Haushalt, Wohngemeinschaft oder Familie besteht für viele Menschen.\nOb die Alltag aus Beruf, Familie und dem berühmten Freizeitstress besteht, besteht der Alltag aus Beruf, Familie und dem berühmten Freizeitstress.'] Label: [['Arbeit, Familie, Freizeit - in der Woche ist häufig viel zu tun.']] Sacrebleu: {'score': 2.4371431437250504, 'counts': [5, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.533333333333333, 'translation_length': 38, 'reference_length': 15} Rouge: {'rouge1': 0.08333333333333333, 'rouge2': 0.0, 'rougeL': 0.08333333333333333, 'rougeLsum': 0.08333333333333333} Sari: {'sari': 36.851851851851855} Flesh Reading Ease: 52.85 ---------------------------------------- Source: ['Kurz unter Rühren aufkochen lassen und sofort in heiß ausgespülte Einmachgläser oder Glasflaschen mit großer Öffnung abfüllen.'] Prediction: ['In heißen Einmachgläser und Glasflaschen werden großer Öffnung abfüllen.\nDie Rühne werden unter Rühren aufkochen lassen und sofort in heiß ausgespülte Einmachgläser oder Glasflaschen mit großer Öffnung abfüllen.'] Label: [['Das heiße Ketchup in ein heiß ausgespültes Einmachglas oder eine Glasflasche geben Ketchup im Topf kurz aufkochen lassen']] Sacrebleu: {'score': 3.1221929756173616, 'counts': [5, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [16.666666666666668, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 30, 'reference_length': 18} Rouge: {'rouge1': 0.24137931034482757, 'rouge2': 0.07142857142857144, 'rougeL': 0.1724137931034483, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 29.603580562659847} Flesh Reading Ease: 43.15 ---------------------------------------- Source: ['Dann die Stärke mit etwas kaltem Wasser verquirlen und in das Ketchup einrühren.'] Prediction: ['In der Stärke kommt es zu kämpfen, in das Ketchup einzuziehen.\nDas kommt zu kämpfen, dass die Stärke mit etwas kaltem Wasser verquirlen wird.\nDas Ketchup ist das kämpferische Wasser in der Stärke.'] Label: [['Die Speisestärke mit etwas kaltem Wasser mischen und dann in das Ketchup einrühren']] Sacrebleu: {'score': 8.774216744205626, 'counts': [7, 5, 3, 1], 'totals': [38, 37, 36, 35], 'precisions': [18.42105263157895, 13.513513513513514, 8.333333333333334, 2.857142857142857], 'bp': 1.0, 'sys_len': 38, 'ref_len': 13} Bleu: {'bleu': 0.08774216744205626, 'precisions': [0.18421052631578946, 0.13513513513513514, 0.08333333333333333, 0.02857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 2.923076923076923, 'translation_length': 38, 'reference_length': 13} Rouge: {'rouge1': 0.33333333333333337, 'rouge2': 0.23076923076923078, 'rougeL': 0.2962962962962963, 'rougeLsum': 0.33333333333333337} Sari: {'sari': 40.54473304473305} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Lorbeerblätter und Nelke entfernen und alles fein pürieren.'] Prediction: ['Lorbeerblätter und Nelke sind alles fein pürieren.\nDas ist der erste Mal in der Schweiz.\nDer Vorwurf ist derzeit nicht bekannt.'] Label: [['Die Tomatenmischung mit einem Stabmixer fein pürieren Nelke und Lorbeeren aus dem Topf nehmen']] Sacrebleu: {'score': 3.7419436034576044, 'counts': [4, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 24, 'reference_length': 14} Rouge: {'rouge1': 0.26315789473684204, 'rouge2': 0.1111111111111111, 'rougeL': 0.15789473684210528, 'rougeLsum': 0.15789473684210528} Sari: {'sari': 38.005050505050505} Flesh Reading Ease: 85.25 ---------------------------------------- Source: ['Tomatenwürfel in den Topf geben und etwa 45 Minuten bei kleiner Hitze köcheln lassen.'] Prediction: ['Tomatenwürfel köcheln mit 45 Minuten bei kleiner Hitze köcheln lassen.\nDer Würfel-Pilot hatte mit 45 Minuten bei kleiner Hitze köcheln lassen.'] Label: [['Tomatenwürfel dazu geben und etwa 45 Minuten köcheln lassen (bei kleiner Hitze)']] Sacrebleu: {'score': 9.314939614341391, 'counts': [8, 4, 1, 0], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 18.181818181818183, 4.761904761904762, 2.5], 'bp': 1.0, 'sys_len': 23, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.34782608695652173, 0.18181818181818182, 0.047619047619047616, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6428571428571428, 'translation_length': 23, 'reference_length': 14} Rouge: {'rouge1': 0.4878048780487805, 'rouge2': 0.30769230769230776, 'rougeL': 0.4878048780487805, 'rougeLsum': 0.3414634146341463} Sari: {'sari': 32.73809523809524} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['Essig mit Zucker, Salz und Gewürzen zum Kochen bringen.'] Prediction: ['Zum Kochen bringen Essig-Nutzer-Kollegen zum Kochen.\nDie Nutzer-Nutzer-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-'] Label: [['In einem Topf den Essig mit Zucker, Salz und den Gewürzen (Nelke und Lorbeerblätter) zum Kochen bringen']] Sacrebleu: {'score': 3.696711021882758, 'counts': [3, 2, 0, 0], 'totals': [9, 8, 7, 6], 'precisions': [33.333333333333336, 25.0, 7.142857142857143, 4.166666666666667], 'bp': 0.29457482831010734, 'sys_len': 9, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.25, 0.0, 0.0], 'brevity_penalty': 0.29457482831010734, 'length_ratio': 0.45, 'translation_length': 9, 'reference_length': 20} Rouge: {'rouge1': 0.07017543859649122, 'rouge2': 0.03571428571428571, 'rougeL': 0.052631578947368425, 'rougeLsum': 0.052631578947368425} Sari: {'sari': 22.552910052910054} Flesh Reading Ease: -1822.86 ---------------------------------------- Source: ['Tomaten waschen, Stielansätze entfernen und Fruchtfleisch würfeln.'] Prediction: ['In der Nacht auf Sonntag wurde am Samstag ein grosser Chef entflammt.\nDie beiden wurden von der Polizei entflammt.\nDie beiden wurden von der Polizei entflammt.'] Label: [['Tomaten waschen und in kleine Würfel schneiden 1500 Gramm reife Tomaten, zwei Zwiebeln, zwei Knoblauchzehen, vier Esslöffel Tomatenmark (aus der Dose), drei Esslöffel Olivenöl, Salz, Pfeffer, eine Prise Zucker']] Sacrebleu: {'score': 0.9434104337287424, 'counts': [1, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [3.4482758620689653, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 0.7331940870813974, 'sys_len': 29, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.034482758620689655, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7331940870813974, 'length_ratio': 0.7631578947368421, 'translation_length': 29, 'reference_length': 38} Rouge: {'rouge1': 0.06779661016949153, 'rouge2': 0.0, 'rougeL': 0.06779661016949153, 'rougeLsum': 0.06779661016949153} Sari: {'sari': 45.58531746031746} Flesh Reading Ease: 77.7 ---------------------------------------- Source: ['Schoko-Nuss-Aufstrich in saubere Gläser füllen und im Kühlschrank aufbewahren.'] Prediction: ['In saubere Gläser wurden aufstrich eines Kühlschranks aufgeführt.\nDas kann man sich mit einem kleinen Aufstrich aufstrich werden.\nDas kann man sich mit einem kleinen Aufstrich aufstrich werden.'] Label: [['Den Aufstrich in ein sauberes Glas füllen und im Kühlschrank aufbewahren']] Sacrebleu: {'score': 1.199348129252962, 'counts': [1, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [3.225806451612903, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.03225806451612903, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.8181818181818183, 'translation_length': 31, 'reference_length': 11} Rouge: {'rouge1': 0.13636363636363635, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 18.26719576719577} Flesh Reading Ease: 71.25 ---------------------------------------- Source: ['Haselnüsse im Ofen rösten und fein mahlen.'] Prediction: ['In der Nacht auf Sonntag wurde die Polizei festgenommen.\nDas war ein Paar, der in den nächsten Tagen geschickt wurde.\nNun wurde der Polizei verhaftet.'] Label: [['Nüsse in der Küchenmaschine fein mahlen Haselnüsse im Ofen rösten: Ofen auf 175 Grad vorheizen, Haselnüsse auf dem Backblech verteilen, etwa 10 Minuten backen, bis sie leicht gebräunt sind']] Sacrebleu: {'score': 1.585236384822604, 'counts': [4, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [13.793103448275861, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 0.8711587695892689, 'sys_len': 29, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.13793103448275862, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8711587695892689, 'length_ratio': 0.8787878787878788, 'translation_length': 29, 'reference_length': 33} Rouge: {'rouge1': 0.13114754098360656, 'rouge2': 0.03389830508474576, 'rougeL': 0.09836065573770493, 'rougeLsum': 0.13114754098360656} Sari: {'sari': 18.86904761904762} Flesh Reading Ease: 78.1 ---------------------------------------- Source: ['Reichlich Öl oder Butter in einer Pfanne erhitzen und die Brotwürfel darin goldbraun rösten, abtropfen lassen und würzen.'] Prediction: ['In der Schweiz würfen die besten Öl und Butter in einer Pfanne goldbraun gemacht.\nDie Brotwürfel würzen darin goldbraun lassen und würzen.\nAuch die Brotwürfel würzen jeweils abtropfen lassen.'] Label: [['Die Brotwürfel mit Gewürzsalz, Kräutermischung oder Pfeffer würzen Die Brotwürfel abtropfen lassen Die Brotwürfel goldbraun rösten Öl in einer Pfanne erhitzen Reichlich']] Sacrebleu: {'score': 7.10555391350209, 'counts': [11, 4, 1, 0], 'totals': [32, 31, 30, 29], 'precisions': [34.375, 12.903225806451612, 3.3333333333333335, 1.7241379310344827], 'bp': 1.0, 'sys_len': 32, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.34375, 0.12903225806451613, 0.03333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.391304347826087, 'translation_length': 32, 'reference_length': 23} Rouge: {'rouge1': 0.5, 'rouge2': 0.2580645161290323, 'rougeL': 0.3125, 'rougeLsum': 0.375} Sari: {'sari': 35.15188834154352} Flesh Reading Ease: 70.85 ---------------------------------------- Source: ['Trockenes Brot lässt sich toll zu knusprigen Croutons als Topping für Suppen und Salate verarbeiten: Brot in Würfel schneiden.'] Prediction: ['Trockenes Brot ist ein knusprig Croutons-Topping.\nDie Würfeler Musikerin hatte ihn mit dem Topping für Suppen und Salate verarbeiten.\nDie Würfeler Musikerin hatte ihn mit dem Topping schneiden.'] Label: [['Altes Brot in Würfel schneiden Das sind knusprige Toppings für Salat oder Suppe.\nNicht wegwerfen, sondern Croutons daraus machen!\nHaben Sie altes, trockenes Brot?']] Sacrebleu: {'score': 1.696134390396339, 'counts': [4, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0689655172413792, 'translation_length': 31, 'reference_length': 29} Rouge: {'rouge1': 0.2413793103448276, 'rouge2': 0.07142857142857142, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.2413793103448276} Sari: {'sari': 32.61440314071893} Flesh Reading Ease: 53.7 ---------------------------------------- Source: ['Das Pulver noch einmal kurz mit der Küchenmaschine fein mahlen und in luftdicht verschließbare Gläser füllen.'] Prediction: ['Das Pulver wurde in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in Sonntag in der Nacht auf Sonntag in Sonntag geschickt.\nDas Pulver wurde noch nicht mehr mit der Küchenmaschine gefunden.'] Label: [['Dann in luftdichte Gläser geben.\nDas Pulver noch kurz in der Küchenmaschine fein mahlen.']] Sacrebleu: {'score': 3.2442307313337877, 'counts': [9, 4, 1, 0], 'totals': [65, 64, 63, 62], 'precisions': [13.846153846153847, 6.25, 1.5873015873015872, 0.8064516129032258], 'bp': 1.0, 'sys_len': 65, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.13846153846153847, 0.0625, 0.015873015873015872, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0625, 'translation_length': 65, 'reference_length': 16} Rouge: {'rouge1': 0.2, 'rouge2': 0.10256410256410255, 'rougeL': 0.175, 'rougeLsum': 0.2} Sari: {'sari': 37.38801910402787} Flesh Reading Ease: 72.45 ---------------------------------------- Source: ['Dabei die Ofentür einen Spalt geöffnet lassen, damit die Feuchtigkeit entweichen kann. Dazu ein Backblech mit Backpapier auslegen, die Gemüsepaste darauf verstreichen und einige Stunden bei 70 °C trocknen. Ebenfalls eine gute, aber energieintensive, Lösung ist es, die Paste im Ofen zu Pulver zu verarbeiten.'] Prediction: ['Eine gute, energieintensive, Lösung ist es, die Paste im Ofen zu Pulver zu verarbeiten.\nDabei werden Backblech und Gemüsepaste darauf verstreichen und einige Stunden bei 70 °C trocknen.\nDie Gemüsepaste ist eine gute, energieintensive, Lösung ist es, die Paste im Ofen zu Pulver zu verarbeiten.'] Label: [['Das Blech 3-4 Stunden im Ofen lassen, dabei muss die Ofentür einen Spalt geöffnet bleiben.\nDie Paste auf einem Backblech mit Backpapier ausstreichen.\nFür Pulver: Den Backofen auf 70 Grad einstellen.']] Sacrebleu: {'score': 2.558056031202496, 'counts': [13, 2, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [24.074074074074073, 3.7735849056603774, 0.9615384615384616, 0.49019607843137253], 'bp': 1.0, 'sys_len': 54, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.24074074074074073, 0.03773584905660377, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4210526315789473, 'translation_length': 54, 'reference_length': 38} Rouge: {'rouge1': 0.23809523809523808, 'rouge2': 0.048780487804878044, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.19047619047619044} Sari: {'sari': 30.54563139895957} Flesh Reading Ease: 42.15 ---------------------------------------- Source: ['Durch das Salz ist die rohe Paste bis zu ein Jahr lang haltbar.'] Prediction: ['Durch das Salz ist die rohe Paste bis zu ein Jahr lang haltbar.\nDas Salz ist die rohe Paste bis zu ein Jahr lang haltbar.'] Label: [['Die Paste können Sie bis zu einem Jahr im Kühlschrank aufbewahren.']] Sacrebleu: {'score': 3.4901807086831904, 'counts': [5, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [18.51851851851852, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.18518518518518517, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 27, 'reference_length': 12} Rouge: {'rouge1': 0.2631578947368421, 'rouge2': 0.05555555555555555, 'rougeL': 0.2631578947368421, 'rougeLsum': 0.2631578947368421} Sari: {'sari': 39.523809523809526} Flesh Reading Ease: 91.45 ---------------------------------------- Source: ['Dann die Paste in sterile Einmachgläser füllen, fest verschließen und im Kühlschrank lagern.'] Prediction: ['Der Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-Paste-'] Label: [['Für Paste: Die Paste in sterile Einmachgläser geben, fest schließen.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [2, 1, 0, 0], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 0.004086771438464067, 'sys_len': 2, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 0.004086771438464067, 'length_ratio': 0.15384615384615385, 'translation_length': 2, 'reference_length': 13} Rouge: {'rouge1': 0.024390243902439022, 'rouge2': 0.0, 'rougeL': 0.024390243902439022, 'rougeLsum': 0.024390243902439022} Sari: {'sari': 22.600732600732602} Flesh Reading Ease: -8626.26 ---------------------------------------- Source: ['Pro 100 Gramm Gemüse 10 Gramm Salz untermengen, außerdem einen Esslöffel Pflanzenöl (z. B. Oliven- oder Rapsöl).'] Prediction: ['Pro 100 Gramm Gemüse 10 Gramm Salz untermengen.\nDer Schweizer Gemüse hat einen Esslöffel Pflanzenöl.\nDer Schweizer Gemüse ist ein neues Mal.'] Label: [['Pro 100 Gramm Gemüse dazugeben: 10 Gramm Salz und ein Esslöffel Olivenöl.']] Sacrebleu: {'score': 14.90896080339584, 'counts': [10, 5, 3, 1], 'totals': [25, 24, 23, 22], 'precisions': [40.0, 20.833333333333332, 13.043478260869565, 4.545454545454546], 'bp': 1.0, 'sys_len': 25, 'ref_len': 14} Bleu: {'bleu': 0.14908960803395838, 'precisions': [0.4, 0.20833333333333334, 0.13043478260869565, 0.045454545454545456], 'brevity_penalty': 1.0, 'length_ratio': 1.7857142857142858, 'translation_length': 25, 'reference_length': 14} Rouge: {'rouge1': 0.5714285714285714, 'rouge2': 0.35000000000000003, 'rougeL': 0.5238095238095238, 'rougeLsum': 0.5714285714285714} Sari: {'sari': 55.11904761904762} Flesh Reading Ease: 67.4 ---------------------------------------- Source: ['Gemüse und Kräuter mit einem geeigneten Küchengerät zu einer feinen Paste verarbeiten. Gemüse waschen, schälen und putzen, dann grob zerkleinern.'] Prediction: ['Eine feinen Paste verarbeitet, das Gemüse und Kräuter mit einem geeigneten Küchengerät zu einer feinen Paste verarbeiten.\nGemüse waschen, schälen und putzen, dann grob zerkleinern.\nDie beiden werden mit einer feinen Paste verarbeiten.'] Label: [['Gemüse und Kräuter in die Küchenmaschine geben und zu einer feinen Paste zermahlen']] Sacrebleu: {'score': 8.829928855463525, 'counts': [8, 5, 3, 1], 'totals': [39, 38, 37, 36], 'precisions': [20.512820512820515, 13.157894736842104, 8.108108108108109, 2.7777777777777777], 'bp': 1.0, 'sys_len': 39, 'ref_len': 13} Bleu: {'bleu': 0.08829928855463526, 'precisions': [0.20512820512820512, 0.13157894736842105, 0.08108108108108109, 0.027777777777777776], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 39, 'reference_length': 13} Rouge: {'rouge1': 0.4363636363636364, 'rouge2': 0.26415094339622636, 'rougeL': 0.3636363636363636, 'rougeLsum': 0.4} Sari: {'sari': 44.67030139671649} Flesh Reading Ease: 40.3 ---------------------------------------- Source: ['Kräuter waschen, trocken schütteln und Blätter von den Zweigen zupfen.'] Prediction: ['Kräuter und Blätter sind sich in den letzten Tagen zum dritten Mal zu Gast.\nDas ist der erste Mal, der sie sich mit dem Zweigen zu schütteln.\nDas ist der erste Mal, der sie sich mit dem Zweigen zu schütteln.'] Label: [['Kräuter waschen, trocken schütteln und die Blätter von den Zweigen zupfen']] Sacrebleu: {'score': 1.3224637682882356, 'counts': [7, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [15.555555555555555, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.15555555555555556, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 45, 'reference_length': 12} Rouge: {'rouge1': 0.31034482758620696, 'rouge2': 0.10714285714285714, 'rougeL': 0.2413793103448276, 'rougeLsum': 0.27586206896551724} Sari: {'sari': 13.177387914230017} Flesh Reading Ease: 90.65 ---------------------------------------- Source: ['Als Kräuter eignen sich zum Beispiel Petersilie, Rosmarin, Thymian, Liebstöckel und Salbei.'] Prediction: ['Am Freitagabend findet der Schweizer Nati statt.\nDie Schweizer Nati verliert den Titel von 2020.\nDie Kräuter sind sich in der Krise nicht mehr.'] Label: [['Dazu frische Kräuter nach Wahl, Salz, Olivenöl']] Sacrebleu: {'score': 1.387819277861591, 'counts': [1, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [3.7037037037037037, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.037037037037037035, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 27, 'reference_length': 9} Rouge: {'rouge1': 0.11764705882352941, 'rouge2': 0.0625, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 60.60606060606061} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['Am besten passen die Gemüsearten aus dem klassischen Suppengrün, Karotten, Sellerie und Lauch, aber auch anderes Wurzelgemüse wie Pastinake oder Steckrübe, außerdem Zwiebeln, Knoblauch, Champignons und Tomaten. Für einen kleinen Vorrat wird etwa ein Kilo Gemüse benötigt.'] Prediction: ['Ein Kilo Gemüsearten in der Schweiz sind aus dem klassischen Suppengrün, Karotten, Sellerie und Lauch.\nEs handelt sich um einen kleinen Vorrat.\nDer Vorrat wird etwa ein Kilo Gemüse benötigt.'] Label: [['Ein Kilo Gemüse nach Wahl, zum Beispiel Möhren, Sellerie oder Lauch.']] Sacrebleu: {'score': 4.223886871268327, 'counts': [8, 4, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [22.857142857142858, 11.764705882352942, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.22857142857142856, 0.11764705882352941, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 35, 'reference_length': 14} Rouge: {'rouge1': 0.25531914893617025, 'rouge2': 0.13333333333333333, 'rougeL': 0.21276595744680854, 'rougeLsum': 0.25531914893617025} Sari: {'sari': 40.76405688133377} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Aus frischem Gemüse, Salz, Öl und Kräutern lassen sich Gemüsepaste oder -pulver als Alternative zur Instant-Gemüsebrühe aus dem Supermarkt ganz einfach herstellen.'] Prediction: ['Aus frischem Gemüse, Salz, Öl und Kräutern lassen sich Gemüsepaste oder -pulver als Alternative zur Instant-Gemüsebrühe aus dem Supermarkt ganz einfach herstellen.\nDas ist ein neues Alternative, das aus dem Supermarkt ganz einfach herstellen soll.'] Label: [['So machen Sie aus frischem Gemüse ihre eigene Paste oder Pulver.\nGemüsebrühe können Sie auch einfach selber machen.']] Sacrebleu: {'score': 2.5131854313529596, 'counts': [7, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [17.5, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.175, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 40, 'reference_length': 20} Rouge: {'rouge1': 0.31746031746031744, 'rouge2': 0.1967213114754098, 'rougeL': 0.31746031746031744, 'rougeLsum': 0.31746031746031744} Sari: {'sari': 38.52620332883491} Flesh Reading Ease: 39.65 ---------------------------------------- Source: ['Gemüsebrühe wird in der Küche nicht nur für Suppen benötigt, sondern z. B. auch zum Dünsten von Gemüse, zum Ablöschen von Risotto und zum Würzen.'] Prediction: ['Gemüsebrühe wird in der Küche nicht nur für Suppen benötigt.\nAuch zum Dünsten von Gemüsebrühe, zum Ablöschen von Risotto und zum Würzen.'] Label: [['Für eine schnelle Suppe, aber auch zum Würzen von Gemüse oder beim Risotto kochen.\nGemüsebrühe kann man in der Küche immer brauchen.']] Sacrebleu: {'score': 8.586092130733784, 'counts': [11, 3, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [44.0, 12.5, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.44, 0.125, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 25, 'reference_length': 25} Rouge: {'rouge1': 0.5333333333333333, 'rouge2': 0.3448275862068965, 'rougeL': 0.26666666666666666, 'rougeLsum': 0.4666666666666667} Sari: {'sari': 37.26804993252362} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['So kann nicht nur die Menge an Verpackungsmüll reduziert werden, sondern jeder kann die Produkte nach eigenen Bedürfnissen und Geschmacksvorlieben variieren.'] Prediction: ['Die Menge an Verpackungsmüll kann nicht nur die Menge reduziert werden.\nSo kann nicht nur die Menge an Verpackungsmüll reduziert werden, sondern jeder kann die Produkte nach eigenen Bedürfnissen und Geschmacksvorlieben variieren.'] Label: [['Sie können alle Rezepte in diesem Artikel nach Ihrem eigenen Geschmack würzen.\nMit den Ideen in diesem Artikel sparen Sie viel Verpackungsmüll.']] Sacrebleu: {'score': 1.5790460212418518, 'counts': [5, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [14.285714285714286, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4583333333333333, 'translation_length': 35, 'reference_length': 24} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.034482758620689655, 'rougeL': 0.06666666666666667, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 36.00000000000001} Flesh Reading Ease: 47.0 ---------------------------------------- Source: ['Wer Spaß am Selbermachen hat, kann einige von ihnen mit nur wenigen Zutaten in der eigenen Küche herstellen. Fertigprodukte sparen Zeit beim Kochen und Backen oder sind einfach praktisch für den schnellen Genuss.'] Prediction: ['Fertigprodukte sparen Zeit beim Kochen und Backen oder sind einfach praktisch für den schnellen Genuss.\nDas schnellste Spaß hat einige von ihnen mit nur wenigen Zutaten in der eigenen Küche herstellen.'] Label: [['Mit wenigen Zutaten können Sie sie selbst herstellen.\nManche Fertigprodukte brauchen Sie nicht im Laden zu kaufen.\nFertigprodukte sind in der Küche sehr beliebt.']] Sacrebleu: {'score': 4.420497000765024, 'counts': [10, 3, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [30.303030303030305, 9.375, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.30303030303030304, 0.09375, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2222222222222223, 'translation_length': 33, 'reference_length': 27} Rouge: {'rouge1': 0.3389830508474576, 'rouge2': 0.10526315789473684, 'rougeL': 0.23728813559322037, 'rougeLsum': 0.3389830508474576} Sari: {'sari': 38.071236559139784} Flesh Reading Ease: 59.2 ---------------------------------------- Source: ['Moderne Keller eignen sich aber sehr gut für Konserven wie eingekochtes Obst, Gemüse, diverse Marmeladen, Konfitüren, Gelees, Rumtopf oder selbst hergestelltes Sauerkraut, Getränke, Säfte u. ä. Heute ist der Keller trocken und warm und eignet sich eher als Hobbyraum denn als Aufbewahrungsort für frisches Gemüse und Obst.'] Prediction: ['Im Keller eignet sich das Aufbewahrungsort für frisches Gemüse und Obst.\nDer Keller ist trocken und warm und eignet sich eher als Hobbyraum denn als Aufbewahrungsort für frisches Gemüse und Obst.'] Label: [['Für die Lagerung von Kartoffeln, Obst und Gemüse sind moderne Keller zu warm – die kommen in den Kühlschrank oder in den Vorratsschrank.\nDann können Sie dort Eingemachtes und nicht angebrochene Säfte und Getränke aufbewahren.\nAußerdem standen dort Eingemachtes und Getränke.']] Sacrebleu: {'score': 1.388331008163288, 'counts': [10, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [30.303030303030305, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.6951439283988788, 'sys_len': 33, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.30303030303030304, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6951439283988786, 'length_ratio': 0.7333333333333333, 'translation_length': 33, 'reference_length': 45} Rouge: {'rouge1': 0.26506024096385544, 'rouge2': 0.04938271604938272, 'rougeL': 0.19277108433734938, 'rougeLsum': 0.16867469879518074} Sari: {'sari': 34.53344900713322} Flesh Reading Ease: 65.05 ---------------------------------------- Source: ['Früher konnten im Vorratskeller Äpfel und Kartoffeln über Monate ideal gelagert werden.'] Prediction: ['Vorratskeller Äpfel und Kartoffeln konnten über Monate ideal gelagert werden.\nDas konnte sich in der Schweiz gelagert werden.'] Label: [['Im kühlen Keller lagerte man Obst und Gemüse wie Äpfel und Kartoffeln.']] Sacrebleu: {'score': 7.658412276041004, 'counts': [4, 2, 1, 0], 'totals': [20, 19, 18, 17], 'precisions': [20.0, 10.526315789473685, 5.555555555555555, 2.9411764705882355], 'bp': 1.0, 'sys_len': 20, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.10526315789473684, 0.05555555555555555, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5384615384615385, 'translation_length': 20, 'reference_length': 13} Rouge: {'rouge1': 0.1875, 'rouge2': 0.13333333333333333, 'rougeL': 0.1875, 'rougeLsum': 0.1875} Sari: {'sari': 39.04761904761905} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['In Vorratsschränken lagern: Mehl, Salz, Zucker, Vollkonserven, Trockenprodukte wie Reis, Nudeln oder Cerealien.'] Prediction: ['In der Schweiz wurden mehrere Produkte in den letzten Tagen verloren.\nMehl, Salz, Zucker, Vollkonserven, Trockenprodukte wie Reis, Nudeln oder Cerealien.'] Label: [['Dazu kommen trockene Produkte wie Reis, Nudeln, Cornflakes und Müsli.\nLange haltbare Lebensmittel, wie Mehl, Salz und Zucker gehören in den Vorratsschrank.']] Sacrebleu: {'score': 15.310245441182444, 'counts': [15, 6, 3, 1], 'totals': [28, 27, 26, 25], 'precisions': [53.57142857142857, 22.22222222222222, 11.538461538461538, 4.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 28} Bleu: {'bleu': 0.15310245441182443, 'precisions': [0.5357142857142857, 0.2222222222222222, 0.11538461538461539, 0.04], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 28, 'reference_length': 28} Rouge: {'rouge1': 0.39999999999999997, 'rouge2': 0.18604651162790697, 'rougeL': 0.17777777777777778, 'rougeLsum': 0.39999999999999997} Sari: {'sari': 50.364829000824685} Flesh Reading Ease: 46.65 ---------------------------------------- Source: ['Sorgfältiges Einlagern und regelmäßige Kontrolle vermindern hier Vorratsverluste und -verderb:'] Prediction: ['Vorratsverluste und -verderb: Das sorgt für viele Vorratsverluste.\nDas sorgt für viele Vorgaben und vermindert sich auf Vorratsverluste.'] Label: [['Kontrollieren Sie das Mindesthaltbarkeitsdatum und verbrauchen Sie ihre Lebensmittel bevor das Datum abläuft.']] Sacrebleu: {'score': 2.159701133933343, 'counts': [2, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [9.523809523809524, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 21, 'reference_length': 14} Rouge: {'rouge1': 0.1764705882352941, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.1764705882352941} Sari: {'sari': 36.851851851851855} Flesh Reading Ease: 48.15 ---------------------------------------- Source: ['Eine Vorratskammer sollte sich möglichst in der Nähe der Küche befinden und eine gute Belüftung haben. Längerfristig haltbare Lebensmittel können in Speisekammern oder Vorratsschränken bei durchschnittlich 15 bis 20 °C, trocken und dunkel gelagert werden.'] Prediction: ['Eine Vorratskammer sollte sich möglichst in der Nähe der Küche befinden und eine gute Belüftung haben.\nLängerfristig haltbare Lebensmittel können in Speisekammern oder Vorratsschränken bei durchschnittlich 15 bis 20 °C trocken und dunkel gelagert werden.'] Label: [['Der Vorratsschrank sollte dunkel und trocken sein und gut belüftet sein.\nIn einer kleinen Wohnung ist der Vorratsschrank meistens in der Küche.\nAm besten ist das ein kühler Ort nah an der Küche.\nHeute hat fast jede Wohnung einen Vorratsschrank.\nDie Speisekammer war nah an der Küche, hier lagerte man lange haltbare Lebensmittel bei Zimmertemperatur.']] Sacrebleu: {'score': 2.2300905659675183, 'counts': [14, 3, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [37.83783783783784, 8.333333333333334, 1.4285714285714286, 0.7352941176470589], 'bp': 0.5227517209087683, 'sys_len': 37, 'ref_len': 61} Bleu: {'bleu': 0.0, 'precisions': [0.3783783783783784, 0.08333333333333333, 0.0, 0.0], 'brevity_penalty': 0.5227517209087683, 'length_ratio': 0.6065573770491803, 'translation_length': 37, 'reference_length': 61} Rouge: {'rouge1': 0.3137254901960784, 'rouge2': 0.08, 'rougeL': 0.1764705882352941, 'rougeLsum': 0.2549019607843137} Sari: {'sari': 30.507862644415916} Flesh Reading Ease: 39.65 ---------------------------------------- Source: ['Auch Milchprodukte wie Joghurt, Dickmilch, saure Sahne und Crème fraîche gehören nicht in den Gefrierschrank, da sie schnell ausflocken.'] Prediction: ['In der Gefrierschrank werden Milchprodukte wie Joghurt, Dickmilch, saure Sahne und Crème fraîche ausflocken.\nDie Milchprodukte wie Joghurt, Dickmilch, saure Sahne und Crème fraîche gehören nicht in den Gefrierschrank, da sie schnell ausflocken.'] Label: [['Sie werden beim Auftauen flockig.\nMilchprodukte wie Joghurt, Dickmilch und saure Sahne gehören nicht in das Gefrierfach.']] Sacrebleu: {'score': 13.749963202430752, 'counts': [14, 7, 4, 2], 'totals': [40, 39, 38, 37], 'precisions': [35.0, 17.94871794871795, 10.526315789473685, 5.405405405405405], 'bp': 1.0, 'sys_len': 40, 'ref_len': 20} Bleu: {'bleu': 0.1374996320243076, 'precisions': [0.35, 0.1794871794871795, 0.10526315789473684, 0.05405405405405406], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 40, 'reference_length': 20} Rouge: {'rouge1': 0.46428571428571425, 'rouge2': 0.2592592592592593, 'rougeL': 0.42857142857142855, 'rougeLsum': 0.42857142857142855} Sari: {'sari': 50.074319533082424} Flesh Reading Ease: 58.2 ---------------------------------------- Source: ['Solche wasserreichen Lebensmittel werden beim Auftauen matschig.'] Prediction: ['Solche wasserreichen Lebensmittel werden beim Auftauen matschig.\nDie wasserreichen Lebensmittel werden beim Auftauen matschig.'] Label: [['Diese Lebensmittel enthalten viel Wasser und werden beim Auftauen matschig.']] Sacrebleu: {'score': 23.961829057131983, 'counts': [6, 4, 3, 2], 'totals': [16, 15, 14, 13], 'precisions': [37.5, 26.666666666666668, 21.428571428571427, 15.384615384615385], 'bp': 1.0, 'sys_len': 16, 'ref_len': 11} Bleu: {'bleu': 0.23961829057131984, 'precisions': [0.375, 0.26666666666666666, 0.21428571428571427, 0.15384615384615385], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 16, 'reference_length': 11} Rouge: {'rouge1': 0.41666666666666663, 'rouge2': 0.27272727272727276, 'rougeL': 0.41666666666666663, 'rougeLsum': 0.41666666666666663} Sari: {'sari': 56.85425685425686} Flesh Reading Ease: 26.75 ---------------------------------------- Source: ['Im Gefriergerät lagern nicht: Eier, Blattsalate, Frischkostsalate, Radieschen, Rettich, rohe Kartoffeln, Zwiebeln, Gurken, Tomaten, Wassermelonen, Weintrauben, ganze rohe Äpfel und Birnen sowie Baiser und Makronen.'] Prediction: ['Im Gefriergerät lagern nicht mehr gefriergeräte.\nEier, Blattsalate, Frischkostsalate, Radieschen, Rettich, rohe Kartoffeln, Zwiebeln, Gurken, Tomaten, Wassermelonen, Weintrauben, ganze rohe Äpfel und Birnen sowie Baiser und Makronen.'] Label: [['Gemüse wie Salat, Radieschen, Rettich, rohe Kartoffeln, Zwiebeln, Gurken, Tomaten, Wassermelonen, Weintrauben, rohe Äpfel und Birnen gehören nicht ins Gefrierfach.\nEier lassen sich nicht einfrieren.']] Sacrebleu: {'score': 51.74504903796386, 'counts': [26, 21, 18, 16], 'totals': [40, 39, 38, 37], 'precisions': [65.0, 53.84615384615385, 47.36842105263158, 43.24324324324324], 'bp': 1.0, 'sys_len': 40, 'ref_len': 36} Bleu: {'bleu': 0.5174504903796388, 'precisions': [0.65, 0.5384615384615384, 0.47368421052631576, 0.43243243243243246], 'brevity_penalty': 1.0, 'length_ratio': 1.1111111111111112, 'translation_length': 40, 'reference_length': 36} Rouge: {'rouge1': 0.5357142857142857, 'rouge2': 0.4074074074074074, 'rougeL': 0.4642857142857143, 'rougeLsum': 0.5357142857142857} Sari: {'sari': 58.20818306390745} Flesh Reading Ease: 20.25 ---------------------------------------- Source: ['– Einfrieren bietet eine gute Möglichkeit, Lebensmittel mehrere Monate aufzubewahren und das nahezu ohne merkliche Qualitätseinbußen.'] Prediction: ['Einfrieren bieten eine gute Möglichkeit, Lebensmittel mehrere Monate aufzubewahren und das nahezu ohne merkliche Qualitätseinbußen.\nDer Lebensmittel wurde ohne merkliche Qualitätseinbußen gebaut.'] Label: [['Eingefroren sind Lebensmittel viel länger haltbar.\nDie meisten Lebensmittel lassen sich prima einfrieren, zum Beispiel im Gefrierschrank oder in einer Gefriertruhe.']] Sacrebleu: {'score': 2.252278368576829, 'counts': [5, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [20.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0416666666666667, 'translation_length': 25, 'reference_length': 24} Rouge: {'rouge1': 0.12244897959183673, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.08163265306122448} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: -0.66 ---------------------------------------- Source: ['Im Kühlschrank lagern: Fleisch- und Fleischwaren, Fisch- und Fischerzeugnisse, zubereitete Speisen, Milch- und Milchprodukte, Käse, Getränke, Butter, Eier, Marmeladen, Dressings, Soßen, Tuben, kühlschrankverträgliche Obst- und Gemüsearten.'] Prediction: ['Im Kühlschrank lagern Fleisch und Fleischwaren, Fisch und Fischerzeugnisse, zubereitete Speisen, Milch und Milchprodukte, Käse, Getränke, Butter, Eier, Marmeladen, Dressings, Soßen, Tuben, kühlschrankverträgliche Obst und Gemüsearten.'] Label: [['Manche Arten kann man besser außerhalb aufbewahren.\nGemüse und Obst kommen nicht immer in den Kühlschrank.\nKäse, Butter und Eier können auf der obersten Ablage liegen.\nAngebrochene Getränke, Marmeladen, Dressings, Soßen und Tuben kommen in den mittleren Teil oder in die Tür.\nMilch, Jogurt, Quark und andere Milchprodukte gehören in die mittleren Ablagen.\nFleisch, Fleischwaren, Fisch und Fischprodukte kommen nach unten auf die Glasplatte.']] Sacrebleu: {'score': 9.100345911739115, 'counts': [28, 11, 6, 4], 'totals': [39, 38, 37, 36], 'precisions': [71.7948717948718, 28.94736842105263, 16.216216216216218, 11.11111111111111], 'bp': 0.36787944117144233, 'sys_len': 39, 'ref_len': 78} Bleu: {'bleu': 0.09100345911739115, 'precisions': [0.717948717948718, 0.2894736842105263, 0.16216216216216217, 0.1111111111111111], 'brevity_penalty': 0.36787944117144233, 'length_ratio': 0.5, 'translation_length': 39, 'reference_length': 78} Rouge: {'rouge1': 0.4716981132075472, 'rouge2': 0.15384615384615383, 'rougeL': 0.22641509433962262, 'rougeLsum': 0.3773584905660377} Sari: {'sari': 50.84673499216228} Flesh Reading Ease: 13.6 ---------------------------------------- Source: ['Im herkömmlichen Kühlschrank lagern Lebensmittel bei 4\xa0°C bis 8 °C, im\xa0Mehrzonenkühlgerät\xa0bei nahezu\xa00 °C. Bei Temperaturen zwischen 0 °C und 14 °C können frische, leichtverderbliche Lebensmittel gelagert werden.'] Prediction: ['Im herkömmlichen Kühlschrank lagern Lebensmittel bei 4\xa0°C bis 8 °C.\nBei Temperaturen zwischen 0 °C und 14 °C können frische, leichtverderbliche Lebensmittel gelagert werden.'] Label: [['Die Temperatur im Kühlschrank liegt zwischen 0 und 14 Grad.\nDer Kühlschrank ist der beste Ort für frisches Essen.']] Sacrebleu: {'score': 4.344109103419242, 'counts': [7, 2, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [25.0, 7.407407407407407, 1.9230769230769231, 1.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.07407407407407407, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 28, 'reference_length': 21} Rouge: {'rouge1': 0.32, 'rouge2': 0.125, 'rougeL': 0.32, 'rougeLsum': 0.32} Sari: {'sari': 36.1247947454844} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Diese sind wesentlich fettärmer. Bevorzugen Sie bei den fertigen Fleisch- und Fischprodukten die unpanierten Varianten.'] Prediction: ['In den USA sind die unpanierten Varianten fettärmer.\nBevorzugen Sie bei den fertigen Fleisch und Fischprodukten die unpanierten Varianten.'] Label: [['In einer Knusperschicht steckt viel Fett.\nDann wählen Sie unpanierte Sorten.\nEssen Sie gerne fertige Fleisch- oder Fischprodukte?']] Sacrebleu: {'score': 2.568331954752977, 'counts': [4, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [19.047619047619047, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.19047619047619047, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 21, 'reference_length': 21} Rouge: {'rouge1': 0.20512820512820512, 'rouge2': 0.0, 'rougeL': 0.20512820512820512, 'rougeLsum': 0.20512820512820512} Sari: {'sari': 33.56040811247978} Flesh Reading Ease: 41.8 ---------------------------------------- Source: ['6. Fettarme Convenience-Gerichte wählenWählen Sie fettreiche Gerichte wie Lasagne oder bestimmte Pizzasorten eher selten.'] Prediction: ['Wählen Sie fettreiche Convenience-Gerichte wie Lasagne oder bestimmte Pizzasorten eher selten.\nSie fettreiche Gerichte wie Lasagne oder bestimmte Pizzasorten eher selten.'] Label: [['Die sollten Sie lieber nicht zu oft essen.\nFertiglasagne und viele Tiefkühlpizzen enthalten viel Fett.\nNehmen Sie fettarme Gerichte.']] Sacrebleu: {'score': 2.4623373672221804, 'counts': [5, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0454545454545454, 'translation_length': 23, 'reference_length': 22} Rouge: {'rouge1': 0.13953488372093023, 'rouge2': 0.0, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.13953488372093023} Sari: {'sari': 33.73015873015873} Flesh Reading Ease: 40.8 ---------------------------------------- Source: ['Fettreiche Zutaten wie Käse, Rahm, Sahne, Speck oder Salami sollten auf den hinteren Plätzen der Zutatenliste stehen. Transportieren Sie die Produkte kühl und lagern Sie sie umgehend im Kühlfach. Salate, Keimlinge und Gemüse müssen zu Hause vor dem Verzehr unbedingt noch einmal gewaschen werden.'] Prediction: ['Fettreiche Zutaten wie Käse, Rahm, Sahne, Speck oder Salami sollten auf den hinteren Plätzen der Zutatenliste stehen.\nDie Produkte kühl und lagern sie umgehend im Kühlfach.\nSalate, Keimlinge und Gemüse müssen zu Hause noch einmal gewaschen werden.'] Label: [['Fette, Öle, Rahm oder Sahne sollten viel weiter hinten stehen.']] Sacrebleu: {'score': 2.799103318440567, 'counts': [8, 2, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [18.181818181818183, 4.651162790697675, 1.1904761904761905, 0.6097560975609756], 'bp': 1.0, 'sys_len': 44, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.046511627906976744, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3846153846153846, 'translation_length': 44, 'reference_length': 13} Rouge: {'rouge1': 0.18867924528301888, 'rouge2': 0.0, 'rougeL': 0.1509433962264151, 'rougeLsum': 0.1509433962264151} Sari: {'sari': 36.32652459692871} Flesh Reading Ease: 56.55 ---------------------------------------- Source: ['Nahe am Verbrauchsdatum sind die Lebensmittel oftmals bereits stark mit Keimen belastet.'] Prediction: ['Die Lebensmittel von Keimen ist bereits in den letzten Tagen gestorben.\nDie Lebensmittel ist bereits stark mit Keimen belastet.'] Label: [['Oft haben sie schon viele Krankheitskeime.\nUnser Tipp: Kaufen Sie keine Produkte die nah am Verbrauchsdatum sind.']] Sacrebleu: {'score': 2.159701133933343, 'counts': [2, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [9.523809523809524, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.05, 'translation_length': 21, 'reference_length': 20} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 26.92918192918193} Flesh Reading Ease: 65.2 ---------------------------------------- Source: ['Fresh Cut-Produkte wie Obst- und Gemüsesnacks und Fertigsalate sind leicht verderblich und nur kurz haltbar.'] Prediction: ['Fresh Cut-Produkte wie Obst und Gemüsesnacks und Fertigsalate sind leicht verderblich und nur kurz haltbar.\nFresh Cut-Produkte wie Obst und Gemüsesnacks und Fertigsalate sind leicht verderblich und nur kurz haltbar.'] Label: [['Diese gekühlten Produkte sind leicht verderblich.\nZum Beispiel Obst- und Gemüsesnacks, oder Fertigsalate.']] Sacrebleu: {'score': 6.106432774355542, 'counts': [8, 3, 1, 0], 'totals': [32, 31, 30, 29], 'precisions': [25.0, 9.67741935483871, 3.3333333333333335, 1.7241379310344827], 'bp': 1.0, 'sys_len': 32, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0967741935483871, 0.03333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 32, 'reference_length': 16} Rouge: {'rouge1': 0.36734693877551017, 'rouge2': 0.21276595744680848, 'rougeL': 0.36734693877551017, 'rougeLsum': 0.36734693877551017} Sari: {'sari': 27.494469582704877} Flesh Reading Ease: 53.85 ---------------------------------------- Source: ['5. Auf Haltbarkeit achtenAchten Sie auf das Mindesthaltbarkeitsdatum oder Verbrauchsdatum.'] Prediction: ['Aufgrund der Corona-Pandemie wurden die Vergangenheiten in den USA vergangenen Tagen vergangen.\nAuch auf Haltbarkeit achten sie auf das Mindesthaltbarkeitsdatum oder Verbrauchsdatum.'] Label: [['Achten Sie beim Einkaufen also immer auf die Haltbarkeit.\nFertigprodukte können schlecht werden, genau wie andere Lebensmittel.']] Sacrebleu: {'score': 2.352622489487909, 'counts': [5, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.20833333333333334, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 24, 'reference_length': 20} Rouge: {'rouge1': 0.24390243902439024, 'rouge2': 0.05128205128205128, 'rougeL': 0.14634146341463414, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 40.03141286499607} Flesh Reading Ease: 34.45 ---------------------------------------- Source: ['Eine Handvoll frische Kräuter oder Tiefkühlkräuter werten das Gericht zusätzlich gesundheitlich und geschmacklich auf!'] Prediction: ['Eine Handvoll-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-Kühl-'] Label: [['Außerdem sind sie gesund.\nFrische Kräuter oder Kräuter aus der Kühltruhe machen jedes Gericht schmackhafter.\nMit frischen Kräutern oder etwas Gemüse geben Sie der Mahlzeit extra Geschmack.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [2, 1, 0, 0], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 8.315287191035679e-07, 'sys_len': 2, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 8.315287191035679e-07, 'length_ratio': 0.06666666666666667, 'translation_length': 2, 'reference_length': 30} Rouge: {'rouge1': 0.007782101167315175, 'rouge2': 0.0, 'rougeL': 0.007782101167315175, 'rougeLsum': 0.007782101167315175} Sari: {'sari': 37.45421245421245} Flesh Reading Ease: -3185.76 ---------------------------------------- Source: ['Gerne auch mit solchen, die nicht mehr zu schnippeln sind, etwa Mini-Tomaten, Mais oder Kidneybohnen aus der Dose.'] Prediction: ['Mini-Tomaten, Mais oder Kidneybohnen sind aus der Dose.\nDie Mini-Tomaten, Mais oder Kidneybohnen sind aus der Dose.'] Label: [['Andere Gemüsearten brauchen Sie gar nicht zu schneiden, zum Beispiel Mini-Tomaten oder Mais aus der Dose.']] Sacrebleu: {'score': 13.520459769143477, 'counts': [8, 3, 2, 1], 'totals': [21, 20, 19, 18], 'precisions': [38.095238095238095, 15.0, 10.526315789473685, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 18} Bleu: {'bleu': 0.1352045976914347, 'precisions': [0.38095238095238093, 0.15, 0.10526315789473684, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 1.1666666666666667, 'translation_length': 21, 'reference_length': 18} Rouge: {'rouge1': 0.37837837837837834, 'rouge2': 0.17142857142857143, 'rougeL': 0.37837837837837834, 'rougeLsum': 0.3243243243243243} Sari: {'sari': 50.89687408705813} Flesh Reading Ease: 60.35 ---------------------------------------- Source: ['Schnell küchenfertig zubereitet sind zum Beispiel Zucchini, Auberginen oder Paprika.'] Prediction: ['Zucchini, Auberginen oder Paprika sind küchenfertig zubereitet.\nDie Beispiel küchenfertig sind zum Beispiel Zucchini, Auberginen oder Paprika.'] Label: [['Manche Gemüsearten sind sehr schnell fertig, zum Beispiel Zucchini, Aubergine oder Paprika.']] Sacrebleu: {'score': 17.509131039045965, 'counts': [9, 5, 3, 1], 'totals': [21, 20, 19, 18], 'precisions': [42.857142857142854, 25.0, 15.789473684210526, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 15} Bleu: {'bleu': 0.17509131039045966, 'precisions': [0.42857142857142855, 0.25, 0.15789473684210525, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 21, 'reference_length': 15} Rouge: {'rouge1': 0.37499999999999994, 'rouge2': 0.2, 'rougeL': 0.37499999999999994, 'rougeLsum': 0.37499999999999994} Sari: {'sari': 45.0} Flesh Reading Ease: 25.25 ---------------------------------------- Source: ['Gemüse und Beilagen stehen dann auf den vordersten Plätzen. Werfen Sie also einen kritischen Blick auf die Zutatenliste: Bevorzugen Sie Komplettmenüs mit möglichst hohem Gemüseanteil.'] Prediction: ['Die Zutatenliste ist ein grosser Blick auf die Liste.\nBevorzugen Sie Komplettmenüs mit möglichst hohem Gemüseanteil.'] Label: [['In einer gesunden Fertigmahlzeit stehen Gemüse und Beilagen ganz vorne.']] Sacrebleu: {'score': 2.1476912089159055, 'counts': [1, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [5.555555555555555, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 18, 'reference_length': 11} Rouge: {'rouge1': 0.06666666666666667, 'rouge2': 0.0, 'rougeL': 0.06666666666666667, 'rougeLsum': 0.06666666666666667} Sari: {'sari': 30.26683510669846} Flesh Reading Ease: 49.15 ---------------------------------------- Source: ['Nach dem Einkauf auf dem Nachhauseweg die Kühlkette nicht unterbrechen und zu Hause so schnell wie möglich wieder tiefgekühlt lagern!'] Prediction: ['Die Kühlkette ist nicht unterbrechen und zu Hause so schnell wie möglich wieder tiefgekühlt lagern.\nDas Einkauf auf dem Nachhauseweg ist nicht unterbrechen und zu Hause so schnell wie möglich wieder tiefgekühlt lagern.'] Label: [['Tiefkühlkost muss kalt bleiben, also schnell nach Hause und wieder in die Tiefkühltruhe legen.\nWichtig beim Einkaufen: Lassen Sie gefrorene Lebensmittel nicht auftauen!']] Sacrebleu: {'score': 1.6526850525490153, 'counts': [6, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.17142857142857143, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2962962962962963, 'translation_length': 35, 'reference_length': 27} Rouge: {'rouge1': 0.19047619047619047, 'rouge2': 0.0, 'rougeL': 0.09523809523809523, 'rougeLsum': 0.09523809523809523} Sari: {'sari': 32.381507381507376} Flesh Reading Ease: 64.05 ---------------------------------------- Source: ['Durch die sehr schnelle Verarbeitung nach der Ernte besitzt Tiefkühlgemüse einen vergleichsweise hohen Vitamingehalt und liegt damit eindeutig vor den Vertretern aus der Frische-Abteilung.'] Prediction: ['Die Frische-Abteilung besitzt Tiefkühlgemüse einen vergleichsweise hohen Vitamingehalt.\nDie Frische-Abteilung hat einen neuen Vertretern aus der Frische-Abteilung.'] Label: [['Es ist also besonders frisch!\nTiefkühlgemüse wird sofort nach der Ernte eingefroren.\nTiefkühlgemüse enthält viele Vitamine, manchmal sogar mehr als frisches Gemüse.']] Sacrebleu: {'score': 1.9806968989706437, 'counts': [4, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [21.05263157894737, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 0.6918258252705171, 'sys_len': 19, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6918258252705171, 'length_ratio': 0.7307692307692307, 'translation_length': 19, 'reference_length': 26} Rouge: {'rouge1': 0.16, 'rouge2': 0.08333333333333333, 'rougeL': 0.16, 'rougeLsum': 0.16} Sari: {'sari': 32.7194884364002} Flesh Reading Ease: 19.4 ---------------------------------------- Source: ['bevorratenEin gewisses Sortiment an Tiefkühlgemüse zu Hause peppt viele Fertiggerichte wie Pizza, Tütensuppe oder Doseneintopf noch mal auf - geschmacklich und mit Vitaminen!'] Prediction: ['Ein gewisses Sortiment an Tiefkühlgemüse zu Hause peppt viele Fertiggerichte wie Pizza, Tütensuppe oder Doseneintopf noch mal auf.\nDiese sind mit Vitaminen und Vitaminen.'] Label: [['Geben Sie gefrorenes Gemüse in eine Tütensuppe.\nDenn damit können Sie ganz einfach Fertiggerichte aufpeppen – mit Geschmack und Vitaminen.']] Sacrebleu: {'score': 6.384875295507791, 'counts': [7, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [25.925925925925927, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.25925925925925924, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2272727272727273, 'translation_length': 27, 'reference_length': 22} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.0851063829787234, 'rougeL': 0.24489795918367346, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 39.13979245195217} Flesh Reading Ease: 45.15 ---------------------------------------- Source: ['Früchte, Gemüse und Salate der Saison gibt es in der Kühltheke bereits küchenfertig vorbereitet.'] Prediction: ['Die Kühltheke ist bereits küchenfertig vorbereitet.\nDie Kühltheke ist bereits küchenfertig vorbereitet.'] Label: [['Hier liegen vorgeschnittene Blattsalate, bunte Gemüsemischungen und fertige Obstsalate.\nIn der Kühltheke finden Sie vorbereitetes Gemüse und Obst.']] Sacrebleu: {'score': 2.266870701656303, 'counts': [3, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [21.428571428571427, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 0.6065306597126334, 'sys_len': 14, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6065306597126334, 'length_ratio': 0.6666666666666666, 'translation_length': 14, 'reference_length': 21} Rouge: {'rouge1': 0.1081081081081081, 'rouge2': 0.05714285714285715, 'rougeL': 0.1081081081081081, 'rougeLsum': 0.1081081081081081} Sari: {'sari': 29.583333333333332} Flesh Reading Ease: 27.75 ---------------------------------------- Source: ['Beziehen Sie stets eine Kombination von frischen Lebensmitteln und Convenience-Produkten ein.'] Prediction: ['Die Kombination von Convenience-Produkten ist eine Kombination von frischen Lebensmitteln und Convenience-Produkten ein.\nDie Kombination von frischen Lebensmitteln und Convenience-Produkten stets eine Kombination von frischen Lebensmitteln und Convenience-Produkten ein.'] Label: [['Wenn Sie Fertigprodukte kaufen, kombinieren Sie die einfach mit ein paar frischen Lebensmitteln.\nPlanen Sie Ihre Mahlzeiten und den Einkauf:']] Sacrebleu: {'score': 3.016200863100729, 'counts': [5, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3478260869565217, 'translation_length': 31, 'reference_length': 23} Rouge: {'rouge1': 0.18867924528301888, 'rouge2': 0.0392156862745098, 'rougeL': 0.18867924528301888, 'rougeLsum': 0.15094339622641512} Sari: {'sari': 37.022058823529406} Flesh Reading Ease: -4.16 ---------------------------------------- Source: ["Was an erster Stelle steht, hat den höchsten Gewichtsanteil, dann geht's in absteigender Reihenfolge weiter."] Prediction: ['Die Reihenfolge des Gewichtsanteils in der Nähe von St. Gallen geht weiter.\nDie erste Stelle steht in der Nähe von St. Gallen weiter.\nDie gewichtigsten Reihenfolge geht in absteigender Reihenfolge weiter.'] Label: [['Wovon am meisten drin steckt, wird zuerst genannt.']] Sacrebleu: {'score': 1.0253311603116817, 'counts': [1, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [2.7777777777777777, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.027777777777777776, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6, 'translation_length': 36, 'reference_length': 10} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.76851851851852} Flesh Reading Ease: 61.05 ---------------------------------------- Source: ['Unterm Strich ist ein Fertiggericht nur so gesund wie seine Zutaten.'] Prediction: ['Unterm Strich ist ein Fertiggericht nur so gesund wie seine Zutaten.\nDas ist ein Fertiggericht nur so gesund wie seine Zutaten.'] Label: [['Hier sehen Sie genau, welche Zutaten in der Verpackung sind – und wie viel.\nDort stehen die Zutaten.\nDie Wahrheit über Zutaten und Nährstoffe finden Sie nicht auf der Vorderseite, sondern auf der Rückseite der Packung.']] Sacrebleu: {'score': 1.8933783834986289, 'counts': [5, 1, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 4.545454545454546, 2.380952380952381, 1.25], 'bp': 0.45721172797475435, 'sys_len': 23, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 0.45721172797475435, 'length_ratio': 0.5609756097560976, 'translation_length': 23, 'reference_length': 41} Rouge: {'rouge1': 0.10344827586206896, 'rouge2': 0.0, 'rougeL': 0.10344827586206896, 'rougeLsum': 0.06896551724137931} Sari: {'sari': 38.05555555555556} Flesh Reading Ease: 70.05 ---------------------------------------- Source: ['Doch wie lassen sich Convenience-Lebensmittel mit einer gesunden und schmackhaften Ernährung im Alltag vereinbaren?'] Prediction: ['Im Alltag wurde eine gesunde und schmackhaften Ernährung im Alltag vereinbaren.\nDoch wie lassen sich Convenience-Lebensmittel mit einer gesunden und schmackhaften Ernährung im Alltag vereinbaren?'] Label: [['In diesem Artikel geben wir Tipps, worauf Sie beim Einkauf von Fertigprodukten achten können.\nUnd wenn man die richtigen Produkte wählt, passen sie auch in eine gesunde Ernährung.']] Sacrebleu: {'score': 2.7428086245406895, 'counts': [4, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 0.830950389901292, 'sys_len': 27, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 0.830950389901292, 'length_ratio': 0.84375, 'translation_length': 27, 'reference_length': 32} Rouge: {'rouge1': 0.1694915254237288, 'rouge2': 0.07017543859649124, 'rougeL': 0.13559322033898305, 'rougeLsum': 0.1694915254237288} Sari: {'sari': 37.41123476417594} Flesh Reading Ease: 32.95 ---------------------------------------- Source: ['Fertige oder vorbereitete Lebensmittel sind praktisch und sparen oft Zeit.'] Prediction: ['Fertige oder vorbereitete Lebensmittel sind praktisch und sparen oft Zeit.\nDas ist der erste Mal in der Schweiz.\nDie Schweiz ist eine grosse Vorbereitung der Lebensmittel.'] Label: [['Sie sind praktisch und sparen Zeit in der Küche.\nViele Menschen kochen mit Fertigprodukten.']] Sacrebleu: {'score': 10.601317434781206, 'counts': [9, 4, 2, 1], 'totals': [29, 28, 27, 26], 'precisions': [31.03448275862069, 14.285714285714286, 7.407407407407407, 3.8461538461538463], 'bp': 1.0, 'sys_len': 29, 'ref_len': 16} Bleu: {'bleu': 0.10601317434781207, 'precisions': [0.3103448275862069, 0.14285714285714285, 0.07407407407407407, 0.038461538461538464], 'brevity_penalty': 1.0, 'length_ratio': 1.8125, 'translation_length': 29, 'reference_length': 16} Rouge: {'rouge1': 0.3414634146341463, 'rouge2': 0.20512820512820512, 'rougeL': 0.3414634146341463, 'rougeLsum': 0.3414634146341463} Sari: {'sari': 50.166217225040754} Flesh Reading Ease: 66.0 ---------------------------------------- Source: ['Geeignet für: Suppen, Eintöpfe, Soßen, Nudeln, Kartoffeln.'] Prediction: ['Suppen, Eintöpfe, Soßen, Nudeln, Kartoffeln.\nDie Welt ist für eine grosse Woche gekommen.\nIm Interview mit Host Andrea (67) spricht sie über die Welt und das Welt.'] Label: [['Suppe, Eintopf, Nudeln, Kartoffeln, Soße']] Sacrebleu: {'score': 7.103702656973528, 'counts': [6, 3, 2, 1], 'totals': [36, 35, 34, 33], 'precisions': [16.666666666666668, 8.571428571428571, 5.882352941176471, 3.0303030303030303], 'bp': 1.0, 'sys_len': 36, 'ref_len': 9} Bleu: {'bleu': 0.07103702656973529, 'precisions': [0.16666666666666666, 0.08571428571428572, 0.058823529411764705, 0.030303030303030304], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 36, 'reference_length': 9} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.0588235294117647, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.1111111111111111} Sari: {'sari': 47.46212121212121} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Geeignet für: Fleisch, Fisch, Kartoffeln, Obst und Gemüse. Verfahrensart: Garen in trockener Wärme'] Prediction: ['Der Schweizer Unternehmen hat seinen neuen Wärmen verfügbar.\nDer Schweizer Unternehmen hat seinen Fleisch, Fisch, Kartoffeln und Obst geschafft.\nDer Schweizer Unternehmen hat seinen Wärmen in trocken Wärme verfügbar.'] Label: [['Fleisch, Fisch, Kartoffeln, Obst und Gemüse']] Sacrebleu: {'score': 11.084119214562044, 'counts': [7, 4, 3, 2], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 12.121212121212121, 9.375, 6.451612903225806], 'bp': 1.0, 'sys_len': 34, 'ref_len': 9} Bleu: {'bleu': 0.11084119214562044, 'precisions': [0.20588235294117646, 0.12121212121212122, 0.09375, 0.06451612903225806], 'brevity_penalty': 1.0, 'length_ratio': 3.7777777777777777, 'translation_length': 34, 'reference_length': 9} Rouge: {'rouge1': 0.24390243902439024, 'rouge2': 0.10256410256410256, 'rougeL': 0.1951219512195122, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 44.812271062271066} Flesh Reading Ease: 59.15 ---------------------------------------- Source: ['Zum Wenden eine Zange oder einen Bratenwender benutzen, sodass die Kruste vollständig erhalten bleibt.'] Prediction: ['Die Kruste bleibt vollständig erhalten.\nZum Wenden eine Zange oder einen Bratenwender benutzen, sodass die Kruste vollständig erhalten bleibt.'] Label: [['Wenden Sie das Lebensmittel mit einer Zange oder einem Wender, dann bleibt die Kruste heil.']] Sacrebleu: {'score': 5.809665204409192, 'counts': [8, 2, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 9.523809523809524, 2.5, 1.3157894736842106], 'bp': 1.0, 'sys_len': 22, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.36363636363636365, 0.09523809523809523, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2941176470588236, 'translation_length': 22, 'reference_length': 17} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.11764705882352941, 'rougeL': 0.2777777777777778, 'rougeLsum': 0.2777777777777778} Sari: {'sari': 40.84967320261438} Flesh Reading Ease: 53.5 ---------------------------------------- Source: ['und das Grillgut auf einen Rost legen bis es gebräunt ist. Den Grill vorheizen.'] Prediction: ['Das Grillgut auf einen Rost legt bis es gebräunt ist.\nDas ist das erste Grill in der Schweiz.\nDas ist das erste Mal, das sich auf einen Rost zu legen.'] Label: [['Legen Sie das Lebensmittel auf einen Rost, bis es braun ist.\nHeizen Sie den Grill vor.']] Sacrebleu: {'score': 6.667753529251714, 'counts': [11, 4, 1, 0], 'totals': [34, 33, 32, 31], 'precisions': [32.35294117647059, 12.121212121212121, 3.125, 1.6129032258064515], 'bp': 1.0, 'sys_len': 34, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.3235294117647059, 0.12121212121212122, 0.03125, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7894736842105263, 'translation_length': 34, 'reference_length': 19} Rouge: {'rouge1': 0.3829787234042554, 'rouge2': 0.13333333333333333, 'rougeL': 0.3404255319148936, 'rougeLsum': 0.3404255319148936} Sari: {'sari': 45.260480260480264} Flesh Reading Ease: 99.8 ---------------------------------------- Source: ['Erst nach Ablauf der Garzeit den Ofen öffnen und eine Garprobe durchführen.'] Prediction: ['Am Sonntag wurde eine Garprobe von einem Ofen öffnen und eine Garprobe durchführen.\nDer Vorfall ist nach Ablauf der Garzeit zu öffnen.\nDie Garzeit wurde von einem Ablauf der Garzeit öffnen und eine Garprobe durchführen.'] Label: [['Den Ofen erst öffnen, wenn die Garzeit vorbei ist.']] Sacrebleu: {'score': 1.4491339833989647, 'counts': [5, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4545454545454546, 'translation_length': 38, 'reference_length': 11} Rouge: {'rouge1': 0.2173913043478261, 'rouge2': 0.04545454545454545, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 29.11998132586368} Flesh Reading Ease: 57.15 ---------------------------------------- Source: ['Gebäck sollte weiter unten im Ofen gebacken werden je größer es ist.'] Prediction: ['Wegen der Corona-Pandemie sollten weiter unten im Ofen gebacken werden je größer es ist.\nDie Todesursache ist noch unklar.'] Label: [['Je größer das Lebensmittel, desto weiter unten stellen Sie es in den Ofen.']] Sacrebleu: {'score': 4.780204393760627, 'counts': [6, 1, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 5.0, 2.6315789473684212, 1.3888888888888888], 'bp': 1.0, 'sys_len': 21, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.05, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 21, 'reference_length': 15} Rouge: {'rouge1': 0.4, 'rouge2': 0.18181818181818185, 'rougeL': 0.22857142857142854, 'rougeLsum': 0.22857142857142854} Sari: {'sari': 42.59259259259259} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Den Ofen anstellen, das Gargut auf ein Blech, Rost oder in eine Form legen und bei 160 bis 275 Grad Celsius\xa0gemäß den Angaben im Rezept garen.'] Prediction: ['Den Ofen anstellen, das Gargut auf ein Blech, Rost oder in eine Form legen und bei 160 bis 275 Grad Celsius\xa0gemäß den Angaben im Rezept garen.\nDas Gargut auf ein Blech, Rost oder in eine Form legte den Angaben im Rezept.'] Label: [['Backen Sie es zwischen 160 und 275 Grad Hitze, je nach Rezept.\nLegen Sie das Lebensmittel auf ein Blech oder ein Rost oder in eine Form.\nStellen Sie den Ofen an.']] Sacrebleu: {'score': 13.311273207378944, 'counts': [21, 8, 4, 2], 'totals': [47, 46, 45, 44], 'precisions': [44.680851063829785, 17.391304347826086, 8.88888888888889, 4.545454545454546], 'bp': 1.0, 'sys_len': 47, 'ref_len': 35} Bleu: {'bleu': 0.13311273207378937, 'precisions': [0.44680851063829785, 0.17391304347826086, 0.08888888888888889, 0.045454545454545456], 'brevity_penalty': 1.0, 'length_ratio': 1.3428571428571427, 'translation_length': 47, 'reference_length': 35} Rouge: {'rouge1': 0.5205479452054794, 'rouge2': 0.22535211267605634, 'rougeL': 0.3835616438356164, 'rougeLsum': 0.410958904109589} Sari: {'sari': 47.246990243616935} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['Geeignet für: Brot, Kuchen, Aufläufe, Pizza oder Fischgerichte.'] Prediction: ['Das Restaurant in der Nähe von St. Gallen hat einen grossen Aufläufe, Kuchen und Fischgerichte geschickt.\nDie Welt ist eine grosse Woche.\nDie Welt ist eine grosse Woche.'] Label: [['Auflauf, Pizza, Fischgerichte, Brot und Kuchen']] Sacrebleu: {'score': 1.5883027492953543, 'counts': [4, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [12.121212121212121, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.12121212121212122, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6666666666666665, 'translation_length': 33, 'reference_length': 9} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 50.55555555555556} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['In Pfannen mit Beschichtung kann mit weniger Fett gebraten werden und die Lebensmittel brennen nicht so schnell an.'] Prediction: ['In Pfannen kann mit weniger Fett gebraten werden.\nDas kann mit weniger Fett gebraten werden.\nDas kann mit weniger Fett gebraten werden.'] Label: [['Die Lebensmittel brennen darin nicht so schnell an.\nIn einer Pfanne mit Beschichtung brauchen Sie weniger Fett.']] Sacrebleu: {'score': 3.9645132534206886, 'counts': [6, 1, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [24.0, 4.166666666666667, 2.1739130434782608, 1.1363636363636365], 'bp': 1.0, 'sys_len': 25, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.24, 0.041666666666666664, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3157894736842106, 'translation_length': 25, 'reference_length': 19} Rouge: {'rouge1': 0.20512820512820512, 'rouge2': 0.05405405405405405, 'rougeL': 0.20512820512820512, 'rougeLsum': 0.20512820512820512} Sari: {'sari': 22.03232556493426} Flesh Reading Ease: 73.25 ---------------------------------------- Source: ['Das Lebensmittel in die heiße Pfanne geben und auf beiden Seiten braten.'] Prediction: ['In Pfanne brannte ein Lebensmittel in eine heiße Pfanne.\nDie Lebensmittel brannte auf beiden Seiten.'] Label: [['Legen Sie das Lebensmittel in die Pfanne und braten Sie es auf beiden Seiten.']] Sacrebleu: {'score': 17.694975149532556, 'counts': [7, 4, 2, 1], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 25.0, 13.333333333333334, 7.142857142857143], 'bp': 1.0, 'sys_len': 17, 'ref_len': 15} Bleu: {'bleu': 0.17694975149532557, 'precisions': [0.4117647058823529, 0.25, 0.13333333333333333, 0.07142857142857142], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 17, 'reference_length': 15} Rouge: {'rouge1': 0.4666666666666667, 'rouge2': 0.21428571428571427, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.39999999999999997} Sari: {'sari': 41.04365079365079} Flesh Reading Ease: 61.35 ---------------------------------------- Source: ['KurzbratenWenig Fett in eine Pfanne geben und erhitzen.'] Prediction: ['In der Nähe des Kantons Bern wurde ein Fett in eine Pfanne geben.\nDie Frau wurde dabei verletzt.\nSie wurde dabei verletzt.'] Label: [['Geben Sie ein wenig Fett in eine Pfanne und erhitzen sie diese.']] Sacrebleu: {'score': 10.845182904139573, 'counts': [7, 3, 2, 1], 'totals': [25, 24, 23, 22], 'precisions': [28.0, 12.5, 8.695652173913043, 4.545454545454546], 'bp': 1.0, 'sys_len': 25, 'ref_len': 13} Bleu: {'bleu': 0.10845182904139573, 'precisions': [0.28, 0.125, 0.08695652173913043, 0.045454545454545456], 'brevity_penalty': 1.0, 'length_ratio': 1.9230769230769231, 'translation_length': 25, 'reference_length': 13} Rouge: {'rouge1': 0.4, 'rouge2': 0.1818181818181818, 'rougeL': 0.3428571428571428, 'rougeLsum': 0.3428571428571428} Sari: {'sari': 53.39285714285714} Flesh Reading Ease: 84.95 ---------------------------------------- Source: ['Geeignet für: Fleisch, Fisch, Gemüse, Kartoffel-, Reis- und Nudelgerichte.'] Prediction: ['Der Schweizer Kartoffel-Kette hat seinen neuen Reis-Kollegen ausgeschlossen.\nDer Fleisch, Fisch, Gemüse, Kartoffel und Reis-Kollegen wird für Fleisch, Fisch, Gemüse und Nudelgerichte geeignet.\nDer Schweizer Kartoffel-Kollegen hat seinen neuen Vorschlag mit Fleisch, Fisch, Gemüse und Kartoffel geschickt.'] Label: [['Fleisch, Fisch und Gemüse, Kartoffel-, Reis- und Nudelgerichte']] Sacrebleu: {'score': 4.528328310418208, 'counts': [9, 4, 1, 0], 'totals': [47, 46, 45, 44], 'precisions': [19.148936170212767, 8.695652173913043, 2.2222222222222223, 1.1363636363636365], 'bp': 1.0, 'sys_len': 47, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.19148936170212766, 0.08695652173913043, 0.022222222222222223, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.2727272727272725, 'translation_length': 47, 'reference_length': 11} Rouge: {'rouge1': 0.33333333333333337, 'rouge2': 0.15384615384615385, 'rougeL': 0.2962962962962963, 'rougeLsum': 0.2962962962962963} Sari: {'sari': 27.626555126555125} Flesh Reading Ease: 44.85 ---------------------------------------- Source: ['Geeignet für: Kleine, in Stücke zerteilte Mengen von allen Lebensmitteln'] Prediction: ['In Stücke zerteilte Mengen von allen Lebensmitteln.\nDie Mengen sind in Stücke zerteilt.\nDie Polizei sucht Zeugen.'] Label: [['Alle Lebensmittel, vor allem in kleinen Mengen oder kleinen Stücken.']] Sacrebleu: {'score': 2.5197593442434796, 'counts': [3, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [15.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.15, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 20, 'reference_length': 12} Rouge: {'rouge1': 0.19999999999999998, 'rouge2': 0.0, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.19999999999999998} Sari: {'sari': 36.111111111111114} Flesh Reading Ease: 69.0 ---------------------------------------- Source: ['Keinesfalls sollten Gefäße oder Besteck aus Metall in die Mikrowelle gelangen.'] Prediction: ['Keinesfalls sollten Gefäße oder Besteck aus Metall in die Mikrowelle gelangen.\nKeinesfalls sollten Gefäße oder Besteck aus Metall gelangen.'] Label: [['Keinen Topf, kein Besteck und keine Teller mit Goldrand.\nAufgepasst: Niemals Metall in die Mikrowelle stellen!']] Sacrebleu: {'score': 12.58220555845937, 'counts': [6, 3, 2, 1], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 15.0, 10.526315789473685, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 20} Bleu: {'bleu': 0.1258220555845937, 'precisions': [0.2857142857142857, 0.15, 0.10526315789473684, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 1.05, 'translation_length': 21, 'reference_length': 20} Rouge: {'rouge1': 0.27027027027027023, 'rouge2': 0.17142857142857143, 'rougeL': 0.27027027027027023, 'rougeLsum': 0.27027027027027023} Sari: {'sari': 46.9047619047619} Flesh Reading Ease: 47.65 ---------------------------------------- Source: ['Zu Garzeiten und Leistungsstufe die Angaben des Herstellers beachten.'] Prediction: ['Am Mittwochabend wurde eine Frau (27) in der Nähe des jungen Stunden in der Nähe des jungen Stunden verletzt.\nDie Angaben des Mannes sind noch nicht geflogen.\nDie Angaben sind noch nicht geflogen.'] Label: [['Wie lange und auf welcher Leistungsstufe die Mikrowelle laufen muss, finden Sie in der Bedienungs-Anleitung des Herstellers.']] Sacrebleu: {'score': 2.304907678117588, 'counts': [4, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 38, 'reference_length': 19} Rouge: {'rouge1': 0.1509433962264151, 'rouge2': 0.03921568627450981, 'rougeL': 0.11320754716981132, 'rougeLsum': 0.1509433962264151} Sari: {'sari': 41.577380952380956} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Damit das Gargut nicht austrocknet oder spritzt, eine Abdeckhaube darüber stellen.'] Prediction: ['Eine Abdeckhaube in einem Gargut ist austrocknet oder spritzt.\nDas Gargut ist nicht austrocknet oder spritzt.\nDas Gargut ist nicht austrocknet oder spritzt.'] Label: [['Damit das Essen nicht spritzt oder austrocknet, sollten Sie es mit einer Haube abdecken.']] Sacrebleu: {'score': 2.1601524349994397, 'counts': [5, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.625, 'translation_length': 26, 'reference_length': 16} Rouge: {'rouge1': 0.27027027027027023, 'rouge2': 0.0, 'rougeL': 0.2162162162162162, 'rougeLsum': 0.16216216216216214} Sari: {'sari': 33.858543417366946} Flesh Reading Ease: 78.7 ---------------------------------------- Source: ['Das Lebensmittel mit etwas Wasser in einem Gefäß aus Glas, Keramik oder hitzebeständigem Kunststoff in die Mikrowelle stellen.'] Prediction: ['Ein Lebensmittel mit Hitzebeständigem Kunststoff in die Mikrowelle stellen die Lebensmittel mit etwas Wasser in einem Gefäß aus Glas, Keramik oder hitzebeständigem Kunststoff in die Mikrowelle.\nDas Lebensmittel mit etwas Wasser in einem Gefäß aus Glas, Keramik oder hitzebeständigem Kunststoff in die Mikrowelle stellen die Lebensmittel mit etwas Wasser in einem Gefäß aus Glas, Keramik oder hitzebeständigem Kunststoff in die Mikrowelle.'] Label: [['Stellen Sie es in die Mikrowelle.\nLegen Sie das Lebensmittel mit etwas Wasser in das Gefäß.\nNehmen Sie ein Gefäß aus Glas, Keramik oder hitzefestem Plastik.']] Sacrebleu: {'score': 15.885889155201472, 'counts': [17, 12, 9, 6], 'totals': [66, 65, 64, 63], 'precisions': [25.757575757575758, 18.46153846153846, 14.0625, 9.523809523809524], 'bp': 1.0, 'sys_len': 66, 'ref_len': 30} Bleu: {'bleu': 0.15885889155201477, 'precisions': [0.25757575757575757, 0.18461538461538463, 0.140625, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 66, 'reference_length': 30} Rouge: {'rouge1': 0.37362637362637363, 'rouge2': 0.24719101123595508, 'rougeL': 0.3516483516483517, 'rougeLsum': 0.37362637362637363} Sari: {'sari': 61.85777537679712} Flesh Reading Ease: 26.65 ---------------------------------------- Source: ['Geeignet für: Zartes, bindegewebsarmes Gargut wie Fisch, zartes Gemüse, Geflügelteilstücke oder Tajine.'] Prediction: ['Der Zürcher Gemüse, bindegewebsarmes Gargut und Geflügelteilstücke wie Fisch sind gemeinsam gemacht.\nDie Gemüse werden gemeinsam gemacht.\nDie Welt ist unklar, dass es sich um eine neue Welle handelt.'] Label: [['Fisch, Geflügelstücke, zartes Gemüse']] Sacrebleu: {'score': 1.5393730252811677, 'counts': [4, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.666666666666667, 'translation_length': 34, 'reference_length': 6} Rouge: {'rouge1': 0.24390243902439024, 'rouge2': 0.05128205128205128, 'rougeL': 0.1951219512195122, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 41.45770010131712} Flesh Reading Ease: 59.15 ---------------------------------------- Source: ['Den Topfinhalt nicht umrühren oder wenden, sondern bei geschlossenem Deckel den Topf ab und zu vorsichtig rütteln, um Wasserdampfverluste zu vermeiden.'] Prediction: ['Wasserdampfverluste wird bei den Topfinhalten abgebrochen.\nDas sind bei geschlossenem Deckel den Topf ab und zu vorsichtig rütteln, um Wasserdampfverluste zu vermeiden.'] Label: [['Sie können den Topf ab und zu vorsichtig rütteln, damit nichts festklebt.']] Sacrebleu: {'score': 28.089241320678894, 'counts': [9, 7, 6, 5], 'totals': [25, 24, 23, 22], 'precisions': [36.0, 29.166666666666668, 26.08695652173913, 22.727272727272727], 'bp': 1.0, 'sys_len': 25, 'ref_len': 14} Bleu: {'bleu': 0.280892413206789, 'precisions': [0.36, 0.2916666666666667, 0.2608695652173913, 0.22727272727272727], 'brevity_penalty': 1.0, 'length_ratio': 1.7857142857142858, 'translation_length': 25, 'reference_length': 14} Rouge: {'rouge1': 0.4324324324324324, 'rouge2': 0.39999999999999997, 'rougeL': 0.4324324324324324, 'rougeLsum': 0.4324324324324324} Sari: {'sari': 52.872618524792436} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Nach dem Ankochen die Lebensmittel auf der Fortkochstufe bei mittlerer Hitze zu Ende garen. Den Topf mit einem Deckel gut verschließen und vor Ende der Garzeit nicht wieder öffnen.'] Prediction: ['Ein Deckel hatte bei einer Hitze einen Lebensmittel gefunden.\nDer Topf mit einem Deckel ist nicht wieder öffnen.'] Label: [['Nehmen Sie den Deckel nicht vom Topf, sonst entweicht der Dampf.\nLegen Sie einen Deckel auf den Topf und schalten Sie den Herd auf mittlere Hitze zurück.']] Sacrebleu: {'score': 1.9530079292066178, 'counts': [8, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [40.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 0.6065306597126334, 'sys_len': 20, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.4, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6065306597126334, 'length_ratio': 0.6666666666666666, 'translation_length': 20, 'reference_length': 30} Rouge: {'rouge1': 0.30434782608695654, 'rouge2': 0.0, 'rougeL': 0.13043478260869565, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 36.763630890952875} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['In einem flachen, breiten Topf ein bis zwei Teelöffel Fett erwärmen, das Lebensmittel kurz darin andünsten und anschließend wenig Wasser zugegeben.'] Prediction: ['In einem flachen, breiten Topf wurden in einem flachen, breiten Topf ein bis zwei Teelöffel Fett erwärmen.\nDas Lebensmittel kam auf dem Flachenbuch zu einem grossen Wasser.'] Label: [['Geben Sie ein bisschen Wasser dazu.\nBraten Sie das Lebensmittel kurz an.\nNehmen Sie einen flachen, breiten Topf und geben Sie ein bis zwei Teelöffel Fett hinein.']] Sacrebleu: {'score': 20.619276306926466, 'counts': [13, 7, 5, 3], 'totals': [31, 30, 29, 28], 'precisions': [41.935483870967744, 23.333333333333332, 17.24137931034483, 10.714285714285714], 'bp': 1.0, 'sys_len': 31, 'ref_len': 31} Bleu: {'bleu': 0.2061927630692647, 'precisions': [0.41935483870967744, 0.23333333333333334, 0.1724137931034483, 0.10714285714285714], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 31, 'reference_length': 31} Rouge: {'rouge1': 0.42105263157894735, 'rouge2': 0.2909090909090909, 'rougeL': 0.31578947368421056, 'rougeLsum': 0.42105263157894735} Sari: {'sari': 52.072438991686774} Flesh Reading Ease: 67.05 ---------------------------------------- Source: ['Geeignet für: Gemüse, Fisch oder Teigtaschen.'] Prediction: ['Geeignet für: Gemüse, Fisch oder Teigtaschen.\nGemüse, Fisch oder Teigtaschen sind die besten Gemüse.'] Label: [['Gemüse, Fisch, Teigtaschen']] Sacrebleu: {'score': 8.562365224473284, 'counts': [5, 2, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [26.31578947368421, 11.11111111111111, 5.882352941176471, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.2631578947368421, 0.1111111111111111, 0.058823529411764705, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8, 'translation_length': 19, 'reference_length': 5} Rouge: {'rouge1': 0.3636363636363636, 'rouge2': 0.2, 'rougeL': 0.3636363636363636, 'rougeLsum': 0.3636363636363636} Sari: {'sari': 43.878205128205124} Flesh Reading Ease: 61.85 ---------------------------------------- Source: ['Während des ganzen Garprozesses den Topf nicht öffnen, damit kein Dampf entweicht!'] Prediction: ['Der Schweizer Garprozess hat seinen ersten Mal geschlossen.\nDer Schweizer hat seinen ersten Mal geschlossen.\nNun hat er den Topf gewonnen.'] Label: [['Nehmen Sie den Deckel nicht vom Topf, sonst entweicht der Dampf.']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.18749999999999997, 'rouge2': 0.0, 'rougeL': 0.125, 'rougeLsum': 0.18749999999999997} Sari: {'sari': 53.14327485380116} Flesh Reading Ease: 73.55 ---------------------------------------- Source: ['Beginnt das Wasser zu sieden, auf geringere Wärmezufuhr zurückschalten und das Lebensmittel im Wasserdampf fertig garen.'] Prediction: ['Ein Lebensmittel im Wasserdampf wurde in der Schweiz fertig geworden.\nDie Wärmezufuhr wurde auf geringere Wärmezufuhr zurückschalten.\nDie Wärmezufuhr wurde auf geringere Wärmezufuhr zurückschalten.'] Label: [['Wenn das Wasser kocht, schalten Sie den Herd auf niedrige Hitze zurück.']] Sacrebleu: {'score': 1.6504045595709425, 'counts': [2, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [7.407407407407407, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.07407407407407407, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9285714285714286, 'translation_length': 27, 'reference_length': 14} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.0, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.09302325581395349} Sari: {'sari': 32.4156746031746} Flesh Reading Ease: 25.75 ---------------------------------------- Source: ['Das Gargut in den Einsatz füllen, den Topf mit dem Deckel verschließen und auf höchster Stufe ankochen.'] Prediction: ['Das Gargut ist auf den Deckel verschließt und auf höchster Stufe ankochen.\nDer Deckel wurde auf höchster Stufe ankochen.\nDas Gargut ist der Topf der Welt.'] Label: [['Bringen Sie das Wasser zum Kochen.\nLegen Sie das Lebensmittel in das Sieb und legen Sie den Deckel auf den Topf.']] Sacrebleu: {'score': 4.1858747270392405, 'counts': [7, 2, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 7.142857142857143, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2608695652173914, 'translation_length': 29, 'reference_length': 23} Rouge: {'rouge1': 0.28, 'rouge2': 0.08333333333333333, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.24000000000000002} Sari: {'sari': 37.341269841269835} Flesh Reading Ease: 83.55 ---------------------------------------- Source: ['In den Topf etwa einen fingerbreit Wasser geben und einen Siebeinsatz einlegen.'] Prediction: ['In den Topf wurden etwa einen fingerbreit Wasser geben und einen Siebeinsatz einlegen.\nDie Wasser-Pandemie hatte sich in den Topf einen Wasser geben und einen Siebeinsatz einlegen.'] Label: [['Legen Sie ein Sieb oder Dampfkorb in den Topf.\nGeben Sie einen fingerbreit Wasser in einen Topf.']] Sacrebleu: {'score': 9.152541620698937, 'counts': [10, 4, 2, 0], 'totals': [29, 28, 27, 26], 'precisions': [34.48275862068966, 14.285714285714286, 7.407407407407407, 1.9230769230769231], 'bp': 1.0, 'sys_len': 29, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.3448275862068966, 0.14285714285714285, 0.07407407407407407, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5263157894736843, 'translation_length': 29, 'reference_length': 19} Rouge: {'rouge1': 0.4444444444444445, 'rouge2': 0.18604651162790697, 'rougeL': 0.35555555555555557, 'rougeLsum': 0.3111111111111111} Sari: {'sari': 47.474747474747474} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['Geeignet für: Stärkehaltige Lebensmittel wie Reis, Couscous, Hirse oder Grieß.'] Prediction: ['Der Schweizer Chef hat einen neuen Chef.\nIn der Schweiz wird der Chef der Stärkehaltige Lebensmittel wie Reis, Couscous, Hirse oder Grieß geeignet.'] Label: [['Reis, Couscous, Bulgur, Hirse']] Sacrebleu: {'score': 9.87172178670542, 'counts': [5, 4, 2, 1], 'totals': [27, 26, 25, 24], 'precisions': [18.51851851851852, 15.384615384615385, 8.0, 4.166666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 7} Bleu: {'bleu': 0.09871721786705415, 'precisions': [0.18518518518518517, 0.15384615384615385, 0.08, 0.041666666666666664], 'brevity_penalty': 1.0, 'length_ratio': 3.857142857142857, 'translation_length': 27, 'reference_length': 7} Rouge: {'rouge1': 0.21428571428571427, 'rouge2': 0.07692307692307691, 'rougeL': 0.21428571428571427, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 48.322649572649574} Flesh Reading Ease: 74.9 ---------------------------------------- Source: ['Während der Garzeit saugt das Lebensmittel die gesamte Flüssigkeit auf.'] Prediction: ['Ein Lebensmittel saugt in der Nacht auf Sonntag auf Sonntag die gesamte Flüssigkeit auf.\nDie gesamte Flüssigkeit wurde auf Sonntag aufgezeichnet.'] Label: [['Das Lebensmittel saugt die gesamte Flüssigkeit auf.']] Sacrebleu: {'score': 17.729842264695016, 'counts': [7, 5, 3, 2], 'totals': [23, 22, 21, 20], 'precisions': [30.434782608695652, 22.727272727272727, 14.285714285714286, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 8} Bleu: {'bleu': 0.17729842264695017, 'precisions': [0.30434782608695654, 0.22727272727272727, 0.14285714285714285, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.875, 'translation_length': 23, 'reference_length': 8} Rouge: {'rouge1': 0.4516129032258065, 'rouge2': 0.3448275862068965, 'rougeL': 0.4516129032258065, 'rougeLsum': 0.4516129032258065} Sari: {'sari': 61.57407407407408} Flesh Reading Ease: 58.35 ---------------------------------------- Source: ['Den Deckel auf den Topf legen und abgedeckt stehen lassen.'] Prediction: ['Der Schweizer Nati hat seinen Deckel auf den Topf geschickt.\nDer Deckel auf den Topf legte und abgedeckt stehen lassen.\nDer Deckel auf den Topf legte und abgedeckt stehen lassen.'] Label: [['Legen Sie den Deckel auf den Topf und lassen Sie ihn abgedeckt stehen.']] Sacrebleu: {'score': 9.500266321476488, 'counts': [10, 4, 2, 1], 'totals': [33, 32, 31, 30], 'precisions': [30.303030303030305, 12.5, 6.451612903225806, 3.3333333333333335], 'bp': 1.0, 'sys_len': 33, 'ref_len': 14} Bleu: {'bleu': 0.09500266321476487, 'precisions': [0.30303030303030304, 0.125, 0.06451612903225806, 0.03333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 2.357142857142857, 'translation_length': 33, 'reference_length': 14} Rouge: {'rouge1': 0.41860465116279066, 'rouge2': 0.1951219512195122, 'rougeL': 0.41860465116279066, 'rougeLsum': 0.32558139534883723} Sari: {'sari': 39.464285714285715} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Dazu die genau abgemessene Menge Wasser in einen Topf geben, erwärmen und das Lebensmittel zugeben.'] Prediction: ['Das Lebensmittel in der Schweiz ist eine abgemessene Menge Wasser in einen Topf geben.\nDas Lebensmittel ist dabei nicht mehr gekommen.\nDas Lebensmittel ist das Leben des Lebensmittels zugeben.'] Label: [['Jetzt geben Sie das Lebensmittel dazu – das Wasser darf nicht mehr kochen.\nErhitzen Sie den Topf bis kurz vor dem Kochen.\nGeben Sie eine genau abgemessene Menge Wasser in einen Topf.']] Sacrebleu: {'score': 17.125099361867132, 'counts': [15, 6, 4, 3], 'totals': [32, 31, 30, 29], 'precisions': [46.875, 19.35483870967742, 13.333333333333334, 10.344827586206897], 'bp': 0.9105103613800342, 'sys_len': 32, 'ref_len': 35} Bleu: {'bleu': 0.17125099361867144, 'precisions': [0.46875, 0.1935483870967742, 0.13333333333333333, 0.10344827586206896], 'brevity_penalty': 0.9105103613800342, 'length_ratio': 0.9142857142857143, 'translation_length': 32, 'reference_length': 35} Rouge: {'rouge1': 0.4333333333333333, 'rouge2': 0.2413793103448276, 'rougeL': 0.30000000000000004, 'rougeLsum': 0.39999999999999997} Sari: {'sari': 57.055720245937636} Flesh Reading Ease: 59.15 ---------------------------------------- Source: ['KochenHier gibt es zwei Verfahren: 1. Wasser in einen Topf geben, den Deckel auflegen, auf den Herd stellen und auf der höchsten Stufe zum Kochen bringen.'] Prediction: ['Hier gibt es zwei Verfahren: 1.\nWasser in einen Topf geben, den Deckel auflegen, auf den Herd stellen.\nDas sind zwei Verfahren: 1.\nWasser in einen Topf geben, den Deckel auflegen, auf den Herd stellen und auf der höchsten Stufe zum Kochen bringen.'] Label: [['Bringen Sie alles auf der höchsten Stufe zum Kochen.\nLegen Sie den Deckel auf den Topf.\nStellen Sie den Topf auf den Herd.\nDas Essen muss vollständig unter Wasser stehen.\nLegen Sie die Lebensmittel in einen Topf und geben Sie Wasser dazu.']] Sacrebleu: {'score': 16.972645109470832, 'counts': [27, 12, 6, 3], 'totals': [53, 52, 51, 50], 'precisions': [50.943396226415096, 23.076923076923077, 11.764705882352942, 6.0], 'bp': 1.0, 'sys_len': 53, 'ref_len': 47} Bleu: {'bleu': 0.16972645109470835, 'precisions': [0.5094339622641509, 0.23076923076923078, 0.11764705882352941, 0.06], 'brevity_penalty': 1.0, 'length_ratio': 1.127659574468085, 'translation_length': 53, 'reference_length': 47} Rouge: {'rouge1': 0.5909090909090909, 'rouge2': 0.27906976744186046, 'rougeL': 0.25, 'rougeLsum': 0.5} Sari: {'sari': 50.6069366363484} Flesh Reading Ease: 81.45 ---------------------------------------- Source: ['Und schließlich bilden sich beim Garen auch Geruchs- oder Geschmacksstoffe, die Appetit machen.'] Prediction: ['Einige Appetit-Gäste sind beim Garen aus dem Schweizerischen Appetit geschickt.\nDie Appetit-Gäste sind schließlich auch Geruchs oder Geschmacksstoffe.'] Label: [['Die machen Appetit!\nUnd das Beste kommt zuletzt: beim Garen bilden sich Geruchs- und Geschmacksstoffe.']] Sacrebleu: {'score': 5.993031480537873, 'counts': [6, 2, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [30.0, 10.526315789473685, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.10526315789473684, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1111111111111112, 'translation_length': 20, 'reference_length': 18} Rouge: {'rouge1': 0.31578947368421056, 'rouge2': 0.05555555555555555, 'rougeL': 0.26315789473684204, 'rougeLsum': 0.31578947368421056} Sari: {'sari': 52.06541218637993} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['Das Erhitzen macht einige Nährstoffe wie Vitamine und sekundäre Pflanzenstoffe besser verfügbar.'] Prediction: ['Einige Nährstoffe wie Vitamine und sekundäre Pflanzenstoffe machten besser verfügbar.\nDas Erhitzen macht einige Nährstoffe wie Vitamine und sekundäre Pflanzenstoffe besser verfügbar.'] Label: [['Das ist gesund.\nBeim Garen werden außerdem Nährstoffe und Vitamine frei.']] Sacrebleu: {'score': 2.46233736722218, 'counts': [6, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.24390243902439027, 'rouge2': 0.05128205128205128, 'rougeL': 0.1951219512195122, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 37.96296296296296} Flesh Reading Ease: 22.75 ---------------------------------------- Source: ['Vor allem bei tierischen Produkten wie Hühnerfleisch, Fisch, Meeresfrüchten und Fleisch, die roh mit krankheitserregenden Keimen behaftet sein können, werden diese beim Durchgaren abgetötet.'] Prediction: ['Einige tierische Produkte wie Hühnerfleisch, Fisch, Meeresfrüchten und Fleisch, die roh mit Keimen behaftet sein können, werden beim Durchgaren abgetötet.\nDie Rolle der krankheitserregenden Keimen werden abgetötet.'] Label: [['Beim Garen werden diese Bakterien getötet.\nWenn sie roh sind, können sie Bakterien enthalten, die Menschen krank machen.\nDas gilt vor allem für tierische Lebensmittel, wie Fleisch, Fisch und Meeresfrüchte.\nViele Lebensmittel kann man erst sicher essen, wenn sie gegart sind.']] Sacrebleu: {'score': 2.922580314009637, 'counts': [15, 3, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [45.45454545454545, 9.375, 1.6129032258064515, 0.8333333333333334], 'bp': 0.5974100710831303, 'sys_len': 33, 'ref_len': 50} Bleu: {'bleu': 0.0, 'precisions': [0.45454545454545453, 0.09375, 0.0, 0.0], 'brevity_penalty': 0.5974100710831303, 'length_ratio': 0.66, 'translation_length': 33, 'reference_length': 50} Rouge: {'rouge1': 0.3376623376623376, 'rouge2': 0.02666666666666667, 'rougeL': 0.10389610389610389, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 35.17464566126236} Flesh Reading Ease: 37.8 ---------------------------------------- Source: ['So wird durch Garen zum Beispiel die unverdauliche Stärke der Kartoffel aufgeschlossen. Außerdem werden manche Lebensmittel durch Garen erst genießbar.'] Prediction: ['Der Kartoffel wird in Garen unverdauliche Stärke aufgeschlossen.\nDie unverdauliche Stärke der Kartoffel wird aufgeschlossen.\nDie Unverdauliche Stärke der Kartoffel wird aufgeschlossen.'] Label: [['Rohe Kartoffeln haben viel Stärke, erst nach dem Kochen oder Backen kann man sie genießen.\nKartoffeln zum Beispiel.\nManche Lebensmittel kann man nur essen, wenn sie gegart sind.']] Sacrebleu: {'score': 1.5467507252299189, 'counts': [4, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 0.7261490370736908, 'sys_len': 25, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7261490370736908, 'length_ratio': 0.7575757575757576, 'translation_length': 25, 'reference_length': 33} Rouge: {'rouge1': 0.07272727272727272, 'rouge2': 0.03773584905660377, 'rougeL': 0.07272727272727272, 'rougeLsum': 0.07272727272727272} Sari: {'sari': 30.75992482969227} Flesh Reading Ease: 32.3 ---------------------------------------- Source: ['Während des Garens werden Lebensmittel erhitzt und verändern sich damit in Geschmack, Zusammensetzung, Konsistenz und Aussehen.'] Prediction: ['Während des Garens werden Lebensmittel erhitzt.\nDie Lebensmittel verändern sich damit in Geschmack, Zusammensetzung, Konsistenz und Aussehen.'] Label: [['Gegarte Lebensmittel verändern sich auch in ihrer Festigkeit.\nGegarte Lebensmittel sehen anders aus als rohe Lebensmittel und sie schmecken anders.\nDurch diese Hitze verändert ein Lebensmittel sich.\nBeim Garen wird Essen erhitzt.']] Sacrebleu: {'score': 4.820080026719261, 'counts': [9, 3, 1, 0], 'totals': [21, 20, 19, 18], 'precisions': [42.857142857142854, 15.0, 5.2631578947368425, 2.7777777777777777], 'bp': 0.48954165955695317, 'sys_len': 21, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.42857142857142855, 0.15, 0.05263157894736842, 0.0], 'brevity_penalty': 0.48954165955695317, 'length_ratio': 0.5833333333333334, 'translation_length': 21, 'reference_length': 36} Rouge: {'rouge1': 0.3018867924528302, 'rouge2': 0.11764705882352942, 'rougeL': 0.22641509433962262, 'rougeLsum': 0.3018867924528302} Sari: {'sari': 32.16975459622519} Flesh Reading Ease: 36.95 ---------------------------------------- Source: ['So schmecken zum Beispiel Zwiebeln nach dem Braten weniger scharf, sind weicher und je nach Bratdauer leicht gebräunt.'] Prediction: ['Zwiebeln nach dem Braten sind weniger scharf, sind weicher und je nach Bratdauer leicht gebräunt.\nSo schmecken zum Beispiel Zwiebeln nach dem Braten weniger scharf, sind weicher und je nach Bratdauer leicht gebräunt.'] Label: [['Eine gebratene Zwiebel ist viel weicher als eine rohe.\nSie werden glasig und schmecken viel süßer als rohe Zwiebeln.\nDenken Sie zum Beispiel an gebratene Zwiebeln:']] Sacrebleu: {'score': 2.9025207558830606, 'counts': [9, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [24.324324324324323, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.24324324324324326, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2758620689655173, 'translation_length': 37, 'reference_length': 29} Rouge: {'rouge1': 0.22580645161290322, 'rouge2': 0.03333333333333333, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.22580645161290322} Sari: {'sari': 38.653846153846146} Flesh Reading Ease: 69.9 ---------------------------------------- Source: ['„Wenn der Joghurt seine Farbe verändert hat, unangenehm riecht oder schmeckt, wird er besser entsorgt. “'] Prediction: ['Ein Joghurt hat seine Farbe verändert.\nDer Joghurt wird besser entsorgt.'] Label: [['Dieses Lebensmittel sollten Sie wegwerfen.\nDann ist es nicht mehr in Ordnung.\nOder ist die Verpackung aufgebläht?\nRiecht es komisch?\nSehen Sie Schimmel?\nHat es sich verfärbt?']] Sacrebleu: {'score': 0.7887471949677209, 'counts': [2, 0, 0, 0], 'totals': [13, 12, 11, 10], 'precisions': [15.384615384615385, 4.166666666666667, 2.272727272727273, 1.25], 'bp': 0.2147111723416973, 'sys_len': 13, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.0, 0.0, 0.0], 'brevity_penalty': 0.2147111723416972, 'length_ratio': 0.3939393939393939, 'translation_length': 13, 'reference_length': 33} Rouge: {'rouge1': 0.04878048780487805, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 41.964285714285715} Flesh Reading Ease: 69.2 ---------------------------------------- Source: ['„Viele Lebensmittel sind auch nach Ablauf der Mindesthaltbarkeit noch völlig in Ordnung“, erklärt Harald Seitz, Ernährungswissenschaftler am Bundeszentrum für Ernährung (BZfE).'] Prediction: ['Viele Lebensmittel sind noch völlig in Ordnung.\nDas ist der erste Mal in der Schweiz.'] Label: [['Das bedeutet: Lebensmittel sind nach Ablauf des Mindest-Haltbarkeitsdatums oft noch in Ordnung.']] Sacrebleu: {'score': 11.64394847706997, 'counts': [7, 3, 1, 0], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 18.75, 6.666666666666667, 3.5714285714285716], 'bp': 1.0, 'sys_len': 17, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.4117647058823529, 0.1875, 0.06666666666666667, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2142857142857142, 'translation_length': 17, 'reference_length': 14} Rouge: {'rouge1': 0.41379310344827586, 'rouge2': 0.14814814814814814, 'rougeL': 0.3448275862068966, 'rougeLsum': 0.41379310344827586} Sari: {'sari': 54.05853405853406} Flesh Reading Ease: 84.75 ---------------------------------------- Source: ['Im Gegensatz zum Mindesthaltbarkeitsdatum („mindestens haltbar bis. . . ") sollte das Verbrauchsdatum („zu verbrauchen bis. . . “) auf der Verpackung unbedingt eingehalten werden.'] Prediction: ['Im Gegensatz zum Mindesthaltbarkeitsdatum („mindestens haltbar bis... ") sollte das Verbrauchsdatum auf der Verpackung unbedingt eingehalten werden.\nDas Verbrauchdatum sollte auf der Verpackung unbedingt eingehalten werden.'] Label: [['Diese Produkte sind leicht verderblich.\nDanach geht das nicht mehr.\nDiese Produkte müssen Sie bis zum angegebenen Datum essen.\nAuf dem Etikett steht „zu verbrauchen bis“ – oder die Abkürzung VD – und ein Datum.\nViele frische Produkte haben ein Verbrauchsdatum.\nBis zu diesem Datum kann man sie essen, danach nicht mehr.\nDie meisten frischen Waren haben ein Verbrauchsdatum.']] Sacrebleu: {'score': 0.6942629613318403, 'counts': [9, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [27.272727272727273, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.35689879303155075, 'sys_len': 33, 'ref_len': 67} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.0, 0.0, 0.0], 'brevity_penalty': 0.35689879303155075, 'length_ratio': 0.4925373134328358, 'translation_length': 33, 'reference_length': 67} Rouge: {'rouge1': 0.11904761904761904, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.09523809523809523} Sari: {'sari': 31.093778507571606} Flesh Reading Ease: 31.3 ---------------------------------------- Source: ['Reis und Nudeln sind sogar noch Jahre länger haltbar, und bei Kaffee ist mit der Zeit höchstens ein Aromaverlust zu befürchten.'] Prediction: ['Bei Kaffee ist mit der Zeit höchstens ein Aromaverlust zu befürchten.\nReis und Nudeln sind sogar noch Jahre länger haltbar.'] Label: [['Aber auch verpackte Nudeln, Mehl oder Konserven (viele Monate).']] Sacrebleu: {'score': 2.0540268312306345, 'counts': [2, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [9.090909090909092, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6923076923076923, 'translation_length': 22, 'reference_length': 13} Rouge: {'rouge1': 0.0625, 'rouge2': 0.0, 'rougeL': 0.0625, 'rougeLsum': 0.0625} Sari: {'sari': 30.555555555555554} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Milch und Milchprodukte werden nach Ablauf der Mindesthaltbarkeit mit allen Sinnen geprüft.'] Prediction: ['Milch und Milchprodukte werden nach Ablauf der Mindesthaltbarkeit mit allen Sinnen geprüft.\nDie Milchprodukte werden nach Ablauf der Mindesthaltbarkeit mit allen Sinnen geprüft.'] Label: [['Doch auch nach diesem Datum kann man sie oft noch essen, denn sie sind immer noch in Ordnung.\nZum Beispiel Käse oder andere Milchprodukte (einige Wochen).']] Sacrebleu: {'score': 1.6755750575584345, 'counts': [4, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 0.7866278610665535, 'sys_len': 25, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7866278610665535, 'length_ratio': 0.8064516129032258, 'translation_length': 25, 'reference_length': 31} Rouge: {'rouge1': 0.07692307692307691, 'rouge2': 0.0, 'rougeL': 0.07692307692307691, 'rougeLsum': 0.07692307692307691} Sari: {'sari': 36.45833333333333} Flesh Reading Ease: 51.5 ---------------------------------------- Source: ['Es handelt sich um leicht verderbliche Produkte wie Hackfleisch und Geflügel, in denen sich Krankheitserreger vermehren können.'] Prediction: ['Derzeit handelt es sich um leicht verderbliche Produkte wie Hackfleisch und Geflügel.\nEs handelt sich um leicht verderbliche Produkte wie Hackfleisch und Geflügel, in denen sich Krankheitserreger vermehren können.'] Label: [['Diese Waren können leicht verderben.\nZum Beispiel Fleisch oder Fisch, aber auch vorgeschnittene Salate.\nManche Lebensmittel bleiben nur wenige Tage haltbar.']] Sacrebleu: {'score': 1.7345617945636578, 'counts': [5, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [15.625, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.15625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.28, 'translation_length': 32, 'reference_length': 25} Rouge: {'rouge1': 0.1111111111111111, 'rouge2': 0.03846153846153846, 'rougeL': 0.07407407407407407, 'rougeLsum': 0.1111111111111111} Sari: {'sari': 36.36363636363636} Flesh Reading Ease: 54.35 ---------------------------------------- Source: ['Viele Verbraucher sind verunsichert, ob Lebensmittel nach Ablauf des Mindesthaltbarkeitsdatums weiterhin genießbar sind.'] Prediction: ['Viele Verbraucher sind verunsichert, ob Lebensmittel nach Ablauf des Mindesthaltbarkeitsdatums weiterhin genießbar sind.\nDas ist nicht bekannt, ob Lebensmittel nach Ablauf des Mindesthaltbarkeitsdatums weiterhin genießbar sind.'] Label: [['Kann ich das noch essen?']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 30, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 30, 'reference_length': 6} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 35.0} Flesh Reading Ease: 26.6 ---------------------------------------- Source: ['Das Siegel informiert über die Produktionsmethode, sagt aber nichts über die gesamte Ökobilanz aus. Doch das Bio-Siegel auf dem Apfel oder dem Salatkopf sagt nichts darüber aus, ob es sich um ein saisonales Angebot handelt.'] Prediction: ['Das Bio-Siegel auf dem Apfel oder dem Salatkopf ist ausgebaut, ob es sich um ein saisonales Angebot handelt.\nDas Bio-Siegel auf dem Apfel oder dem Salatkopf sagt nichts darüber aus, ob es sich um ein saisonales Angebot handelt.'] Label: [['Auch Obst und Gemüse mit dem Bio-Siegel haben nicht immer Saison.\nEs sagt etwas über die Produktion – nicht über den Transport.\nDas Bio-Siegel steht auch auf Ware, die aus anderen Kontinenten kommt.\nAber aufgepasst!']] Sacrebleu: {'score': 4.392487796991639, 'counts': [10, 2, 1, 0], 'totals': [42, 41, 40, 39], 'precisions': [23.80952380952381, 4.878048780487805, 2.5, 1.2820512820512822], 'bp': 1.0, 'sys_len': 42, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.23809523809523808, 0.04878048780487805, 0.025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.05, 'translation_length': 42, 'reference_length': 40} Rouge: {'rouge1': 0.28205128205128205, 'rouge2': 0.07894736842105263, 'rougeL': 0.20512820512820515, 'rougeLsum': 0.2564102564102564} Sari: {'sari': 34.98659306168045} Flesh Reading Ease: 67.4 ---------------------------------------- Source: ['Biologisch angebautes Obst und Gemüse wird grundsätzlich ohne chemisch-synthetische Pflanzenschutzmittel und chemisch-synthetische Dünger erzeugt.'] Prediction: ['Das Obst und Gemüse wird ohne chemisch-synthetische Pflanzenschutzmittel und chemisch-synthetische Dünger erzeugt.\nDie Biologische angebaute Obst und Gemüse werden grundsätzlich ohne chemisch-synthetische Pflanzenschutzmittel und chemisch-synthetische Dünger erzeugt.'] Label: [['Normale Landwirte benutzen Dünger und Pflanzenschutz mit vielen chemischen Stoffen.\nDas kommt weil Öko-Bauern anderen Dünger und Pflanzenschutz benutzen.\nSie sind besser fürs Klima als ‚normales’Obst und Gemüse.\nBio-Obst und Bio-Gemüse sind gut für den Boden und das Wasser und für Menschen sehr gesund.']] Sacrebleu: {'score': 1.9985566079293433, 'counts': [10, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [34.48275862068966, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 0.5193525113308978, 'sys_len': 29, 'ref_len': 48} Bleu: {'bleu': 0.0, 'precisions': [0.3448275862068966, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 0.5193525113308977, 'length_ratio': 0.6041666666666666, 'translation_length': 29, 'reference_length': 48} Rouge: {'rouge1': 0.3296703296703296, 'rouge2': 0.15730337078651685, 'rougeL': 0.2197802197802198, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 39.64285714285714} Flesh Reading Ease: 8.55 ---------------------------------------- Source: ['Hier sollte man vor dem Kauf die Qualität testen (wenn möglich probieren! ), denn trotz ansprechender roter Farbe sind die Früchte manchmal recht geschmacksarm.'] Prediction: ['Einige roter Farbe sind in der Schweiz geschmacksarm.\nDie Früchte sind manchmal recht geschmacksarm.'] Label: [['Die Ware sieht vielleicht lecker aus, aber sie schmeckt nicht so gut wie in der Hauptsaison.']] Sacrebleu: {'score': 5.133162742626526, 'counts': [4, 1, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [25.0, 6.666666666666667, 3.5714285714285716, 1.9230769230769231], 'bp': 0.8824969025845955, 'sys_len': 16, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 0.8824969025845955, 'length_ratio': 0.8888888888888888, 'translation_length': 16, 'reference_length': 18} Rouge: {'rouge1': 0.19354838709677422, 'rouge2': 0.0689655172413793, 'rougeL': 0.12903225806451615, 'rougeLsum': 0.19354838709677422} Sari: {'sari': 37.65497076023392} Flesh Reading Ease: 61.85 ---------------------------------------- Source: ['Der sicherste Weg, saisonale und regionale Produkte zu bekommen, ist der Kauf direkt beim Erzeuger, also ab-Hof oder auf Wochenmärkten.'] Prediction: ['Der saisonale und regionale Weg ist direkt beim Erzeuger.\nDer Kauf ist direkt beim Erzeuger, also ab-Hof oder auf Wochenmärkten.'] Label: [['Das bedeutet: Hier finden Sie Produkte, die gerade Saison haben.\nAuf dem Wochenmarkt und beim Bauern gibt es viel frisches Obst und Gemüse aus der Region.']] Sacrebleu: {'score': 1.816230541030891, 'counts': [5, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 0.7376042638218265, 'sys_len': 23, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7376042638218265, 'length_ratio': 0.7666666666666667, 'translation_length': 23, 'reference_length': 30} Rouge: {'rouge1': 0.16326530612244897, 'rouge2': 0.0, 'rougeL': 0.12244897959183673, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 34.74792408066429} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Einige Händler sind mit ihrer Ware schon vor der Hauptsaison am Markt, die dann meist teurer ist, aber nicht unbedingt eine gute Qualität aufweist.'] Prediction: ['Einige Händler sind am Markt in der Hauptsaison am Markt.\nDie Qualität ist nicht unbedingt aufweist.'] Label: [['Sie verkaufen teure Ware, die oft noch nicht optimal reif ist.\nManche Händler möchten Obst und Gemüse als Erste anbieten.']] Sacrebleu: {'score': 2.4326351876994745, 'counts': [5, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 0.7574651283969664, 'sys_len': 18, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7574651283969664, 'length_ratio': 0.782608695652174, 'translation_length': 18, 'reference_length': 23} Rouge: {'rouge1': 0.24390243902439024, 'rouge2': 0.05128205128205128, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 35.821324143692564} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Bei den meisten frischen Obst- und Gemüsearten muss das Ursprungsland angegeben werden.'] Prediction: ['Im Ursprungsland muss das Ursprungsland angegeben werden.\nDie meisten frischen Obst und Gemüsearten müssen das Ursprungsland angegeben werden.'] Label: [['Bei frischem Obst und Gemüse steht das Land auf dem Etikett oder auf dem Schild daneben.']] Sacrebleu: {'score': 4.553719184146073, 'counts': [4, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [20.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1764705882352942, 'translation_length': 20, 'reference_length': 17} Rouge: {'rouge1': 0.2162162162162162, 'rouge2': 0.11428571428571428, 'rougeL': 0.2162162162162162, 'rougeLsum': 0.2162162162162162} Sari: {'sari': 35.962732919254655} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['Für saisonales Obst und Gemüse gibt es kein verbindliches einheitliches Siegel, an dem man sich beim Einkauf orientieren könnte.'] Prediction: ['Für saisonales Obst und Gemüse gibt es kein verbindliches einheitliches Siegel, an dem man sich beim Einkauf orientieren könnte.\nDas sind einheitliches Siegel, an dem man sich beim Einkauf orientieren könnte.'] Label: [['Für Obst und Gemüse, das gerade Saison hat, gibt es kein einheitliches Siegel.']] Sacrebleu: {'score': 8.312565735249724, 'counts': [12, 5, 2, 0], 'totals': [35, 34, 33, 32], 'precisions': [34.285714285714285, 14.705882352941176, 6.0606060606060606, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.34285714285714286, 0.14705882352941177, 0.06060606060606061, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1875, 'translation_length': 35, 'reference_length': 16} Rouge: {'rouge1': 0.48000000000000004, 'rouge2': 0.2916666666666667, 'rougeL': 0.44, 'rougeLsum': 0.48000000000000004} Sari: {'sari': 46.760912698412696} Flesh Reading Ease: 59.2 ---------------------------------------- Source: ['Zitronen, Apfelsinen oder Honigmelonen aus Europa haben wegen der kürzeren Transportwege immer eine bessere Ökobilanz als Obst aus Übersee oder Flugware.'] Prediction: ['Zitronen, Apfelsinen oder Honigmelonen aus Europa haben wegen der kürzeren Transportwege eine bessere Ökobilanz als Obst aus Übersee oder Flugware aus Europa.\nDas ist der erste Mal in der Schweiz.'] Label: [['Zitronen, Melonen und Apfelsinen aus Südeuropa haben kürzere Wege als die gleichen Früchte aus anderen Kontinenten.']] Sacrebleu: {'score': 3.176605498590708, 'counts': [8, 1, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [24.242424242424242, 3.125, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.24242424242424243, 0.03125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8333333333333333, 'translation_length': 33, 'reference_length': 18} Rouge: {'rouge1': 0.28, 'rouge2': 0.0, 'rougeL': 0.28, 'rougeLsum': 0.28} Sari: {'sari': 38.48765432098766} Flesh Reading Ease: 48.0 ---------------------------------------- Source: ['Bei Früchten, die auch in Südeuropa wachsen, lohnt sich immer ein Blick auf das Ursprungsland.'] Prediction: ['In Südeuropa wurden Früchte auf das Ursprungsland geschickt.\nDie Ursprungs-Früchte sind auch in Südeuropa wachsen.'] Label: [['Achten Sie beim Einkauf immer auf das Ursprungsland.\nManche exotische Früchte wachsen auch in Südeuropa.']] Sacrebleu: {'score': 16.267392600305726, 'counts': [10, 4, 2, 0], 'totals': [17, 16, 15, 14], 'precisions': [58.8235294117647, 25.0, 13.333333333333334, 3.5714285714285716], 'bp': 1.0, 'sys_len': 17, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.5882352941176471, 0.25, 0.13333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 17, 'reference_length': 17} Rouge: {'rouge1': 0.5405405405405405, 'rouge2': 0.34285714285714286, 'rougeL': 0.48648648648648646, 'rougeLsum': 0.48648648648648646} Sari: {'sari': 51.37947700447702} Flesh Reading Ease: 49.65 ---------------------------------------- Source: ['Litchis oder Karambolen kommen dagegen meistens per Flugzeug zu uns, so dass sie eine schlechtere Ökobilanz aufweisen.'] Prediction: ['Eine schlechtere Ökobilanz aufweisen litchis oder Karambolen.\nDie Ökobilanz kommt meistens per Flugzeug zu uns.'] Label: [['Das ist nicht klimafreundlich.\nDieser Transport ist teuer und kostet viel Energie.\nSie halten sich nicht lange genug für längere Transporte.\nAndere Früchte kommen immer mit dem Flugzeug nach Deutschland, zum Beispiel Brombeeren aus Mexiko oder Litschis aus Thailand.']] Sacrebleu: {'score': 0.6607103810022187, 'counts': [4, 0, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [23.529411764705884, 3.125, 1.6666666666666667, 0.8928571428571429], 'bp': 0.20428579817889805, 'sys_len': 17, 'ref_len': 44} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.0, 0.0, 0.0], 'brevity_penalty': 0.20428579817889805, 'length_ratio': 0.38636363636363635, 'translation_length': 17, 'reference_length': 44} Rouge: {'rouge1': 0.07017543859649122, 'rouge2': 0.0, 'rougeL': 0.03508771929824561, 'rougeLsum': 0.07017543859649122} Sari: {'sari': 31.798245614035086} Flesh Reading Ease: 55.5 ---------------------------------------- Source: ['Wer die Umwelt weniger belasten möchte, sollte sich möglichst an Früchte halten, die überwiegend mit dem Schiff transportiert werden, wie z. B. Bananen und Ananas.'] Prediction: ['Die Umwelt weniger belastete, sollte sich möglichst an Früchte halten, die überwiegend mit dem Schiff transportiert werden.\nDie Umwelt weniger belastete, sollte sich möglichst an Früchte halten, die überwiegend mit dem Schiff transportiert werden.'] Label: [['Der Transport ist nicht so teuer und kostet nicht so viel Energie.\nManche Früchte kommen aus anderen Kontinenten mit dem Schiff nach Deutschland, zum Beispiel Bananen und Ananas.']] Sacrebleu: {'score': 4.226657240185127, 'counts': [7, 2, 1, 0], 'totals': [40, 39, 38, 37], 'precisions': [17.5, 5.128205128205129, 2.6315789473684212, 1.3513513513513513], 'bp': 1.0, 'sys_len': 40, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.175, 0.05128205128205128, 0.02631578947368421, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2903225806451613, 'translation_length': 40, 'reference_length': 31} Rouge: {'rouge1': 0.1492537313432836, 'rouge2': 0.0923076923076923, 'rougeL': 0.1492537313432836, 'rougeLsum': 0.1492537313432836} Sari: {'sari': 32.76060883734538} Flesh Reading Ease: 51.85 ---------------------------------------- Source: ['Vor allem bei Apfelsinen, Mandarinen, Litschis und Feigen gibt es große jahreszeitliche Schwankungen beim Angebot.'] Prediction: ['Jahreszeitliche Schwankungen beim Angebot sind bei Apfelsinen, Mandarinen, Litschis und Feigen aufgeboten.\nDie jahreszeitlichen Schwankungen sind bei Apfelsinen, Mandarinen, Litschis und Feigen aufgeboten.'] Label: [['Sie schmecken aber nur in ihrer Hauptsaison richtig gut.\nDiese Früchte liegen das ganze Jahr im Laden.\nAchten Sie zum Beispiel auf die Saisonzeiten für Orangen, Mandarinen, Litschis und Feigen.']] Sacrebleu: {'score': 13.85105944861409, 'counts': [8, 5, 4, 3], 'totals': [29, 28, 27, 26], 'precisions': [27.586206896551722, 17.857142857142858, 14.814814814814815, 11.538461538461538], 'bp': 0.8131037598190377, 'sys_len': 29, 'ref_len': 35} Bleu: {'bleu': 0.1385105944861409, 'precisions': [0.27586206896551724, 0.17857142857142858, 0.14814814814814814, 0.11538461538461539], 'brevity_penalty': 0.8131037598190377, 'length_ratio': 0.8285714285714286, 'translation_length': 29, 'reference_length': 35} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.11320754716981131, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 56.13026819923371} Flesh Reading Ease: 16.4 ---------------------------------------- Source: ['Aber: Auch viele Exoten und Südfrüchte haben zu bestimmten Zeiten Saison, in denen das Angebot besonders groß ist und die Qualität entsprechend gut.'] Prediction: ['Viele Exoten und Südfrüchte haben zu bestimmten Zeiten Saison eine Qualität gewonnen.\nAuch viele Exoten und Südfrüchte haben zu bestimmten Zeiten Saison, in denen das Angebot besonders groß ist.'] Label: [['In dieser Zeit ist das Angebot groß, die Früchte sind frisch und günstig und die Qualität ist gut.\nAuch exotische Früchte haben ihre Saisonzeiten im Ursprungsland.']] Sacrebleu: {'score': 4.317900023606588, 'counts': [12, 2, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [37.5, 6.451612903225806, 1.6666666666666667, 0.8620689655172413], 'bp': 1.0, 'sys_len': 32, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.375, 0.06451612903225806, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.103448275862069, 'translation_length': 32, 'reference_length': 29} Rouge: {'rouge1': 0.40625, 'rouge2': 0.0967741935483871, 'rougeL': 0.18750000000000003, 'rougeLsum': 0.34375} Sari: {'sari': 32.76629602771735} Flesh Reading Ease: 48.5 ---------------------------------------- Source: ['Die umweltschonendste Variante wäre in diesem Fall, bis zur neuen heimischen Ernte auf Äpfel zu verzichten.'] Prediction: ['Die umweltschonendste Variante der Schweiz ist in diesem Fall nicht mehr unklar.\nDie heimischen Ernte wäre in diesem Fall auf Äpfel zu verzichten.'] Label: [['Am besten fürs Klima ist es, wenn Sie im Juli gar keine Äpfel kaufen – sondern anderes Obst, das gerade Saison hat.']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 25, 'reference_length': 25} Rouge: {'rouge1': 0.08695652173913043, 'rouge2': 0.0, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 33.828068264342775} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['Deshalb kann ein im Herbst eingelagerter heimischer Apfel im Juni/Juli des Folgejahres eine ungünstigere Ökobilanz haben, als ein Apfel aus Neuseeland.'] Prediction: ['Deshalb hat einen heimischen Apfel eine ungünstigere Ökobilanz gefunden.\nDas ist ein heimischer Apfel aus Neuseeland.\nDas ist ein heimischer Apfel aus dem Herbst eingelagerter.'] Label: [['Sie wurden zwar eingeflogen, aber sie sind frisch und wurden nicht monatelang gelagert.\nMan kann auch Äpfel aus Neuseeland wählen.\nDie deutschen Äpfel waren seit dem letzten Herbst im Kühlhaus.\nWenn Sie im Juli Äpfel essen möchten, finden Sie deutsche und neuseeländische Früchte im Laden.']] Sacrebleu: {'score': 1.6065762014152807, 'counts': [7, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [25.0, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 0.43980291563425605, 'sys_len': 28, 'ref_len': 51} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 0.43980291563425616, 'length_ratio': 0.5490196078431373, 'translation_length': 28, 'reference_length': 51} Rouge: {'rouge1': 0.10526315789473685, 'rouge2': 0.02702702702702702, 'rougeL': 0.10526315789473685, 'rougeLsum': 0.10526315789473685} Sari: {'sari': 35.70838695838696} Flesh Reading Ease: 54.7 ---------------------------------------- Source: ['Auch die Lagerung kostet viel Energie.'] Prediction: ['Die Lagerung kostet viel Energie.\nDie Lagerung kostet viel Energie.'] Label: [['Die Lagerung von Obst und Gemüse kostet viel Energie.']] Sacrebleu: {'score': 25.211936184349828, 'counts': [6, 4, 2, 1], 'totals': [12, 11, 10, 9], 'precisions': [50.0, 36.36363636363637, 20.0, 11.11111111111111], 'bp': 1.0, 'sys_len': 12, 'ref_len': 10} Bleu: {'bleu': 0.2521193618434983, 'precisions': [0.5, 0.36363636363636365, 0.2, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 12, 'reference_length': 10} Rouge: {'rouge1': 0.5, 'rouge2': 0.3333333333333333, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 58.79629629629629} Flesh Reading Ease: 69.7 ---------------------------------------- Source: ['Diese Ware wurde in der Regel mit besonderem Aufwand (Anzucht unter Glas, Folientunnel) erzeugt und hat deshalb eine schlechtere Ökobilanz als echte Freilandware.'] Prediction: ['Ein Freilandware wurde in der Regel mit besonderem Aufwand erzeugt.\nDer Ware hat eine schlechtere Ökobilanz als echte Freilandware.\nDie Ware wurde in der Regel mit besonderem Aufwand erzeugt.'] Label: [['Das verursacht Treibgase und ist schlecht für die Umwelt.\nObst und Gemüse, das aus beheizten und beleuchteten Glashäusern kommt, braucht viel Energie.\nWare aus dem Gewächshaus oder Tunnelanbau ist auch gut, wenn die Bauern dafür keine extra Beheizung brauchen.']] Sacrebleu: {'score': 1.0927734626144456, 'counts': [4, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 0.6661436107034878, 'sys_len': 32, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6661436107034878, 'length_ratio': 0.7111111111111111, 'translation_length': 32, 'reference_length': 45} Rouge: {'rouge1': 0.0547945205479452, 'rouge2': 0.0, 'rougeL': 0.0547945205479452, 'rougeLsum': 0.0547945205479452} Sari: {'sari': 33.75901875901876} Flesh Reading Ease: 53.3 ---------------------------------------- Source: ['Hier schneidet der Freilandanbau mit Abstand am besten ab.'] Prediction: ['Ein Freilandanbau schneidet mit Abstand am besten ab.\nDer Abstand wurde von einem Freilandanbau abgebrochen.\nDer Abstand wurde mit Abstand abgebrochen.'] Label: [['Am besten wählen Sie Obst und Gemüse, das im Freiland gewachsen ist.']] Sacrebleu: {'score': 1.8709718017288024, 'counts': [2, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [8.333333333333334, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.08333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 24, 'reference_length': 14} Rouge: {'rouge1': 0.11428571428571427, 'rouge2': 0.060606060606060615, 'rougeL': 0.11428571428571427, 'rougeLsum': 0.11428571428571427} Sari: {'sari': 40.27777777777777} Flesh Reading Ease: 56.0 ---------------------------------------- Source: ['Zudem kosten lange Transporte viel Energie und verursachen klimaschädliches CO2.'] Prediction: ['Der Transport kostet lange Transporte viel Energie und verursachen klimaschädliches CO2.\nDie Transporte kosten lange Transporte viel Energie und verursachen klimaschädliches CO2.'] Label: [['Außerdem ist der Transport teuer und ist schlecht für die Umwelt.']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 24, 'reference_length': 12} Rouge: {'rouge1': 0.21621621621621623, 'rouge2': 0.057142857142857134, 'rougeL': 0.21621621621621623, 'rougeLsum': 0.16216216216216217} Sari: {'sari': 40.937657114127695} Flesh Reading Ease: 40.3 ---------------------------------------- Source: ['Importierte Ware aus weit entfernten Ländern wird dagegen aufgrund längerer Transportwege oftmals nicht mit optimaler Reife geerntet und entpuppt sich deshalb manchmal als geschmacksarm, trotz ansprechender Optik.'] Prediction: ['Ein Import-Ware aus weit entfernten Ländern wird nicht mit optimaler Reife geerntet.\nImportierte Ware aus weit entfernten Ländern wird dagegen aufgrund längerer Transportwege oftmals nicht mit optimaler Reife geerntet.'] Label: [['Deswegen wird es früher geerntet als Obst aus Deutschland.\nEs muss lange Wege zurücklegen.\nImportiertes Obst ist oft nicht optimal reif.']] Sacrebleu: {'score': 1.877081263233555, 'counts': [6, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [19.35483870967742, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2916666666666667, 'translation_length': 31, 'reference_length': 24} Rouge: {'rouge1': 0.14285714285714288, 'rouge2': 0.0, 'rougeL': 0.14285714285714288, 'rougeLsum': 0.10714285714285714} Sari: {'sari': 36.0479797979798} Flesh Reading Ease: 36.8 ---------------------------------------- Source: ['Denn viele Früchte wie Erdbeeren, Kirschen oder Himbeeren reifen nach dem Pflücken nicht mehr nach. Das garantiert optimale Frische und oft einen besseren Geschmack, vor allem bei leicht verderblichem Obst.'] Prediction: ['Viele Früchte wie Erdbeeren, Kirschen oder Himbeeren reifen nicht mehr nach.\nDas garantiert optimale Frische und oft einen besseren Geschmack.\nDas garantiert optimale Frische und oft einen besseren Geschmack.'] Label: [['Das gilt vor allem für Früchte, die leicht verderben: zum Beispiel Erdbeeren, Kirschen und Himbeeren.\nDann ist es besonders frisch und schmeckt es am besten.']] Sacrebleu: {'score': 5.648892151960283, 'counts': [10, 2, 1, 0], 'totals': [33, 32, 31, 30], 'precisions': [30.303030303030305, 6.25, 3.225806451612903, 1.6666666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.30303030303030304, 0.0625, 0.03225806451612903, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 33, 'reference_length': 30} Rouge: {'rouge1': 0.28070175438596495, 'rouge2': 0.07272727272727274, 'rougeL': 0.2105263157894737, 'rougeLsum': 0.28070175438596495} Sari: {'sari': 35.961982940554485} Flesh Reading Ease: 59.15 ---------------------------------------- Source: ['Wenn heimisches Obst und Gemüse Saison hat, stammt das Angebot bestenfalls sogar direkt aus der Region.'] Prediction: ['Das Angebot der Obst und Gemüse Saison hat sogar direkt aus der Region.\nDas Angebot stammt sogar direkt aus der Region.'] Label: [['Wenn das Obst und Gemüse in Deutschland gewachsen ist, kommt es in der Saison meistens aus Ihrer Region.']] Sacrebleu: {'score': 8.668528067348738, 'counts': [8, 3, 1, 0], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 13.636363636363637, 4.761904761904762, 2.5], 'bp': 1.0, 'sys_len': 23, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.34782608695652173, 0.13636363636363635, 0.047619047619047616, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.15, 'translation_length': 23, 'reference_length': 20} Rouge: {'rouge1': 0.43902439024390244, 'rouge2': 0.15384615384615383, 'rougeL': 0.3902439024390244, 'rougeLsum': 0.43902439024390244} Sari: {'sari': 41.09615384615385} Flesh Reading Ease: 70.05 ---------------------------------------- Source: ['Den Großteil seiner Gemüseimporte bezieht Deutschland aus EU-Ländern, von denen die Niederlande und Spanien mit Abstand die wichtigsten Handelspartner sind.'] Prediction: ['Deutschland hat seine Gemüseimporte in der Schweiz gemacht.\nDie wichtigsten Handelspartner sind die wichtigsten Handelspartner.'] Label: [['Das meiste Importgemüse kommt aus anderen Ländern in Europa.']] Sacrebleu: {'score': 2.719665272174911, 'counts': [2, 0, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [11.764705882352942, 3.125, 1.6666666666666667, 0.8928571428571429], 'bp': 1.0, 'sys_len': 17, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 17, 'reference_length': 10} Rouge: {'rouge1': 0.07407407407407407, 'rouge2': 0.0, 'rougeL': 0.07407407407407407, 'rougeLsum': 0.07407407407407407} Sari: {'sari': 35.780423280423285} Flesh Reading Ease: 37.95 ---------------------------------------- Source: ['Dagegen werden Tomaten und Paprika fast vollständig importiert.'] Prediction: ['Die Tomaten und Paprika werden fast vollständig importiert.\nDas sind die ersten Tage nach den USA.\nTomaten und Paprika werden fast vollständig importiert.'] Label: [['Andere Arten kommen fast immer aus dem Ausland: zum Beispiel Paprika und Tomaten.']] Sacrebleu: {'score': 2.1601524349994397, 'counts': [5, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 26, 'reference_length': 15} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.0, 'rougeL': 0.10526315789473685, 'rougeLsum': 0.052631578947368425} Sari: {'sari': 39.743589743589745} Flesh Reading Ease: 61.15 ---------------------------------------- Source: ['So liegt der Selbstversorgungsgrad bei Kohlgemüse bei rund 89 %, bei Karotten und Zwiebelgemüse sind es 74 %.'] Prediction: ['Selbstversorgungsgrad bei Kohlgemüse sind es 74 %.\nBei Karotten und Zwiebelgemüse sind es 74 %.'] Label: [['Manche Gemüsearten kommen oft aus Deutschland: zum Beispiel Kohl, Karotten und Zwiebeln.']] Sacrebleu: {'score': 5.061867434834413, 'counts': [3, 1, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [17.647058823529413, 6.25, 3.3333333333333335, 1.7857142857142858], 'bp': 1.0, 'sys_len': 17, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.0625, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 17, 'reference_length': 15} Rouge: {'rouge1': 0.14285714285714288, 'rouge2': 0.07692307692307691, 'rougeL': 0.14285714285714288, 'rougeLsum': 0.14285714285714288} Sari: {'sari': 36.99134199134199} Flesh Reading Ease: 56.5 ---------------------------------------- Source: ['Transporte mit dem Flugzeug belasten die Umwelt grundsätzlich am stärksten.'] Prediction: ['Am stärksten kam es in der Nacht auf Sonntag zu einem Flugzeug zu einem Unfall.\nDie Umwelt belasteten die Transporte am stärksten.'] Label: [['Vor allem der Flugzeug-Transport ist teuer und ist schlecht für die Umwelt.']] Sacrebleu: {'score': 2.224972978585352, 'counts': [4, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [16.666666666666668, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.05555555555555555, 'rougeL': 0.2105263157894737, 'rougeLsum': 0.2105263157894737} Sari: {'sari': 51.66666666666666} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Mango, Ananas und andere exotische Früchte/'] Prediction: ['Mango, Ananas und andere exotische Früchte: Das ist eine exotische Früchte.\nDie 20-Minuten-App veröffentlicht die besten Früchte.\nIm Interview mit Ana, Ana und ihrem Partner erzählt sich die besten Früchte.'] Label: [['Bekannte exotische Früchte sind Bananen, Mangos und Ananas.']] Sacrebleu: {'score': 2.550799653951183, 'counts': [6, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [15.789473684210526, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8, 'translation_length': 38, 'reference_length': 10} Rouge: {'rouge1': 0.2127659574468085, 'rouge2': 0.08888888888888889, 'rougeL': 0.1702127659574468, 'rougeLsum': 0.12765957446808512} Sari: {'sari': 43.3531746031746} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Der größte Teil der Zitrusfrüchte kommt aus Spanien und Italien zu uns, während andere Südfrüchte und Exoten hauptsächlich aus Süd- und Mittelamerika stammen**.'] Prediction: ['Der größte Teil der Zitrusfrüchte kommt aus Spanien und Italien zu uns, während andere Südfrüchte und Exoten hauptsächlich aus Süd und Mittelamerika stammen.\nDer größte Teil der Zitrusfrüchte kommt aus Spanien und Italien zu uns, während andere Südfrüchte und Exoten hauptsächlich aus Süd und Mittelamerika stammen**.'] Label: [['Doch Südfrüchte und exotische Früchte kommen auch oft aus Süd- und Mittelamerika.']] Sacrebleu: {'score': 2.191986695078743, 'counts': [6, 2, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [11.538461538461538, 3.9215686274509802, 1.0, 0.5102040816326531], 'bp': 1.0, 'sys_len': 52, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.0392156862745098, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 52, 'reference_length': 13} Rouge: {'rouge1': 0.2631578947368421, 'rouge2': 0.18918918918918917, 'rougeL': 0.2631578947368421, 'rougeLsum': 0.23684210526315785} Sari: {'sari': 12.903538608425826} Flesh Reading Ease: 45.85 ---------------------------------------- Source: ['Der größte Teil der importierten Früchte (ohne Südfrüchte) kommt bei uns aus Italien, Spanien, Polen und den Niederlanden**.'] Prediction: ['Der größte Teil der importierten Früchte ist bei uns aus Italien, Spanien, Polen und den Niederlanden.\nDer größte Teil der importierten Früchte kommt bei uns aus Italien, Spanien, Polen und den Niederlanden**.'] Label: [['Unser Obst kommt vor allem aus Ländern in Europa: Italien, Spanien, Polen und den Niederlanden.']] Sacrebleu: {'score': 20.260749678530928, 'counts': [11, 8, 7, 6], 'totals': [40, 39, 38, 37], 'precisions': [27.5, 20.512820512820515, 18.42105263157895, 16.216216216216218], 'bp': 1.0, 'sys_len': 40, 'ref_len': 19} Bleu: {'bleu': 0.2026074967853093, 'precisions': [0.275, 0.20512820512820512, 0.18421052631578946, 0.16216216216216217], 'brevity_penalty': 1.0, 'length_ratio': 2.1052631578947367, 'translation_length': 40, 'reference_length': 19} Rouge: {'rouge1': 0.30769230769230765, 'rouge2': 0.2, 'rougeL': 0.30769230769230765, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 54.96382193321553} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['Das liegt vor allem am Klima hierzulande, das den Anbau vieler beliebter Obstarten wie Zitrusfrüchte oder Bananen unmöglich oder unrentabel macht.'] Prediction: ['Am Klima wird es zu den Anbauen wie Zitrusfrüchte oder Bananen unmöglich oder unrentabel gemacht.\nDas liegt vor allem am Klima hierzulande, das den Anbau vieler beliebter Obstarten wie Zitrusfrüchte oder Bananen unmöglich oder unrentabel macht.'] Label: [['In Deutschland ist es nicht warm genug für beliebtes Obst wie Orangen, Zitronen und Bananen.\nDas liegt an unserem Klima.\nWenn etwas nicht in Deutschland wächst, holen wir es aus dem Ausland.']] Sacrebleu: {'score': 4.620856909230221, 'counts': [9, 2, 1, 0], 'totals': [39, 38, 37, 36], 'precisions': [23.076923076923077, 5.2631578947368425, 2.7027027027027026, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 37} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.05263157894736842, 0.02702702702702703, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.054054054054054, 'translation_length': 39, 'reference_length': 37} Rouge: {'rouge1': 0.16216216216216214, 'rouge2': 0.027777777777777776, 'rougeL': 0.16216216216216214, 'rougeLsum': 0.16216216216216214} Sari: {'sari': 39.34251878892931} Flesh Reading Ease: 50.85 ---------------------------------------- Source: ['Das gilt ebenso für die meisten exotischen Früchte aus dem Ausland. Doch auch Importe und aufwändige Anbautechniken ändern nichts daran, dass fast alle Obst- und Gemüsearten in bestimmten Monaten besonders reichlich verfügbar sind, sprich „Saison haben“.'] Prediction: ['Im Ausland sind fast alle Obst und Gemüsearten besonders reichlich verfügbar.\nDas gilt ebenso für die meisten exotischen Früchte aus dem Ausland.\nAuch Importe und aufwändige Anbautechniken ändern nichts daran, dass fast alle Obst und Gemüsearten in bestimmten Monaten besonders reichlich verfügbar sind.'] Label: [['Auch Obst und Gemüse aus anderen Ländern hat seine Saison.']] Sacrebleu: {'score': 1.9547435301444356, 'counts': [5, 1, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [10.638297872340425, 2.1739130434782608, 1.1111111111111112, 0.5681818181818182], 'bp': 1.0, 'sys_len': 47, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.10638297872340426, 0.021739130434782608, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.2727272727272725, 'translation_length': 47, 'reference_length': 11} Rouge: {'rouge1': 0.1935483870967742, 'rouge2': 0.06666666666666667, 'rougeL': 0.16129032258064516, 'rougeLsum': 0.16129032258064516} Sari: {'sari': 37.44708994708994} Flesh Reading Ease: 48.7 ---------------------------------------- Source: ['Schließlich findet man beinahe jedes Obst oder Gemüse ganzjährig im Handel - Unterglas- oder Tunnelanbau, schnelle Transportmittel und eine ausgefeilte Lagertechnik machen es möglich.'] Prediction: ['Ganzjährig werden in der Schweiz unter anderem Transportmittel und eine ausgefeilte Lagertechnik machen es möglich.\nDie Schweiz hat sich beinahe jedes Obst oder Gemüse ganzjährig ganzjährig.'] Label: [['Fast alle Obst- und Gemüsearten liegen das ganze Jahr im Laden.\nHeute ist das anders.']] Sacrebleu: {'score': 1.7574239156849023, 'counts': [3, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [10.714285714285714, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.10714285714285714, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6470588235294117, 'translation_length': 28, 'reference_length': 17} Rouge: {'rouge1': 0.12765957446808507, 'rouge2': 0.0, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.12765957446808507} Sari: {'sari': 34.427609427609426} Flesh Reading Ease: 50.0 ---------------------------------------- Source: ['Erdbeeren, Spargel oder Apfelsinen hatten feste Angebotszeiten, die mehr oder weniger klar begrenzt waren.'] Prediction: ['Erdbeeren, Spargel oder Apfelsinen wurden feste Angebotszeiten geworden.\nDie Angebotszeiten waren mehr oder weniger klar begrenzt.'] Label: [['Früher gab es Erdbeeren und Spargel nur im Frühsommer.\nJede Art hatte ihre eigene Saison zu einer bestimmten Zeit.']] Sacrebleu: {'score': 2.576950303094841, 'counts': [4, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [21.05263157894737, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 0.9000876262522591, 'sys_len': 19, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.21052631578947367, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9000876262522594, 'length_ratio': 0.9047619047619048, 'translation_length': 19, 'reference_length': 21} Rouge: {'rouge1': 0.1081081081081081, 'rouge2': 0.0, 'rougeL': 0.1081081081081081, 'rougeLsum': 0.1081081081081081} Sari: {'sari': 36.27450980392157} Flesh Reading Ease: 31.6 ---------------------------------------- Source: ['Es ist noch gar nicht so lange her, als man sich beim Kauf von frischem Obst- und Gemüse ganz selbstverständlich am Kalender orientiert hat:'] Prediction: ['Immer mehr Obst und Gemüse sind sich beim Kauf von frischem Obst und Gemüse ganz selbstverständlich am Kalender orientiert.\nDas ist noch nicht so lange her, als man sich beim Kauf ganz selbstverständlich am Kalender orientiert hat.'] Label: [['Der Kalender gibt eine deutliche Übersicht mit der besten Einkaufszeit für 75 Obst- und Gemüsearten.']] Sacrebleu: {'score': 1.2090878038257866, 'counts': [3, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [7.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.075, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 40, 'reference_length': 16} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.07142857142857144, 'rougeL': 0.10344827586206896, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 32.120370370370374} Flesh Reading Ease: 67.9 ---------------------------------------- Source: ['Klima-Tipp 2: Saisonal essenSaisonale Freilandware, dazu gehört auch Ware aus Folientunnel und unbeheizten Gewächshäusern, ist nicht zu toppen, was die Klimafreundlichkeit angeht!'] Prediction: ['Freilandware ist nicht zu toppen, was die Klimafreundlichkeit angeht.\nDie Klimafreundlichkeit ist nicht zu toppen, was die Klimafreundlichkeit angeht.'] Label: [['Darum ist der zweite Klima-Tipp: Kaufen Sie Obst und Gemüse immer in der richtigen Jahreszeit.']] Sacrebleu: {'score': 1.958224832501124, 'counts': [2, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [8.695652173913043, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.08695652173913043, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3529411764705883, 'translation_length': 23, 'reference_length': 17} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 34.2433608058608} Flesh Reading Ease: 53.5 ---------------------------------------- Source: ['Bio-Fleisch muss dagegen nicht immer die klimaschonendere Alternative darstellen – die bisher vorhandenen Studien sind in Sachen CO2-Ausstoß nicht eindeutig.'] Prediction: ['Bio-Fleisch ist nicht immer die klimaschonendere Alternative darstellen.\nDie bisher vorhandenen Studien sind in Sachen CO2-Ausstoß nicht eindeutig.'] Label: [['Viehzucht braucht immer viel Energie und verursacht viele Treibhausgase.\nDoch Bio-Fleisch ist nicht unbedingt besser für das Klima als normales Fleisch.']] Sacrebleu: {'score': 7.306186623318163, 'counts': [6, 2, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [27.272727272727273, 9.523809523809524, 5.0, 2.6315789473684212], 'bp': 0.9555630362682843, 'sys_len': 22, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.2727272727272727, 0.09523809523809523, 0.05, 0.0], 'brevity_penalty': 0.9555630362682843, 'length_ratio': 0.9565217391304348, 'translation_length': 22, 'reference_length': 23} Rouge: {'rouge1': 0.23255813953488372, 'rouge2': 0.14634146341463414, 'rougeL': 0.18604651162790697, 'rougeLsum': 0.23255813953488372} Sari: {'sari': 38.84678153344004} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['sind im Vergleich zu den konventionell angebauten Sorten oft die klimafreundlicheren Varianten. Klima-Tipp 8: Bio ist gut fürs KlimaBio-Obst und Bio-Gemüse'] Prediction: ['Klima-Tipp 8: Bio ist gut fürs KlimaBio-Obst und Bio-Gemüse ist gut fürs KlimaBio-Obst und Bio-Gemüse ist gut fürs KlimaBio-Obst und Bio-Gemüse ist gut fürs Klima'] Label: [['Bio-Obst und Bio-Gemüse sind gesünder und besser fürs Klima als ‚normales’Obst und Gemüse.']] Sacrebleu: {'score': 4.521782889827669, 'counts': [6, 2, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [23.076923076923077, 8.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.08, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.4745762711864407, 'rouge2': 0.2807017543859649, 'rougeL': 0.4406779661016949, 'rougeLsum': 0.4406779661016949} Sari: {'sari': 40.325091575091584} Flesh Reading Ease: 49.7 ---------------------------------------- Source: ['Und übrigens: So leisten Sie auch einen Beitrag zur Erhaltung von Streuobstwiesen und schönen Kulturlandschaften in Ihrer Nähe!'] Prediction: ['Eine Frau aus der Schweiz leistet auf einen Beitrag zur Erhaltung von Streuobstwiesen und schönen Kulturlandschaften in Ihrer Nähe.\nSie hatte sich in der Nacht auf Sonntag zu Streuobstwiesen und schönen Kulturlandschaften in Ihrer Nähe gebracht.'] Label: [['Das ist gut für die Natur.\nSie helfen dabei, Äcker und Wiesen zu erhalten.']] Sacrebleu: {'score': 2.4371431437250504, 'counts': [5, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.235294117647059, 'translation_length': 38, 'reference_length': 17} Rouge: {'rouge1': 0.10909090909090907, 'rouge2': 0.0, 'rougeL': 0.07272727272727272, 'rougeLsum': 0.07272727272727272} Sari: {'sari': 36.71091041780697} Flesh Reading Ease: 56.7 ---------------------------------------- Source: ['einkaufenRegionale Lebensmittel fördern kurze Wege und stärken die Wirtschaft vor Ort.'] Prediction: ['Die Schweiz hat einen grossen Ausbruch der Lebensmittel.\nDie Schweiz fällt mit einem grossen Ausbruch der Lebensmittel vor Ort.'] Label: [['Sie unterstützen Bauern und Betriebe aus der direkten Umgebung.\nWenn Sie regionale Produkte kaufen, helfen Sie also dem Klima.\nWas man von nah holt, ist frisch und klimafreundlich.']] Sacrebleu: {'score': 1.3497340240288704, 'counts': [3, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [14.285714285714286, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 0.5647181220077593, 'sys_len': 21, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5647181220077593, 'length_ratio': 0.6363636363636364, 'translation_length': 21, 'reference_length': 33} Rouge: {'rouge1': 0.04081632653061224, 'rouge2': 0.0, 'rougeL': 0.04081632653061224, 'rougeLsum': 0.04081632653061224} Sari: {'sari': 43.34733893557423} Flesh Reading Ease: 76.9 ---------------------------------------- Source: ['Und wenn Sie dann noch auf Ökostrom umsteigen, freut sich das Klima richtig.'] Prediction: ['Die Schweizerin ist auf Ökostrom auf Ökostrom geschlossen.\nSie wurde dann noch auf Ökostrom umsteigen.\nUnd wenn sie dann noch auf Ökostrom umsteigen, freut sich das Klima richtig.'] Label: [['Wechseln Sie zu einem Stromanbieter mit Ökostrom.']] Sacrebleu: {'score': 1.526608193588886, 'counts': [3, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [9.375, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.09375, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 32, 'reference_length': 8} Rouge: {'rouge1': 0.1142857142857143, 'rouge2': 0.0, 'rougeL': 0.1142857142857143, 'rougeLsum': 0.1142857142857143} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 71.25 ---------------------------------------- Source: ['Klima-Tipp 6: Klimafreundliche Küchengeräte nutzenKühl- und Gefriergeräte, Geschirrspüler und Elektroherde und -backöfen tragen das EU-Label – hier ist die niedrigste Energieverbrauchsklasse einfach zu erkennen.'] Prediction: ['Klima-Tipp 6: Klimafreundliche Küchengeräte nutzen das EU-Label.\nDie niedrigste Energieverbrauchsklasse ist einfach zu erkennen.'] Label: [['Bald haben die richtig guten nur noch ein A.\nDie niedrigste Verbrauchsklasse hat im Moment noch einen grünen Pfeil mit dem Buchstaben A+++.\nGeräte mit wenig Verbrauch erkennen Sie an einem Aufkleber:']] Sacrebleu: {'score': 2.9434681718372535, 'counts': [6, 2, 1, 0], 'totals': [17, 16, 15, 14], 'precisions': [35.294117647058826, 12.5, 6.666666666666667, 3.5714285714285716], 'bp': 0.2907492353099861, 'sys_len': 17, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.35294117647058826, 0.125, 0.06666666666666667, 0.0], 'brevity_penalty': 0.2907492353099861, 'length_ratio': 0.4473684210526316, 'translation_length': 17, 'reference_length': 38} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.04, 'rougeL': 0.11538461538461539, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 39.79202595056253} Flesh Reading Ease: 20.9 ---------------------------------------- Source: ['Kaufen Sie Mehrwegprodukte und überlegen Sie bei Großpackungen zunächst, ob Sie so viel auch sinnvoll verbrauchen können oder teilen Sie rechtzeitig mit Nachbarn oder Freunden.'] Prediction: ['Mehrwegprodukte überlegen sich bei Großpackungen zunächst, ob Sie so viel auch sinnvoll verbrauchen können oder teilen Sie rechtzeitig mit Nachbarn oder Freunden.\nDas ist ein neuer Problem, das sich nicht bekannt sei.'] Label: [['Wenn Sie bestimmte Lebensmittel viel essen, ist es besser eine große Verpackung zu kaufen statt viele kleine.\nWählen Sie Mehrweg-Verpackungen.\nWenn sie Lebensmittel übrig haben, können Sie sie einfrieren oder verschenken.']] Sacrebleu: {'score': 1.8233252908535813, 'counts': [10, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [27.77777777777778, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 36, 'reference_length': 36} Rouge: {'rouge1': 0.22857142857142856, 'rouge2': 0.029411764705882353, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.20000000000000004} Sari: {'sari': 31.52905807822161} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['Das geht bei vielen Produkten, bei manchen ist die Verpackung aber aus hygienischen Gründen nötig.'] Prediction: ['Eine hygienische Verpackung ist aus hygienischen Gründen nötig.\nDas geht bei vielen Produkten, bei manchen ist die Verpackung aber nötig.'] Label: [['Sie sind wegen der Hygiene in Plastik oder Folie verpackt.\nBei manchen Lebensmitteln, wie Fleisch oder Aufschnitt, ist das sinnvoll:']] Sacrebleu: {'score': 2.229655076776188, 'counts': [4, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [17.391304347826086, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 0.9574533680683809, 'sys_len': 23, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.17391304347826086, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9574533680683809, 'length_ratio': 0.9583333333333334, 'translation_length': 23, 'reference_length': 24} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.04878048780487805, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.13953488372093023} Sari: {'sari': 38.63856589147287} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Lassen Sie Produkte mit zu viel Verpackung links liegen, denn auch dieser Müll verschlechtert die CO2-Bilanz.'] Prediction: ['Lassen Sie Produkte mit zu viel Verpackung links liegen, denn auch dieser Müll verschlechtert die CO2-Bilanz.\nDie Produkte verschlechtert die Bilanz.'] Label: [['Verpackungsmüll verursacht Treibhausgase und ist schlecht für unser Klima.\nDoch viele Produkte haben unnötige Verpackungen, zum Beispiel manches Gemüse und Obst.']] Sacrebleu: {'score': 2.042946039568498, 'counts': [4, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0833333333333333, 'translation_length': 26, 'reference_length': 24} Rouge: {'rouge1': 0.08333333333333333, 'rouge2': 0.0, 'rougeL': 0.08333333333333333, 'rougeLsum': 0.08333333333333333} Sari: {'sari': 35.507246376811594} Flesh Reading Ease: 64.2 ---------------------------------------- Source: ['Lassen Sie das Auto so oft wie möglich stehen. Radfahrer'] Prediction: ['Eine Radfahrerin hat sich mit ihrem Auto in der Schweiz zu einem Auto geschickt.\nDie Frau war mit ihrem Auto so oft wie möglich stehen.\nDie Frau war mit ihrem Auto so oft wie möglich stehen.'] Label: [['Der vierte Klima-Tipp ist einfach: Lassen Sie das Auto stehen!']] Sacrebleu: {'score': 1.1216940038341034, 'counts': [2, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [5.128205128205129, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.05128205128205128, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.25, 'translation_length': 39, 'reference_length': 12} Rouge: {'rouge1': 0.12244897959183672, 'rouge2': 0.0, 'rougeL': 0.12244897959183672, 'rougeLsum': 0.12244897959183672} Sari: {'sari': 18.11868686868687} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Einkaufen zu Fuß, mit dem Fahrrad oder dem öffentlichen Nahverkehr ist klimafreundlicher und schont die natürlichen Lebensgrundlagen.'] Prediction: ['Einkaufen zu Fuß, mit dem Fahrrad oder dem öffentlichen Nahverkehr ist klimafreundlicher.\nDas ist klimafreundlicher und schont die natürlichen Lebensgrundlagen.'] Label: [['Öffentliche Verkehrsmittel kosten viel weniger Energie als Autos.\nNehmen Sie Bus und Bahn für die größeren Einkäufe.\nDas schont die Umwelt und ist prima für die Gesundheit.\nGehen Sie zu Fuß oder fahren Sie mit dem Rad.\nWer immer mit dem Auto einkaufen geht, verbraucht eine Menge Benzin.']] Sacrebleu: {'score': 1.9682086043425153, 'counts': [14, 4, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [60.869565217391305, 18.181818181818183, 2.380952380952381, 1.25], 'bp': 0.2598044394455424, 'sys_len': 23, 'ref_len': 54} Bleu: {'bleu': 0.0, 'precisions': [0.6086956521739131, 0.18181818181818182, 0.0, 0.0], 'brevity_penalty': 0.2598044394455425, 'length_ratio': 0.42592592592592593, 'translation_length': 23, 'reference_length': 54} Rouge: {'rouge1': 0.3287671232876712, 'rouge2': 0.08450704225352114, 'rougeL': 0.136986301369863, 'rougeLsum': 0.3013698630136986} Sari: {'sari': 43.245384175175445} Flesh Reading Ease: 41.3 ---------------------------------------- Source: ['Die meisten Produkte tragen aber ein Mindesthaltbarkeitsdatum und sind oft noch lange nach dessen Ablauf ohne Gefahr essbar. Besonders leicht verderbliche tierische Produkte tragen ein Verbrauchsdatum und müssen dann auch wirklich gegessen sein.'] Prediction: ['Die meisten tierische Produkte tragen ein Mindesthaltbarkeitsdatum.\nBesonders leicht verderbliche tierische Produkte tragen ein Verbrauchsdatum.'] Label: [['Was schnell verdirbt, sollten Sie zuerst essen.\nAchten Sie auf die Haltbarkeit von Lebensmitteln.\nIst das Essen noch frisch?']] Sacrebleu: {'score': 1.9108871956733893, 'counts': [2, 0, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [11.764705882352942, 3.125, 1.6666666666666667, 0.8928571428571429], 'bp': 0.7026185226629954, 'sys_len': 17, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7026185226629954, 'length_ratio': 0.7391304347826086, 'translation_length': 17, 'reference_length': 23} Rouge: {'rouge1': 0.058823529411764705, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.058823529411764705} Sari: {'sari': 35.14309764309764} Flesh Reading Ease: 14.55 ---------------------------------------- Source: ['Machen Sie sich einen Einkaufszettel und planen Sie, was Sie sinnvoll verarbeiten bzw. zubereiten können!'] Prediction: ['Immer mehr Einkaufszettel wird sie sinnvoll verarbeiten bzw.\nzubereiten können.\nAber auch das ist nicht das erste Mal, dass sie sinnvoll verarbeiten können.\nAber auch das ist nicht das erste Mal, dann wird es zum ersten Mal geben.'] Label: [['Dabei hilft ein guter Einkaufszettel.\nPlanen Sie, wie viel Essen Sie einkaufen.']] Sacrebleu: {'score': 1.176877973200725, 'counts': [4, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [9.090909090909092, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.933333333333333, 'translation_length': 44, 'reference_length': 15} Rouge: {'rouge1': 0.11538461538461538, 'rouge2': 0.0, 'rougeL': 0.11538461538461538, 'rougeLsum': 0.07692307692307691} Sari: {'sari': 33.80819060166886} Flesh Reading Ease: 73.7 ---------------------------------------- Source: ['Auch bei Wurst, Eiern und Käse darf es etwas weniger sein. Steaks und Gulasch gibt es nicht mehr häufiger als zwei- bis dreimal die Woche.'] Prediction: ['Steaks und Gulasch sind nicht mehr häufiger als zwei bis dreimal die Woche.\nDas ist derzeit nicht mehr häufiger als zwei bis dreimal die Woche.'] Label: [['Das gilt auch für Wurst, Eier, Milch und Käse.\nDarum ist der erste Klima-Tipp: Bringen Sie nicht mehr als zwei- oder dreimal pro Woche Fleisch auf den Tisch.']] Sacrebleu: {'score': 3.3234988111325245, 'counts': [10, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [37.03703703703704, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 0.800737402916808, 'sys_len': 27, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.37037037037037035, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 0.8007374029168082, 'length_ratio': 0.8181818181818182, 'translation_length': 27, 'reference_length': 33} Rouge: {'rouge1': 0.3103448275862069, 'rouge2': 0.07142857142857144, 'rougeL': 0.27586206896551724, 'rougeLsum': 0.3103448275862069} Sari: {'sari': 36.03504338798456} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['Mehr Gemüse, Getreide und Hülsenfrüchte schmecken nicht nur dem Klima, sondern nutzen auch der Gesundheit.'] Prediction: ['Der Klima hat einen Gesundheitszustand mit Gemüse, Getreide und Hülsenfrüchten geschlossen.\nDas Gesundheitszustand nutzen auch der Gesundheit.'] Label: [['Außerdem sind sie gut für die Gesundheit.\nGetreide und Hülsenfrüchte (wie Erbsen und Linsen) sind ein prima Ersatz für tierische Lebensmittel.\nDer Anbau von Gemüse und Obst braucht viel weniger Energie als Viehzucht.']] Sacrebleu: {'score': 2.532317887288605, 'counts': [7, 2, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [35.0, 10.526315789473685, 2.7777777777777777, 1.4705882352941178], 'bp': 0.40656965974059917, 'sys_len': 20, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.35, 0.10526315789473684, 0.0, 0.0], 'brevity_penalty': 0.40656965974059905, 'length_ratio': 0.5263157894736842, 'translation_length': 20, 'reference_length': 38} Rouge: {'rouge1': 0.27118644067796605, 'rouge2': 0.14035087719298245, 'rougeL': 0.1694915254237288, 'rougeLsum': 0.27118644067796605} Sari: {'sari': 39.91644385026738} Flesh Reading Ease: 42.8 ---------------------------------------- Source: ['Das Schöne daran: Ganz nebenbei tun Sie auch Ihrer Gesundheit und Ihrem Geldbeutel etwas Gutes.'] Prediction: ['Die Schweizerin hat ihre Gesundheit und ihrem Geldbeutel geschützt.\nDas Geldbeutel ist ein Paar, das sie sich mit dem Geld geht.\nDas Geldbeutel ist ein Paar, der sich mit dem Geld geht.'] Label: [['Einfach, praktisch und gut für die Gesundheit!']] Sacrebleu: {'score': 1.3113617852675474, 'counts': [3, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [8.108108108108109, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.08108108108108109, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.111111111111111, 'translation_length': 37, 'reference_length': 9} Rouge: {'rouge1': 0.14634146341463414, 'rouge2': 0.0, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.0975609756097561} Sari: {'sari': 38.552188552188554} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['Wir geben Ihnen acht konkrete Tipps, wie Sie durch kleine Veränderungen einfach und wirksam helfen können, das Klima zu schonen. Mit vielen kleinen Schritten – vom Einkauf über die Zubereitung und Lagerung bis zur Verwertung der Lebensmittel – können wir gemeinsam viel für den Klimaschutz tun.'] Prediction: ['Ihnen geben acht konkrete Tipps, wie Sie durch kleine Veränderungen einfach und wirksam helfen können, das Klima zu schonen.\nMit vielen kleinen Schritten können wir gemeinsam viel für den Klimaschutz tun.'] Label: [['In diesem Artikel finden Sie Tipps für klimafreundliches Einkaufen, Kochen und Essen.']] Sacrebleu: {'score': 1.6526850525490153, 'counts': [6, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.17142857142857143, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 35, 'reference_length': 14} Rouge: {'rouge1': 0.20833333333333331, 'rouge2': 0.04347826086956522, 'rougeL': 0.12500000000000003, 'rougeLsum': 0.16666666666666666} Sari: {'sari': 34.99034749034749} Flesh Reading Ease: 65.05 ---------------------------------------- Source: ['Wir Verbraucher können durch unser Konsumverhalten an vielen Stellen dazu beitragen, das Klima zu schützen.'] Prediction: ['Wir verbrauchen, das Klima zu schützen.\nDas Klima kann durch unser Konsumverhalten an vielen Stellen dazu beitragen, das Klima zu schützen.'] Label: [['Das ist gut möglich.\nMöchten Sie klimabewusster leben?\nWeltweit verändert sich das Klima, das merken wir auch in Deutschland.']] Sacrebleu: {'score': 4.899864500847875, 'counts': [7, 2, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [28.0, 8.333333333333334, 2.1739130434782608, 1.1363636363636365], 'bp': 1.0, 'sys_len': 25, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.28, 0.08333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0869565217391304, 'translation_length': 25, 'reference_length': 23} Rouge: {'rouge1': 0.22222222222222224, 'rouge2': 0.046511627906976744, 'rougeL': 0.17777777777777776, 'rougeLsum': 0.17777777777777776} Sari: {'sari': 39.72222222222222} Flesh Reading Ease: 64.2 ---------------------------------------- Source: ['Allergien vorbeugen?'] Prediction: ['Die Allergien vorbeugen sind allerdings nicht mehr.\nSie sind nur noch nie, sondern auch nach der Allergie.\nSie sind nicht mehr, sondern auch nach der Allergie.'] Label: [['Wie kann man Allergien vorbeugen?']] Sacrebleu: {'score': 2.398696258505924, 'counts': [2, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [6.451612903225806, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.06451612903225806, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.166666666666667, 'translation_length': 31, 'reference_length': 6} Rouge: {'rouge1': 0.12903225806451613, 'rouge2': 0.06896551724137932, 'rougeL': 0.12903225806451613, 'rougeLsum': 0.12903225806451613} Sari: {'sari': 28.888888888888893} Flesh Reading Ease: 83.55 ---------------------------------------- Source: ['Hier geht’s zum Risiko-Check für werdende Eltern.'] Prediction: ['Der Schweizer Risiko-Check ist für werdende Eltern geschlossen.\nDas ist der erste Mal, dass es sich um den Risiko-Check handelt.'] Label: [['Hier geht’s zum Check für werdende Eltern']] Sacrebleu: {'score': 6.12957497932821, 'counts': [3, 2, 1, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 9.090909090909092, 4.761904761904762, 2.5], 'bp': 1.0, 'sys_len': 23, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.09090909090909091, 0.047619047619047616, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2857142857142856, 'translation_length': 23, 'reference_length': 7} Rouge: {'rouge1': 0.3125, 'rouge2': 0.19999999999999998, 'rougeL': 0.3125, 'rougeLsum': 0.3125} Sari: {'sari': 43.98989898989898} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Die LMIDV regelt außerdem, welche Sanktionen die amtliche Überwachung verhängen darf, wenn gegen diese Informationspflichten verstoßen wird. Das hat Deutschland mit der Lebensmittelinformations-Durchführungs-Verordnung (LMIDV) getan.'] Prediction: ['Deutschland hat mit der Lebensmittelinformations-Durchführungs-Verordnung (LMIDV) eine neue Überwachung verhängt.\nDie Länderin regelt sich dafür, wenn sie die amtliche Überwachung verhängen darf.\nDie LMIDV hat Deutschland mit der Lebensmittelinformations-Durchführungs-Verordnung (LMIDV) getan.'] Label: [['Hier steht auch, welche Strafe ein Hersteller bekommt, der nicht über Allergene informiert.\nIn Deutschland stehen die Regeln dafür in einer Verordnung.']] Sacrebleu: {'score': 1.5342333164810604, 'counts': [7, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [17.94871794871795, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.1794871794871795, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 39, 'reference_length': 26} Rouge: {'rouge1': 0.1875, 'rouge2': 0.03225806451612903, 'rougeL': 0.15625, 'rougeLsum': 0.1875} Sari: {'sari': 34.93055555555556} Flesh Reading Ease: 17.6 ---------------------------------------- Source: ['Die Art und Weise der Allergeninformationen bei loser Ware dürfen die Nationalstaaten individuell regeln.'] Prediction: ['Die Art und Weise der Allergeninformationen bei loser Ware dürfen die Nationalstaaten individuell regeln.\nDie Art und Weise der Allergeninformationen bei loser Ware dürfen die Nationalstaaten individuell regeln.'] Label: [['Bei unverpackten Lebensmitteln darf jedes Land selbst entscheiden, wie Allergen-Informationen gezeigt werden.']] Sacrebleu: {'score': 1.2414943415352928, 'counts': [1, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [3.3333333333333335, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.03333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 30, 'reference_length': 14} Rouge: {'rouge1': 0.046511627906976744, 'rouge2': 0.0, 'rougeL': 0.046511627906976744, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 35.41666666666667} Flesh Reading Ease: 13.9 ---------------------------------------- Source: ['Wie Allergene auf dem Etikett verpackter Lebensmittel angegeben werden müssen, regelt die LMIV EU-weit einheitlich.'] Prediction: ['Der Etikett von der LMIV wurde verpackt.\nAllergene wurde auf dem Etikett verpackter Lebensmittel angegeben.\nDie EU-weit regelt einheitlich.'] Label: [['Das gilt für die ganze EU.\nBei verpackten Lebensmitteln müssen die Allergen-Informationen auf dem Etikett stehen.']] Sacrebleu: {'score': 7.305267243289862, 'counts': [5, 2, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [22.727272727272727, 9.523809523809524, 5.0, 2.6315789473684212], 'bp': 1.0, 'sys_len': 22, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.22727272727272727, 0.09523809523809523, 0.05, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2222222222222223, 'translation_length': 22, 'reference_length': 18} Rouge: {'rouge1': 0.25641025641025644, 'rouge2': 0.10810810810810811, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.25641025641025644} Sari: {'sari': 43.13596491228069} Flesh Reading Ease: 50.85 ---------------------------------------- Source: ['Eine Allergenkennzeichnung von verpackten und unverpackten Lebensmitteln ist in allen EU-Mitgliedsländern verpflichtend, das schreibt die EU-Lebensmittel-Informationsverordnung (LMIV) vor.'] Prediction: ['In allen EU-Mitgliedsländern ist eine Allergenkennzeichnung von verpackten und unverpackten Lebensmitteln verpflichtend.\nDie Allergenkennzeichnung von verpackten und unverpackten Lebensmitteln ist in allen EU-Mitgliedsländern verpflichtend, das schreibt die EU-Lebensmittel-Informationsverordnung (LMIV) vor.'] Label: [['Das ist in einer Verordnung festgelegt, der sogenannten europäischen Lebensmittel-Informations-Verordnung (LMIV).\nIn der ganzen Europäischen Union (EU) müssen die Hersteller von Lebensmitteln melden, ob ihre Produkte Allergene enthalten.']] Sacrebleu: {'score': 5.978703176319623, 'counts': [12, 3, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [34.285714285714285, 8.823529411764707, 3.0303030303030303, 1.5625], 'bp': 0.9718328750329812, 'sys_len': 35, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.34285714285714286, 0.08823529411764706, 0.030303030303030304, 0.0], 'brevity_penalty': 0.971832875032981, 'length_ratio': 0.9722222222222222, 'translation_length': 35, 'reference_length': 36} Rouge: {'rouge1': 0.28985507246376807, 'rouge2': 0.02985074626865672, 'rougeL': 0.14492753623188404, 'rougeLsum': 0.2608695652173913} Sari: {'sari': 41.76587301587302} Flesh Reading Ease: 1.2 ---------------------------------------- Source: ['Eine mündliche Information ist ebenfalls möglich, allerdings nur unter folgenden Voraussetzungen:'] Prediction: ['Eine mündliche Information ist ebenfalls möglich, allerdings nur unter folgenden Voraussetzungen.\nDie mündliche Information ist ebenfalls möglich, allerdings nur unter folgenden Voraussetzungen.'] Label: [['die Mitarbeiter gut über Allergene informiert sind.\nDas ist aber nur erlaubt, wenn Manchmal werden Kunden auch mündlich über Allergene informiert.']] Sacrebleu: {'score': 2.1601524349994397, 'counts': [5, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0833333333333333, 'translation_length': 26, 'reference_length': 24} Rouge: {'rouge1': 0.16666666666666669, 'rouge2': 0.0, 'rougeL': 0.12499999999999997, 'rougeLsum': 0.12499999999999997} Sari: {'sari': 38.42105263157895} Flesh Reading Ease: 16.9 ---------------------------------------- Source: ['Die Allergeninformation kann an verschiedenen Stellen gegeben werden:'] Prediction: ['Die Allergeninformation von Stellen kann an verschiedenen Stellen gegeben werden.\nDie Allergeninformation kann an verschiedenen Stellen gegeben werden: Die Stellen kann an verschiedenen Stellen gegeben werden.'] Label: [['Informationen über Allergene findet man zum Beispiel:']] Sacrebleu: {'score': 1.286713095960916, 'counts': [1, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [3.4482758620689653, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.034482758620689655, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.625, 'translation_length': 29, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 35.0} Flesh Reading Ease: 20.75 ---------------------------------------- Source: ['Bei unverpackten Lebensmitteln in Restaurants, Bäckereien, Metzgereien, in der Gemeinschaftsverpflegung oder auf dem Wochenmarkt müssen schriftliche Informationen über Allergene vor Kaufabschluss in deutscher Sprache zugänglich sein.'] Prediction: ['Bei unverpackten Lebensmitteln in Restaurants, Bäckereien, Metzgereien, in der Gemeinschaftsverpflegung oder auf dem Wochenmarkt müssen schriftliche Informationen über Allergene vor Kaufabschluss in deutscher Sprache zugänglich sein.\nDer Kaufabschluss in deutscher Sprache ist in deutscher Sprache zugänglich.'] Label: [['Auch bei unverpackten Lebensmitteln muss sofort klar sein, ob sie Allergene enthalten.\nZum Beispiel im Restaurant, beim Bäcker oder Metzger, in der Betriebskantine oder im Krankenhaus.\nUnverpackte Lebensmittel findet man an vielen Stellen.']] Sacrebleu: {'score': 5.216691004954023, 'counts': [12, 3, 1, 0], 'totals': [41, 40, 39, 38], 'precisions': [29.26829268292683, 7.5, 2.5641025641025643, 1.3157894736842106], 'bp': 1.0, 'sys_len': 41, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.2926829268292683, 0.075, 0.02564102564102564, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0512820512820513, 'translation_length': 41, 'reference_length': 39} Rouge: {'rouge1': 0.24324324324324323, 'rouge2': 0.08333333333333334, 'rougeL': 0.18918918918918917, 'rougeLsum': 0.2162162162162162} Sari: {'sari': 40.867162187916904} Flesh Reading Ease: 27.45 ---------------------------------------- Source: ['Sie sind von der Kennzeichnungspflicht befreit. Einige Zutaten werden durch industrielle Verarbeitungsprozesse jedoch so stark verändert oder aufgereinigt, dass sie ihr allergenes Potential verlieren.'] Prediction: ['Einige Zutaten werden durch industrielle Verarbeitungsprozesse jedoch so stark verändert oder aufgereinigt, dass sie ihr allergenes Potential verlieren.\nDie Zutaten sind von der Kennzeichnungspflicht befreit.'] Label: [['Wenn ein Lebensmittel keine Allergie auslösen kann, müssen die Allergene in den Zutaten auch nicht auf der Verpackung stehen.\nZum Beispiel, wenn sie stark gereinigt wurden.\nManche Zutaten enthalten zwar Allergene, doch die sind durch die Verarbeitung ungefährlich geworden.']] Sacrebleu: {'score': 1.2939497943016989, 'counts': [10, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [35.714285714285715, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 0.5449055200013082, 'sys_len': 28, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.35714285714285715, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5449055200013082, 'length_ratio': 0.6222222222222222, 'translation_length': 28, 'reference_length': 45} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.20588235294117643} Sari: {'sari': 29.615116684082203} Flesh Reading Ease: 27.1 ---------------------------------------- Source: ['Bei Lebensmitteln ohne Zutatenliste, wie zum Beispiel Wein muss ein zusätzlicher Hinweis gegeben werden, etwa "enthält Schwefel".'] Prediction: ['Zum Beispiel Wein muss ein zusätzlicher Hinweis gegeben werden.\nDer Hinweis muss "enthält Schwefel" gegeben werden.'] Label: [[': Auf dem Etikett steht ‚enthält Schwefel’.\nZum Beispiel bei einer Flasche Wein Dann werden die Allergene einzeln auf dem Etikett genannt.\nManche verpackten Lebensmittel haben keine Zutatenliste.']] Sacrebleu: {'score': 2.9075493517314692, 'counts': [6, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [30.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 0.5769498103804866, 'sys_len': 20, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 0.5769498103804866, 'length_ratio': 0.6451612903225806, 'translation_length': 20, 'reference_length': 31} Rouge: {'rouge1': 0.30434782608695654, 'rouge2': 0.13636363636363638, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.30434782608695654} Sari: {'sari': 36.50793650793651} Flesh Reading Ease: 60.85 ---------------------------------------- Source: ['Im Zutatenverzeichnis müssen die "Allergenen Vierzehn" unter konkreter Benennung des jeweiligen Lebensmittels optisch hervorgehoben werden, beispielsweise durch Fettdruck oder Unterstreichung.'] Prediction: ['Im Zutatenverzeichnis müssen die "Allergenen Vierzehn" optisch hervorgehoben werden.\nDie "Allergenen Vierzehn" müssen unter konkreter Benennung des jeweiligen Lebensmittels optisch hervorgehoben werden, beispielsweise durch Fettdruck oder Unterstreichung.'] Label: [['Die Allergene müssen deutlich sichtbar sein, darum werden sie oft groß geschrieben, fett gedruckt oder unterstrichen.\nMeistens stehen die Allergene in der Liste mit Zutaten.']] Sacrebleu: {'score': 1.8306333543076283, 'counts': [8, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1724137931034482, 'translation_length': 34, 'reference_length': 29} Rouge: {'rouge1': 0.21818181818181817, 'rouge2': 0.03773584905660378, 'rougeL': 0.18181818181818185, 'rougeLsum': 0.21818181818181817} Sari: {'sari': 36.7816091954023} Flesh Reading Ease: 8.55 ---------------------------------------- Source: ['Die vierzehn Lebensmittel – die sogenannten „Allergenen Vierzehn“ –, die in Europa etwa 90 Prozent aller Lebensmittelallergien und -unverträglichkeiten auslösen, müssen für Verbraucher*innen immer erkennbar sein.'] Prediction: ['In Europa müssen für Verbraucher*innen immer erkennbar sein.\nDie vierzehn Lebensmittel, die sogenannten "Allergenen Vierzehn“, die in Europa etwa 90 Prozent aller Lebensmittelallergien und -unverträglichkeiten auslösen, müssen für Verbraucher*innen immer erkennbar sein.'] Label: [['Wenn ein Lebensmittel eins dieser Allergene enthält, muss der Hersteller das deutlich auf der Verpackung zeigen.\nDie meisten Lebensmittel-Allergien werden durch 14 Allergene ausgelöst.']] Sacrebleu: {'score': 2.1962438984958195, 'counts': [5, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [11.904761904761905, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.11904761904761904, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5555555555555556, 'translation_length': 42, 'reference_length': 27} Rouge: {'rouge1': 0.05970149253731344, 'rouge2': 0.0, 'rougeL': 0.05970149253731344, 'rougeLsum': 0.05970149253731344} Sari: {'sari': 35.53499062481098} Flesh Reading Ease: 11.9 ---------------------------------------- Source: ['Vom Koffeingehalt abgesehen bewerten Ernährungsexperten Energy-Drinks generell skeptisch - wegen ihres hohen Zuckergehaltes, teilweise aber auch\xa0wegen ihres Gehaltes an\xa0anderen typischen Zutaten wie Taurin, Glucuronolacton und Inosit, deren Wechselwirkungen untereinander und in Verbindung mit Alkohol noch nicht ganz klar sind.'] Prediction: ['Einige Ernährungsexperten Energy-Drinks sind skeptisch.\nDas ist ein hohes Zuckergehalt, teilweise aber auch auch wegen ihres Gehaltes an\xa0anderen typischen Zutaten wie Taurin, Glucuronolacton und Inosit.'] Label: [['Zu viel Koffein ist nicht gut für den Körper.\nIn den meisten Energy-Drinks steckt viel Zucker, das ist schlecht für die Zähne und kann dick machen.']] Sacrebleu: {'score': 1.943043650185126, 'counts': [6, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [20.0, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0344827586206897, 'translation_length': 30, 'reference_length': 29} Rouge: {'rouge1': 0.1694915254237288, 'rouge2': 0.07017543859649124, 'rougeL': 0.1694915254237288, 'rougeLsum': 0.1694915254237288} Sari: {'sari': 35.91183574879227} Flesh Reading Ease: 32.45 ---------------------------------------- Source: ['Denn für Kinder bewerten die Risikobewerter eine Einzeldosis von höchstens 3 mg Koffein pro kg Körpergewicht als sicher, was also einem Höchstwert von circa 90 mg Koffein entspräche. Für einen 10jährigen aber, der rund 30 Kilo wiegt, wäre selbst eine 250-ml-Dose pro Tag nach dem EFSA-Gutachten schon kritisch.'] Prediction: ['Ein Höchstwert von circa 90 mg Koffein entspräche für einen 10jährigen, der rund 30 Kilo wiegt, wäre selbst eine 250-ml-Dose pro Tag nach dem EFSA-Gutachten schon kritisch.\nDer 10jährige wäre selbst eine 250-ml-Dose pro Tag nach dem EFSA-Gutachten schon kritisch.'] Label: [['So kann viel Koffein für Kinder noch schlimmere Folgen haben als für Erwachsene.\nSie sind kleiner und wiegen weniger als Erwachsene – dadurch wirkt das Koffein schneller und stärker.\nKinder reagieren noch empfindlicher auf Koffein.']] Sacrebleu: {'score': 1.0755798168739934, 'counts': [4, 0, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [8.333333333333334, 1.0638297872340425, 0.5434782608695652, 0.2777777777777778], 'bp': 1.0, 'sys_len': 48, 'ref_len': 38} Bleu: {'bleu': 0.0, 'precisions': [0.08333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.263157894736842, 'translation_length': 48, 'reference_length': 38} Rouge: {'rouge1': 0.06666666666666668, 'rouge2': 0.02272727272727273, 'rougeL': 0.06666666666666668, 'rougeLsum': 0.06666666666666668} Sari: {'sari': 32.814407814407815} Flesh Reading Ease: 54.7 ---------------------------------------- Source: ['Koffein steigert die Herzfrequenz und stimuliert das zentrale Nervensystem, was die Konzentrationsfähigkeit und Wachsamkeit erhöht.'] Prediction: ['Koffein stimuliert die Herzfrequenz und stimuliert das zentrale Nervensystem.\nDas zentrale Nervensystem ist die Konzentrationsfähigkeit und Wachsamkeit der Wachsamkeit.'] Label: [['Koffein ist ein Stoff, der das Herz schneller schlagen lässt und die Nerven anregt.']] Sacrebleu: {'score': 2.954001199967652, 'counts': [7, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [33.333333333333336, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.34285714285714286, 'rouge2': 0.0, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.2285714285714286} Sari: {'sari': 38.2471870604782} Flesh Reading Ease: 24.25 ---------------------------------------- Source: ['Galt die 250-ml-Dose noch vor wenigen Jahren praktisch als Standard, kommen die koffeinreichen Getränke heute auch in 500-ml-Dosen oder in Flaschengrößen von einem oder eineinhalb Litern in den Handel.'] Prediction: ['Die Getränke in der Schweiz sind heute praktisch als Standard.\nDas ist die erste Woche in der Schweiz.\nDie 250-ml-Dose sind noch vor wenigen Jahren praktisch als Standard.'] Label: [['Denn viele Drinks werden in großen Dosen verkauft, manche sogar in Literflaschen.']] Sacrebleu: {'score': 1.4780822562194806, 'counts': [3, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [9.090909090909092, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.357142857142857, 'translation_length': 33, 'reference_length': 14} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.045454545454545456} Sari: {'sari': 34.23973362930078} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['Außerdem enthalten die vermeintlichen Muntermacher in der Regel noch die Stoffe Taurin, Inosit und Glucuronolacton.'] Prediction: ['Muntermacher in der Regel wurden in der Nacht auf Sonntag Taurin, Inosit und Glucuronolacton geschlossen.\nDie Stoffe enthalten Taurin, Inosit und Glucuronolacton.'] Label: [['Energy-Drinks enthalten meistens noch andere Stoffe, die den Körper munter machen – so behaupten die Hersteller.']] Sacrebleu: {'score': 2.042946039568498, 'counts': [4, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.0, 'rougeL': 0.05128205128205128, 'rougeLsum': 0.05128205128205128} Sari: {'sari': 33.33333333333333} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Das EU-Parlament hat aus diesem Grund verhindert, dass Energydrinks mit positiven gesundheitlichen Wirkungen werben dürfen.'] Prediction: ['Das EU-Parlament hat aus diesem Grund verhindert, dass Energydrinks mit positiven gesundheitlichen Wirkungen werben dürfen.\nDie EU-Parlament hat aus diesem Grund verhindert, dass Energydrinks mit positiven gesundheitlichen Wirkungen werben dürfen.'] Label: [['Hersteller dürfen mit dem Koffein in ihren Energy-Drinks keine Werbung machen.\nDarum hat das EU-Parlament entschieden:']] Sacrebleu: {'score': 1.6276888006478718, 'counts': [5, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [14.705882352941176, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.14705882352941177, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8888888888888888, 'translation_length': 34, 'reference_length': 18} Rouge: {'rouge1': 0.2641509433962264, 'rouge2': 0.11764705882352942, 'rougeL': 0.1509433962264151, 'rougeLsum': 0.18867924528301885} Sari: {'sari': 38.6615515771526} Flesh Reading Ease: 30.45 ---------------------------------------- Source: ['Denn Wachheit ist nicht unbedingt eine positive gesundheitliche Wirkung. In höheren Dosen können allerdings Symptome wie Schlafstörungen oder allgemeine Verhaltensänderungen auftreten.'] Prediction: ['Wachheit ist nicht unbedingt eine positive gesundheitliche Wirkung.\nIn höheren Dosen können allerdings Symptome wie Schlafstörungen oder allgemeine Verhaltensänderungen auftreten.'] Label: [['Der Stoff kann auch dazu führen, dass Menschen sich anders verhalten.\nViele Menschen schlafen schlecht durch Koffein.\nAber wer viel Koffein trinkt, bekommt oft Beschwerden.']] Sacrebleu: {'score': 1.4278442804983642, 'counts': [2, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [9.090909090909092, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 0.6951439283988788, 'sys_len': 22, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6951439283988786, 'length_ratio': 0.7333333333333333, 'translation_length': 22, 'reference_length': 30} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.090909090909086} Flesh Reading Ease: 12.05 ---------------------------------------- Source: ['Und tatsächlich fördert Koffein - je nach Konzentration – die Wachheit und die Aufmerksamkeit.'] Prediction: ['Koffein fördert die Wachheit und die Aufmerksamkeit.\nDas fördert die Wachheit und die Aufmerksamkeit.'] Label: [['Es kann auch die Konzentration fördern.\nKoffein kann dafür sorgen, dass man länger wach bleibt.']] Sacrebleu: {'score': 3.0521968279991727, 'counts': [4, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [25.0, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 0.8824969025845955, 'sys_len': 16, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8824969025845955, 'length_ratio': 0.8888888888888888, 'translation_length': 16, 'reference_length': 18} Rouge: {'rouge1': 0.17647058823529413, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 35.97670250896057} Flesh Reading Ease: 61.85 ---------------------------------------- Source: ['Der Koffeingehalt dieser koffeinhaltigen Erfrischungsgetränke liegt mit 32 Milligramm pro 100 Milliliter mehr als doppelt so hoch wie bei handelsüblichen Cola-Getränken.'] Prediction: ['Der Koffeingehalt dieser koffeinhaltigen Erfrischungsgetränke liegt mit 32 Milligramm pro 100 Milliliter mehr als doppelt so hoch wie bei handelsüblichen Cola-Getränken.\nDie Erfrischungsgetränke liegt mit 32 Milligramm pro 100 Milliliter mehr als doppelt so hoch wie bei handelsüblichen Cola-Getränken.'] Label: [['In kleinen Dosen ist so viel Koffein wie in einer Tasse Kaffee, oder doppelt so viel wie in einer Cola.']] Sacrebleu: {'score': 2.3569062221449553, 'counts': [6, 1, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [14.634146341463415, 2.5, 1.2820512820512822, 0.6578947368421053], 'bp': 1.0, 'sys_len': 41, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.14634146341463414, 0.025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8636363636363635, 'translation_length': 41, 'reference_length': 22} Rouge: {'rouge1': 0.17910447761194026, 'rouge2': 0.03076923076923077, 'rougeL': 0.17910447761194026, 'rougeLsum': 0.11940298507462686} Sari: {'sari': 36.655011655011656} Flesh Reading Ease: 31.8 ---------------------------------------- Source: ['Kein Wunder, denn sie versprechen ihren Kund*innen den besonderen „Kick“:'] Prediction: ['Die 20-Minuten-App-Podcast "Kick" ist mit Host Andrea über die 20-Minuten-App (ganz unten in der Leiste), die ihre Leute auf Spotify sowie auf iTunes und Tune In finden.\nIm Direktstream findet das Leben der 20-Minuten-App (ganz unten in der Leiste), bei Spotify und Tune In (ganz unten in der Leiste), sowie auf Apple Podcasts und Tune In (ganz unten in der Leiste), bei Spotify und Tune In.'] Label: [['Weil die Hersteller in ihrer Werbung große Versprechen machen.\nWarum?']] Sacrebleu: {'score': 0.537966825073405, 'counts': [3, 0, 0, 0], 'totals': [88, 87, 86, 85], 'precisions': [3.409090909090909, 0.5747126436781609, 0.29069767441860467, 0.14705882352941177], 'bp': 1.0, 'sys_len': 88, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.03409090909090909, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.333333333333333, 'translation_length': 88, 'reference_length': 12} Rouge: {'rouge1': 0.047619047619047616, 'rouge2': 0.0, 'rougeL': 0.047619047619047616, 'rougeLsum': 0.047619047619047616} Sari: {'sari': 58.733974358974365} Flesh Reading Ease: 47.55 ---------------------------------------- Source: ['Kaum eine Trendsportart, die nicht Werbung macht für "Energy".'] Prediction: ['Eine Trendsportart, die nicht Werbung macht für "Energy".\nDas ist eine Trendsportart, die nicht Werbung macht für "Energy".'] Label: [['Und manche Energy-Drinks machen Werbung mit bekannten Sportlern.']] Sacrebleu: {'score': 1.7179060012299232, 'counts': [2, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [7.6923076923076925, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.888888888888889, 'translation_length': 26, 'reference_length': 9} Rouge: {'rouge1': 0.13793103448275865, 'rouge2': 0.0, 'rougeL': 0.13793103448275865, 'rougeLsum': 0.06896551724137932} Sari: {'sari': 35.8974358974359} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Zwar mögen auch manche Kinder die „süße Koffeinbrause“. Energydrinks sind vor allem unter Jugendlichen und jungen Erwachsenen beliebt.'] Prediction: ['Eine Koffeinbrause ist auf der Suche der Kinder.\nDas Energydrinks sind vor allem unter Jugendlichen und jungen Erwachsenen beliebt.'] Label: [['Die Getränke werden viel verkauft – auch an Kinder.']] Sacrebleu: {'score': 3.6321698830878617, 'counts': [2, 1, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [9.523809523809524, 5.0, 2.6315789473684212, 1.3888888888888888], 'bp': 1.0, 'sys_len': 21, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.05, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 21, 'reference_length': 10} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 33.496240601503764} Flesh Reading Ease: 53.5 ---------------------------------------- Source: ['Man ist angeblich länger wach, soll sich besser konzentrieren können und leistungsfähiger sein.'] Prediction: ['Man ist angeblich länger wach, soll sich besser konzentrieren können und leistungsfähiger sein.\nDas ist der erste Mal, dass man sich besser konzentrieren können und leistungsfähiger sein kann.'] Label: [['Mehr Leistung!\nBessere Konzentration!\nLänger wach bleiben!']] Sacrebleu: {'score': 1.1599713834969503, 'counts': [1, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [3.125, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.03125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2, 'translation_length': 32, 'reference_length': 10} Rouge: {'rouge1': 0.14634146341463414, 'rouge2': 0.10256410256410256, 'rougeL': 0.14634146341463414, 'rougeLsum': 0.14634146341463414} Sari: {'sari': 36.40522875816994} Flesh Reading Ease: 60.7 ---------------------------------------- Source: ['Kate Darling vom MIT Media Lab in Boston forscht dazu.'] Prediction: ['Die MIT-Macherin Kate Darling hat sich mit ihrem Partner auf ihre Geschichte geschickt.\nDie beiden waren in den letzten Tagen auf ihre Wohnungen geschickt.\nDie beiden waren in den letzten Tagen auf ihre Wohnungen geschickt.'] Label: [['Kate Darling vom MIT Media Lab in Boston forscht über Roboter und Ethik.']] Sacrebleu: {'score': 2.304907678117588, 'counts': [4, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7142857142857144, 'translation_length': 38, 'reference_length': 14} Rouge: {'rouge1': 0.163265306122449, 'rouge2': 0.0425531914893617, 'rougeL': 0.163265306122449, 'rougeLsum': 0.163265306122449} Sari: {'sari': 14.583333333333334} Flesh Reading Ease: 63.0 ---------------------------------------- Source: ['Darling sieht dies als Beweis, dass Menschen zu Robotern emotionale Beziehungen aufbauen können.'] Prediction: ['Die Menschen zu Robotern sind emotionale Beziehungen aufbauen können.\nDie Welt ist eine solche Woche-Debatte.\nDie Welt ist eine Woche-Debatte.'] Label: [['Sie hat mit Testpersonen herausgefunden, dass Menschen zu Robotern emotionale Beziehungen aufbauen können.']] Sacrebleu: {'score': 20.617350508583826, 'counts': [8, 6, 4, 2], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 27.272727272727273, 19.047619047619047, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 15} Bleu: {'bleu': 0.20617350508583818, 'precisions': [0.34782608695652173, 0.2727272727272727, 0.19047619047619047, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 1.5333333333333334, 'translation_length': 23, 'reference_length': 15} Rouge: {'rouge1': 0.4324324324324324, 'rouge2': 0.3428571428571428, 'rougeL': 0.4324324324324324, 'rougeLsum': 0.4324324324324324} Sari: {'sari': 43.29034391534392} Flesh Reading Ease: 50.45 ---------------------------------------- Source: ['Digitalisierung bedeutet unter anderem, dass Computer und Gegenstände miteinander kommunizieren.'] Prediction: ['Die Digitalisierung von Computer und Gegenständen bedeutet unter anderem, dass Computer und Gegenstände miteinander kommunizieren.\nDas zeigt, dass Computer und Gegenstände miteinander kommunizieren.'] Label: [['Ein wichtiges Thema der Digitalisierung ist, dass Computer und Gegenstände miteinander kommunizieren.']] Sacrebleu: {'score': 25.881733463141213, 'counts': [9, 7, 6, 5], 'totals': [27, 26, 25, 24], 'precisions': [33.333333333333336, 26.923076923076923, 24.0, 20.833333333333332], 'bp': 1.0, 'sys_len': 27, 'ref_len': 14} Bleu: {'bleu': 0.2588173346314121, 'precisions': [0.3333333333333333, 0.2692307692307692, 0.24, 0.20833333333333334], 'brevity_penalty': 1.0, 'length_ratio': 1.9285714285714286, 'translation_length': 27, 'reference_length': 14} Rouge: {'rouge1': 0.4102564102564103, 'rouge2': 0.32432432432432434, 'rougeL': 0.4102564102564103, 'rougeLsum': 0.4102564102564103} Sari: {'sari': 60.41585865115277} Flesh Reading Ease: 10.55 ---------------------------------------- Source: ['Computer untereinander sind vernetzt, aber auch Geräte wie Heizung, Kühlschrank oder Kaffeemaschine sind mit dem Smartphone über das Internet vernetzt.'] Prediction: ['Smartphones sind mit dem Smartphone vernetzt.\nDas Internet sind auch auch Geräte wie Heizung, Kühlschrank oder Kaffeemaschine.\nDas Internet sind auch mit der Heizung, Kühlschrank oder Kaffeemaschine vernetzt.'] Label: [['Geräte wie Kühlschrank oder Kaffeemaschine sind mit dem Smartphone über das Internet vernetzt.']] Sacrebleu: {'score': 12.656494026948833, 'counts': [12, 7, 3, 1], 'totals': [33, 32, 31, 30], 'precisions': [36.36363636363637, 21.875, 9.67741935483871, 3.3333333333333335], 'bp': 1.0, 'sys_len': 33, 'ref_len': 14} Bleu: {'bleu': 0.12656494026948834, 'precisions': [0.36363636363636365, 0.21875, 0.0967741935483871, 0.03333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 2.357142857142857, 'translation_length': 33, 'reference_length': 14} Rouge: {'rouge1': 0.608695652173913, 'rouge2': 0.4090909090909091, 'rougeL': 0.4347826086956521, 'rougeLsum': 0.5217391304347827} Sari: {'sari': 35.026920479048144} Flesh Reading Ease: 59.55 ---------------------------------------- Source: ['Das aber nur, wenn diese ähnlich wie Menschen handeln und reagieren.'] Prediction: ['Die Menschen sind ähnlich wie Menschen handeln und reagieren.\nDas ist nicht bekannt, wenn sie sich ähnlich wie Menschen handeln und reagieren.'] Label: [['Das tun sie aber nur, wenn Roboter ähnlich wie Menschen handeln und reagieren.']] Sacrebleu: {'score': 26.68730618874673, 'counts': [11, 7, 5, 4], 'totals': [25, 24, 23, 22], 'precisions': [44.0, 29.166666666666668, 21.73913043478261, 18.181818181818183], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.2668730618874673, 'precisions': [0.44, 0.2916666666666667, 0.21739130434782608, 0.18181818181818182], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.5142857142857142, 'rouge2': 0.30303030303030304, 'rougeL': 0.4571428571428572, 'rougeLsum': 0.4571428571428572} Sari: {'sari': 51.16372053872055} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['In der Industrie wie im Privatbereich werden Roboter als Assistenten arbeiten.'] Prediction: ['In der Schweiz werden Roboter als Assistenten arbeiten.\nIn der Industrie wie im Privatbereich werden Roboter als Assistenten arbeiten.'] Label: [['In der Industrie und im Privatbereich werden Roboter als Assistenten arbeiten.']] Sacrebleu: {'score': 39.41004770986059, 'counts': [11, 9, 7, 5], 'totals': [21, 20, 19, 18], 'precisions': [52.38095238095238, 45.0, 36.8421052631579, 27.77777777777778], 'bp': 1.0, 'sys_len': 21, 'ref_len': 12} Bleu: {'bleu': 0.394100477098606, 'precisions': [0.5238095238095238, 0.45, 0.3684210526315789, 0.2777777777777778], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 21, 'reference_length': 12} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.5714285714285714, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 61.61947387650712} Flesh Reading Ease: 47.65 ---------------------------------------- Source: ['Zahlreiche Studien über die Arbeitsplätze kommen zu dem Ergebnis, dass die Hälfte der Jobs wegfällt.'] Prediction: ['Zahlreiche Studien über die Arbeitsplätze kommen zu dem Ergebnis, dass die Hälfte der Jobs wegfällt.\nZahlreiche Studien über die Arbeitsplätze kommen zu dem Ergebnis, dass die Hälfte der Jobs wegfällt.'] Label: [['Zahlreiche Studien kommen zu dem Ergebnis, dass die Hälfte der Arbeitsplätze wegfällt.']] Sacrebleu: {'score': 26.959895175013187, 'counts': [14, 10, 7, 6], 'totals': [34, 33, 32, 31], 'precisions': [41.1764705882353, 30.303030303030305, 21.875, 19.35483870967742], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.2695989517501319, 'precisions': [0.4117647058823529, 0.30303030303030304, 0.21875, 0.1935483870967742], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.5882352941176471, 'rouge2': 0.44897959183673464, 'rougeL': 0.5882352941176471, 'rougeLsum': 0.5098039215686274} Sari: {'sari': 66.00707202402117} Flesh Reading Ease: 59.7 ---------------------------------------- Source: ['Aber es werden auch neue Tätigkeiten geschaffen.'] Prediction: ['Die Schweizer Welt hat neue Tätigkeiten geschaffen.\nAuch neue Tätigkeiten werden auch aufgezeichnet.'] Label: [['Aber es werden auch neue Jobs geschaffen.']] Sacrebleu: {'score': 7.8594386815106, 'counts': [5, 2, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [33.333333333333336, 14.285714285714286, 3.8461538461538463, 2.0833333333333335], 'bp': 1.0, 'sys_len': 15, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.14285714285714285, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.875, 'translation_length': 15, 'reference_length': 8} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.2, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.36363636363636365} Sari: {'sari': 15.576923076923077} Flesh Reading Ease: 56.5 ---------------------------------------- Source: ['Angriffe auf das Internet könnten ganze Bereiche lahmlegen und kaum bezifferbare Schäden verursachen.'] Prediction: ['Angriffe auf das Internet könnten ganze Bereiche lahmlegen und kaum bezifferbare Schäden verursachen.\nDie Schäden könnten ganze Bereiche lahmlegen und kaum bezifferbare Schäden verursachen.'] Label: [['Angriffe auf das Internet schädigen die Industrie massiv.']] Sacrebleu: {'score': 9.562406574442013, 'counts': [5, 3, 2, 1], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 12.0, 8.333333333333334, 4.3478260869565215], 'bp': 1.0, 'sys_len': 26, 'ref_len': 9} Bleu: {'bleu': 0.09562406574442013, 'precisions': [0.19230769230769232, 0.12, 0.08333333333333333, 0.043478260869565216], 'brevity_penalty': 1.0, 'length_ratio': 2.888888888888889, 'translation_length': 26, 'reference_length': 9} Rouge: {'rouge1': 0.31578947368421056, 'rouge2': 0.16666666666666666, 'rougeL': 0.31578947368421056, 'rougeLsum': 0.26315789473684215} Sari: {'sari': 47.94747284878864} Flesh Reading Ease: 27.6 ---------------------------------------- Source: ['Nach der Roboter-Weltstatistik 2016, die von der International Federation of Robotics (IFR) veröffentlicht wurde, werden bis 2019 weltweit mehr als 1,4 Millionen neue Industrieroboter in den Fabriken installiert.'] Prediction: ['Der International Federation of Robotics (IFR) hat eine neue Industrieroboter-Statistik veröffentlicht.\nBis 2019 werden mehr als 1,4 Millionen neue Industrieroboter in den Fabriken installiert.'] Label: [['Die Roboter-Weltstatistik 2016 von der International Federation of Robotics (IFR) hat ausgerechnet: Bis 2019 werden weltweit mehr als 1,4 Millionen neue Industrieroboter in den Fabriken installiert.']] Sacrebleu: {'score': 60.385140583774174, 'counts': [22, 19, 16, 13], 'totals': [28, 27, 26, 25], 'precisions': [78.57142857142857, 70.37037037037037, 61.53846153846154, 52.0], 'bp': 0.9310627797040228, 'sys_len': 28, 'ref_len': 30} Bleu: {'bleu': 0.6038514058377416, 'precisions': [0.7857142857142857, 0.7037037037037037, 0.6153846153846154, 0.52], 'brevity_penalty': 0.9310627797040228, 'length_ratio': 0.9333333333333333, 'translation_length': 28, 'reference_length': 30} Rouge: {'rouge1': 0.7636363636363638, 'rouge2': 0.6792452830188679, 'rougeL': 0.7636363636363638, 'rougeLsum': 0.7636363636363638} Sari: {'sari': 61.49439898336958} Flesh Reading Ease: 21.75 ---------------------------------------- Source: ['Das betrifft vor allem Roboter, die dank KI intelligent handeln und lernen.'] Prediction: ['KI-Roboten sind dank KI-Technologen ausgewählter Ländern.\nDas betrifft vor allem Roboter, die dank KI intelligent handeln und lernen.'] Label: [['Es bedeutet, dass die Maschinen intelligent handeln und lernen.']] Sacrebleu: {'score': 18.493046910349435, 'counts': [7, 4, 3, 2], 'totals': [21, 20, 19, 18], 'precisions': [33.333333333333336, 20.0, 15.789473684210526, 11.11111111111111], 'bp': 1.0, 'sys_len': 21, 'ref_len': 11} Bleu: {'bleu': 0.18493046910349434, 'precisions': [0.3333333333333333, 0.2, 0.15789473684210525, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 1.9090909090909092, 'translation_length': 21, 'reference_length': 11} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.20689655172413796, 'rougeL': 0.3225806451612903, 'rougeLsum': 0.3225806451612903} Sari: {'sari': 48.707893413775764} Flesh Reading Ease: 48.15 ---------------------------------------- Source: ['Dabei gibt es insgesamt 77 Inseln an der deutschen Küste.'] Prediction: ['In der deutschen Küste gibt es 77 Inseln.\nDas ist der erste Mal in der Schweiz.\nDas ist der erste Mal in der Schweiz.'] Label: [['77 Inseln liegen an der deutschen Küste.']] Sacrebleu: {'score': 6.798898171917449, 'counts': [6, 3, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [22.22222222222222, 11.538461538461538, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.11538461538461539, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.375, 'translation_length': 27, 'reference_length': 8} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.25806451612903225, 'rougeL': 0.24242424242424243, 'rougeLsum': 0.24242424242424243} Sari: {'sari': 39.99999999999999} Flesh Reading Ease: 101.8 ---------------------------------------- Source: ['Die meisten davon liegen in der Nordsee: die Nordfriesischen Inseln und die Ostfriesischen Inseln.'] Prediction: ['Die meisten in der Nordsee liegen in der Nordsee: die Nordfriesischen Inseln und die Ostfriesischen Inseln.\nDie meisten davon liegen in der Nordsee: die Nordfriesischen Inseln und die Ostfriesischen Inseln.'] Label: [['Die meisten davon befinden sich in der Nordsee: die Nordfriesischen Inseln und die Ostfriesischen Inseln.']] Sacrebleu: {'score': 36.2903635766635, 'counts': [15, 13, 11, 9], 'totals': [34, 33, 32, 31], 'precisions': [44.11764705882353, 39.39393939393939, 34.375, 29.032258064516128], 'bp': 1.0, 'sys_len': 34, 'ref_len': 17} Bleu: {'bleu': 0.362903635766635, 'precisions': [0.4411764705882353, 0.3939393939393939, 0.34375, 0.2903225806451613], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 34, 'reference_length': 17} Rouge: {'rouge1': 0.5777777777777778, 'rouge2': 0.5116279069767441, 'rougeL': 0.5777777777777778, 'rougeLsum': 0.5777777777777778} Sari: {'sari': 63.222943722943725} Flesh Reading Ease: 59.7 ---------------------------------------- Source: ['Außerdem gibt es noch die Ostseeinseln.'] Prediction: ['Die Ostseeinseln gibt es noch nicht mehr.\nAuch die Ostseeinseln gibt es noch nicht mehr.'] Label: [['Außerdem gibt es noch Inseln in der Ostsee.']] Sacrebleu: {'score': 9.147827112247601, 'counts': [4, 2, 1, 0], 'totals': [17, 16, 15, 14], 'precisions': [23.529411764705884, 12.5, 6.666666666666667, 3.5714285714285716], 'bp': 1.0, 'sys_len': 17, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.125, 0.06666666666666667, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8888888888888888, 'translation_length': 17, 'reference_length': 9} Rouge: {'rouge1': 0.25, 'rouge2': 0.18181818181818182, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 35.22727272727273} Flesh Reading Ease: 90.6 ---------------------------------------- Source: ['Seit vielen Jahren sind aber Touristen die größte Einnahmequelle.'] Prediction: ['Seit vielen Jahren sind aber Touristen die größte Einnahmequelle.\nSeit vielen Jahren sind aber Touristen die größte Einnahmequelle.'] Label: [['Seit vielen Jahren verdienen sie ihr Geld mit Touristen.']] Sacrebleu: {'score': 8.097785064266205, 'counts': [5, 2, 1, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 10.526315789473685, 5.555555555555555, 2.9411764705882355], 'bp': 1.0, 'sys_len': 20, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.10526315789473684, 0.05555555555555555, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 20, 'reference_length': 10} Rouge: {'rouge1': 0.2758620689655173, 'rouge2': 0.14814814814814814, 'rougeL': 0.2758620689655173, 'rougeLsum': 0.2758620689655173} Sari: {'sari': 43.77104377104377} Flesh Reading Ease: 54.0 ---------------------------------------- Source: ['Sylt ist die größte Nordseeinsel und hat eine interessante, schmale Form.'] Prediction: ['Die größte Nordseeinsel ist eine schmale Form.\nDie Form ist eine interessante, schmale Form.'] Label: [['Sylt ist die größte Nordseeinsel und hat eine interessante Form.']] Sacrebleu: {'score': 8.233514927922947, 'counts': [7, 3, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 18.75, 3.3333333333333335, 1.7857142857142858], 'bp': 1.0, 'sys_len': 17, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.4117647058823529, 0.1875, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5454545454545454, 'translation_length': 17, 'reference_length': 11} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.3333333333333333, 'rougeL': 0.5384615384615385, 'rougeLsum': 0.6153846153846153} Sari: {'sari': 21.428571428571427} Flesh Reading Ease: 61.85 ---------------------------------------- Source: ['Sie ist 38,5 Kilometer lang und an der schmalsten Stelle nur knapp 600 Meter breit.'] Prediction: ['Eine Frau ist in der Schweiz nur knapp 600 Meter breit.\nSie ist auf der schmalsten Stelle nur knapp 600 Meter breit.'] Label: [['Sie ist 38,5 Kilometer lang und sehr schmal.']] Sacrebleu: {'score': 3.482270899863668, 'counts': [3, 1, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 4.3478260869565215, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.043478260869565216, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 24, 'reference_length': 9} Rouge: {'rouge1': 0.1290322580645161, 'rouge2': 0.06896551724137931, 'rougeL': 0.1290322580645161, 'rougeLsum': 0.1290322580645161} Sari: {'sari': 16.746031746031743} Flesh Reading Ease: 98.8 ---------------------------------------- Source: ['Mit einer Fläche von 926 km² ist die Ostseeinsel Rügen fast zehnmal so groß wie Sylt und über einen Damm mit dem deutschen Festland verbunden.'] Prediction: ['Die Ostseeinsel Rügen ist fast zehnmal so groß wie Sylt und über einen Damm mit dem deutschen Festland verbunden.\nDie Fläche ist mit 926 km² so groß wie Sylt und über einen Damm mit dem deutschen Festland verbunden.'] Label: [['Mit einer Fläche von 926 km² ist die Ostseeinsel Rügen fast zehnmal so groß wie Sylt.']] Sacrebleu: {'score': 14.93750899564942, 'counts': [13, 7, 4, 3], 'totals': [40, 39, 38, 37], 'precisions': [32.5, 17.94871794871795, 10.526315789473685, 8.108108108108109], 'bp': 1.0, 'sys_len': 40, 'ref_len': 17} Bleu: {'bleu': 0.14937508995649412, 'precisions': [0.325, 0.1794871794871795, 0.10526315789473684, 0.08108108108108109], 'brevity_penalty': 1.0, 'length_ratio': 2.3529411764705883, 'translation_length': 40, 'reference_length': 17} Rouge: {'rouge1': 0.5517241379310346, 'rouge2': 0.35714285714285715, 'rougeL': 0.3448275862068966, 'rougeLsum': 0.48275862068965514} Sari: {'sari': 23.29886441292277} Flesh Reading Ease: 79.1 ---------------------------------------- Source: ['Bekannt ist die Insel Rügen für ihre Natur mit weißen Felsen, langen Stränden, sanften Hügeln und unberührten Wäldern.'] Prediction: ['Insel Rügen sind die Insel für die Natur mit weißen Felsen, langen Stränden, unberührten Wäldern.\nDie Insel Rügen sind für die Insel mit weißen Felsen, langen Stränden, sanften Hügeln und unberührten Wäldern.'] Label: [['Bekannt ist die Insel Rügen für die schöne Natur.']] Sacrebleu: {'score': 3.4889388722622328, 'counts': [7, 3, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [18.42105263157895, 8.108108108108109, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.18421052631578946, 0.08108108108108109, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.8, 'translation_length': 38, 'reference_length': 10} Rouge: {'rouge1': 0.2807017543859649, 'rouge2': 0.18181818181818182, 'rougeL': 0.2456140350877193, 'rougeLsum': 0.2807017543859649} Sari: {'sari': 22.968792645263232} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['Zusätzlich zu den 77 deutschen Inseln gibt es noch zehn Halligen im nordfriesischen Wattenmeer.'] Prediction: ['Der nordfriesische Wattenmeer ist seit seinem Jahr 2021 in seinem nordfriesischen Wattenmeer.\nDas ist der 77-jährige Wettbewerb der deutschen Nationalmannschaft.\nDas ist der erste Wettbewerb der Nationalmannschaft.'] Label: [['Zusätzlich zu den 77 deutschen Inseln gibt es noch zehn Halligen.']] Sacrebleu: {'score': 1.526608193588886, 'counts': [3, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [9.375, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.09375, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 32, 'reference_length': 12} Rouge: {'rouge1': 0.0975609756097561, 'rouge2': 0.0, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.0975609756097561} Sari: {'sari': 10.024509803921568} Flesh Reading Ease: 48.15 ---------------------------------------- Source: ['Das sind winzige Inselchen, die kaum durch Deiche geschützt sind.'] Prediction: ['Inselchen sind die letzten Monaten in der Schweiz geschützt.\nDie Inselchen sind die letzten Monaten in der Schweiz.\nDie Inselchen sind die letzten Monaten in der Schweiz.'] Label: [['Das sind winzige Inseln, die kaum durch Deiche geschützt sind.']] Sacrebleu: {'score': 1.8564670505078418, 'counts': [5, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [16.666666666666668, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 30, 'reference_length': 12} Rouge: {'rouge1': 0.25641025641025644, 'rouge2': 0.05405405405405406, 'rougeL': 0.25641025641025644, 'rougeLsum': 0.2051282051282051} Sari: {'sari': 12.549773093251353} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Während früher wenige Künstler in deutscher Sprache gesungen haben, gewinnt deutschsprachige Musik seit der Jahrhundertwende immer mehr an Bedeutung.'] Prediction: ['Die deutsche Künstler haben wenige Künstler in deutscher Sprache gesungen.\nDie deutsche Musik gewinnt seit der Jahrhundertwende immer mehr an Bedeutung.'] Label: [['Früher sangen nur wenige Künstler in deutscher Sprache.']] Sacrebleu: {'score': 16.133948681475342, 'counts': [6, 4, 3, 2], 'totals': [23, 22, 21, 20], 'precisions': [26.08695652173913, 18.181818181818183, 14.285714285714286, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 9} Bleu: {'bleu': 0.16133948681475338, 'precisions': [0.2608695652173913, 0.18181818181818182, 0.14285714285714285, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.5555555555555554, 'translation_length': 23, 'reference_length': 9} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.3225806451612903, 'rougeL': 0.36363636363636365, 'rougeLsum': 0.36363636363636365} Sari: {'sari': 46.76282051282052} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['Den Anfang machten junge Bands wie Wir sind Helden, Juli, Silbermond oder die Münchner Sportfreunde Stiller.'] Prediction: ['Die Münchner Sportfreunde Stiller haben den Anfang 2020 den ersten Mal geschlossen.\nDie Bands wie Wir sind Helden, Juli, Silbermond oder die Münchner Sportfreunde Stiller.\nDie Bands wie Wir sind Helden, Juli, Silbermond oder die Münchner Sportfreunde Stiller.'] Label: [['Aber nun kamen neue, junge Bands wie Wir sind Helden, Juli, Silbermond oder die Sportfreunde Stiller dazu.']] Sacrebleu: {'score': 24.008132324365324, 'counts': [15, 11, 9, 8], 'totals': [45, 44, 43, 42], 'precisions': [33.333333333333336, 25.0, 20.930232558139537, 19.047619047619047], 'bp': 1.0, 'sys_len': 45, 'ref_len': 21} Bleu: {'bleu': 0.24008132324365317, 'precisions': [0.3333333333333333, 0.25, 0.20930232558139536, 0.19047619047619047], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 45, 'reference_length': 21} Rouge: {'rouge1': 0.3793103448275862, 'rouge2': 0.3214285714285714, 'rougeL': 0.3793103448275862, 'rougeLsum': 0.3793103448275862} Sari: {'sari': 49.12275018808863} Flesh Reading Ease: 67.85 ---------------------------------------- Source: ['Erfolgreiche deutschsprachige Bands gab es schon längere Zeit, zum Beispiel Die Ärzte oder Die Toten Hosen, die ihren Ursprung in der deutsche Punkbewegung der 1980er hatten oder die Stuttgarter Hip-Hop-Band Die Fantastischen Vier, die Anfang der Neunziger große Erfolge feierten.'] Prediction: ['Die deutsche Punkbewegung der 1980er hatten die Toten Hosen, die ihren Ursprung in der deutsche Punkbewegung der 1980er hatten oder die Stuttgarter Hip-Hop-Band Die Fantastischen Vier, die Anfang der Neunziger große Erfolge feierten.\nDie Stuttgarter Hip-Hop-Band Die Fantastischen Vier feierten Anfang der Neunziger große Erfolge.'] Label: [['Deutsche Bands wie Die Ärzte, Die Toten Hosen oder Die Fantastischen Vier waren schon lange Zeit erfolgreich.']] Sacrebleu: {'score': 4.144284514022943, 'counts': [10, 3, 1, 0], 'totals': [49, 48, 47, 46], 'precisions': [20.408163265306122, 6.25, 2.127659574468085, 1.0869565217391304], 'bp': 1.0, 'sys_len': 49, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.20408163265306123, 0.0625, 0.02127659574468085, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5789473684210527, 'translation_length': 49, 'reference_length': 19} Rouge: {'rouge1': 0.2647058823529412, 'rouge2': 0.15151515151515152, 'rougeL': 0.23529411764705882, 'rougeLsum': 0.2647058823529412} Sari: {'sari': 36.003334880737526} Flesh Reading Ease: 40.5 ---------------------------------------- Source: ['Auch Reggae und Dancehall wurde zu dieser Zeit deutsch mit Bands wie Seeed, Culcha Candela und Gentleman.2004 diskutierten Politiker und Musiker über die Einführung einer Quote für deutschsprachige Musik im Radio.'] Prediction: ['2004 diskutierten Politiker und Musiker über die Einführung einer Quote für deutschsprachige Musik im Radio.\nDie Reggae und Dancehall wurde zu dieser Zeit deutsch mit Bands wie Seeed, Culcha Candela und Gentleman.'] Label: [['Sie fragten sich, warum deutsche Bands in englischer Sprache singen sollten.2004 dachten Musiker und Politiker darüber nach, ob im Radio ein bestimmter Anteil der Lieder deutsch sein muss.']] Sacrebleu: {'score': 3.2342452920962157, 'counts': [11, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [31.428571428571427, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.3142857142857143, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0606060606060606, 'translation_length': 35, 'reference_length': 33} Rouge: {'rouge1': 0.28125, 'rouge2': 0.03225806451612904, 'rougeL': 0.18750000000000003, 'rougeLsum': 0.21874999999999997} Sari: {'sari': 33.5136120563928} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['In Frankreich müssen 40 Prozent der gespielten Titel französischsprachig sein.'] Prediction: ['In Frankreich müssen 40 Prozent der gespielten Titel französischsprachig sein.\n40 Prozent der gespielten Titel müssen in Frankreich 40 Prozent der gespielten Titel französischsprachig sein.'] Label: [['In Frankreich müssen 40 Prozent der gespielten Titel französisch sein.']] Sacrebleu: {'score': 27.474558342153514, 'counts': [10, 8, 6, 5], 'totals': [27, 26, 25, 24], 'precisions': [37.03703703703704, 30.76923076923077, 24.0, 20.833333333333332], 'bp': 1.0, 'sys_len': 27, 'ref_len': 11} Bleu: {'bleu': 0.27474558342153516, 'precisions': [0.37037037037037035, 0.3076923076923077, 0.24, 0.20833333333333334], 'brevity_penalty': 1.0, 'length_ratio': 2.4545454545454546, 'translation_length': 27, 'reference_length': 11} Rouge: {'rouge1': 0.5365853658536586, 'rouge2': 0.46153846153846156, 'rougeL': 0.5365853658536586, 'rougeLsum': 0.5365853658536586} Sari: {'sari': 61.75417175417176} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Doch in Deutschland erfüllte sich der Wunsch nach mehr deutschsprachiger Musik ganz ohne Quote.'] Prediction: ['Der Wunsch ist in Deutschland nach mehr deutschsprachiger Musik ganz ohne Quote.\nDoch in Deutschland erfüllte sich der Wunsch nach mehr deutschsprachiger Musik ganz ohne Quote.'] Label: [['Aber in Deutschland war das nicht nötig, weil deutschsprachige Musik immer beliebter wurde.']] Sacrebleu: {'score': 3.176023542809473, 'counts': [4, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8666666666666667, 'translation_length': 28, 'reference_length': 15} Rouge: {'rouge1': 0.14634146341463417, 'rouge2': 0.05128205128205129, 'rougeL': 0.14634146341463417, 'rougeLsum': 0.14634146341463417} Sari: {'sari': 37.953216374269005} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Selbst Künstler, die früher in englischer Sprache gesungen haben, singen mittlerweile deutschsprachige Texte. Wie zum Beispiel die Sängerin Sarah Connor, die im Jahr 2015 ihr erstes deutschsprachiges Album „Muttersprache“ nannte.'] Prediction: ['Die deutsche Schweizer Sängerin Sarah Connor (25) singt deutschsprachige Texte.\nDie Sängerin nannte ihr erstes deutschsprachiges Album "Muttersprache" in den vergangenen Tagen.\nDie deutsche Schweizerin hatte 2015 ihr erstes deutschsprachiges Album "Muttersprache" veröffentlicht.'] Label: [['Die Sängerin Sarah Connor, zum Beispiel, singt seit 2015 nicht mehr auf Englisch, sondern auf Deutsch.']] Sacrebleu: {'score': 4.446393436963015, 'counts': [7, 3, 1, 0], 'totals': [42, 41, 40, 39], 'precisions': [16.666666666666668, 7.317073170731708, 2.5, 1.2820512820512822], 'bp': 1.0, 'sys_len': 42, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.07317073170731707, 0.025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 42, 'reference_length': 20} Rouge: {'rouge1': 0.2641509433962264, 'rouge2': 0.1568627450980392, 'rougeL': 0.2641509433962264, 'rougeLsum': 0.2641509433962264} Sari: {'sari': 39.86162670359207} Flesh Reading Ease: 40.3 ---------------------------------------- Source: ['Weitere bekannte deutschsprachige Bands und Künstler sind Glasperlenspiel, Frida Gold, Revolverheld, Joris, Max Giesinger, Wincent Weiss, Adel Tawil, die Hamburger Hip-Hop-Formation Deichkind, sowie die Rapper Materia, Bushido und Cro.'] Prediction: ['Die deutsche Bands und Künstler sind Glasperlenspiel, Frida Gold, Revolverheld, Joris, Max Giesinger, Wincent Weiss, Adel Tawil, die Hamburger Hip-Hop-Formation Deichkind, sowie die Rapper Materia, Bushido und Cro.\nDie deutsche Bands und Künstler sind Glasperlenspiel, Frida Gold, Revolverheld, Joris, Max Giesinger, Wincent Weiss, Adel Tawil, die Hamburger Hip-Hop-Formation Deichkind, sowie die Rapper Materia, Bushido und Cro.'] Label: [['Weitere bekannte deutschsprachige Bands, Sängerinnen und Sänger sind Glasperlenspiel, Frida Gold, Revolverheld, Joris, Max Giesinger, Wincent Weiss, Adel Tawil, Andreas Bourani, die Hamburger Hip-Hop-Formation Deichkind, sowie die Rapper Materia, Bushido und Cro.']] Sacrebleu: {'score': 42.39360883126752, 'counts': [37, 32, 30, 28], 'totals': [76, 75, 74, 73], 'precisions': [48.68421052631579, 42.666666666666664, 40.54054054054054, 38.35616438356164], 'bp': 1.0, 'sys_len': 76, 'ref_len': 44} Bleu: {'bleu': 0.42393608831267526, 'precisions': [0.4868421052631579, 0.4266666666666667, 0.40540540540540543, 0.3835616438356164], 'brevity_penalty': 1.0, 'length_ratio': 1.7272727272727273, 'translation_length': 76, 'reference_length': 44} Rouge: {'rouge1': 0.5510204081632653, 'rouge2': 0.47916666666666663, 'rougeL': 0.5510204081632653, 'rougeLsum': 0.5510204081632653} Sari: {'sari': 38.89552204068333} Flesh Reading Ease: 35.0 ---------------------------------------- Source: ['2017 gehörte der Sänger und Songwriter Mark Forster mit „Chöre“ zu den erfolgreichsten deutschsprachigen Musikern.'] Prediction: ['Mark Forster (34) hat 2017 seine ersten Single "Chöre" veröffentlicht.\nDer Sänger und Songwriter gehörte den erfolgreichsten deutschsprachigen Musikern.'] Label: [['Im Jahr 2017 gehörte der Sänger und Songwriter Mark Forster mit „Chöre“ zu den erfolgreichsten deutschsprachigen Musikern.']] Sacrebleu: {'score': 21.690365808279147, 'counts': [12, 7, 4, 2], 'totals': [25, 24, 23, 22], 'precisions': [48.0, 29.166666666666668, 17.391304347826086, 9.090909090909092], 'bp': 1.0, 'sys_len': 25, 'ref_len': 18} Bleu: {'bleu': 0.21690365808279138, 'precisions': [0.48, 0.2916666666666667, 0.17391304347826086, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 1.3888888888888888, 'translation_length': 25, 'reference_length': 18} Rouge: {'rouge1': 0.7441860465116279, 'rouge2': 0.4878048780487805, 'rougeL': 0.46511627906976744, 'rougeLsum': 0.6046511627906976} Sari: {'sari': 20.779330729372155} Flesh Reading Ease: 47.65 ---------------------------------------- Source: ['Soll ich mich ganz der Erziehung meiner Kinder widmen oder mich lieber auf die Arbeit konzentrieren?'] Prediction: ['Der Chef der Stadt Bern hat einen Chef-Konzentrieren ausgegeben.\nEr hat sich ganz der Erziehung meiner Kinder widmen oder mich lieber auf die Arbeit konzentrieren.\nDer Chef hat sich mit seiner Erziehung zu widmen und lieber auf die Arbeit konzentrieren.'] Label: [['Soll ich mich ganz um die Erziehung der Kinder kümmern oder lieber um die Arbeit?']] Sacrebleu: {'score': 2.5488079011500315, 'counts': [10, 1, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [23.25581395348837, 2.380952380952381, 1.2195121951219512, 0.625], 'bp': 1.0, 'sys_len': 43, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.23255813953488372, 0.023809523809523808, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6875, 'translation_length': 43, 'reference_length': 16} Rouge: {'rouge1': 0.3508771929824561, 'rouge2': 0.03636363636363636, 'rougeL': 0.2456140350877193, 'rougeLsum': 0.28070175438596495} Sari: {'sari': 19.541666666666664} Flesh Reading Ease: 67.25 ---------------------------------------- Source: ['Sie möchten genügend Zeit mit den Kindern verbringen und einen verantwortungsvollen Job, der sie herausfordert und Spaß macht.'] Prediction: ['Eine Frau möchte sich mit den Kindern verbringen und einen verantwortungsvollen Job macht.\nSie möchte sie mit den Kindern herausfordert und Spaß macht.'] Label: [['Sie möchten genügend Zeit mit den Kindern verbringen und einen guten Beruf haben, der Spaß macht.']] Sacrebleu: {'score': 24.250566202074662, 'counts': [10, 7, 5, 3], 'totals': [25, 24, 23, 22], 'precisions': [40.0, 29.166666666666668, 21.73913043478261, 13.636363636363637], 'bp': 1.0, 'sys_len': 25, 'ref_len': 18} Bleu: {'bleu': 0.2425056620207466, 'precisions': [0.4, 0.2916666666666667, 0.21739130434782608, 0.13636363636363635], 'brevity_penalty': 1.0, 'length_ratio': 1.3888888888888888, 'translation_length': 25, 'reference_length': 18} Rouge: {'rouge1': 0.46511627906976744, 'rouge2': 0.34146341463414637, 'rougeL': 0.41860465116279066, 'rougeLsum': 0.46511627906976744} Sari: {'sari': 31.688528957294338} Flesh Reading Ease: 69.05 ---------------------------------------- Source: ['In Deutschland versucht ein Großteil der Mütter, dieses Dilemma durch Teilzeitarbeit zu lösen.'] Prediction: ['In Deutschland versucht ein Großteil der Mütter, das Dilemma durch Teilzeitarbeit zu lösen.\nIn Deutschland versucht ein Großteil der Mütter, dieses Dilemma durch Teilzeitarbeit zu lösen.'] Label: [['In Deutschland versucht ein Großteil der Mütter, dieses Problem durch Teilzeitarbeit zu lösen.']] Sacrebleu: {'score': 37.80850935680652, 'counts': [14, 12, 10, 8], 'totals': [30, 29, 28, 27], 'precisions': [46.666666666666664, 41.37931034482759, 35.714285714285715, 29.62962962962963], 'bp': 1.0, 'sys_len': 30, 'ref_len': 15} Bleu: {'bleu': 0.3780850935680653, 'precisions': [0.4666666666666667, 0.41379310344827586, 0.35714285714285715, 0.2962962962962963], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 30, 'reference_length': 15} Rouge: {'rouge1': 0.625, 'rouge2': 0.5652173913043478, 'rougeL': 0.625, 'rougeLsum': 0.625} Sari: {'sari': 62.98466151539615} Flesh Reading Ease: 50.0 ---------------------------------------- Source: ['Zwei Drittel der arbeitenden Mütter sind teilzeitbeschäftigt, bei den Vätern sind es nur sechs Prozent.'] Prediction: ['Zwei Drittel der arbeitenden Mütter sind teilzeitbeschäftigt.\nBei den Vätern sind es nur sechs Prozent.'] Label: [['Zwei Drittel der arbeitenden Mütter sind teilzeitbeschäftigt, von den Vätern nur sechs Prozent.']] Sacrebleu: {'score': 53.12583871630397, 'counts': [13, 10, 7, 5], 'totals': [17, 16, 15, 14], 'precisions': [76.47058823529412, 62.5, 46.666666666666664, 35.714285714285715], 'bp': 1.0, 'sys_len': 17, 'ref_len': 15} Bleu: {'bleu': 0.5312583871630396, 'precisions': [0.7647058823529411, 0.625, 0.4666666666666667, 0.35714285714285715], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 17, 'reference_length': 15} Rouge: {'rouge1': 0.8823529411764706, 'rouge2': 0.7500000000000001, 'rougeL': 0.8823529411764706, 'rougeLsum': 0.8823529411764706} Sari: {'sari': 41.00037537537538} Flesh Reading Ease: 73.05 ---------------------------------------- Source: ['Mütter, die Vollzeit arbeiten, werden oft als Rabenmütter bezeichnet, weil sie wenig Zeit für die Kinder haben.'] Prediction: ['Mütter, die Vollzeit arbeiten, werden oft als Rabenmütter bezeichnet.\nSie werden wenig Zeit für die Kinder haben.'] Label: [['Mütter, die Vollzeit arbeiten, werden oft als Rabenmütter beschimpft, weil sie wenig Zeit für ihre Kinder haben.']] Sacrebleu: {'score': 56.42499050012735, 'counts': [16, 13, 10, 7], 'totals': [21, 20, 19, 18], 'precisions': [76.19047619047619, 65.0, 52.63157894736842, 38.888888888888886], 'bp': 1.0, 'sys_len': 21, 'ref_len': 21} Bleu: {'bleu': 0.5642499050012735, 'precisions': [0.7619047619047619, 0.65, 0.5263157894736842, 0.3888888888888889], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 21, 'reference_length': 21} Rouge: {'rouge1': 0.85, 'rouge2': 0.6842105263157895, 'rougeL': 0.85, 'rougeLsum': 0.8000000000000002} Sari: {'sari': 35.35645749843479} Flesh Reading Ease: 66.2 ---------------------------------------- Source: ['Hausfrauen werden von anderen arbeitenden Müttern belächelt.'] Prediction: ['In der Schweiz werden andere arbeitenden Müttern belächelt.\nDie Hausfrauen werden von anderen arbeitenden Müttern belächelt.'] Label: [['Hausfrauen werden oft von anderen arbeitenden Müttern belächelt.']] Sacrebleu: {'score': 29.759282342490966, 'counts': [8, 6, 4, 3], 'totals': [18, 17, 16, 15], 'precisions': [44.44444444444444, 35.294117647058826, 25.0, 20.0], 'bp': 1.0, 'sys_len': 18, 'ref_len': 9} Bleu: {'bleu': 0.29759282342490984, 'precisions': [0.4444444444444444, 0.35294117647058826, 0.25, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 18, 'reference_length': 9} Rouge: {'rouge1': 0.6, 'rouge2': 0.5, 'rougeL': 0.6, 'rougeLsum': 0.6} Sari: {'sari': 62.27564102564103} Flesh Reading Ease: 37.45 ---------------------------------------- Source: ['Dabei sollte jeder frei und ohne Druck entscheiden können, wie er oder sie sein Familien- und Berufsleben gestalten möchte.'] Prediction: ['Ein Mann sollte frei und ohne Druck entscheiden können, wie er oder sie sein Familien und Berufsleben gestalten möchte.\nDas sollte er frei und ohne Druck entscheiden können, wie er oder sie sein Familien und Berufsleben gestalten möchte.'] Label: [['Dabei sollte jeder frei entscheiden können, wie er oder sie sein Familienleben und Berufsleben gestalten möchte.']] Sacrebleu: {'score': 24.941162218644475, 'counts': [15, 11, 9, 7], 'totals': [42, 41, 40, 39], 'precisions': [35.714285714285715, 26.829268292682926, 22.5, 17.94871794871795], 'bp': 1.0, 'sys_len': 42, 'ref_len': 18} Bleu: {'bleu': 0.24941162218644478, 'precisions': [0.35714285714285715, 0.2682926829268293, 0.225, 0.1794871794871795], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 42, 'reference_length': 18} Rouge: {'rouge1': 0.5, 'rouge2': 0.3793103448275862, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 44.75002882201206} Flesh Reading Ease: 61.55 ---------------------------------------- Source: ['Seit der Einführung des Elterngeldes im Jahr 2007 nehmen mehr Väter Elternzeit, aber es sind meistens maximal zwei Monate.'] Prediction: ['Seit der Einführung des Elterngeldes im Jahr 2007 nehmen mehr Väter Elternzeit.\nSeit der Einführung des Elterngeldes im Jahr 2007 nehmen mehr Väter Elternzeit.'] Label: [['Obwohl seit der Einführung des Elterngeldes im Jahr 2007 mehr Väter Elternzeit nehmen, sind es meistens nur zwei Monate.']] Sacrebleu: {'score': 28.30789070123404, 'counts': [12, 8, 6, 4], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 32.0, 25.0, 17.391304347826086], 'bp': 1.0, 'sys_len': 26, 'ref_len': 21} Bleu: {'bleu': 0.2830789070123405, 'precisions': [0.46153846153846156, 0.32, 0.25, 0.17391304347826086], 'brevity_penalty': 1.0, 'length_ratio': 1.2380952380952381, 'translation_length': 26, 'reference_length': 21} Rouge: {'rouge1': 0.5714285714285715, 'rouge2': 0.46808510638297873, 'rougeL': 0.5714285714285715, 'rougeLsum': 0.5306122448979592} Sari: {'sari': 50.328433140933136} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['Im Väterreport 2016, einer Umfrage der Bundesregierung, gaben nur 14 Prozent der Paare an, dass sie sich Haushalt, Erziehung und Beruf gleich aufteilen.'] Prediction: ['Nur 14 Prozent der Bundesregierung gaben an, dass sie sich Haushalt, Erziehung und Beruf gleich aufteilen.\nVor allem die Bundesregierung gaben nur 14 Prozent der Paare an, dass sie sich Haushalt, Erziehung und Beruf gleich aufteilen.'] Label: [['Im Väterreport 2016, einer Umfrage der Bundesregierung, sagten nur 14 Prozent der Paare, dass sie sich Haushalt, Erziehung und Beruf gleich aufteilen.']] Sacrebleu: {'score': 36.57037320148842, 'counts': [21, 16, 13, 11], 'totals': [42, 41, 40, 39], 'precisions': [50.0, 39.02439024390244, 32.5, 28.205128205128204], 'bp': 1.0, 'sys_len': 42, 'ref_len': 27} Bleu: {'bleu': 0.3657037320148842, 'precisions': [0.5, 0.3902439024390244, 0.325, 0.28205128205128205], 'brevity_penalty': 1.0, 'length_ratio': 1.5555555555555556, 'translation_length': 42, 'reference_length': 27} Rouge: {'rouge1': 0.5423728813559322, 'rouge2': 0.456140350877193, 'rougeL': 0.5423728813559322, 'rougeLsum': 0.5084745762711865} Sari: {'sari': 30.506824877365897} Flesh Reading Ease: 62.55 ---------------------------------------- Source: ['Feiertage sind jedes Jahr wiederkehrende Tage, an denen bestimmte religiöse oder politische Ereignisse gefeiert werden.'] Prediction: ['Jedes Jahr wurde wiederkehrende Tage, an denen bestimmte religiöse oder politische Ereignisse gefeiert werden.\nDie Wiederkehrenden sind jedes Jahr wiederkehrende Tage.'] Label: [['Feiertage erinnern an bestimmte religiöse oder politische Ereignisse.']] Sacrebleu: {'score': 16.020720994064927, 'counts': [7, 4, 3, 2], 'totals': [24, 23, 22, 21], 'precisions': [29.166666666666668, 17.391304347826086, 13.636363636363637, 9.523809523809524], 'bp': 1.0, 'sys_len': 24, 'ref_len': 9} Bleu: {'bleu': 0.16020720994064927, 'precisions': [0.2916666666666667, 0.17391304347826086, 0.13636363636363635, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 24, 'reference_length': 9} Rouge: {'rouge1': 0.45161290322580644, 'rouge2': 0.3448275862068965, 'rougeL': 0.45161290322580644, 'rougeLsum': 0.45161290322580644} Sari: {'sari': 38.69201189247629} Flesh Reading Ease: 23.25 ---------------------------------------- Source: ['Es gibt Gedenktage und freudige Feste, zu denen je nach Anlass unterschiedliche Zeremonien und Bräuche gehören.'] Prediction: ['Die Schweizer Welt ist eine neue Reihe von Gastronomen und Gastronomen.\nDie Schweizer Welt ist eine grosse Reihe von Gastronomen und Gastronomen.\nDie Schweizer Welt ist eine neue Reihe von Gastronomen und Gastronomen.'] Label: [['Je nach Anlass gehören dazu auch Bräuche.']] Sacrebleu: {'score': 1.0253311603116817, 'counts': [1, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [2.7777777777777777, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.027777777777777776, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.5, 'translation_length': 36, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 39.470996732026144} Flesh Reading Ease: 52.0 ---------------------------------------- Source: ['Wenn die Feiertage nicht auf das Wochenende fallen, freuen sich insbesondere die Arbeitnehmer und Schüler über einen zusätzlichen freien Tag.'] Prediction: ['Die Feiertage wurde nicht auf das Wochenende fallen.\nDie Arbeitnehmer und Schüler freuen sich über einen zusätzlichen freien Tag.'] Label: [['Wenn das Datum der Feiertage auf einen Samstag oder Sonntag fällt, gibt es weniger freie Tage.']] Sacrebleu: {'score': 2.7156804039319287, 'counts': [5, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [23.80952380952381, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.23809523809523808, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1666666666666667, 'translation_length': 21, 'reference_length': 18} Rouge: {'rouge1': 0.21052631578947367, 'rouge2': 0.0, 'rougeL': 0.15789473684210528, 'rougeLsum': 0.15789473684210528} Sari: {'sari': 31.111111111111107} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Einige Feiertage haben ein festgelegtes Datum, andere sind beweglich. Sie orientieren sich oftmals am Kirchenjahr und finden immer an einem anderen Datum statt.'] Prediction: ['Einige Feiertage haben ein festgelegtes Datum.\nSie orientieren sich am Kirchenjahr und finden immer an einem anderen Datum statt.'] Label: [['Einige Feiertage haben ein festgelegtes Datum.\nAndere finden immer an einem anderen Datum statt, das durch das Kirchenjahr bestimmt wird.']] Sacrebleu: {'score': 51.989731625441955, 'counts': [16, 12, 10, 8], 'totals': [21, 20, 19, 18], 'precisions': [76.19047619047619, 60.0, 52.63157894736842, 44.44444444444444], 'bp': 0.909156442876713, 'sys_len': 21, 'ref_len': 23} Bleu: {'bleu': 0.5198973162544194, 'precisions': [0.7619047619047619, 0.6, 0.5263157894736842, 0.4444444444444444], 'brevity_penalty': 0.909156442876713, 'length_ratio': 0.9130434782608695, 'translation_length': 21, 'reference_length': 23} Rouge: {'rouge1': 0.717948717948718, 'rouge2': 0.5945945945945946, 'rougeL': 0.6666666666666667, 'rougeLsum': 0.6666666666666667} Sari: {'sari': 58.62772918618895} Flesh Reading Ease: 47.65 ---------------------------------------- Source: ['In überwiegend katholischen Bundesländern gibt es zusätzliche kirchliche Feiertage wie beispielsweise das Fest der Heiligen drei Könige am 6. Januar, Fronleichnam, Allerheiligen (1. November) und in einigen Regionen auch Mariä Himmelfahrt.'] Prediction: ['In katholischen Bundesländern gibt es zusätzliche kirchliche Feiertage.\nDiese sind in einigen Regionen auch Mariä Himmelfahrt.'] Label: [['In einigen Bundesländern gibt es zusätzliche kirchliche Feiertage wie das Fest der Heiligen drei Könige am 6.\nJanuar, Fronleichnam oder Allerheiligen (1.\nNovember).']] Sacrebleu: {'score': 16.317456445879724, 'counts': [10, 5, 4, 3], 'totals': [18, 17, 16, 15], 'precisions': [55.55555555555556, 29.41176470588235, 25.0, 20.0], 'bp': 0.5427474811642219, 'sys_len': 18, 'ref_len': 29} Bleu: {'bleu': 0.16317456445879727, 'precisions': [0.5555555555555556, 0.29411764705882354, 0.25, 0.2], 'brevity_penalty': 0.5427474811642219, 'length_ratio': 0.6206896551724138, 'translation_length': 18, 'reference_length': 29} Rouge: {'rouge1': 0.4545454545454546, 'rouge2': 0.38095238095238104, 'rougeL': 0.40909090909090906, 'rougeLsum': 0.4545454545454546} Sari: {'sari': 22.889306415168484} Flesh Reading Ease: 31.6 ---------------------------------------- Source: ['Noch mehr Feiertage hat die Stadt Augsburg in Bayern.'] Prediction: ['Die Stadt Augsburg hat die erste Woche in Bayern verlassen.\nDie Stadt hat die Stadt Augsburg in Bayern.'] Label: [['Noch besser haben es die Menschen in der Stadt Augsburg.']] Sacrebleu: {'score': 4.814971807094068, 'counts': [5, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8181818181818181, 'translation_length': 20, 'reference_length': 11} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.07692307692307691, 'rougeL': 0.2857142857142857, 'rougeLsum': 0.21428571428571427} Sari: {'sari': 39.34676434676434} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Dort gibt es mit dem Augsburger Friedensfest am 8. August, den einzigen gesetzlichen Feiertag in Deutschland, der nur in einer Stadt gilt.'] Prediction: ['Am 8.\nAugust findet in Deutschland ein Friedensfest statt.\nDas gilt nur in einer Stadt.\nDas gilt dort nur in einer Stadt.'] Label: [['Sie haben mit dem Augsburger Friedensfest als einzige Stadt in Deutschland einen zusätzlichen Feiertag.']] Sacrebleu: {'score': 3.632928877985223, 'counts': [5, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7333333333333334, 'translation_length': 26, 'reference_length': 15} Rouge: {'rouge1': 0.21621621621621623, 'rouge2': 0.057142857142857134, 'rougeL': 0.16216216216216214, 'rougeLsum': 0.16216216216216214} Sari: {'sari': 32.67135642135642} Flesh Reading Ease: 90.8 ---------------------------------------- Source: ['1918 wurde Max Planck für seine Erkenntnisse schließlich der Nobelpreis für Physik verliehen.'] Prediction: ['Max Planck wurde von der Nobelpreis für Physik verliehen.\nEr wurde von der Erkenntnisse schließlich der Nobelpreis für Physik verliehen.'] Label: [['1918 wurde Max Planck dafür der Nobelpreis für Physik verliehen.']] Sacrebleu: {'score': 24.648321974767605, 'counts': [9, 6, 4, 3], 'totals': [22, 21, 20, 19], 'precisions': [40.90909090909091, 28.571428571428573, 20.0, 15.789473684210526], 'bp': 1.0, 'sys_len': 22, 'ref_len': 11} Bleu: {'bleu': 0.24648321974767612, 'precisions': [0.4090909090909091, 0.2857142857142857, 0.2, 0.15789473684210525], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 22, 'reference_length': 11} Rouge: {'rouge1': 0.5714285714285714, 'rouge2': 0.3636363636363636, 'rougeL': 0.5142857142857143, 'rougeLsum': 0.5142857142857143} Sari: {'sari': 45.95712560386473} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Erst mit weiteren Deutungen von Albert Einstein und dem Atommodell von Niels Bohr gelang ihr zehn Jahre später der Durchbruch.'] Prediction: ['Ein zehn Jahre später der Durchbruch.\nDas zeigt einen zehn Jahre alten Leben.\nDas zeigt einen zehn Jahr als erst mit dem Atommodell von Niels Bohr.'] Label: [['Erst nach weiteren Forschungen von Albert Einstein und Niels Bohr gewann die Quantentheorie zehn Jahre später an Bedeutung.']] Sacrebleu: {'score': 6.551247989407595, 'counts': [7, 3, 1, 0], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 10.714285714285714, 3.7037037037037037, 1.9230769230769231], 'bp': 1.0, 'sys_len': 29, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2413793103448276, 0.10714285714285714, 0.037037037037037035, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5263157894736843, 'translation_length': 29, 'reference_length': 19} Rouge: {'rouge1': 0.34782608695652173, 'rouge2': 0.18181818181818185, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.34782608695652173} Sari: {'sari': 33.72008547008547} Flesh Reading Ease: 95.25 ---------------------------------------- Source: ['Er hatte erkannt, dass elektromagnetische Strahlung nicht kontinuierlich ausgesendet wird, sondern in kleinen Energiepaketen, den sogenannten Quanten.'] Prediction: ['Ein Experte hatte erkannt, dass elektromagnetische Strahlung nicht kontinuierlich ausgesendet wird, sondern in kleinen Energiepaketen, den sogenannten Quanten.\nDie Strahlung wird nicht kontinuierlich ausgesendet, sondern in kleinen Energiepaketen, den sogenannten Quanten.'] Label: [['Sie besteht aus kleinen Energiepaketen, den Quanten.\nMax Planck fand während seiner Forschung heraus, dass elektromagnetische Strahlung nicht konstant ist.']] Sacrebleu: {'score': 16.88502300099971, 'counts': [12, 8, 5, 3], 'totals': [38, 37, 36, 35], 'precisions': [31.57894736842105, 21.62162162162162, 13.88888888888889, 8.571428571428571], 'bp': 1.0, 'sys_len': 38, 'ref_len': 24} Bleu: {'bleu': 0.16885023000999705, 'precisions': [0.3157894736842105, 0.21621621621621623, 0.1388888888888889, 0.08571428571428572], 'brevity_penalty': 1.0, 'length_ratio': 1.5833333333333333, 'translation_length': 38, 'reference_length': 24} Rouge: {'rouge1': 0.30769230769230765, 'rouge2': 0.2, 'rougeL': 0.23076923076923075, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 50.21808651675946} Flesh Reading Ease: 18.25 ---------------------------------------- Source: ['Für ein Jahr studierte er an der Friedrich-Wilhelms-Universität in Berlin, wo er später promovierte. Im Jahr 1875 begann er sein Studium an der Münchner Ludwig-Maximilians-Universität.'] Prediction: ['Für ein Jahr studierte er an der Friedrich-Wilhelms-Universität in Berlin, wo er später promovierte.\nIm Jahr 1875 begann er sein Studium an der Münchner Ludwig-Maximilians-Universität.'] Label: [['Er studierte an der Ludwig-Maximilians-Universität in München und der Friedrich-Wilhelms-Universität in Berlin.']] Sacrebleu: {'score': 11.002068284361833, 'counts': [9, 4, 2, 1], 'totals': [28, 27, 26, 25], 'precisions': [32.142857142857146, 14.814814814814815, 7.6923076923076925, 4.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 13} Bleu: {'bleu': 0.11002068284361832, 'precisions': [0.32142857142857145, 0.14814814814814814, 0.07692307692307693, 0.04], 'brevity_penalty': 1.0, 'length_ratio': 2.1538461538461537, 'translation_length': 28, 'reference_length': 13} Rouge: {'rouge1': 0.6037735849056604, 'rouge2': 0.3921568627450981, 'rougeL': 0.339622641509434, 'rougeLsum': 0.45283018867924524} Sari: {'sari': 41.30890296144534} Flesh Reading Ease: 38.8 ---------------------------------------- Source: ['1867 zog die Familie nach München, wo Max das angesehene Maximiliansgymnasium besuchte.'] Prediction: ['Die Familie von Maximilians (1867-1867) wurde von der Familie nach München von der Familie gesucht.\nDie Familie wurde von der Familie nach München gesucht.\nDie Familie wurde von der Familie nach München gesucht.'] Label: [['1867 zog die Familie Planck nach München, wo Max das Gymnasium besuchte.']] Sacrebleu: {'score': 2.310428454615111, 'counts': [5, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [12.5, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.857142857142857, 'translation_length': 40, 'reference_length': 14} Rouge: {'rouge1': 0.24, 'rouge2': 0.125, 'rougeL': 0.24, 'rougeLsum': 0.24} Sari: {'sari': 22.007575757575758} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['Er spielte Cello und Klavier. Außerdem war er ein begeisterter Sänger.'] Prediction: ['Ein begeisterter Sänger spielte in der Schweiz mit Cello und Klavier.\nEr war ein begeisterter Sänger.'] Label: [['Er sang gern, spielte Cello und Klavier.']] Sacrebleu: {'score': 14.879641171245488, 'counts': [6, 3, 2, 1], 'totals': [18, 17, 16, 15], 'precisions': [33.333333333333336, 17.647058823529413, 12.5, 6.666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 9} Bleu: {'bleu': 0.1487964117124549, 'precisions': [0.3333333333333333, 0.17647058823529413, 0.125, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 18, 'reference_length': 9} Rouge: {'rouge1': 0.4, 'rouge2': 0.1739130434782609, 'rougeL': 0.32, 'rougeLsum': 0.4} Sari: {'sari': 45.388184843830004} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Deshalb dachte er darüber nach, Musik zu studieren, entschied sich aber für das Fach Physik.'] Prediction: ['Deshalb hatte sich für das Fach Physik eingeführt.\nDas hatte er darüber nach, Musik zu studieren.\nDas hatte er darüber nach, Musik zu studieren.'] Label: [['Zuerst dachte er darüber nach, Musik zu studieren, entschied sich aber für das Fach Physik.']] Sacrebleu: {'score': 29.657624487567727, 'counts': [14, 9, 7, 5], 'totals': [29, 28, 27, 26], 'precisions': [48.275862068965516, 32.142857142857146, 25.925925925925927, 19.23076923076923], 'bp': 1.0, 'sys_len': 29, 'ref_len': 18} Bleu: {'bleu': 0.29657624487567713, 'precisions': [0.4827586206896552, 0.32142857142857145, 0.25925925925925924, 0.19230769230769232], 'brevity_penalty': 1.0, 'length_ratio': 1.6111111111111112, 'translation_length': 29, 'reference_length': 18} Rouge: {'rouge1': 0.5777777777777777, 'rouge2': 0.4651162790697674, 'rougeL': 0.35555555555555557, 'rougeLsum': 0.5777777777777777} Sari: {'sari': 25.764101796712552} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Max Planck war zunächst Professor in seiner Geburtsstadt Kiel und wechselte dann nach Berlin.'] Prediction: ['Der frühere US-Amerikaner Max Planck hat sich in Berlin zu seiner Geburtsstadt geschlossen.\nEr wechselte dann nach Berlin.\nDer Zürcher Nationalspieler wechselte dann nach Berlin.'] Label: [['Später war er als Professor in Kiel und Berlin tätig.']] Sacrebleu: {'score': 1.7574239156849023, 'counts': [3, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [10.714285714285714, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.10714285714285714, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5454545454545454, 'translation_length': 28, 'reference_length': 11} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.15} Sari: {'sari': 28.71498599439776} Flesh Reading Ease: 54.7 ---------------------------------------- Source: ['Am 14. Dezember 1900 stellte er auf der Sitzung der Deutschen Physikalischen Gesellschaft seine Quantentheorie vor.'] Prediction: ['Der Deutschen Physikalische Gesellschaft hatte am 14.\nDezember 1900 seine Quantentheorie vorgestellt.\nAm 14.\nDezember 1900 stellte er auf der Sitzung der Deutschen Physikalischen Gesellschaft seine Quantentheorie vor.'] Label: [['Am 14.\nDezember 1900 stellte er seine Theorie vor.']] Sacrebleu: {'score': 20.06893275288755, 'counts': [10, 7, 5, 4], 'totals': [32, 31, 30, 29], 'precisions': [31.25, 22.580645161290324, 16.666666666666668, 13.793103448275861], 'bp': 1.0, 'sys_len': 32, 'ref_len': 11} Bleu: {'bleu': 0.20068932752887542, 'precisions': [0.3125, 0.22580645161290322, 0.16666666666666666, 0.13793103448275862], 'brevity_penalty': 1.0, 'length_ratio': 2.909090909090909, 'translation_length': 32, 'reference_length': 11} Rouge: {'rouge1': 0.43243243243243246, 'rouge2': 0.2857142857142857, 'rougeL': 0.43243243243243246, 'rougeLsum': 0.43243243243243246} Sari: {'sari': 51.67147034252297} Flesh Reading Ease: 42.0 ---------------------------------------- Source: ['Dieser Tag gilt als Geburtsstunde der Quantenphysik und der Beginn der modernen Physik.'] Prediction: ['Der US-Amerikaner Donald Trump hat seinen Geburtsstunden in den USA verheiratet.\nEr wurde als Geburtsstunde der Quantenphysik und der Beginn der modernen Physik.\nNun wurde er von der Geburtsstunde der Quantenphysik geburtsstunden.'] Label: [['Dieser Tag gilt als Geburtsstunde der Quantenphysik.']] Sacrebleu: {'score': 6.990006728332349, 'counts': [5, 3, 2, 1], 'totals': [35, 34, 33, 32], 'precisions': [14.285714285714286, 8.823529411764707, 6.0606060606060606, 3.125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 8} Bleu: {'bleu': 0.0699000672833235, 'precisions': [0.14285714285714285, 0.08823529411764706, 0.06060606060606061, 0.03125], 'brevity_penalty': 1.0, 'length_ratio': 4.375, 'translation_length': 35, 'reference_length': 8} Rouge: {'rouge1': 0.2, 'rouge2': 0.15789473684210525, 'rougeL': 0.2, 'rougeLsum': 0.2} Sari: {'sari': 11.427616723118815} Flesh Reading Ease: 52.3 ---------------------------------------- Source: ['Nach ihrer Vorstellung wurde die Quantentheorie heftig diskutiert.'] Prediction: ['Die Quantentheorie wurde heftig diskutiert.\nDie Erkrankung des Verstorbenen wurde heftig diskutiert.'] Label: [['Die Quantentheorie wurde viel diskutiert.']] Sacrebleu: {'score': 13.292417883329383, 'counts': [5, 3, 1, 0], 'totals': [14, 13, 12, 11], 'precisions': [35.714285714285715, 23.076923076923077, 8.333333333333334, 4.545454545454546], 'bp': 1.0, 'sys_len': 14, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.35714285714285715, 0.23076923076923078, 0.08333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 14, 'reference_length': 6} Rouge: {'rouge1': 0.47058823529411764, 'rouge2': 0.26666666666666666, 'rougeL': 0.47058823529411764, 'rougeLsum': 0.47058823529411764} Sari: {'sari': 58.857808857808855} Flesh Reading Ease: 33.6 ---------------------------------------- Source: ['Ein Jahr nach seinem Tod wurde die Kaiser-Wilhelm-Gesellschaft zur Förderung der Wissenschaften, deren Präsident er von 1930 bis 1937 war, ihm zu Ehren in Max-Planck-Gesellschaft umbenannt.'] Prediction: ['Der Präsident der Kaiser-Wilhelm-Gesellschaft wurde zu Ehren in Max-Planck-Gesellschaft umbenannt.\nDer Präsident wurde nach seinem Tod zur Förderung der Wissenschaften, deren Präsident er von 1930 bis 1937 war, ihm zu Ehren in Max-Planck-Gesellschaft umbenannt.'] Label: [['Ein Jahr nach seinem Tod wurde die Kaiser-Wilhelm-Gesellschaft zur Förderung der Wissenschaften ihm zu Ehren in Max-Planck-Gesellschaft umbenannt.']] Sacrebleu: {'score': 25.10754202777376, 'counts': [16, 11, 8, 5], 'totals': [38, 37, 36, 35], 'precisions': [42.10526315789474, 29.72972972972973, 22.22222222222222, 14.285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 19} Bleu: {'bleu': 0.25107542027773755, 'precisions': [0.42105263157894735, 0.2972972972972973, 0.2222222222222222, 0.14285714285714285], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 38, 'reference_length': 19} Rouge: {'rouge1': 0.5970149253731344, 'rouge2': 0.4615384615384615, 'rougeL': 0.4776119402985074, 'rougeLsum': 0.5671641791044776} Sari: {'sari': 25.592489947328662} Flesh Reading Ease: 40.15 ---------------------------------------- Source: ['Die Max-Planck-Gesellschaft hat sich zur bedeutendsten Forschungseinrichtung außerhalb einer Universität entwickelt.'] Prediction: ['Die Max-Planck-Gesellschaft hat sich zur bedeutendsten Forschungseinrichtung außerhalb einer Universität entwickelt.\nDie Max-Planck-Gesellschaft hat sich zur bedeutendsten Forschungseinrichtung außerhalb einer Universität entwickelt.'] Label: [['Sie ist die bedeutendste deutsche Forschungseinrichtung außerhalb einer Universität.']] Sacrebleu: {'score': 10.414419091986518, 'counts': [5, 3, 2, 1], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 13.043478260869565, 9.090909090909092, 4.761904761904762], 'bp': 1.0, 'sys_len': 24, 'ref_len': 10} Bleu: {'bleu': 0.10414419091986513, 'precisions': [0.20833333333333334, 0.13043478260869565, 0.09090909090909091, 0.047619047619047616], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 24, 'reference_length': 10} Rouge: {'rouge1': 0.34146341463414637, 'rouge2': 0.25641025641025644, 'rougeL': 0.34146341463414637, 'rougeLsum': 0.34146341463414637} Sari: {'sari': 46.9047619047619} Flesh Reading Ease: 5.2 ---------------------------------------- Source: ['Sie verläuft etwa 85 Kilometer von Schweigen-Rechtenbach im Süden an der Grenze zum französischen Elsass bis nach Bockenheim im Norden des Bundeslandes Rheinland-Pfalz.'] Prediction: ['Die Grenze ist in der Schweigen-Rechtenbach im Süden an der Grenze zum französischen Elsass gestartet.\nDie Grenze verläuft bis nach Bockenheim im Norden des Bundeslandes Rheinland-Pfalz.'] Label: [['Sie verläuft etwa 85 Kilometer von Schweigen-Rechtenbach im Süden bis nach Bockenheim im Norden des Bundeslandes Rheinland-Pfalz.']] Sacrebleu: {'score': 33.56891925037239, 'counts': [13, 10, 8, 6], 'totals': [28, 27, 26, 25], 'precisions': [46.42857142857143, 37.03703703703704, 30.76923076923077, 24.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 18} Bleu: {'bleu': 0.3356891925037239, 'precisions': [0.4642857142857143, 0.37037037037037035, 0.3076923076923077, 0.24], 'brevity_penalty': 1.0, 'length_ratio': 1.5555555555555556, 'translation_length': 28, 'reference_length': 18} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.5199999999999999, 'rougeL': 0.5384615384615384, 'rougeLsum': 0.6153846153846153} Sari: {'sari': 25.966269841269842} Flesh Reading Ease: 50.0 ---------------------------------------- Source: ['Neben den zahlreichen Weinbergen ist die Region auch bekannt für die Mandelbäume, die links und rechts der Straßen stehen.'] Prediction: ['Die Mandelbäume stehen in der Schweiz.\nDie zahlreichen Weinbergen stehen auch bekannt für die Mandelbäume.\nDie Mandelbäume stehen auch bekannt für die links und rechts der Straßen.'] Label: [['Neben den Weinbergen ist die Region auch bekannt für Mandelbäume.']] Sacrebleu: {'score': 6.321018519493676, 'counts': [7, 3, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [23.333333333333332, 10.344827586206897, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.23333333333333334, 0.10344827586206896, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.727272727272727, 'translation_length': 30, 'reference_length': 11} Rouge: {'rouge1': 0.3555555555555555, 'rouge2': 0.18604651162790697, 'rougeL': 0.3111111111111111, 'rougeLsum': 0.3555555555555555} Sari: {'sari': 26.105161032654888} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Außerdem wachsen bedingt durch das warme Klima auch Feigen, Kiwis und andere für Deutschland nicht übliche Obstsorten.'] Prediction: ['Die Schweiz hat einen Klima-Klima für Deutschland geschlossen.\nDie Schweiz hat das warme Klima auch Feigen, Kiwis und andere für Deutschland nicht übliche Obstsorten.'] Label: [['Außerdem wachsen in der Region Südfrüchte wie Feigen oder Kiwis.']] Sacrebleu: {'score': 1.826472886268134, 'counts': [3, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [11.11111111111111, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4545454545454546, 'translation_length': 27, 'reference_length': 11} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 29.583333333333332} Flesh Reading Ease: 62.7 ---------------------------------------- Source: ['Zwischen März und Oktober feiern Einheimische und Touristen die für die Region typischen Weinfeste.'] Prediction: ['Einheimische und Touristen feierten in den letzten Tagen einige Wochen in den Schweizerischen Weinfeste.\nDie Region ist typisch und wütete eine Woche.'] Label: [['Zwischen März und Oktober feiern Einheimische und Touristen die typischen Weinfeste.']] Sacrebleu: {'score': 7.7075324887553816, 'counts': [6, 3, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 13.043478260869565, 4.545454545454546, 2.380952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.13043478260869565, 0.045454545454545456, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 24, 'reference_length': 12} Rouge: {'rouge1': 0.3428571428571428, 'rouge2': 0.12121212121212123, 'rougeL': 0.22857142857142854, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 22.53776946958765} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Er ist das größte zusammenhängende Waldgebiet Deutschlands und bietet schöne Wandermöglichkeiten mit zahlreichen Hütten, um Rast zu machen und lokale Köstlichkeiten zu genießen.'] Prediction: ['Das größte zusammenhängende Waldgebiet Deutschlands ist ein größtes zusammenhängende Waldgebiet.\nEs ist das größte zusammenhängende Waldgebiet Deutschlands und bietet schöne Wandermöglichkeiten mit zahlreichen Hütten, um Rast zu machen und lokale Köstlichkeiten zu genießen.'] Label: [['Er ist das größte Waldgebiet Deutschlands und bietet schöne Wanderwege.']] Sacrebleu: {'score': 13.221480420392126, 'counts': [9, 6, 4, 2], 'totals': [36, 35, 34, 33], 'precisions': [25.0, 17.142857142857142, 11.764705882352942, 6.0606060606060606], 'bp': 1.0, 'sys_len': 36, 'ref_len': 11} Bleu: {'bleu': 0.1322148042039212, 'precisions': [0.25, 0.17142857142857143, 0.11764705882352941, 0.06060606060606061], 'brevity_penalty': 1.0, 'length_ratio': 3.272727272727273, 'translation_length': 36, 'reference_length': 11} Rouge: {'rouge1': 0.35714285714285715, 'rouge2': 0.2962962962962963, 'rougeL': 0.35714285714285715, 'rougeLsum': 0.35714285714285715} Sari: {'sari': 11.696658378048248} Flesh Reading Ease: 23.1 ---------------------------------------- Source: ['Im Pfälzerwald liegen viele Burgen und Schlösser, darunter das Hambacher Schloss, ein Nationaldenkmal.'] Prediction: ['Im Pfälzerwald liegen viele Burgen und Schlösser ein Nationaldenkmal.\nSie liegen im Pfälzerwald ein Nationaldenkmal.'] Label: [['Im Pfälzerwald liegen viele Burgen und Schlösser.']] Sacrebleu: {'score': 36.005658542850306, 'counts': [8, 6, 5, 4], 'totals': [17, 16, 15, 14], 'precisions': [47.05882352941177, 37.5, 33.333333333333336, 28.571428571428573], 'bp': 1.0, 'sys_len': 17, 'ref_len': 8} Bleu: {'bleu': 0.360056585428503, 'precisions': [0.47058823529411764, 0.375, 0.3333333333333333, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 2.125, 'translation_length': 17, 'reference_length': 8} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.6399999999999999, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 63.79268879268879} Flesh Reading Ease: 37.95 ---------------------------------------- Source: ['Kein Wunder, denn Sport im Freien hat einige Vorteile, die es in Sporthallen und Fitnessstudios nicht gibt.'] Prediction: ['Die Fitness-Vorteile im Freien sind einige Vorteile.\nEs ist ein Wunder, denn Sport im Freien hat einige Vorteile, die es in Sporthallen und Fitnessstudios nicht gibt.'] Label: [['Sport im Freien hat einige Vorteile, die es in Sporthallen und Fitnessstudios nicht gibt.']] Sacrebleu: {'score': 50.7645330089512, 'counts': [16, 15, 14, 13], 'totals': [30, 29, 28, 27], 'precisions': [53.333333333333336, 51.724137931034484, 50.0, 48.148148148148145], 'bp': 1.0, 'sys_len': 30, 'ref_len': 16} Bleu: {'bleu': 0.5076453300895118, 'precisions': [0.5333333333333333, 0.5172413793103449, 0.5, 0.48148148148148145], 'brevity_penalty': 1.0, 'length_ratio': 1.875, 'translation_length': 30, 'reference_length': 16} Rouge: {'rouge1': 0.6829268292682926, 'rouge2': 0.6666666666666666, 'rougeL': 0.6829268292682926, 'rougeLsum': 0.6829268292682926} Sari: {'sari': 63.61867978340676} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Die Probanden berichteten im Vergleich zu Sport in geschlossenen Räumen von mehr Erholung, mehr Energie, mehr Spaß, mehr Befriedigung und einer positiveren Einstellung zum Training.'] Prediction: ['Die Probanden berichteten im Vergleich zu Sport in geschlossenen Räumen von mehr Erholung, mehr Energie, mehr Spaß, mehr Befriedigung und einer positiveren Einstellung zum Training.\nDie Probanden berichten im Vergleich zu Sport in geschlossenen Räumen von mehr Erholung, mehr Energie, mehr Spaß, mehr Befriedigung und einer positiveren Einstellung zum Training.'] Label: [['Die Teilnehmer hatten mehr Spaß am Sport.\nDanach hatten sie mehr Energie und fühlten sich erholter als beim Sport in einer Halle.']] Sacrebleu: {'score': 2.578337332945318, 'counts': [12, 3, 0, 0], 'totals': [58, 57, 56, 55], 'precisions': [20.689655172413794, 5.2631578947368425, 0.8928571428571429, 0.45454545454545453], 'bp': 1.0, 'sys_len': 58, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.20689655172413793, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4166666666666665, 'translation_length': 58, 'reference_length': 24} Rouge: {'rouge1': 0.26666666666666666, 'rouge2': 0.0821917808219178, 'rougeL': 0.21333333333333332, 'rougeLsum': 0.18666666666666668} Sari: {'sari': 39.41644562334217} Flesh Reading Ease: 43.85 ---------------------------------------- Source: ['Sportgruppen werden seit einigen Jahren immer beliebter.'] Prediction: ['Die Schweizer Nationalmannschaft hat einen grossen Ausbruch der Corona-Pandemie.\nDie Schweizer Nationalmannschaft hat seit einigen Jahren immer beliebter.'] Label: [['Deshalb werden Sportgruppen seit einigen Jahren immer beliebter.']] Sacrebleu: {'score': 23.588448106534212, 'counts': [6, 5, 4, 3], 'totals': [20, 19, 18, 17], 'precisions': [30.0, 26.31578947368421, 22.22222222222222, 17.647058823529413], 'bp': 1.0, 'sys_len': 20, 'ref_len': 9} Bleu: {'bleu': 0.23588448106534202, 'precisions': [0.3, 0.2631578947368421, 0.2222222222222222, 0.17647058823529413], 'brevity_penalty': 1.0, 'length_ratio': 2.2222222222222223, 'translation_length': 20, 'reference_length': 9} Rouge: {'rouge1': 0.37037037037037035, 'rouge2': 0.32, 'rougeL': 0.37037037037037035, 'rougeLsum': 0.37037037037037035} Sari: {'sari': 57.14285714285715} Flesh Reading Ease: 30.6 ---------------------------------------- Source: ['In fast allen großen deutschen Städten sieht man regelmäßig Fitnessgruppen in Parks, die unter Anleitung eines Trainers, oft mit Musik aus Lautsprechern, ihre Übungen absolvieren, zum Beispiel beim Zirkeltraining mit kleinen Geräten oder beim Yoga.'] Prediction: ['In deutschen Parks sieht man regelmäßig Fitnessgruppen in Parks, die unter Anleitung eines Trainers, oft mit Musik aus Lautsprechern, ihre Übungen absolvieren.\nIn der deutschen Städte sieht man regelmäßig Fitnessgruppen in Parks, die unter Anleitung eines Trainers, oft mit Musik aus Lautsprechern, ihre Übungen absolvieren, zum Beispiel beim Zirkeltraining mit kleinen Geräten oder beim Yoga.'] Label: [['In fast allen großen deutschen Städten sieht man regelmäßig Fitnessgruppen in Parks, die angeleitet von einem Trainer ihre Übungen machen, zum Beispiel beim Zirkeltraining mit kleinen Geräten oder beim Yoga.']] Sacrebleu: {'score': 28.608342943228845, 'counts': [24, 19, 16, 14], 'totals': [64, 63, 62, 61], 'precisions': [37.5, 30.158730158730158, 25.806451612903224, 22.950819672131146], 'bp': 1.0, 'sys_len': 64, 'ref_len': 33} Bleu: {'bleu': 0.2860834294322886, 'precisions': [0.375, 0.30158730158730157, 0.25806451612903225, 0.22950819672131148], 'brevity_penalty': 1.0, 'length_ratio': 1.9393939393939394, 'translation_length': 64, 'reference_length': 33} Rouge: {'rouge1': 0.5161290322580646, 'rouge2': 0.41758241758241754, 'rougeL': 0.5161290322580646, 'rougeLsum': 0.5161290322580646} Sari: {'sari': 21.22320511857361} Flesh Reading Ease: 41.35 ---------------------------------------- Source: ['Man kann sich gegenseitig anspornen und unterstützen.'] Prediction: ['Die Polizei hat sich in den USA gegenseitig anspornen und unterstützen.\nDie Polizei verkündet, dass sie sich gegenseitig anspornen und unterstützen.'] Label: [['Die Teilnehmer motivieren und unterstützen sich gegenseitig.']] Sacrebleu: {'score': 4.92467473444436, 'counts': [6, 2, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 8.695652173913043, 2.272727272727273, 1.1904761904761905], 'bp': 1.0, 'sys_len': 24, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.08695652173913043, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 24, 'reference_length': 8} Rouge: {'rouge1': 0.375, 'rouge2': 0.2, 'rougeL': 0.375, 'rougeLsum': 0.25} Sari: {'sari': 46.95304695304696} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['Freunde und Bekannte treffen sich auch häufig in lockeren Gruppen für Aktivitäten im Freien wie Mountainbiken, Slacklinen – das Balancieren auf einem Spanngurt, der zwischen zwei Bäumen gespannt ist – oder in Hochseilgärten.'] Prediction: ['Freunde und Bekannte treffen sich häufig in lockeren Gruppen für Aktivitäten im Freien wie Mountainbiken, Slacklinen oder Hochseilgärten.\nSie treffen sich häufig in lockeren Gruppen für Aktivitäten im Freien wie Mountainbiken, Slacklinen oder in Hochseilgärten.'] Label: [['Freunde und Bekannte treffen sich auch häufig in kleinen Gruppen für Aktivitäten im Freien wie Mountainbiken, Slacklinen – das Balancieren auf einem breiten Band, das zwischen zwei Bäumen gespannt ist – oder in Hochseilgärten.']] Sacrebleu: {'score': 36.821599595545464, 'counts': [21, 16, 12, 9], 'totals': [39, 38, 37, 36], 'precisions': [53.84615384615385, 42.10526315789474, 32.432432432432435, 25.0], 'bp': 1.0, 'sys_len': 39, 'ref_len': 37} Bleu: {'bleu': 0.36821599595545457, 'precisions': [0.5384615384615384, 0.42105263157894735, 0.32432432432432434, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.054054054054054, 'translation_length': 39, 'reference_length': 37} Rouge: {'rouge1': 0.55, 'rouge2': 0.4615384615384615, 'rougeL': 0.55, 'rougeLsum': 0.55} Sari: {'sari': 29.402598181393547} Flesh Reading Ease: 39.65 ---------------------------------------- Source: ['Gemeinsam macht Sport einfach mehr Spaß.'] Prediction: ['Am Sonntagabend fand in der Nati ein Schweizer Open-Day statt.\nDas Team hatte einen speziellen Sieg.'] Label: [['In einer Gruppe macht der Sport meistens noch mehr Spaß.']] Sacrebleu: {'score': 2.5540496664715904, 'counts': [2, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [11.11111111111111, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 18, 'reference_length': 11} Rouge: {'rouge1': 0.14814814814814817, 'rouge2': 0.0, 'rougeL': 0.14814814814814817, 'rougeLsum': 0.14814814814814817} Sari: {'sari': 35.95959595959595} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Bei 22,1 Millionen Personen war die Wirbelsäule betroffen. Laut einer im Jahr 2016 veröffentlichten Statistik der Kassenärztlichen Bundesvereinigung gingen im Jahr 2015 fast die Hälfte der Deutschen wegen einer Erkrankung von Muskeln, Skelett oder Bindegewebe zum Arzt.'] Prediction: ['Die Wirbelsäule der Deutschen sind bei 22,1 Millionen betroffen.\nLaut einer im Jahr 2016 veröffentlichten Statistik der Kassenärztlichen Bundesvereinigung gingen im Jahr 2015 fast die Hälfte der Deutschen wegen einer Erkrankung von Muskeln, Skelett oder Bindegewebe zum Arzt.'] Label: [['Laut einer im Jahr 2016 veröffentlichten Statistik der Kassenärztlichen Bundesvereinigung gingen im Jahr davor 22,1 Millionen Deutsche wegen einer Erkrankung der Wirbelsäule zum Arzt.']] Sacrebleu: {'score': 38.02830903324886, 'counts': [23, 17, 13, 10], 'totals': [41, 40, 39, 38], 'precisions': [56.09756097560975, 42.5, 33.333333333333336, 26.31578947368421], 'bp': 1.0, 'sys_len': 41, 'ref_len': 25} Bleu: {'bleu': 0.3802830903324885, 'precisions': [0.5609756097560976, 0.425, 0.3333333333333333, 0.2631578947368421], 'brevity_penalty': 1.0, 'length_ratio': 1.64, 'translation_length': 41, 'reference_length': 25} Rouge: {'rouge1': 0.7323943661971831, 'rouge2': 0.5797101449275363, 'rougeL': 0.5633802816901409, 'rougeLsum': 0.647887323943662} Sari: {'sari': 53.753758709204256} Flesh Reading Ease: 44.0 ---------------------------------------- Source: ['Diese Volkskrankheiten haben oft starke wirtschaftliche Auswirkungen für die gesamte Bevölkerung eines Landes.'] Prediction: ['Der Land hat wirtschaftliche Auswirkungen für die gesamte Bevölkerung eines Landes.\nDie gesamte Bevölkerung eines Landes hat oft wirtschaftliche Auswirkungen für die gesamte Bevölkerung eines Landes.'] Label: [['Sie haben oft starke wirtschaftliche Auswirkungen für die gesamte Bevölkerung eines Landes.']] Sacrebleu: {'score': 28.755838200176385, 'counts': [10, 8, 7, 6], 'totals': [28, 27, 26, 25], 'precisions': [35.714285714285715, 29.62962962962963, 26.923076923076923, 24.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 13} Bleu: {'bleu': 0.28755838200176376, 'precisions': [0.35714285714285715, 0.2962962962962963, 0.2692307692307692, 0.24], 'brevity_penalty': 1.0, 'length_ratio': 2.1538461538461537, 'translation_length': 28, 'reference_length': 13} Rouge: {'rouge1': 0.48888888888888893, 'rouge2': 0.41860465116279066, 'rougeL': 0.48888888888888893, 'rougeLsum': 0.48888888888888893} Sari: {'sari': 42.28937986677925} Flesh Reading Ease: 32.45 ---------------------------------------- Source: ['Während es bei den sogenannten seltenen Erkrankungen weltweit oft nur einige Tausend Fälle gibt, sind andere Krankheiten sehr stark verbreitet.'] Prediction: ['Die Corona-Pandemie ist weltweit nicht mehr gefährlich.\nDie Krankheiten sind stark verbreitet.'] Label: [['Krankheiten, die sehr weit verbreitet sind, werden auch Volkskrankheiten genannt.']] Sacrebleu: {'score': 4.016138436407654, 'counts': [4, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [28.571428571428573, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0769230769230769, 'translation_length': 14, 'reference_length': 13} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.0, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.25} Sari: {'sari': 47.56944444444444} Flesh Reading Ease: 57.0 ---------------------------------------- Source: ['Sie führen in der Summe zu hohen Behandlungskosten und zu vielen Fehltagen, wenn die Patienten nicht arbeitsfähig sind.'] Prediction: ['Die Behandlungskosten führen zu hohen Behandlungskosten und zu vielen Fehltagen.\nDie Behandlungs-Kosten führen zu hohen Behandlungskosten und zu vielen Fehltagen.'] Label: [['Sie führen zu hohen Behandlungskosten und zu vielen Fehltagen, wenn die Patienten nicht arbeiten können.']] Sacrebleu: {'score': 32.21135973222975, 'counts': [9, 7, 6, 5], 'totals': [22, 21, 20, 19], 'precisions': [40.90909090909091, 33.333333333333336, 30.0, 26.31578947368421], 'bp': 1.0, 'sys_len': 22, 'ref_len': 17} Bleu: {'bleu': 0.3221135973222975, 'precisions': [0.4090909090909091, 0.3333333333333333, 0.3, 0.2631578947368421], 'brevity_penalty': 1.0, 'length_ratio': 1.2941176470588236, 'translation_length': 22, 'reference_length': 17} Rouge: {'rouge1': 0.5, 'rouge2': 0.4210526315789474, 'rougeL': 0.5, 'rougeLsum': 0.45} Sari: {'sari': 45.8039183039183} Flesh Reading Ease: 35.45 ---------------------------------------- Source: ['Einige Volkskrankheiten wie zum Beispiel Herz-Kreislauf-Erkrankungen durch hohen Blutdruck oder Diabetes Typ 2 hängen mit der typischen Lebensweise in den Industrienationen zusammen und werden auch als Zivilisationskrankheiten bezeichnet.'] Prediction: ['Einige Volkskrankheiten wie Herz-Kreislauf-Erkrankungen durch hohen Blutdruck oder Diabetes Typ 2 hängen mit der typischen Lebensweise in den Industrienationen zusammen.\nDie Zivilisationskrankheiten wie zum Beispiel Herz-Kreislauf-Erkrankungen durch hohen Blutdruck oder Diabetes Typ 2 hängen mit der typischen Lebensweise in den Industrienationen zusammen und werden auch als Zivilisationskrankheiten bezeichnet.'] Label: [['Einige Volkskrankheiten wie zum Beispiel Herz-Kreislauf-Erkrankungen durch hohen Blutdruck oder Diabetes Typ 2 kommen besonders häufig in Industrieländern vor.']] Sacrebleu: {'score': 22.592501932697186, 'counts': [15, 12, 10, 8], 'totals': [50, 49, 48, 47], 'precisions': [30.0, 24.489795918367346, 20.833333333333332, 17.02127659574468], 'bp': 1.0, 'sys_len': 50, 'ref_len': 20} Bleu: {'bleu': 0.22592501932697184, 'precisions': [0.3, 0.24489795918367346, 0.20833333333333334, 0.1702127659574468], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 50, 'reference_length': 20} Rouge: {'rouge1': 0.4415584415584415, 'rouge2': 0.3733333333333333, 'rougeL': 0.4415584415584415, 'rougeLsum': 0.4415584415584415} Sari: {'sari': 35.77455798044033} Flesh Reading Ease: 3.9 ---------------------------------------- Source: ['Die Menschen ernähren sich schlecht, essen zu viel oder zu fettreich und bewegen sich zu wenig.'] Prediction: ['Die Menschen sind sich schlecht, essen zu viel oder zu fettreich und bewegen sich zu wenig.\nDie Menschen ernähren sich schlecht, essen zu viel oder zu fettreich und bewegen sich zu wenig.'] Label: [['Die Menschen ernähren sich ungesund und bewegen sich zu wenig.']] Sacrebleu: {'score': 19.19704825961155, 'counts': [10, 8, 6, 4], 'totals': [36, 35, 34, 33], 'precisions': [27.77777777777778, 22.857142857142858, 17.647058823529413, 12.121212121212121], 'bp': 1.0, 'sys_len': 36, 'ref_len': 11} Bleu: {'bleu': 0.1919704825961155, 'precisions': [0.2777777777777778, 0.22857142857142856, 0.17647058823529413, 0.12121212121212122], 'brevity_penalty': 1.0, 'length_ratio': 3.272727272727273, 'translation_length': 36, 'reference_length': 11} Rouge: {'rouge1': 0.45454545454545453, 'rouge2': 0.38095238095238093, 'rougeL': 0.45454545454545453, 'rougeLsum': 0.45454545454545453} Sari: {'sari': 52.67327409432673} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Dieselbe Studie verzeichnet einen Anstieg von fast 20 Prozent seit dem Jahr 2010 bei psychischen Verhaltensstörungen.'] Prediction: ['Eine Studie von fast 20 Prozent verzeichnet einen Anstieg von fast 20 Prozent seit dem Jahr 2010 bei psychischen Verhaltensstörungen.\nDie Studie verzeichnet einen Anstieg von fast 20 Prozent seit dem Jahr 2010 bei psychischen Verhaltensstörungen.'] Label: [['Dieselbe Studie zeigt einen Anstieg von fast 20 Prozent seit dem Jahr 2010 bei psychischen Erkrankungen.']] Sacrebleu: {'score': 29.74074484950164, 'counts': [14, 11, 10, 9], 'totals': [38, 37, 36, 35], 'precisions': [36.8421052631579, 29.72972972972973, 27.77777777777778, 25.714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 17} Bleu: {'bleu': 0.29740744849501655, 'precisions': [0.3684210526315789, 0.2972972972972973, 0.2777777777777778, 0.2571428571428571], 'brevity_penalty': 1.0, 'length_ratio': 2.235294117647059, 'translation_length': 38, 'reference_length': 17} Rouge: {'rouge1': 0.4814814814814815, 'rouge2': 0.42307692307692313, 'rougeL': 0.4814814814814815, 'rougeLsum': 0.4814814814814815} Sari: {'sari': 44.74629810651316} Flesh Reading Ease: 62.55 ---------------------------------------- Source: ['Zu den häufigsten psychischen Erkrankungen gehören Depressionen, Burnout und Angstzustände.'] Prediction: ['Derzeit gehören die häufigsten psychischen Erkrankungen, Burnout und Angstzustände.\nZu den häufigsten psychischen Erkrankungen gehören Depressionen, Burnout und Angstzustände.'] Label: [['Am häufigsten kommen Depressionen, Burnout und Angstzustände vor.']] Sacrebleu: {'score': 16.76784955078518, 'counts': [7, 4, 3, 2], 'totals': [23, 22, 21, 20], 'precisions': [30.434782608695652, 18.181818181818183, 14.285714285714286, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 10} Bleu: {'bleu': 0.1676784955078518, 'precisions': [0.30434782608695654, 0.18181818181818182, 0.14285714285714285, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.3, 'translation_length': 23, 'reference_length': 10} Rouge: {'rouge1': 0.4, 'rouge2': 0.30303030303030304, 'rougeL': 0.4, 'rougeLsum': 0.4} Sari: {'sari': 50.79458553142763} Flesh Reading Ease: 18.4 ---------------------------------------- Source: ['84 Prozent nehmen täglich eine oder mehrere Tassen zu sich. Kaffee und Tee werden ebenfalls gern getrunken:'] Prediction: ['84 Prozent nehmen täglich eine oder mehrere Tassen zu sich.\nKaffee und Tee werden ebenfalls gern getrunken.'] Label: [['Kaffee und Tee werden ebenfalls viel getrunken.']] Sacrebleu: {'score': 21.797469124036954, 'counts': [7, 5, 3, 2], 'totals': [19, 18, 17, 16], 'precisions': [36.8421052631579, 27.77777777777778, 17.647058823529413, 12.5], 'bp': 1.0, 'sys_len': 19, 'ref_len': 8} Bleu: {'bleu': 0.21797469124036953, 'precisions': [0.3684210526315789, 0.2777777777777778, 0.17647058823529413, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 19, 'reference_length': 8} Rouge: {'rouge1': 0.48, 'rouge2': 0.3478260869565218, 'rougeL': 0.48, 'rougeLsum': 0.48} Sari: {'sari': 49.93363310236376} Flesh Reading Ease: 72.05 ---------------------------------------- Source: ['Das deutsche Bundesministerium für Ernährung und Landwirtschaft (BMEL) hat im Oktober 2017 eine Umfrage zum Thema „Ernährung“ in Auftrag gegeben: den Ernährungsreport 2018. Rund 1000 Deutsche ab 14 Jahren gaben einem Meinungsforschungsinstitut Antworten zu ihren Essgewohnheiten.'] Prediction: ['Der deutsche Bundesministerium für Ernährung und Landwirtschaft hat eine Umfrage zum Thema "Ernährung" in Auftrag gegeben.\n1000 Deutsche ab 14 Jahren gaben einem Meinungsforschungsinstitut Antworten zu ihren Essgewohnheiten.'] Label: [['Das deutsche Bundesministerium für Ernährung und Landwirtschaft (BMEL) hat eine Umfrage zum Thema „Ernährung“ in Auftrag gegeben: den Ernährungsreport 2018.\nRund 1000 Deutsche ab 14 Jahren gaben Antworten zu ihren Essgewohnheiten.']] Sacrebleu: {'score': 48.38704597103439, 'counts': [26, 20, 15, 10], 'totals': [32, 31, 30, 29], 'precisions': [81.25, 64.51612903225806, 50.0, 34.48275862068966], 'bp': 0.8824969025845955, 'sys_len': 32, 'ref_len': 36} Bleu: {'bleu': 0.4838704597103439, 'precisions': [0.8125, 0.6451612903225806, 0.5, 0.3448275862068966], 'brevity_penalty': 0.8824969025845955, 'length_ratio': 0.8888888888888888, 'translation_length': 32, 'reference_length': 36} Rouge: {'rouge1': 0.8484848484848486, 'rouge2': 0.7500000000000001, 'rougeL': 0.8484848484848486, 'rougeLsum': 0.8484848484848486} Sari: {'sari': 32.22332827515754} Flesh Reading Ease: 31.45 ---------------------------------------- Source: ['Auch wenn die Gewohnheiten sehr verschieden sind, am wichtigsten ist den Befragten, dass das Essen schmeckt.'] Prediction: ['Der Essen ist in den Schweizer Gewohnheiten verschieden.\nDie Gewohnheiten sind sehr verschiedene und wichtigsten ist den Befragten, dass das Essen schmeckt.'] Label: [['Am wichtigsten ist den Befragten, dass das Essen schmeckt.']] Sacrebleu: {'score': 35.89485409071449, 'counts': [10, 9, 8, 7], 'totals': [25, 24, 23, 22], 'precisions': [40.0, 37.5, 34.78260869565217, 31.818181818181817], 'bp': 1.0, 'sys_len': 25, 'ref_len': 11} Bleu: {'bleu': 0.3589485409071449, 'precisions': [0.4, 0.375, 0.34782608695652173, 0.3181818181818182], 'brevity_penalty': 1.0, 'length_ratio': 2.272727272727273, 'translation_length': 25, 'reference_length': 11} Rouge: {'rouge1': 0.5161290322580644, 'rouge2': 0.48275862068965514, 'rougeL': 0.5161290322580644, 'rougeLsum': 0.5161290322580644} Sari: {'sari': 55.804319591084294} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['Junge Menschen ernähren sich dabei nicht ganz so gesundheitsbewusst wie Ältere.'] Prediction: ['Die Polizei hat sich in den vergangenen Tagen aufgefunden, dass sie sich nicht ganz so gesundheitsbewusst wie Ältere ernähren sich.\nDie Polizei ernählt sich dabei nicht ganz so gesundheitsbewusst wie Ältere.'] Label: [['Junge Menschen ernähren sich dabei nicht ganz so gesund wie ältere.']] Sacrebleu: {'score': 12.117880855911823, 'counts': [8, 5, 3, 2], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 15.151515151515152, 9.375, 6.451612903225806], 'bp': 1.0, 'sys_len': 34, 'ref_len': 12} Bleu: {'bleu': 0.12117880855911824, 'precisions': [0.23529411764705882, 0.15151515151515152, 0.09375, 0.06451612903225806], 'brevity_penalty': 1.0, 'length_ratio': 2.8333333333333335, 'translation_length': 34, 'reference_length': 12} Rouge: {'rouge1': 0.39999999999999997, 'rouge2': 0.3255813953488372, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.3555555555555555} Sari: {'sari': 21.41654641654642} Flesh Reading Ease: 53.35 ---------------------------------------- Source: ['Laut Angaben der Befragten scheint die Ernährung gesund zu sein:'] Prediction: ['Einige Befragte wurden in der Nacht auf Sonntag in der Nacht auf Sonntag bekanntgegeben.\nSie wurden dabei verhaftet, dass sie sich gesund sein scheint.'] Label: [['Laut Angaben der Befragten ernähren sie sich gesund:']] Sacrebleu: {'score': 5.551277111446363, 'counts': [4, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 27, 'reference_length': 9} Rouge: {'rouge1': 0.24242424242424243, 'rouge2': 0.12903225806451613, 'rougeL': 0.24242424242424243, 'rougeLsum': 0.24242424242424243} Sari: {'sari': 30.214947089947092} Flesh Reading Ease: 68.55 ---------------------------------------- Source: ['Allerdings essen auch 43 Prozent der Menschen in Deutschland regelmäßig außer Haus.'] Prediction: ['In Deutschland sind 43 Prozent der Menschen am meisten am Mittwoch.\nDie Menschen sind regelmäßig außer Haus.'] Label: [['43 Prozent der Menschen in Deutschland essen regelmäßig außer Haus.']] Sacrebleu: {'score': 26.104909033290696, 'counts': [9, 6, 4, 2], 'totals': [19, 18, 17, 16], 'precisions': [47.36842105263158, 33.333333333333336, 23.529411764705884, 12.5], 'bp': 1.0, 'sys_len': 19, 'ref_len': 11} Bleu: {'bleu': 0.26104909033290696, 'precisions': [0.47368421052631576, 0.3333333333333333, 0.23529411764705882, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 1.7272727272727273, 'translation_length': 19, 'reference_length': 11} Rouge: {'rouge1': 0.7096774193548387, 'rouge2': 0.5517241379310345, 'rougeL': 0.5806451612903226, 'rougeLsum': 0.5806451612903226} Sari: {'sari': 52.361111111111114} Flesh Reading Ease: 77.9 ---------------------------------------- Source: ['Stimmt es, dass Frauen mehr auf gesunde Ernährung achten als Männer? Ja.'] Prediction: ['Frauen haben mehr auf gesunde Ernährung achten als Männer.\nDas sind die erste Tage nach der ganzen Woche.\nDie Frauen haben sich mehr auf gesunde Ernährung achten als Männer.'] Label: [['Laut Umfrage achten die Frauen mehr auf eine gesunde Ernährung als Männer.']] Sacrebleu: {'score': 6.938247178254631, 'counts': [10, 4, 1, 0], 'totals': [32, 31, 30, 29], 'precisions': [31.25, 12.903225806451612, 3.3333333333333335, 1.7241379310344827], 'bp': 1.0, 'sys_len': 32, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.3125, 0.12903225806451613, 0.03333333333333333, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4615384615384617, 'translation_length': 32, 'reference_length': 13} Rouge: {'rouge1': 0.4680851063829786, 'rouge2': 0.26666666666666666, 'rougeL': 0.4680851063829786, 'rougeLsum': 0.42553191489361697} Sari: {'sari': 47.60249042145594} Flesh Reading Ease: 70.85 ---------------------------------------- Source: ['Laut Umfrage ist 96 Prozent der Frauen ein gesundes Essen wichtig.'] Prediction: ['Ein gesundes Essen ist in 96 Prozent der Frauen wichtig.\n96 Prozent der Frauen sind ein gesundes Essen wichtig.'] Label: [['96 Prozent der Frauen ist ein gesundes Essen wichtig.']] Sacrebleu: {'score': 29.240074556521943, 'counts': [10, 7, 5, 3], 'totals': [21, 20, 19, 18], 'precisions': [47.61904761904762, 35.0, 26.31578947368421, 16.666666666666668], 'bp': 1.0, 'sys_len': 21, 'ref_len': 10} Bleu: {'bleu': 0.29240074556521944, 'precisions': [0.47619047619047616, 0.35, 0.2631578947368421, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 21, 'reference_length': 10} Rouge: {'rouge1': 0.6428571428571429, 'rouge2': 0.46153846153846156, 'rougeL': 0.5714285714285714, 'rougeLsum': 0.5714285714285714} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 76.9 ---------------------------------------- Source: ['Er gilt als Europas erster groß angelegter Park, der für jeden frei zugänglich war.'] Prediction: ['Am Freitag gilt die Europas in St. Gallen.\nNach dem Sieg gilt der Mann von St. Gallen zu einem frei zugänglich.'] Label: [['Jeder durfte sich dort aufhalten.\nEr wurde im Jahr 1789 als erster Park in Europa für alle Menschen geöffnet.']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1904761904761905, 'translation_length': 25, 'reference_length': 21} Rouge: {'rouge1': 0.046511627906976744, 'rouge2': 0.0, 'rougeL': 0.046511627906976744, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 47.83950617283951} Flesh Reading Ease: 91.1 ---------------------------------------- Source: ['Friedrich Ludwig von Sckell schuf ab dem Jahr 1789 in München eine der bekanntesten deutschen Parkanlagen, den Englischen Garten.'] Prediction: ['Friedrich Ludwig von Sckell schuf ab dem Jahr 1789 in München eine der bekanntesten deutschen Parkanlagen, den Englischen Garten.\nDer Englischen Garten wurde von Sckell von Sckell von der Bevölkerung von München geschickt.'] Label: [['Der Englische Garten in München ist eine der bekanntesten deutschen Parkanlagen.']] Sacrebleu: {'score': 12.069505116436089, 'counts': [10, 5, 3, 2], 'totals': [36, 35, 34, 33], 'precisions': [27.77777777777778, 14.285714285714286, 8.823529411764707, 6.0606060606060606], 'bp': 1.0, 'sys_len': 36, 'ref_len': 12} Bleu: {'bleu': 0.1206950511643609, 'precisions': [0.2777777777777778, 0.14285714285714285, 0.08823529411764706, 0.06060606060606061], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 36, 'reference_length': 12} Rouge: {'rouge1': 0.4166666666666667, 'rouge2': 0.26086956521739124, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.4166666666666667} Sari: {'sari': 45.60606060606061} Flesh Reading Ease: 64.05 ---------------------------------------- Source: ['Seit sie im Jahr 2010 als Park freigegeben wurde, nutzen zahlreiche Touristen und Berliner die über 300 Hektar große Freifläche.'] Prediction: ['Zahlreiche Touristen und Berliner nutzen die über 300 Hektar große Freifläche.\nSeit 2010 als Park freigegeben wurde, nutzen zahlreiche Touristen und Berliner die über 300 Hektar große Freifläche.'] Label: [['Zahlreiche Touristen und Berliner nutzen die über 300 Hektar große Freifläche.\nSeit dem Jahr 2010 ist die Fläche des ehemaligen Flughafen Berlin Tempelhof für Besucher geöffnet.']] Sacrebleu: {'score': 40.894389960706086, 'counts': [16, 12, 11, 10], 'totals': [31, 30, 29, 28], 'precisions': [51.61290322580645, 40.0, 37.93103448275862, 35.714285714285715], 'bp': 1.0, 'sys_len': 31, 'ref_len': 28} Bleu: {'bleu': 0.4089438996070609, 'precisions': [0.5161290322580645, 0.4, 0.3793103448275862, 0.35714285714285715], 'brevity_penalty': 1.0, 'length_ratio': 1.1071428571428572, 'translation_length': 31, 'reference_length': 28} Rouge: {'rouge1': 0.5396825396825397, 'rouge2': 0.4262295081967213, 'rougeL': 0.5396825396825397, 'rougeLsum': 0.5396825396825397} Sari: {'sari': 58.15346283440913} Flesh Reading Ease: 54.85 ---------------------------------------- Source: ['Insbesondere die Bewohner einer Großstadt schätzen die Grünflächen.'] Prediction: ['In einer Großstadt in Basel wurden in der Nacht auf Sonntag die Grünflächen gefunden.\nDie Bewohner schätzen die Grünflächen.'] Label: [['Vor allem Bewohner einer Großstadt schätzen die Grünflächen.']] Sacrebleu: {'score': 14.051676978912429, 'counts': [7, 4, 2, 1], 'totals': [21, 20, 19, 18], 'precisions': [33.333333333333336, 20.0, 10.526315789473685, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 9} Bleu: {'bleu': 0.14051676978912422, 'precisions': [0.3333333333333333, 0.2, 0.10526315789473684, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 21, 'reference_length': 9} Rouge: {'rouge1': 0.5405405405405406, 'rouge2': 0.4, 'rougeL': 0.48648648648648657, 'rougeLsum': 0.5405405405405406} Sari: {'sari': 39.958313291646625} Flesh Reading Ease: 71.05 ---------------------------------------- Source: ['Während der Zeit des Barocks (etwa 1575 bis 1770) entstanden formal sehr strenge Barockgärten, auch französische Gärten genannt.'] Prediction: ['Derzeit entstanden formal sehr strenge Barockgärten.\nAuch französische Gärten entstanden daraufhin.'] Label: [['Während der Zeit des Barocks (etwa 1575 bis 1770) entstanden französische Gärten.']] Sacrebleu: {'score': 6.299392144493405, 'counts': [4, 1, 0, 0], 'totals': [13, 12, 11, 10], 'precisions': [30.76923076923077, 8.333333333333334, 4.545454545454546, 2.5], 'bp': 0.8574039191604413, 'sys_len': 13, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.3076923076923077, 0.08333333333333333, 0.0, 0.0], 'brevity_penalty': 0.8574039191604413, 'length_ratio': 0.8666666666666667, 'translation_length': 13, 'reference_length': 15} Rouge: {'rouge1': 0.3448275862068965, 'rouge2': 0.22222222222222224, 'rougeL': 0.3448275862068965, 'rougeLsum': 0.3448275862068965} Sari: {'sari': 14.254545835428187} Flesh Reading Ease: 28.25 ---------------------------------------- Source: ['Der englische Landschaftsgarten war näher an der Natur, mit vielen Grünflächen und in der Regel ohne Blumenbeete.'] Prediction: ['Der englische Landschaftsgarten war näher an der Natur, mit vielen Grünflächen und ohne Blumenbeete.\nDie Natur war näher an der Natur, mit vielen Grünflächen und ohne Blumenbeete.'] Label: [['Der englische Landschaftsgarten war näher an der Natur, mit großen Rasenflächen.']] Sacrebleu: {'score': 29.271572980584498, 'counts': [11, 9, 8, 7], 'totals': [31, 30, 29, 28], 'precisions': [35.483870967741936, 30.0, 27.586206896551722, 25.0], 'bp': 1.0, 'sys_len': 31, 'ref_len': 13} Bleu: {'bleu': 0.2927157298058449, 'precisions': [0.3548387096774194, 0.3, 0.27586206896551724, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 2.3846153846153846, 'translation_length': 31, 'reference_length': 13} Rouge: {'rouge1': 0.4680851063829786, 'rouge2': 0.4, 'rougeL': 0.4680851063829786, 'rougeLsum': 0.4680851063829786} Sari: {'sari': 59.91601576000553} Flesh Reading Ease: 55.35 ---------------------------------------- Source: ['Jährlich halten sich rund 3,5 Millionen Besucher im Englischen Garten auf.'] Prediction: ['3,5 Millionen Besucher sind im Englischen Garten aufgeführt.\nDas gab eine grosse Woche.\nDie Besucher halten sich auf 3,5 Millionen Besucher auf.'] Label: [['Der Englische Garten ist mit rund 3,5 Millionen Besucher jährlich sehr beliebt.']] Sacrebleu: {'score': 6.370405230161802, 'counts': [5, 2, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [20.0, 8.333333333333334, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.08333333333333333, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9230769230769231, 'translation_length': 25, 'reference_length': 13} Rouge: {'rouge1': 0.25641025641025644, 'rouge2': 0.16216216216216217, 'rougeL': 0.25641025641025644, 'rougeLsum': 0.20512820512820512} Sari: {'sari': 34.13807189542484} Flesh Reading Ease: 55.7 ---------------------------------------- Source: ['Fast genauso groß, aber mit einer ganz anderen Geschichte: Das Tempelhofer Feld in Berlin.'] Prediction: ['Im Tempelhofer Feld in Berlin ist ein Teil der Geschichte des Tempelhofer Felds.\nDas Tempelhofer Feld ist ein ganz anderer Geschichte.\nDas Felds ist ein ganz anderer Feld, das Tempelhofer Feld in Berlin ist ein ganz anderer Feld.'] Label: [['Das Tempelhofer Feld in Berlin ist fast genauso groß.\nEs hat allerdings eine ganz andere Geschichte.']] Sacrebleu: {'score': 11.561678083663278, 'counts': [10, 6, 4, 2], 'totals': [42, 41, 40, 39], 'precisions': [23.80952380952381, 14.634146341463415, 10.0, 5.128205128205129], 'bp': 1.0, 'sys_len': 42, 'ref_len': 18} Bleu: {'bleu': 0.11561678083663278, 'precisions': [0.23809523809523808, 0.14634146341463414, 0.1, 0.05128205128205128], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 42, 'reference_length': 18} Rouge: {'rouge1': 0.2962962962962963, 'rouge2': 0.1923076923076923, 'rougeL': 0.25925925925925924, 'rougeLsum': 0.2962962962962963} Sari: {'sari': 59.941239316239326} Flesh Reading Ease: 73.7 ---------------------------------------- Source: ['Neben sehr viel Platz gibt es auf dem Tempelhofer Feld zum Beispiel kleine Gemüsegärten, künstlerische und soziale Projekte und verschiedene Sportprogramme.'] Prediction: ['Am Mittwoch findet der Tempelhofer Feld statt.\nDer Feld hatte seinen Beispiel zum ersten Mal kleine Gemüsegärten, künstlerische und soziale Projekte und verschiedene Sportprogramme geschlossen.'] Label: [['Auf dem Tempelhofer Feld gibt es kleine Gemüsegärten, künstlerische und soziale Projekte und verschiedene Sportprogramme.']] Sacrebleu: {'score': 34.88783797973686, 'counts': [13, 10, 8, 7], 'totals': [28, 27, 26, 25], 'precisions': [46.42857142857143, 37.03703703703704, 30.76923076923077, 28.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 17} Bleu: {'bleu': 0.3488783797973685, 'precisions': [0.4642857142857143, 0.37037037037037035, 0.3076923076923077, 0.28], 'brevity_penalty': 1.0, 'length_ratio': 1.6470588235294117, 'translation_length': 28, 'reference_length': 17} Rouge: {'rouge1': 0.6086956521739131, 'rouge2': 0.5454545454545455, 'rougeL': 0.6086956521739131, 'rougeLsum': 0.6086956521739131} Sari: {'sari': 51.17316694985771} Flesh Reading Ease: 38.8 ---------------------------------------- Source: ['Mit Spannung verfolgen die Kinder, wie schnell ihre Pflanzen wachsen und freuen sich über die erste Ernte von Tomaten, Zucchini, Bohnen oder Salat.'] Prediction: ['Die erste Ernte der Schweiz sind in der Schweiz bei Tomaten, Zucchini, Bohnen oder Salat.\nDie Kinder verfolgen sich mit Spannung und verfolgen sich über die erste Ernte von Tomaten, Zucchini, Bohnen oder Salat.'] Label: [['Die Kinder sind gespannt, wie schnell die Pflanzen wachsen und freuen sich über die erste Ernte von Tomaten, Zucchini, Bohnen oder Salat.']] Sacrebleu: {'score': 35.57020860856684, 'counts': [19, 14, 12, 11], 'totals': [40, 39, 38, 37], 'precisions': [47.5, 35.8974358974359, 31.57894736842105, 29.72972972972973], 'bp': 1.0, 'sys_len': 40, 'ref_len': 26} Bleu: {'bleu': 0.3557020860856683, 'precisions': [0.475, 0.358974358974359, 0.3157894736842105, 0.2972972972972973], 'brevity_penalty': 1.0, 'length_ratio': 1.5384615384615385, 'translation_length': 40, 'reference_length': 26} Rouge: {'rouge1': 0.5714285714285714, 'rouge2': 0.40740740740740733, 'rougeL': 0.5357142857142857, 'rougeLsum': 0.5} Sari: {'sari': 45.796113796345736} Flesh Reading Ease: 69.4 ---------------------------------------- Source: ['Das Vorbereiten der Beete, das Sähen von Samen und Einpflanzen von kleinen Setzlingen, das Jäten von Unkraut – all das macht eine Menge Arbeit.'] Prediction: ['Das Vorbereiten der Beete, das Sähen von Samen und Einpflanzen von kleinen Setzlingen, das Jäten von Unkraut macht eine Menge Arbeit.\nDas Vorbereiten der Beete, das Sähen von Samen und Einpflanzen von kleinen Setzlingen, das Jäten von Unkraut macht eine Menge Arbeit.'] Label: [['Ein Garten macht eine Menge Arbeit: Man muss Beete vorbereiten, Samen verteilen und das Unkraut entfernen.']] Sacrebleu: {'score': 6.131385517106299, 'counts': [11, 3, 2, 1], 'totals': [48, 47, 46, 45], 'precisions': [22.916666666666668, 6.382978723404255, 4.3478260869565215, 2.2222222222222223], 'bp': 1.0, 'sys_len': 48, 'ref_len': 19} Bleu: {'bleu': 0.06131385517106298, 'precisions': [0.22916666666666666, 0.06382978723404255, 0.043478260869565216, 0.022222222222222223], 'brevity_penalty': 1.0, 'length_ratio': 2.526315789473684, 'translation_length': 48, 'reference_length': 19} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.1, 'rougeL': 0.2903225806451613, 'rougeLsum': 0.16129032258064516} Sari: {'sari': 43.83142012785976} Flesh Reading Ease: 53.7 ---------------------------------------- Source: ['Der Sinn der Schulgärten besteht darin, den Kindern die Natur nahezubringen.'] Prediction: ['Der Sinn der Schulgärten besteht darin, den Kindern die Natur nahezubringen.\nDer Sinn der Schulgärten besteht darin, den Kindern die Natur nahezubringen.'] Label: [['Mithilfe eines Schulgartens sollen die Kinder ein Gefühl für die Natur entwickeln.']] Sacrebleu: {'score': 3.435812002459847, 'counts': [4, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 26, 'reference_length': 13} Rouge: {'rouge1': 0.15789473684210525, 'rouge2': 0.05555555555555555, 'rougeL': 0.15789473684210525, 'rougeLsum': 0.10526315789473685} Sari: {'sari': 37.94871794871795} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Außerdem können sich die Kinder im Garten bewegen und sich mit ihren Klassenkameraden unterhalten – ein willkommener Ausgleich zum Stillsitzen im Klassenzimmer.'] Prediction: ['In den Klassenzimmer können Kinder sich mit ihren Klassenkameraden unterhalten.\nEin willkommener Ausgleich zum Stillsitzen im Klassenzimmer kann sich mit dem Klassenkameraden unterhalten.'] Label: [['Außerdem können sich die Kinder im Garten bewegen und sich mit ihren Klassenkameraden unterhalten.']] Sacrebleu: {'score': 21.08445456905126, 'counts': [10, 5, 4, 3], 'totals': [25, 24, 23, 22], 'precisions': [40.0, 20.833333333333332, 17.391304347826086, 13.636363636363637], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.2108445456905127, 'precisions': [0.4, 0.20833333333333334, 0.17391304347826086, 0.13636363636363635], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.5, 'rouge2': 0.26315789473684204, 'rougeL': 0.4, 'rougeLsum': 0.45} Sari: {'sari': 24.916987654065323} Flesh Reading Ease: 33.95 ---------------------------------------- Source: ['Glückwunschkarten, kurze Notizen, To-do-Listen und Einkaufszettel –'] Prediction: ['Einkaufszettel, To-do-Listen und Einkaufszettel: Das ist der erste Schweizer Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt-Welt'] Label: [['Glückwunschkarten, kurze Notizen, Listen und Einkaufszettel –']] Sacrebleu: {'score': 7.495553473355845, 'counts': [3, 1, 0, 0], 'totals': [12, 11, 10, 9], 'precisions': [25.0, 9.090909090909092, 5.0, 2.7777777777777777], 'bp': 1.0, 'sys_len': 12, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.09090909090909091, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 12, 'reference_length': 9} Rouge: {'rouge1': 0.03773584905660377, 'rouge2': 0.025477707006369428, 'rougeL': 0.03773584905660377, 'rougeLsum': 0.03773584905660377} Sari: {'sari': 12.685185185185185} Flesh Reading Ease: -771.86 ---------------------------------------- Source: ['Texte am Computer oder am Handy einzutippen erscheint auf den ersten Blick einfacher.'] Prediction: ['Ein Mann hatte sich in einem Auto einen ersten Blick einfacher.\nDas Handy hatte einen ersten Tipp einzutippen.\nDas hatte sich mit einem Computer und einem Handy einzutippen.'] Label: [['Texte am Computer oder am Handy einzutippen ist einfach.']] Sacrebleu: {'score': 2.8525466573456515, 'counts': [4, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1, 'translation_length': 31, 'reference_length': 10} Rouge: {'rouge1': 0.16216216216216214, 'rouge2': 0.05714285714285714, 'rougeL': 0.16216216216216214, 'rougeLsum': 0.16216216216216214} Sari: {'sari': 23.14814814814815} Flesh Reading Ease: 65.4 ---------------------------------------- Source: ['Texte von Hand zu schreiben ist ein weit komplexerer und herausfordernder Prozess.'] Prediction: ['Texte von Hand zu schreiben ist ein weit komplexerer und herausfordernder Prozess.\nDas Prozess ist ein weiterer und herausfordernder Prozess.'] Label: [['Texte von Hand zu schreiben ist ein bisschen komplizierter.']] Sacrebleu: {'score': 27.193268774579767, 'counts': [8, 6, 5, 4], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 28.571428571428573, 25.0, 21.05263157894737], 'bp': 1.0, 'sys_len': 22, 'ref_len': 10} Bleu: {'bleu': 0.2719326877457978, 'precisions': [0.36363636363636365, 0.2857142857142857, 0.25, 0.21052631578947367], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 22, 'reference_length': 10} Rouge: {'rouge1': 0.48275862068965514, 'rouge2': 0.44444444444444436, 'rougeL': 0.48275862068965514, 'rougeLsum': 0.48275862068965514} Sari: {'sari': 55.208333333333336} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Aber gerade darin liegt der Vorteil.'] Prediction: ['Der Vorteil der Schweizer Grenze ist auf der Suche.\nDer Vorteil ist auf der Suche nach dem Coronavirus.\nDer Vorteil ist auf der Suche nach dem Virus.'] Label: [['Allerdings hat das Handschreiben einen großen Vorteil.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.05714285714285714, 'rouge2': 0.0, 'rougeL': 0.05714285714285714, 'rougeLsum': 0.05714285714285714} Sari: {'sari': 54.99999999999999} Flesh Reading Ease: 83.25 ---------------------------------------- Source: ['Handlettering, das Gestalten von kunstvollen Schriftzügen, ist zum Trend geworden.'] Prediction: ['Handlettering ist ein neues Trend.\nDie Handlettering-Trend ist zum Trend geworden.'] Label: [['Handlettering, das Gestalten von kunstvollen Schriftzügen, liegt im Trend.']] Sacrebleu: {'score': 6.837203339116283, 'counts': [3, 1, 0, 0], 'totals': [13, 12, 11, 10], 'precisions': [23.076923076923077, 8.333333333333334, 4.545454545454546, 2.5], 'bp': 1.0, 'sys_len': 13, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.23076923076923078, 0.08333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0833333333333333, 'translation_length': 13, 'reference_length': 12} Rouge: {'rouge1': 0.1818181818181818, 'rouge2': 0.0, 'rougeL': 0.1818181818181818, 'rougeLsum': 0.1818181818181818} Sari: {'sari': 10.76388888888889} Flesh Reading Ease: 63.35 ---------------------------------------- Source: ['Manche Erwachsene und Jugendliche finden die Handschrift trotz Smartphone und Tablet so faszinierend, dass sie wieder ganz bewusst zu Stift und Papier greifen.'] Prediction: ['Manche Erwachsene und Jugendliche sind wieder mit Handy und Tablet so faszinierend, dass sie wieder ganz bewusst zu Stift und Papier greifen.\nDie Handschrift faszinierend sind so faszinierend, dass sie wieder ganz bewusst zu Stift und Papier greifen.'] Label: [['Erwachsene und Jugendliche finden die Handschrift trotz Smartphone und Tablet so faszinierend, dass sie wieder ganz bewusst zu Stift und Papier greifen.']] Sacrebleu: {'score': 39.63592023370488, 'counts': [20, 17, 15, 13], 'totals': [42, 41, 40, 39], 'precisions': [47.61904761904762, 41.46341463414634, 37.5, 33.333333333333336], 'bp': 1.0, 'sys_len': 42, 'ref_len': 24} Bleu: {'bleu': 0.3963592023370488, 'precisions': [0.47619047619047616, 0.4146341463414634, 0.375, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 42, 'reference_length': 24} Rouge: {'rouge1': 0.6333333333333333, 'rouge2': 0.5517241379310345, 'rougeL': 0.5666666666666667, 'rougeLsum': 0.6333333333333333} Sari: {'sari': 27.50360490266763} Flesh Reading Ease: 61.55 ---------------------------------------- Source: ['Dies belegt auch eine Studie der Universität Princeton aus dem Jahr 2014.'] Prediction: ['Eine Studie der Universität Princeton belegt auch eine Studie der Universität Princeton aus dem Jahr 2014.\nSie belegt auch eine Studie der Universität Princeton.'] Label: [['Dies belegt auch eine Studie der Universität Princeton aus dem Jahr 2014.Manche']] Sacrebleu: {'score': 42.65706803128102, 'counts': [12, 11, 10, 9], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 44.0, 41.666666666666664, 39.130434782608695], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.4265706803128101, 'precisions': [0.46153846153846156, 0.44, 0.4166666666666667, 0.391304347826087], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.5853658536585367, 'rouge2': 0.5641025641025641, 'rougeL': 0.5853658536585367, 'rougeLsum': 0.5853658536585367} Sari: {'sari': 31.80225927136682} Flesh Reading Ease: 51.0 ---------------------------------------- Source: ['Dadurch setzen sie sich mit der Thematik eindringlicher auseinander und können sich die Inhalte besser merken.'] Prediction: ['Eine Frau hat sich mit der Thematik eindringlicher auseinandergebracht.\nDadurch setzen sie sich mit der Thematik eindringlicher auseinander.\nDadurch können sie sich die Inhalte besser merken.'] Label: [['Beim Schreiben mit der Hand setzen wir uns intensiver mit dem Thema auseinander und können uns Inhalte besser merken.']] Sacrebleu: {'score': 10.884267615693712, 'counts': [10, 4, 2, 1], 'totals': [29, 28, 27, 26], 'precisions': [34.48275862068966, 14.285714285714286, 7.407407407407407, 3.8461538461538463], 'bp': 1.0, 'sys_len': 29, 'ref_len': 20} Bleu: {'bleu': 0.10884267615693713, 'precisions': [0.3448275862068966, 0.14285714285714285, 0.07407407407407407, 0.038461538461538464], 'brevity_penalty': 1.0, 'length_ratio': 1.45, 'translation_length': 29, 'reference_length': 20} Rouge: {'rouge1': 0.425531914893617, 'rouge2': 0.17777777777777778, 'rougeL': 0.425531914893617, 'rougeLsum': 0.3404255319148936} Sari: {'sari': 30.91750208855472} Flesh Reading Ease: 54.3 ---------------------------------------- Source: ['Aber in den einzelnen Bundesländern Deutschlands gibt es besondere regionale Spezialitäten.'] Prediction: ['Deutschlands gibt in den einzelnen Bundesländern seine neue Spezialitäten.\nAuch in den einzelnen Bundesländern gibt es besondere regionale Spezialitäten.'] Label: [['In den einzelnen Bundesländern Deutschlands gibt es besondere regionale Spezialitäten.']] Sacrebleu: {'score': 30.23266713085593, 'counts': [10, 8, 5, 3], 'totals': [21, 20, 19, 18], 'precisions': [47.61904761904762, 40.0, 26.31578947368421, 16.666666666666668], 'bp': 1.0, 'sys_len': 21, 'ref_len': 11} Bleu: {'bleu': 0.3023266713085593, 'precisions': [0.47619047619047616, 0.4, 0.2631578947368421, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 1.9090909090909092, 'translation_length': 21, 'reference_length': 11} Rouge: {'rouge1': 0.6857142857142856, 'rouge2': 0.6060606060606061, 'rougeL': 0.6285714285714286, 'rougeLsum': 0.6285714285714286} Sari: {'sari': 44.70029239766082} Flesh Reading Ease: 18.4 ---------------------------------------- Source: ['Sie sind sicher die beliebtesten Gerichte.'] Prediction: ['Die beliebtesten Gerichte sind sicher die beliebtesten Gerichte.\nSie sind sicher die beliebtesten Gerichte.'] Label: [['Sie gehören wahrscheinlich zu den beliebtesten Gerichten.']] Sacrebleu: {'score': 3.21858262703621, 'counts': [3, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [18.75, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 16, 'reference_length': 8} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.0, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 38.33333333333333} Flesh Reading Ease: 44.3 ---------------------------------------- Source: ['Denn bei den Mahlzeiten legen die Produzenten und Köche großen Wert auf Qualität, gepaart mit handwerklichem Geschick und Tradition.'] Prediction: ['Die Wert der großen Wert in der Schweiz ist gepaart mit handwerklichem Geschick und Tradition.\nDie Produzenten und Köche großen Wert legen auf Qualität, gepaart mit handwerklichem Geschick und Tradition.'] Label: [['Hier legen die Produzenten und Köche großen Wert auf Qualität, gepaart mit handwerklichem Geschick und Tradition.']] Sacrebleu: {'score': 38.0529136584949, 'counts': [16, 13, 11, 9], 'totals': [33, 32, 31, 30], 'precisions': [48.484848484848484, 40.625, 35.483870967741936, 30.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 18} Bleu: {'bleu': 0.3805291365849489, 'precisions': [0.48484848484848486, 0.40625, 0.3548387096774194, 0.3], 'brevity_penalty': 1.0, 'length_ratio': 1.8333333333333333, 'translation_length': 33, 'reference_length': 18} Rouge: {'rouge1': 0.679245283018868, 'rouge2': 0.5882352941176471, 'rougeL': 0.6415094339622641, 'rougeLsum': 0.6415094339622641} Sari: {'sari': 53.280423280423285} Flesh Reading Ease: 59.7 ---------------------------------------- Source: ['Das ist ein nach dem Stuttgarter Stadtteil Gaisburg benanntes Gericht, ein Eintopf aus Fleischbrühe, Rindfleisch, Spätzle und Kartoffelschnitz.'] Prediction: ['Ein Eintopf aus der Stuttgarter Stadtteil Gaisburg ist in einem grossen Zusammenhang mit Fleischbrühe, Rindfleisch, Spätzle und Kartoffelschnitz.\nDer Eintopf wurde aus Fleischbrühe, Rindfleisch, Spätzle und Kartoffelschnitz benannt.'] Label: [['Das ist ein nach dem Stuttgarter Stadtteil Gaisburg benanntes Gericht.\nDieser Eintopf und besteht aus Fleischbrühe, Rindfleisch, Spätzle und Kartoffelschnitz.']] Sacrebleu: {'score': 28.82134026521121, 'counts': [16, 10, 8, 6], 'totals': [34, 33, 32, 31], 'precisions': [47.05882352941177, 30.303030303030305, 25.0, 19.35483870967742], 'bp': 1.0, 'sys_len': 34, 'ref_len': 24} Bleu: {'bleu': 0.2882134026521121, 'precisions': [0.47058823529411764, 0.30303030303030304, 0.25, 0.1935483870967742], 'brevity_penalty': 1.0, 'length_ratio': 1.4166666666666667, 'translation_length': 34, 'reference_length': 24} Rouge: {'rouge1': 0.5555555555555556, 'rouge2': 0.34615384615384615, 'rougeL': 0.4814814814814815, 'rougeLsum': 0.4814814814814815} Sari: {'sari': 32.36311413262412} Flesh Reading Ease: 49.0 ---------------------------------------- Source: ['Einige Köche wie Harald Wohlfahrt, einer der besten Köche Europas und seit über zwanzig Jahren von allen Restaurantführern mit den höchsten Auszeichnungen bewertet, kocht ebenfalls gerne traditionell.'] Prediction: ['Harald Wohlfahrt hat einen neuen Köche mit den höchsten Auszeichnungen bewertet.\nDer Chef des Schweizer Restaurants hat einen neuen Auszeichnungs-Konzern ausgezeichnet.\nHarald Wohlfahrt hat einen neuen Köche mit den höchsten Auszeichnungen bewertet.'] Label: [['Köche wie Harald Wohlfahrt werden seit über zwanzig Jahren von allen Restaurantführern besonders gut bewertet.\nWohlfahrt kocht ebenfalls gerne traditionell.']] Sacrebleu: {'score': 3.4352376920340264, 'counts': [7, 2, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [20.0, 5.882352941176471, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.058823529411764705, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5909090909090908, 'translation_length': 35, 'reference_length': 22} Rouge: {'rouge1': 0.20338983050847456, 'rouge2': 0.07017543859649122, 'rougeL': 0.16949152542372883, 'rougeLsum': 0.13559322033898308} Sari: {'sari': 22.529241692285172} Flesh Reading Ease: 52.3 ---------------------------------------- Source: ['Und wohl jeder kennt in Deutschland die Kartoffeln und ihre zahlreichen Variationen wie Bratkartoffeln, Pellkartoffeln, Kartoffelpüree oder Kartoffelklöße.'] Prediction: ['In Deutschland kennt jeder die Kartoffeln und ihre zahlreichen Variationen wie Bratkartoffeln, Pellkartoffeln, Kartoffelpüree oder Kartoffelklöße.\nDie Kartoffelklöße werden in Deutschland aufgezeichnet.'] Label: [['Typisch deutsch und Bestandteil vieler Gerichte: Die Kartoffel.\nJeder kennt ihre Variationen wie Bratkartoffeln, Pellkartoffeln, Kartoffelpüree oder Kartoffelklöße.']] Sacrebleu: {'score': 38.09933016434516, 'counts': [15, 9, 8, 7], 'totals': [26, 25, 24, 23], 'precisions': [57.69230769230769, 36.0, 33.333333333333336, 30.434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 23} Bleu: {'bleu': 0.38099330164345147, 'precisions': [0.5769230769230769, 0.36, 0.3333333333333333, 0.30434782608695654], 'brevity_penalty': 1.0, 'length_ratio': 1.1304347826086956, 'translation_length': 26, 'reference_length': 23} Rouge: {'rouge1': 0.6222222222222222, 'rouge2': 0.372093023255814, 'rougeL': 0.48888888888888893, 'rougeLsum': 0.5777777777777778} Sari: {'sari': 53.281223893066} Flesh Reading Ease: 16.9 ---------------------------------------- Source: ['die Rede ist von der Currywurst, eine der am meisten bekannten Wurstsorten, die an jedem Imbissstand seit über 60 Jahren verkauft wird – 800 Millionen Würste sind es jährlich.'] Prediction: ['800 Millionen Würste sind in der Schweiz verkauft.\nDas Currywurst ist eine der am meisten bekannten Wurstsorten, die an jedem Imbissstand seit über 60 Jahren verkauft wird.\n800 Millionen Würste sind es jährlich.'] Label: [['die Rede ist von der Currywurst, eine der bekanntesten Wurstsorten.\nSie wird an jedem Imbissstand seit über 60 Jahren verkauft – 800 Millionen Würste sind es jährlich.']] Sacrebleu: {'score': 38.4514758119723, 'counts': [25, 14, 11, 9], 'totals': [37, 36, 35, 34], 'precisions': [67.56756756756756, 38.888888888888886, 31.428571428571427, 26.470588235294116], 'bp': 1.0, 'sys_len': 37, 'ref_len': 30} Bleu: {'bleu': 0.38451475811972297, 'precisions': [0.6756756756756757, 0.3888888888888889, 0.3142857142857143, 0.2647058823529412], 'brevity_penalty': 1.0, 'length_ratio': 1.2333333333333334, 'translation_length': 37, 'reference_length': 30} Rouge: {'rouge1': 0.75, 'rouge2': 0.48387096774193544, 'rougeL': 0.6562499999999999, 'rougeLsum': 0.6562499999999999} Sari: {'sari': 27.428103565594704} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Dies ist die umsatzstärkste Zeit im deutschen Einzelhandel, viele erwirtschaften rund ein Viertel ihres Jahresumsatzes im November und Dezember.'] Prediction: ['Der deutsche Einzelhandel hat einen Viertel ihres Jahresumsatzes im November und Dezember verlassen.\nDie erwirtschaften erwirtschaften rund ein Viertel ihres Jahresumsatzes im November und Dezember.\nDas ist die umsatzstärkste Zeit im deutschen Einzelhandel, viele erwirtschaften rund ein Viertel ihres Jahresumsatzes im November und Dezember.'] Label: [['Dies ist die umsatzstärkste Zeit im deutschen Einzelhandel.\nViele erwirtschaften rund ein Viertel ihres Jahresumsatzes im November und Dezember.']] Sacrebleu: {'score': 32.338387157817365, 'counts': [19, 16, 14, 12], 'totals': [48, 47, 46, 45], 'precisions': [39.583333333333336, 34.04255319148936, 30.434782608695652, 26.666666666666668], 'bp': 1.0, 'sys_len': 48, 'ref_len': 21} Bleu: {'bleu': 0.3233838715781736, 'precisions': [0.3958333333333333, 0.3404255319148936, 0.30434782608695654, 0.26666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 2.2857142857142856, 'translation_length': 48, 'reference_length': 21} Rouge: {'rouge1': 0.5846153846153845, 'rouge2': 0.5714285714285715, 'rougeL': 0.5846153846153845, 'rougeLsum': 0.5846153846153845} Sari: {'sari': 29.905532692419452} Flesh Reading Ease: 36.6 ---------------------------------------- Source: ['Topseller sind Smartphones und Spielekonsolen.'] Prediction: ['Smartphones und Spielekonsolen sind in der Schweiz aufgeführt.\nDas ist der erste Mal.'] Label: [['Die beliebtesten Wünsche sind Smartphones und Spielekonsolen.']] Sacrebleu: {'score': 11.114924776032012, 'counts': [5, 2, 1, 0], 'totals': [15, 14, 13, 12], 'precisions': [33.333333333333336, 14.285714285714286, 7.6923076923076925, 4.166666666666667], 'bp': 1.0, 'sys_len': 15, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.14285714285714285, 0.07692307692307693, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.875, 'translation_length': 15, 'reference_length': 8} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.2, 'rougeL': 0.2727272727272727, 'rougeLsum': 0.2727272727272727} Sari: {'sari': 34.722222222222214} Flesh Reading Ease: 79.9 ---------------------------------------- Source: ['Davon kündet der Text des bekanntesten deutschen Weihnachtsliedes „Oh du fröhliche, oh du selige, gnadenbringende Weihnachtszeit, Welt ging verloren, Christ ist geboren: Freue, freue dich, Christenheit!“'] Prediction: ['Der Text des deutschen Weihnachtsliedes ist auf der Suche der Welt geklaut.\nDie Welt ging verloren, Christenheit ist geboren.\nDie Welt ist geboren, Freue, freue dich, Christenheit!'] Label: [['Davon handelt der Text des bekanntesten deutschen Weihnachtsliedes „Oh du fröhliche, oh du selige, gnadenbringende Weihnachtszeit, Welt ging verloren, Christ ist geboren: Freue, freue dich, Christenheit!“']] Sacrebleu: {'score': 28.2553846229432, 'counts': [19, 12, 7, 5], 'totals': [34, 33, 32, 31], 'precisions': [55.88235294117647, 36.36363636363637, 21.875, 16.129032258064516], 'bp': 0.9710165517924373, 'sys_len': 34, 'ref_len': 35} Bleu: {'bleu': 0.2825538462294319, 'precisions': [0.5588235294117647, 0.36363636363636365, 0.21875, 0.16129032258064516], 'brevity_penalty': 0.9710165517924371, 'length_ratio': 0.9714285714285714, 'translation_length': 34, 'reference_length': 35} Rouge: {'rouge1': 0.5185185185185185, 'rouge2': 0.38461538461538464, 'rougeL': 0.5185185185185185, 'rougeLsum': 0.5185185185185185} Sari: {'sari': 19.262252888039047} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Sie riss die Stadt Berlin auseinander und trennte die Deutsche Demokratische Republik (DDR) und Westdeutschland.'] Prediction: ['Die Stadt Berlin hat sich am Freitagabend umgerechnet.\nDie Partei reagiert auf die Stadt Berlin.\nDie Partei reagiert auf die Stadt und trennte die Deutschland.'] Label: [['Sie riss die Stadt auseinander und trennte die Deutsche Demokratische Republik (DDR) und Westdeutschland.']] Sacrebleu: {'score': 6.5418689417544345, 'counts': [6, 3, 1, 0], 'totals': [28, 27, 26, 25], 'precisions': [21.428571428571427, 11.11111111111111, 3.8461538461538463, 2.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.1111111111111111, 0.038461538461538464, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6470588235294117, 'translation_length': 28, 'reference_length': 17} Rouge: {'rouge1': 0.25641025641025644, 'rouge2': 0.16216216216216217, 'rougeL': 0.25641025641025644, 'rougeLsum': 0.25641025641025644} Sari: {'sari': 11.928645517162263} Flesh Reading Ease: 78.1 ---------------------------------------- Source: ['Die Berliner Mauer war 155 Kilometer lang, etwa 43 Kilometer verliefen mitten durch Berlin.'] Prediction: ['Die Berliner Mauer war 155 Kilometer lang, etwa 43 Kilometer verliefen mitten durch Berlin.\nDie Berliner Mauer war 155 Kilometer lang, etwa 43 Kilometer verliefen mitten durch Berlin.'] Label: [['Sie war 155 Kilometer lang, etwa 43 Kilometer verliefen mitten durch Berlin.']] Sacrebleu: {'score': 37.551007153511556, 'counts': [13, 12, 11, 10], 'totals': [32, 31, 30, 29], 'precisions': [40.625, 38.70967741935484, 36.666666666666664, 34.48275862068966], 'bp': 1.0, 'sys_len': 32, 'ref_len': 14} Bleu: {'bleu': 0.37551007153511545, 'precisions': [0.40625, 0.3870967741935484, 0.36666666666666664, 0.3448275862068966], 'brevity_penalty': 1.0, 'length_ratio': 2.2857142857142856, 'translation_length': 32, 'reference_length': 14} Rouge: {'rouge1': 0.55, 'rouge2': 0.5263157894736842, 'rougeL': 0.55, 'rougeLsum': 0.55} Sari: {'sari': 62.72785829307569} Flesh Reading Ease: 49.0 ---------------------------------------- Source: ['Schon seit dem Ende des Zweiten Weltkrieges existierten faktisch zwei deutsche Länder. So wollte die Führung in Ostdeutschland in der sowjetischen Besatzungszone ein sozialistisches System errichten, doch viele Menschen flüchteten in den Westen: Zwischen 1949 und Sommer 1961 zogen rund 2,6 Millionen Menschen aus der DDR nach Westen.'] Prediction: ['Zwischen 1949 und Sommer 1961 zogen rund 2,6 Millionen Menschen aus der DDR nach Westen.\nZwischen 1949 und Sommer 1961 zogen rund 2,6 Millionen Menschen aus der DDR nach Westen.'] Label: [['Schon seit dem Ende des Zweiten Weltkrieges existierten faktisch zwei deutsche Staaten, denn die Führung in Ostdeutschland wollte in der sowjetischen Besatzungszone ein sozialistisches System errichten.\nDoch viele Menschen flüchteten in den Westen.']] Sacrebleu: {'score': 2.5743966576259556, 'counts': [5, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [15.625, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 0.8824969025845955, 'sys_len': 32, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.15625, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 0.8824969025845955, 'length_ratio': 0.8888888888888888, 'translation_length': 32, 'reference_length': 36} Rouge: {'rouge1': 0.08955223880597014, 'rouge2': 0.0, 'rougeL': 0.08955223880597014, 'rougeLsum': 0.08955223880597014} Sari: {'sari': 12.215007215007214} Flesh Reading Ease: 77.25 ---------------------------------------- Source: ['Sie trennte Familien und Freunde, denn sie unterbrach auch alle Verbindungen der Stadt zum Berliner Umland.'] Prediction: ['Eine Frau unterbrach auch alle Verbindungen der Stadt zum Berliner Umland.\nSie trennte Familien und Freunde, denn sie unterbrach auch alle Verbindungen der Stadt zum Berliner Umland.'] Label: [['Die Mauer trennte Familien und Freunde, denn sie unterbrach auch alle Verbindungen der Stadt zum Berliner Umland.']] Sacrebleu: {'score': 54.28586816526579, 'counts': [17, 16, 15, 14], 'totals': [30, 29, 28, 27], 'precisions': [56.666666666666664, 55.172413793103445, 53.57142857142857, 51.851851851851855], 'bp': 1.0, 'sys_len': 30, 'ref_len': 19} Bleu: {'bleu': 0.5428586816526576, 'precisions': [0.5666666666666667, 0.5517241379310345, 0.5357142857142857, 0.5185185185185185], 'brevity_penalty': 1.0, 'length_ratio': 1.5789473684210527, 'translation_length': 30, 'reference_length': 19} Rouge: {'rouge1': 0.6818181818181819, 'rouge2': 0.6666666666666667, 'rougeL': 0.6818181818181819, 'rougeLsum': 0.6818181818181819} Sari: {'sari': 65.73358977854852} Flesh Reading Ease: 55.35 ---------------------------------------- Source: ['Um den Flüchtlingsstrom zu stoppen beschloss die DDR-Führung, die Grenzen endgültig zu schließen.'] Prediction: ['Die DDR-Führung beschloss die Grenzen endgültig zu schließen.\nUm den Flüchtlingsstrom zu stoppen beschloss die Grenzen endgültig zu schließen.'] Label: [['Um die Flüchtlinge zu stoppen beschloss die DDR-Führung, die Grenzen endgültig zu schließen.']] Sacrebleu: {'score': 35.587851490678766, 'counts': [12, 8, 6, 4], 'totals': [21, 20, 19, 18], 'precisions': [57.142857142857146, 40.0, 31.57894736842105, 22.22222222222222], 'bp': 1.0, 'sys_len': 21, 'ref_len': 15} Bleu: {'bleu': 0.3558785149067877, 'precisions': [0.5714285714285714, 0.4, 0.3157894736842105, 0.2222222222222222], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 21, 'reference_length': 15} Rouge: {'rouge1': 0.7727272727272727, 'rouge2': 0.5714285714285713, 'rougeL': 0.5454545454545455, 'rougeLsum': 0.7272727272727274} Sari: {'sari': 23.250833764830993} Flesh Reading Ease: 71.05 ---------------------------------------- Source: ['Nach 28 Jahren, am 9. November 1989, wurde sie geöffnet.'] Prediction: ['Eine Frau wurde am 9.\nNovember 1989 geöffnet.\nSie wurde 28 Jahre alt.'] Label: [['Denn nach 28 Jahren, am 9.\nNovember 1989, wurde die Mauer geöffnet.']] Sacrebleu: {'score': 28.039501199940027, 'counts': [9, 5, 3, 2], 'totals': [16, 15, 14, 13], 'precisions': [56.25, 33.333333333333336, 21.428571428571427, 15.384615384615385], 'bp': 1.0, 'sys_len': 16, 'ref_len': 16} Bleu: {'bleu': 0.2803950119994004, 'precisions': [0.5625, 0.3333333333333333, 0.21428571428571427, 0.15384615384615385], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 16, 'reference_length': 16} Rouge: {'rouge1': 0.5925925925925927, 'rouge2': 0.32, 'rougeL': 0.4444444444444445, 'rougeLsum': 0.5925925925925927} Sari: {'sari': 26.83370870870871} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Seit der Öffnung der Mauer ist Deutschland wieder vereint.'] Prediction: ['Deutschland hat seit der Öffnung der Mauer wieder vereint.\nDie Mauer ist in Deutschland wieder vereint.'] Label: [['Seitdem ist Deutschland wieder vereint.']] Sacrebleu: {'score': 14.216645907653843, 'counts': [5, 3, 2, 1], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 17.647058823529413, 12.5, 6.666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 6} Bleu: {'bleu': 0.14216645907653844, 'precisions': [0.2777777777777778, 0.17647058823529413, 0.125, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 18, 'reference_length': 6} Rouge: {'rouge1': 0.38095238095238093, 'rouge2': 0.2105263157894737, 'rougeL': 0.38095238095238093, 'rougeLsum': 0.38095238095238093} Sari: {'sari': 37.757936507936506} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Diese drei Zeilen stammen aus dem Gedicht des chinesischen Lyrikers Ai Qing, dem Vater des Künstlers Ai Weiwei.'] Prediction: ['Drei Zeilen stammen aus dem Gedicht des chinesischen Lyrikers Ai Qing, dem Vater des Künstlers Ai Weiwei.\nSie wurden dabei drei Zeilen verletzt.\nSie wurden dabei aus dem Gedicht von einem chinesischen Lyrikern aus dem Gedicht gedacht.'] Label: [['drei Zeilen sind aus dem Gedicht des chinesischen Lyrikers Ai Qing, dem Vater des Künstlers Ai Weiwei.']] Sacrebleu: {'score': 38.32154022748122, 'counts': [18, 16, 14, 13], 'totals': [41, 40, 39, 38], 'precisions': [43.90243902439025, 40.0, 35.8974358974359, 34.21052631578947], 'bp': 1.0, 'sys_len': 41, 'ref_len': 19} Bleu: {'bleu': 0.3832154022748122, 'precisions': [0.43902439024390244, 0.4, 0.358974358974359, 0.34210526315789475], 'brevity_penalty': 1.0, 'length_ratio': 2.1578947368421053, 'translation_length': 41, 'reference_length': 19} Rouge: {'rouge1': 0.6071428571428572, 'rouge2': 0.5555555555555556, 'rougeL': 0.6071428571428572, 'rougeLsum': 0.6071428571428572} Sari: {'sari': 64.23913280551375} Flesh Reading Ease: 68.25 ---------------------------------------- Source: ['So wollen sie unter anderem ein Zeichen setzen gegen die Massentierhaltung und den Lebewesen Respekt erweisen.'] Prediction: ['Die Massentierhaltung und den Lebewesen Respekt wollen unter anderem ein Zeichen setzen.\nSo wollen sie unter anderem ein Zeichen setzen gegen die Massentierhaltung und den Lebewesen Respekt erweisen.'] Label: [['So wollen sie unter anderem ein Zeichen setzen gegen die Massentierhaltung.']] Sacrebleu: {'score': 33.854637941093195, 'counts': [12, 10, 9, 8], 'totals': [30, 29, 28, 27], 'precisions': [40.0, 34.48275862068966, 32.142857142857146, 29.62962962962963], 'bp': 1.0, 'sys_len': 30, 'ref_len': 12} Bleu: {'bleu': 0.3385463794109318, 'precisions': [0.4, 0.3448275862068966, 0.32142857142857145, 0.2962962962962963], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 30, 'reference_length': 12} Rouge: {'rouge1': 0.5641025641025641, 'rouge2': 0.5405405405405406, 'rougeL': 0.5641025641025641, 'rougeLsum': 0.5641025641025641} Sari: {'sari': 67.28408086166708} Flesh Reading Ease: 43.15 ---------------------------------------- Source: ['Längst haben sich Trendforscher mit dem Thema Nahrung und Essen beschäftigt - mit einigen interessanten Entwicklungen für die kommenden Jahre.'] Prediction: ['Trendforscher haben sich mit dem Thema Nahrung und Essen beschäftigt.\nDie kommenden Jahre haben sich mit einigen interessanten Entwicklungen für die kommenden Jahre.'] Label: [['Längst haben sich Trendforscher mit dem Thema Nahrung und Essen beschäftigt - mit einigen interessanten Entwicklungen.']] Sacrebleu: {'score': 36.26305461419686, 'counts': [15, 10, 7, 5], 'totals': [25, 24, 23, 22], 'precisions': [60.0, 41.666666666666664, 30.434782608695652, 22.727272727272727], 'bp': 1.0, 'sys_len': 25, 'ref_len': 17} Bleu: {'bleu': 0.3626305461419687, 'precisions': [0.6, 0.4166666666666667, 0.30434782608695654, 0.22727272727272727], 'brevity_penalty': 1.0, 'length_ratio': 1.4705882352941178, 'translation_length': 25, 'reference_length': 17} Rouge: {'rouge1': 0.7142857142857143, 'rouge2': 0.5499999999999999, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 28.889020561393036} Flesh Reading Ease: 51.5 ---------------------------------------- Source: ['Hinter den nüchternen Zahlen stecken erschreckende Tatsachen.'] Prediction: ['Die nüchternen Zahlen stecken in den letzten Tagen erschreckende Tatsachen.\nDie Zahlen stecken in den nüchternen Zahlen stecken erschreckende Tatsachen.'] Label: [['Hinter den Zahlen stecken die erschreckenden Tatsachen.']] Sacrebleu: {'score': 5.165604006110218, 'counts': [5, 2, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [22.727272727272727, 9.523809523809524, 2.5, 1.3157894736842106], 'bp': 1.0, 'sys_len': 22, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.22727272727272727, 0.09523809523809523, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.75, 'translation_length': 22, 'reference_length': 8} Rouge: {'rouge1': 0.3448275862068965, 'rouge2': 0.07407407407407407, 'rougeL': 0.27586206896551724, 'rougeLsum': 0.27586206896551724} Sari: {'sari': 29.55840455840456} Flesh Reading Ease: 47.15 ---------------------------------------- Source: ['Aber zunächst die Zahlen: In Alten- und Pflegeheimen werden rund 750.000 Menschen in über 12.000 Einrichtungen stationär gepflegt. Sie können nicht mehr zu Hause leben.'] Prediction: ['In Alten und Pflegeheimen werden rund 750.000 Menschen in über 12.000 Einrichtungen stationär gepflegt.\nSie können nicht mehr zu Hause leben.'] Label: [['Aber zunächst die Zahlen: In Alten- und Pflegeheimen werden rund 750.000 Menschen in über 12.000 Einrichtungen gepflegt.']] Sacrebleu: {'score': 43.02123694194219, 'counts': [13, 10, 8, 7], 'totals': [23, 22, 21, 20], 'precisions': [56.52173913043478, 45.45454545454545, 38.095238095238095, 35.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 19} Bleu: {'bleu': 0.43021236941942204, 'precisions': [0.5652173913043478, 0.45454545454545453, 0.38095238095238093, 0.35], 'brevity_penalty': 1.0, 'length_ratio': 1.2105263157894737, 'translation_length': 23, 'reference_length': 19} Rouge: {'rouge1': 0.6666666666666665, 'rouge2': 0.6046511627906976, 'rougeL': 0.6666666666666665, 'rougeLsum': 0.6666666666666665} Sari: {'sari': 17.279151327706096} Flesh Reading Ease: 69.4 ---------------------------------------- Source: ['1,85 Millionen Menschen leben zu Hause und werden dort gepflegt, oft von ihrer Familie oder ihrem Ehepartner und unterstützt von ambulanten Pflegediensten.'] Prediction: ['1,85 Millionen Menschen leben zu Hause und werden dort gepflegt.\nDas ist der erste Mal in der Schweiz.\nDie Hause ist der erste Mal in der Schweiz.'] Label: [['1,85 Millionen Menschen leben zu Hause und werden dort gepflegt, oft von ihrer Familie oder ihrem Ehepartner oder von einem ambulanten Pflegedienst.']] Sacrebleu: {'score': 30.30020336619729, 'counts': [11, 9, 8, 7], 'totals': [30, 29, 28, 27], 'precisions': [36.666666666666664, 31.03448275862069, 28.571428571428573, 25.925925925925927], 'bp': 1.0, 'sys_len': 30, 'ref_len': 24} Bleu: {'bleu': 0.30300203366197276, 'precisions': [0.36666666666666664, 0.3103448275862069, 0.2857142857142857, 0.25925925925925924], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 30, 'reference_length': 24} Rouge: {'rouge1': 0.4313725490196078, 'rouge2': 0.40816326530612246, 'rougeL': 0.4313725490196078, 'rougeLsum': 0.4313725490196078} Sari: {'sari': 34.4601578976579} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Wegen der fehlenden Pflegekräfte vor allem in Altenheimen müssen die vorhandenen Pflegerinnen und Pfleger mehr arbeiten.'] Prediction: ['In Altenheimen müssen vor allem Pflegerinnen und Pfleger mehr arbeiten.\nDie vorhandenen Pflegerinnen und Pfleger müssen mehr arbeiten.'] Label: [['Da vor allem in Altenheimen Fachpersonal fehlt, müssen die vorhandenen Pflegerinnen und Pfleger mehr arbeiten.']] Sacrebleu: {'score': 33.92375549949802, 'counts': [11, 7, 5, 4], 'totals': [20, 19, 18, 17], 'precisions': [55.0, 36.8421052631579, 27.77777777777778, 23.529411764705884], 'bp': 1.0, 'sys_len': 20, 'ref_len': 17} Bleu: {'bleu': 0.3392375549949802, 'precisions': [0.55, 0.3684210526315789, 0.2777777777777778, 0.23529411764705882], 'brevity_penalty': 1.0, 'length_ratio': 1.1764705882352942, 'translation_length': 20, 'reference_length': 17} Rouge: {'rouge1': 0.7222222222222223, 'rouge2': 0.5294117647058824, 'rougeL': 0.6111111111111112, 'rougeLsum': 0.6111111111111112} Sari: {'sari': 54.24933862433862} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['Schon heute mangelt es an 130.000 Pflegekräften.'] Prediction: ['Die Schweiz hat einen grossen Pflegekonzern geschlossen.\nDer Bund hatte sich mit einem grossen Ausbruch der Pflegekräfte geschlossen.\nDie Schweiz hatte sich mit einem grossen Ausbruch der Pflegekräfte geschlossen.'] Label: [['Schon heute fehlen 130.000 Pflegekräfte.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.333333333333333, 'translation_length': 32, 'reference_length': 6} Rouge: {'rouge1': 0.10526315789473685, 'rouge2': 0.05555555555555555, 'rougeL': 0.10526315789473685, 'rougeLsum': 0.10526315789473685} Sari: {'sari': 49.55182072829131} Flesh Reading Ease: 65.0 ---------------------------------------- Source: ['Dazu kommt viel Bürokratie und es bleibt zu wenig Zeit, sich wirklich um die Alten zu kümmern.'] Prediction: ['Die Schweiz bleibt zu wenig Zeit, sich wirklich um die Alten zu kümmern.\nDazu kommt viel Bürokratie und es bleibt zu wenig Zeit, sich wirklich um die Alten zu kümmern.'] Label: [['Dazu kommt viel Bürokratie und es bleibt zu wenig Zeit, sich wirklich um die alten Menschen zu kümmern.']] Sacrebleu: {'score': 45.66140915460892, 'counts': [18, 16, 14, 12], 'totals': [34, 33, 32, 31], 'precisions': [52.94117647058823, 48.484848484848484, 43.75, 38.70967741935484], 'bp': 1.0, 'sys_len': 34, 'ref_len': 20} Bleu: {'bleu': 0.4566140915460894, 'precisions': [0.5294117647058824, 0.48484848484848486, 0.4375, 0.3870967741935484], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 34, 'reference_length': 20} Rouge: {'rouge1': 0.7169811320754716, 'rouge2': 0.6666666666666666, 'rougeL': 0.7169811320754716, 'rougeLsum': 0.7169811320754716} Sari: {'sari': 65.04566912972085} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['Körperliche und psychische Beschwerden des Pflegepersonals sind häufig.'] Prediction: ['Körperliche und psychische Beschwerden des Pflegepersonals sind häufig.\nDas ist der erste Mal in der Schweiz.'] Label: [['Das Personal leidet häufig unter körperlichen und psychischen Beschwerden.']] Sacrebleu: {'score': 3.211547431691929, 'counts': [5, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8, 'translation_length': 18, 'reference_length': 10} Rouge: {'rouge1': 0.41379310344827586, 'rouge2': 0.07407407407407408, 'rougeL': 0.20689655172413793, 'rougeLsum': 0.27586206896551724} Sari: {'sari': 39.743589743589745} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Die deutsche Politik will nun gezielt Menschen aus dem Ausland anwerben - auch aus Nicht-EU-Ländern.'] Prediction: ['Die deutsche Politik will aus dem Ausland gezielt Menschen aus dem Ausland anwerben.\nDie deutsche Politik will nun gezielt Menschen aus dem Ausland anwerben.'] Label: [['Daher werden nun gezielt Menschen aus dem Ausland angesprochen, die zu Altenpflegern in Deutschland ausgebildet werden.']] Sacrebleu: {'score': 18.4969113023502, 'counts': [7, 5, 4, 3], 'totals': [26, 25, 24, 23], 'precisions': [26.923076923076923, 20.0, 16.666666666666668, 13.043478260869565], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.1849691130235019, 'precisions': [0.2692307692307692, 0.2, 0.16666666666666666, 0.13043478260869565], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.35000000000000003, 'rouge2': 0.26315789473684204, 'rougeL': 0.3, 'rougeLsum': 0.3} Sari: {'sari': 54.972804972804965} Flesh Reading Ease: 68.55 ---------------------------------------- Source: ['Der Personalmangel trifft vor allem die alten Menschen in Deutschland, die die Pflege so dringend brauchen.'] Prediction: ['Der Personalmangel trifft vor allem die alten Menschen in Deutschland, die die Pflege so dringend brauchen.\nDie alten Menschen in Deutschland trifft vor allem die alten Pflege so dringend.'] Label: [['Der Personalmangel trifft vor allem die alten Menschen in Deutschland, denn diese brauchen die Pflege dringend.']] Sacrebleu: {'score': 35.57547439720247, 'counts': [16, 12, 9, 8], 'totals': [32, 31, 30, 29], 'precisions': [50.0, 38.70967741935484, 30.0, 27.586206896551722], 'bp': 1.0, 'sys_len': 32, 'ref_len': 18} Bleu: {'bleu': 0.35575474397202467, 'precisions': [0.5, 0.3870967741935484, 0.3, 0.27586206896551724], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 32, 'reference_length': 18} Rouge: {'rouge1': 0.6222222222222222, 'rouge2': 0.5116279069767441, 'rougeL': 0.6222222222222222, 'rougeLsum': 0.5777777777777777} Sari: {'sari': 61.31573498964803} Flesh Reading Ease: 66.05 ---------------------------------------- Source: ['Rund um die Innenstadt führt die sogenannte Promenade.'] Prediction: ['Die sogenannte Promenade führt in der Innenstadt eine sogenannte Promenade.\nDie Innenstadt führt die sogenannte Promenade.\nDie Promenade führt am Freitagabend um die Innenstadt.'] Label: [['Es gibt viele Radwege und rund um die Innenstadt führt die sogenannte Promenade.']] Sacrebleu: {'score': 21.13234688113751, 'counts': [8, 7, 5, 3], 'totals': [27, 26, 25, 24], 'precisions': [29.62962962962963, 26.923076923076923, 20.0, 12.5], 'bp': 1.0, 'sys_len': 27, 'ref_len': 14} Bleu: {'bleu': 0.21132346881137512, 'precisions': [0.2962962962962963, 0.2692307692307692, 0.2, 0.125], 'brevity_penalty': 1.0, 'length_ratio': 1.9285714285714286, 'translation_length': 27, 'reference_length': 14} Rouge: {'rouge1': 0.3902439024390244, 'rouge2': 0.3589743589743589, 'rougeL': 0.3414634146341463, 'rougeLsum': 0.3414634146341463} Sari: {'sari': 29.979889391654098} Flesh Reading Ease: 37.45 ---------------------------------------- Source: ['Und das lohnt sich, denn Münster und seine wunderschöne Umgebung lassen sich gut mit dem Fahrrad erkunden.'] Prediction: ['Das lohnt sich, denn Münster und seine wunderschöne Umgebung lassen sich gut mit dem Fahrrad erkunden.\nDas lohnt sich, denn Münster und seine wunderschöne Umgebung lassen sich gut mit dem Fahrrad erkunden.'] Label: [['Münster und seine wunderschöne Umgebung lassen sich gut mit dem Fahrrad erkunden.']] Sacrebleu: {'score': 33.192385849649256, 'counts': [13, 12, 11, 10], 'totals': [36, 35, 34, 33], 'precisions': [36.111111111111114, 34.285714285714285, 32.35294117647059, 30.303030303030305], 'bp': 1.0, 'sys_len': 36, 'ref_len': 13} Bleu: {'bleu': 0.3319238584964926, 'precisions': [0.3611111111111111, 0.34285714285714286, 0.3235294117647059, 0.30303030303030304], 'brevity_penalty': 1.0, 'length_ratio': 2.769230769230769, 'translation_length': 36, 'reference_length': 13} Rouge: {'rouge1': 0.56, 'rouge2': 0.5416666666666666, 'rougeL': 0.56, 'rougeLsum': 0.56} Sari: {'sari': 68.9165602383993} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['1945 wurde das Schloss total zerbombt, zwischen 1947 und 1953 wurde es nach alten Plänen wieder aufgebaut.'] Prediction: ['1944 wurde das Schloss total zerbombt.\n1945 wurde das Schloss total zerbombt.\n1947 und 1953 wurde es nach alten Plänen wieder aufgebaut.'] Label: [['1945 wurde das Schloss total durch Bomben zerstört, zwischen 1947 und 1953 wurde es nach alten Plänen wieder aufgebaut.']] Sacrebleu: {'score': 54.54838213876382, 'counts': [16, 14, 12, 10], 'totals': [25, 24, 23, 22], 'precisions': [64.0, 58.333333333333336, 52.17391304347826, 45.45454545454545], 'bp': 1.0, 'sys_len': 25, 'ref_len': 21} Bleu: {'bleu': 0.5454838213876383, 'precisions': [0.64, 0.5833333333333334, 0.5217391304347826, 0.45454545454545453], 'brevity_penalty': 1.0, 'length_ratio': 1.1904761904761905, 'translation_length': 25, 'reference_length': 21} Rouge: {'rouge1': 0.7272727272727272, 'rouge2': 0.6666666666666666, 'rougeL': 0.7272727272727272, 'rougeLsum': 0.7272727272727272} Sari: {'sari': 41.72967312151874} Flesh Reading Ease: 84.95 ---------------------------------------- Source: ['Für ganz Europa wichtig ist das Jahr 1648, denn da wurde in Münster der Westfälische Friede geschlossen – er beendete den Dreißigjährigen Krieg.'] Prediction: ['Das Jahr 1648 wurde in Münster der Westfälische Friede geschlossen.\nDas Jahr 1648 wurde in Münster der Westfälische Friede geschlossen.\nDas Jahr 1648 wurde in Münster der Dreißigjährige geschlossen.'] Label: [['Für ganz Europa wichtig ist das Jahr 1648, denn da wurde in Münster der Westfälische Friede geschlossen.\nEr beendete den Dreißigjährigen Krieg.']] Sacrebleu: {'score': 23.517613599813988, 'counts': [11, 8, 6, 5], 'totals': [32, 31, 30, 29], 'precisions': [34.375, 25.806451612903224, 20.0, 17.24137931034483], 'bp': 1.0, 'sys_len': 32, 'ref_len': 25} Bleu: {'bleu': 0.23517613599813986, 'precisions': [0.34375, 0.25806451612903225, 0.2, 0.1724137931034483], 'brevity_penalty': 1.0, 'length_ratio': 1.28, 'translation_length': 32, 'reference_length': 25} Rouge: {'rouge1': 0.4444444444444444, 'rouge2': 0.360655737704918, 'rougeL': 0.4444444444444444, 'rougeLsum': 0.4444444444444444} Sari: {'sari': 26.604921494627376} Flesh Reading Ease: 65.0 ---------------------------------------- Source: ['Berühmt ist aber vor allem Hamburgs Hafen.'] Prediction: ['In Hamburg ist es am Freitag zu einem terroristischen Hafen gekommen.\nDie Polizei hatte den Mannschaftswahlen verlassen.'] Label: [['Berühmt ist aber vor allem der Hafen.']] Sacrebleu: {'score': 2.6643211213888947, 'counts': [3, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [15.789473684210526, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 19, 'reference_length': 8} Rouge: {'rouge1': 0.15999999999999998, 'rouge2': 0.0, 'rougeL': 0.15999999999999998, 'rougeLsum': 0.15999999999999998} Sari: {'sari': 18.214285714285715} Flesh Reading Ease: 48.65 ---------------------------------------- Source: ['kommen hier jährlich an, die meisten sind Containerschiffe mit Waren aus aller Welt.'] Prediction: ['Der meisten Containerschiffe mit Waren sind aller Welt.\nDie meisten meisten sind Containerschiffe mit Waren aus aller Welt.'] Label: [['kommen hier jährlich an.\nDie meisten sind Containerschiffe mit Waren aus aller Welt.']] Sacrebleu: {'score': 46.16174577167448, 'counts': [11, 10, 8, 6], 'totals': [20, 19, 18, 17], 'precisions': [55.0, 52.63157894736842, 44.44444444444444, 35.294117647058826], 'bp': 1.0, 'sys_len': 20, 'ref_len': 15} Bleu: {'bleu': 0.46161745771674506, 'precisions': [0.55, 0.5263157894736842, 0.4444444444444444, 0.35294117647058826], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 20, 'reference_length': 15} Rouge: {'rouge1': 0.5625000000000001, 'rouge2': 0.5333333333333333, 'rougeL': 0.5625000000000001, 'rougeLsum': 0.5625000000000001} Sari: {'sari': 46.28734827264239} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Hamburg ist der größte Eisenbahnhafen Europas und der zweitgrößte der Welt.'] Prediction: ['Hamburg ist der größte Eisenbahnhafen Europas und der zweitgrößte der Welt.\nDer größte Eisenbahnhafen Europas ist der zweitgrößte der Welt.'] Label: [['Hamburg ist gleichzeitig der größte Eisenbahnhafen Europas und der zweitgrößte der Welt.']] Sacrebleu: {'score': 44.23193362467974, 'counts': [12, 10, 8, 7], 'totals': [22, 21, 20, 19], 'precisions': [54.54545454545455, 47.61904761904762, 40.0, 36.8421052631579], 'bp': 1.0, 'sys_len': 22, 'ref_len': 13} Bleu: {'bleu': 0.44231933624679737, 'precisions': [0.5454545454545454, 0.47619047619047616, 0.4, 0.3684210526315789], 'brevity_penalty': 1.0, 'length_ratio': 1.6923076923076923, 'translation_length': 22, 'reference_length': 13} Rouge: {'rouge1': 0.6842105263157894, 'rouge2': 0.6111111111111112, 'rougeL': 0.6842105263157894, 'rougeLsum': 0.6842105263157894} Sari: {'sari': 64.30224867724868} Flesh Reading Ease: 47.15 ---------------------------------------- Source: ['Besonders beeindruckend ist die Speicherstadt - ein historischer Komplex von Lagerhäusern innerhalb des Hamburger Hafens.'] Prediction: ['In Lagerhäusern ist ein historischer Komplex eines Hamburger Hafens gestorben.\nDas Komplex ist ein historischer Komplex von Lagerhäusern innerhalb des Hamburger Hafens.'] Label: [['Besonders beeindruckend ist die Speicherstadt – historische Lagerhäuser innerhalb des Hamburger Hafens.']] Sacrebleu: {'score': 15.41506497751075, 'counts': [6, 4, 3, 2], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 17.391304347826086, 13.636363636363637, 9.523809523809524], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.15415064977510756, 'precisions': [0.25, 0.17391304347826086, 0.13636363636363635, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.1764705882352941, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 29.45187165775401} Flesh Reading Ease: 40.3 ---------------------------------------- Source: ['Fast 600.000 Quadratmeter beträgt die Fläche, die übrigens auf Eichenpfählen erbaut ist.'] Prediction: ['Fast 600.000 Quadratmeter beträgt die Fläche, die übrigens auf Eichenpfählen erbaut ist.\nFast 600.000 Quadratmeter beträgt die Fläche, die übrigens auf Eichenpfählen erbaut ist.'] Label: [['Fast 600.000 Quadratmeter beträgt die Fläche.']] Sacrebleu: {'score': 17.098323692758395, 'counts': [7, 5, 4, 3], 'totals': [28, 27, 26, 25], 'precisions': [25.0, 18.51851851851852, 15.384615384615385, 12.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 7} Bleu: {'bleu': 0.17098323692758394, 'precisions': [0.25, 0.18518518518518517, 0.15384615384615385, 0.12], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 28, 'reference_length': 7} Rouge: {'rouge1': 0.43902439024390244, 'rouge2': 0.41025641025641024, 'rougeL': 0.43902439024390244, 'rougeLsum': 0.43902439024390244} Sari: {'sari': 59.58994708994708} Flesh Reading Ease: 56.85 ---------------------------------------- Source: ['Dieser Lagerhauskomplex ist der größte der Welt und ebenfalls ein Muss unter den Sehenswürdigkeiten Hamburgs.'] Prediction: ['Der Lagerhauskomplex in Hamburg ist der größte der Welt und ebenfalls ein Muss unter den Sehenswürdigkeiten Hamburgs.\nDer Lagerhauskomplex ist der größte der Welt und ebenfalls ein Muss unter den Sehenswürdigkeiten Hamburgs.'] Label: [['Dieser Lagerhauskomplex ist der größte der Welt.']] Sacrebleu: {'score': 13.93754203898127, 'counts': [7, 5, 4, 3], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 15.151515151515152, 12.5, 9.67741935483871], 'bp': 1.0, 'sys_len': 34, 'ref_len': 8} Bleu: {'bleu': 0.13937542038981277, 'precisions': [0.20588235294117646, 0.15151515151515152, 0.125, 0.0967741935483871], 'brevity_penalty': 1.0, 'length_ratio': 4.25, 'translation_length': 34, 'reference_length': 8} Rouge: {'rouge1': 0.3181818181818182, 'rouge2': 0.2857142857142857, 'rougeL': 0.3181818181818182, 'rougeLsum': 0.3181818181818182} Sari: {'sari': 15.789890918315578} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['Vor etwa 700 Jahren nannte sich so ein Zusammenschluss von Städten und Kaufmannsverbänden, denn das "Hansebündnis" sollte den Handel zwischen den Mitgliedern erleichtern.'] Prediction: ['Ein Zusammenschluss von Städten und Kaufmannsverbänden sollte den Handel zwischen den Mitgliedern erleichtern.\nDas "Hansebündnis" sollte den Handel zwischen den Mitgliedern erleichtern.'] Label: [['Vor etwa 700 Jahren nannte sich so ein Zusammenschluss von Städten und Kaufmannsverbänden.\nDas "Hansebündnis" sollte den Handel zwischen den Mitgliedern erleichtern.']] Sacrebleu: {'score': 60.59856413067045, 'counts': [18, 16, 14, 12], 'totals': [26, 25, 24, 23], 'precisions': [69.23076923076923, 64.0, 58.333333333333336, 52.17391304347826], 'bp': 1.0, 'sys_len': 26, 'ref_len': 26} Bleu: {'bleu': 0.6059856413067048, 'precisions': [0.6923076923076923, 0.64, 0.5833333333333334, 0.5217391304347826], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 26, 'reference_length': 26} Rouge: {'rouge1': 0.72, 'rouge2': 0.6666666666666666, 'rougeL': 0.72, 'rougeLsum': 0.72} Sari: {'sari': 54.33462674554198} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Der bekannteste Pirat in der hamburgischen Geschichte ist Klaus Störtebeker, ihm ist in der Hafen-City am vermuteten Hinrichtungsort ein Denkmal errichtet.'] Prediction: ['Klaus Störtebeker ist in der Hafen-City am vermuteten Hinrichtungsort ein Denkmal errichtet.\nDer bekannteste Pirat in der hamburgischen Geschichte ist Klaus Störtebeker.'] Label: [['Der bekannteste Pirat in der hamburgischen Geschichte ist Klaus Störtebeker.\nIhm ist in der Hafen-City ein Denkmal errichtet.']] Sacrebleu: {'score': 62.742088451809494, 'counts': [19, 16, 13, 10], 'totals': [24, 23, 22, 21], 'precisions': [79.16666666666667, 69.56521739130434, 59.09090909090909, 47.61904761904762], 'bp': 1.0, 'sys_len': 24, 'ref_len': 20} Bleu: {'bleu': 0.6274208845180947, 'precisions': [0.7916666666666666, 0.6956521739130435, 0.5909090909090909, 0.47619047619047616], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 24, 'reference_length': 20} Rouge: {'rouge1': 0.8444444444444444, 'rouge2': 0.744186046511628, 'rougeL': 0.48888888888888893, 'rougeLsum': 0.8444444444444444} Sari: {'sari': 63.79306220095694} Flesh Reading Ease: 40.3 ---------------------------------------- Source: ['Humor und Witz kann so vieles sein – hier der Beweis für eine deutsche humoristische Tradition: Der Aprilscherz.'] Prediction: ['Der Aprilscherz ist der erste Schweizer Aprilscherz.\nIm Aprilscherz wurde der Beweis für eine deutsche humoristische Tradition: Der Aprilscherz.\nIm Aprilscherz wurde der Aprilscherz mit Humor und Witz veröffentlicht.'] Label: [['Hier eine deutsche humoristische Tradition: Der Aprilscherz.']] Sacrebleu: {'score': 20.33717397090785, 'counts': [8, 7, 6, 5], 'totals': [33, 32, 31, 30], 'precisions': [24.242424242424242, 21.875, 19.35483870967742, 16.666666666666668], 'bp': 1.0, 'sys_len': 33, 'ref_len': 9} Bleu: {'bleu': 0.2033717397090786, 'precisions': [0.24242424242424243, 0.21875, 0.1935483870967742, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 3.6666666666666665, 'translation_length': 33, 'reference_length': 9} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.2777777777777778, 'rougeL': 0.3157894736842105, 'rougeLsum': 0.3157894736842105} Sari: {'sari': 56.5759555219813} Flesh Reading Ease: 65.0 ---------------------------------------- Source: ['Bereits 1618 taucht sie erstmals auf und bedeutet: Jemanden mit einer falschen Information hereinlegen oder jemanden zum Narren halten – ein Scherz meist auf Kosten anderer.'] Prediction: ['Eine falsche Information auf Kosten und Narren ist in den USA nicht mehr gefragt.\nDie Opfer sind auf der Suche.\nSie wurde auf der Suche nach der Opferin gefunden.'] Label: [['Bereits 1618 taucht sie erstmals auf und bedeutet: Jemanden mit einer falschen Information hereinlegen.']] Sacrebleu: {'score': 1.6404472625060698, 'counts': [4, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 32, 'reference_length': 16} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.0, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.1395348837209302} Sari: {'sari': 19.578896918788704} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['Eigentlich dachte er, dass angesichts des Datums niemand reagieren würde und war überrascht, dass sich über 100 Interessenten meldeten.'] Prediction: ['Ein Experte hat sich in einem Interview über 100 Interessenten meldeten.\nEr dachte, dass sich über 100 Interessenten meldeten würde.\nEr war überrascht, dass sich über 100 Interessenten meldeten würde.'] Label: [['Eigentlich dachte er, dass niemand reagieren würde.\nEs meldeten sich über 100 Interessenten.']] Sacrebleu: {'score': 9.672649511413097, 'counts': [11, 5, 2, 1], 'totals': [35, 34, 33, 32], 'precisions': [31.428571428571427, 14.705882352941176, 6.0606060606060606, 3.125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 16} Bleu: {'bleu': 0.09672649511413092, 'precisions': [0.3142857142857143, 0.14705882352941177, 0.06060606060606061, 0.03125], 'brevity_penalty': 1.0, 'length_ratio': 2.1875, 'translation_length': 35, 'reference_length': 16} Rouge: {'rouge1': 0.43478260869565216, 'rouge2': 0.18181818181818182, 'rougeL': 0.34782608695652173, 'rougeLsum': 0.391304347826087} Sari: {'sari': 36.66717111931296} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Für viele Lacher sorgen seit einigen Jahren Komiker wie Abdelkarim, Kaya Yanar, Enissa Amani oder Bülent Ceylan.'] Prediction: ['Die Schweizer Lacher sind seit einigen Jahren Komiker.\nSie sind für viele Lacher wie Abdelkarim, Kaya Yanar, Enissa Amani oder Bülent Ceylan.'] Label: [['sorgen seit einigen Jahren Komiker wie Abdelkarim, Kaya Yanar oder Bülent Ceylan.']] Sacrebleu: {'score': 31.73673439991375, 'counts': [13, 10, 7, 4], 'totals': [26, 25, 24, 23], 'precisions': [50.0, 40.0, 29.166666666666668, 17.391304347826086], 'bp': 1.0, 'sys_len': 26, 'ref_len': 14} Bleu: {'bleu': 0.3173673439991377, 'precisions': [0.5, 0.4, 0.2916666666666667, 0.17391304347826086], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 26, 'reference_length': 14} Rouge: {'rouge1': 0.6486486486486487, 'rouge2': 0.5142857142857143, 'rougeL': 0.6486486486486487, 'rougeLsum': 0.6486486486486487} Sari: {'sari': 31.03292999753083} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['Wie das Statistische Bundesamt berichtet, gibt es heute 79 Prozent mehr private Schulen in Deutschland als noch 1992.'] Prediction: ['Deutschland hat 79 Prozent mehr private Schulen als noch 1992.\nDas Statistische Bundesamt berichtet, dass 79 Prozent mehr private Schulen in Deutschland als noch 1992.'] Label: [['Wie das Statistische Bundesamt berichtet, gibt es heute 79 Prozent mehr private Schulen in Deutschland']] Sacrebleu: {'score': 28.977907494497092, 'counts': [11, 9, 7, 5], 'totals': [28, 27, 26, 25], 'precisions': [39.285714285714285, 33.333333333333336, 26.923076923076923, 20.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 16} Bleu: {'bleu': 0.28977907494497107, 'precisions': [0.39285714285714285, 0.3333333333333333, 0.2692307692307692, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 28, 'reference_length': 16} Rouge: {'rouge1': 0.5499999999999999, 'rouge2': 0.4736842105263159, 'rougeL': 0.5499999999999999, 'rougeLsum': 0.5499999999999999} Sari: {'sari': 21.47315765194326} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Woher kommt dieses Wachstum?'] Prediction: ['Immer mehr Wachstum kommt es zu einem Wachstum?\nWoher kommt dieses Wachstum?'] Label: [['als noch 1992.Woher kommt dieses Wachstum?']] Sacrebleu: {'score': 26.58483576665878, 'counts': [5, 4, 3, 2], 'totals': [14, 13, 12, 11], 'precisions': [35.714285714285715, 30.76923076923077, 25.0, 18.181818181818183], 'bp': 1.0, 'sys_len': 14, 'ref_len': 9} Bleu: {'bleu': 0.26584835766658776, 'precisions': [0.35714285714285715, 0.3076923076923077, 0.25, 0.18181818181818182], 'brevity_penalty': 1.0, 'length_ratio': 1.5555555555555556, 'translation_length': 14, 'reference_length': 9} Rouge: {'rouge1': 0.4210526315789474, 'rouge2': 0.3529411764705882, 'rougeL': 0.4210526315789474, 'rougeLsum': 0.4210526315789474} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 80.4 ---------------------------------------- Source: ['Pro Woche fallen im Schnitt eine Million Stunden durch Krankheit, Fortbildung oder Schwangerschaften von Lehrpersonal aus.'] Prediction: ['Im Schnitt fallen im Schnitt eine Million Stunden durch Krankheit, Fortbildung oder Schwangerschaften von Lehrpersonal aus.\nIm Schnitt fallen im Schnitt eine Million Stunden durch Krankheit, Fortbildung oder Schwangerschaften von Lehrpersonal aus.'] Label: [['Pro Woche fallen im Schnitt eine Million Stunden aus.']] Sacrebleu: {'score': 14.207405313947058, 'counts': [8, 6, 4, 3], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 17.142857142857142, 11.764705882352942, 9.090909090909092], 'bp': 1.0, 'sys_len': 36, 'ref_len': 10} Bleu: {'bleu': 0.14207405313947055, 'precisions': [0.2222222222222222, 0.17142857142857143, 0.11764705882352941, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 3.6, 'translation_length': 36, 'reference_length': 10} Rouge: {'rouge1': 0.34146341463414637, 'rouge2': 0.2564102564102564, 'rougeL': 0.34146341463414637, 'rougeLsum': 0.34146341463414637} Sari: {'sari': 23.920475659606097} Flesh Reading Ease: 52.85 ---------------------------------------- Source: ['Das Problem wird vor allem darauf zurückgeführt, dass es kaum Vertretungslehrer gebe und nicht schnell genug Ersatz kurzfristig eingestellt werden kann.'] Prediction: ['Der Vertretungslehrer wird vor allem darauf zurückgeführt, dass es kaum Vertretungslehrer gebe und nicht schnell genug Ersatz kurzfristig eingestellt werden kann.\nDas Problem wird vor allem darauf zurückgeführt, dass es kaum Vertretungslehrer gebe und nicht schnell genug Ersatz kurzfristig eingestellt werden kann.'] Label: [['Das Problem: Es gibt kaum Vertretungslehrer.']] Sacrebleu: {'score': 2.376865647368116, 'counts': [5, 2, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [10.869565217391305, 4.444444444444445, 1.1363636363636365, 0.5813953488372093], 'bp': 1.0, 'sys_len': 46, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.10869565217391304, 0.044444444444444446, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.75, 'translation_length': 46, 'reference_length': 8} Rouge: {'rouge1': 0.1923076923076923, 'rouge2': 0.07999999999999999, 'rougeL': 0.1923076923076923, 'rougeLsum': 0.1923076923076923} Sari: {'sari': 38.17049808429119} Flesh Reading Ease: 47.85 ---------------------------------------- Source: ['Die Erfolgsquote von Schülerinnen und Schülern beim Bildungsabschluss ist in öffentlichen Schulen und Privatschulen übrigens nahezu gleich.'] Prediction: ['Die Erfolgsquote von Schülerinnen und Schülern beim Bildungsabschluss ist in öffentlichen Schulen und Privatschulen übrigens nahezu gleich.\nIn öffentlichen Schulen und Privatschulen ist die Erfolgsquote nahezu gleich.'] Label: [['Der Erfolg von Schülern beim Bildungsabschluss ist in öffentlichen Schulen und Privatschulen übrigens nahezu gleich.']] Sacrebleu: {'score': 42.43285041694932, 'counts': [14, 12, 11, 10], 'totals': [29, 28, 27, 26], 'precisions': [48.275862068965516, 42.857142857142854, 40.74074074074074, 38.46153846153846], 'bp': 1.0, 'sys_len': 29, 'ref_len': 16} Bleu: {'bleu': 0.4243285041694932, 'precisions': [0.4827586206896552, 0.42857142857142855, 0.4074074074074074, 0.38461538461538464], 'brevity_penalty': 1.0, 'length_ratio': 1.8125, 'translation_length': 29, 'reference_length': 16} Rouge: {'rouge1': 0.6222222222222222, 'rouge2': 0.6046511627906976, 'rougeL': 0.6222222222222222, 'rougeLsum': 0.6222222222222222} Sari: {'sari': 61.06372436125592} Flesh Reading Ease: 37.8 ---------------------------------------- Source: ['Jeder deutsche Erwachsene sitzt durchschnittlich sieben Stunden am Tag.'] Prediction: ['Ein deutscher Erwachsene sitzt in den letzten Tagen in der Schweiz.\nEr wurde durchschnittlich sieben Stunden am Tag verletzt.'] Label: [['Jeder deutsche Erwachsene sitzt durchschnittlich sieben Stunden am Tag, er bewegt sich praktisch nicht.']] Sacrebleu: {'score': 20.217803037339237, 'counts': [8, 5, 3, 2], 'totals': [21, 20, 19, 18], 'precisions': [38.095238095238095, 25.0, 15.789473684210526, 11.11111111111111], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.20217803037339238, 'precisions': [0.38095238095238093, 0.25, 0.15789473684210525, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.48484848484848486, 'rouge2': 0.3225806451612903, 'rougeL': 0.4242424242424242, 'rougeLsum': 0.4242424242424242} Sari: {'sari': 29.381389307859894} Flesh Reading Ease: 76.9 ---------------------------------------- Source: ['Die Sportler sind in Deutschland inzwischen in einer - wenn auch knappen – Minderheit.'] Prediction: ['Die Sportler sind in Deutschland inzwischen in einer Minderheit.\nSie sind in einer Minderheit.'] Label: [['Die Sportler sind in Deutschland inzwischen in einer Minderheit.']] Sacrebleu: {'score': 58.282339541526554, 'counts': [10, 9, 8, 7], 'totals': [16, 15, 14, 13], 'precisions': [62.5, 60.0, 57.142857142857146, 53.84615384615385], 'bp': 1.0, 'sys_len': 16, 'ref_len': 10} Bleu: {'bleu': 0.5828233954152653, 'precisions': [0.625, 0.6, 0.5714285714285714, 0.5384615384615384], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 16, 'reference_length': 10} Rouge: {'rouge1': 0.782608695652174, 'rouge2': 0.761904761904762, 'rougeL': 0.782608695652174, 'rougeLsum': 0.782608695652174} Sari: {'sari': 78.70370370370371} Flesh Reading Ease: 67.7 ---------------------------------------- Source: ['Drittel der Befragten bewegen sich noch nicht einmal eine Stunde am Tag, den Gang zu Kopierer und Toilette mit eingerechnet.'] Prediction: ['Ein Gang zu Kopierer und Toilette mit eingerechnet hat sich in der Nacht auf Sonntag eine Stunde in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag bewegen sich noch nicht einmal eine Stunde.\nDer Gang zu Kopierer und Toilette mit eingerechnet hatte sich noch nicht einmal eine Stunde am Tag bewegen sich noch nicht einmal eine Stunde am Tag.'] Label: [['Drittel der Befragten bewegen sich noch nicht einmal eine Stunde am Tag.']] Sacrebleu: {'score': 10.720173593511536, 'counts': [11, 9, 8, 7], 'totals': [82, 81, 80, 79], 'precisions': [13.414634146341463, 11.11111111111111, 10.0, 8.860759493670885], 'bp': 1.0, 'sys_len': 82, 'ref_len': 13} Bleu: {'bleu': 0.10720173593511537, 'precisions': [0.13414634146341464, 0.1111111111111111, 0.1, 0.08860759493670886], 'brevity_penalty': 1.0, 'length_ratio': 6.3076923076923075, 'translation_length': 82, 'reference_length': 13} Rouge: {'rouge1': 0.21739130434782608, 'rouge2': 0.17777777777777778, 'rougeL': 0.21739130434782608, 'rougeLsum': 0.21739130434782608} Sari: {'sari': 43.46162813218557} Flesh Reading Ease: 52.25 ---------------------------------------- Source: ['Um sich zu motivieren, nutzen viele Deutsche inzwischen digitale Helfer: Pulsuhren, Fitnessarmbänder und ihr Mobiltelefon mit den passenden Apps unterstützen, messen und bewerten die Aktivitäten.'] Prediction: ['Ein digitales Handy nutzen viele Fitnessarmbänder und Fitnessarmbänder mit den passenden Apps unterstützen, messen und bewerten die Aktivitäten.\nDiese sollen sich in der digitale Helfer-Kette einführen.'] Label: [['Um sich zu motivieren, setzen viele Deutsche inzwischen digitale Helfer ein: Pulsuhren, Fitnessarmbänder und ihr Mobiltelefon mit den passenden Apps.\nDiese Helfer unterstützen, messen und bewerten die Aktivitäten.']] Sacrebleu: {'score': 31.328700202887095, 'counts': [19, 12, 8, 6], 'totals': [29, 28, 27, 26], 'precisions': [65.51724137931035, 42.857142857142854, 29.62962962962963, 23.076923076923077], 'bp': 0.8416308400672835, 'sys_len': 29, 'ref_len': 34} Bleu: {'bleu': 0.31328700202887083, 'precisions': [0.6551724137931034, 0.42857142857142855, 0.2962962962962963, 0.23076923076923078], 'brevity_penalty': 0.8416308400672834, 'length_ratio': 0.8529411764705882, 'translation_length': 29, 'reference_length': 34} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.4262295081967213, 'rougeL': 0.5079365079365079, 'rougeLsum': 0.634920634920635} Sari: {'sari': 29.091791192113785} Flesh Reading Ease: 20.75 ---------------------------------------- Source: ['Etwa die Hälfte von ihnen (48 Prozent) ist überzeugt, dass sie sich dadurch auch mehr bewegen.'] Prediction: ['Etwa die Hälfte von ihnen (48 Prozent) ist überzeugt, dass sie sich dadurch auch mehr bewegen.\nEtwa die Hälfte von ihnen (48 Prozent) ist überzeugt, dass sie sich dadurch auch mehr bewegen.'] Label: [['Etwa die Hälfte der Personen (48 Prozent) ist überzeugt, dass sie sich dadurch auch mehr bewegen.']] Sacrebleu: {'score': 38.53878002532401, 'counts': [18, 16, 14, 12], 'totals': [40, 39, 38, 37], 'precisions': [45.0, 41.02564102564103, 36.8421052631579, 32.432432432432435], 'bp': 1.0, 'sys_len': 40, 'ref_len': 20} Bleu: {'bleu': 0.38538780025324015, 'precisions': [0.45, 0.41025641025641024, 0.3684210526315789, 0.32432432432432434], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 40, 'reference_length': 20} Rouge: {'rouge1': 0.5882352941176471, 'rouge2': 0.5306122448979591, 'rougeL': 0.5882352941176471, 'rougeLsum': 0.5882352941176471} Sari: {'sari': 63.03533618529082} Flesh Reading Ease: 76.25 ---------------------------------------- Source: ['Rückstände von Pestiziden in Nahrungsmitteln, Mogelpackungen von Waren, Datenmissbrauch oder Weichmacher in Kinderspielzeug und alles Mögliche, was den Menschen schadet, ist verboten.'] Prediction: ['Pestiziden haben in den letzten Tagen mehrere Menschen verboten.\nDie Rückstände von Pestiziden in Nahrungsmitteln, Datenmissbrauch oder Weichmacher in Kinderspielzeug sind verboten.'] Label: [['Rückstände von Pestiziden in Nahrungsmitteln, Mogelpackungen von Waren, Datenmissbrauch und alles Mögliche, was den Menschen schadet, ist verboten.']] Sacrebleu: {'score': 23.48781140011495, 'counts': [11, 7, 4, 3], 'totals': [25, 24, 23, 22], 'precisions': [44.0, 29.166666666666668, 17.391304347826086, 13.636363636363637], 'bp': 1.0, 'sys_len': 25, 'ref_len': 23} Bleu: {'bleu': 0.23487811400114963, 'precisions': [0.44, 0.2916666666666667, 0.17391304347826086, 0.13636363636363635], 'brevity_penalty': 1.0, 'length_ratio': 1.0869565217391304, 'translation_length': 25, 'reference_length': 23} Rouge: {'rouge1': 0.4888888888888889, 'rouge2': 0.27906976744186046, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.4888888888888889} Sari: {'sari': 16.543938380719027} Flesh Reading Ease: 34.45 ---------------------------------------- Source: ['Die Verbraucherschutzorganisationen wie der Bundesverband der Verbraucherzentralen, seine Landesorganisationen, das Bundesamt für Verbraucherschutz und Lebensmittelsicherheit warnen vor Produkten – und der Name des Herstellers wird genannt.'] Prediction: ['Der Name des Herstellers wird genannt.\nDer Name des Herstellers wird genannt.'] Label: [['Die Verbraucherschutzorganisationen wie der Bundesverband der Verbraucherzentralen, seine Landesorganisationen, das Bundesamt für Verbraucherschutz und Lebensmittelsicherheit warnen vor Produkten.']] Sacrebleu: {'score': 1.7224492538765235, 'counts': [1, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [7.142857142857143, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 0.6065306597126334, 'sys_len': 14, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6065306597126334, 'length_ratio': 0.6666666666666666, 'translation_length': 14, 'reference_length': 21} Rouge: {'rouge1': 0.12903225806451615, 'rouge2': 0.0, 'rougeL': 0.12903225806451615, 'rougeLsum': 0.06451612903225808} Sari: {'sari': 15.12398420293157} Flesh Reading Ease: 74.55 ---------------------------------------- Source: ['Das Freihandelsabkommen zwischen der Europäischen Union (EU) und den USA, die Transatlantic Trade and Investment Partnership, wird in allen Umfragen negativ bewertet, etwa im ARD-Deutschlandtrend.'] Prediction: ['Das Freihandelsabkommen zwischen der Europäischen Union (EU) und den USA, die Transatlantic Trade and Investment Partnership, wird in allen Umfragen negativ bewertet.\nDas Freihandelsabkommen zwischen der Europäischen Union (EU) und den USA, die Transatlantic Trade and Investment Partnership, wird in allen Umfragen negativ bewertet.'] Label: [['Das Freihandelsabkommen zwischen der Europäischen Union (EU) und den USA, die Transatlantic Trade and Investment Partnership, wird in allen Umfragen negativ bewertet.']] Sacrebleu: {'score': 48.53570064558382, 'counts': [27, 26, 25, 24], 'totals': [54, 53, 52, 51], 'precisions': [50.0, 49.056603773584904, 48.07692307692308, 47.05882352941177], 'bp': 1.0, 'sys_len': 54, 'ref_len': 27} Bleu: {'bleu': 0.48535700645583835, 'precisions': [0.5, 0.49056603773584906, 0.4807692307692308, 0.47058823529411764], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 54, 'reference_length': 27} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.6567164179104478, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 88.00179211469533} Flesh Reading Ease: 35.15 ---------------------------------------- Source: ['Es wird befürchtet, dass das europäische Verbot von Wachstumshormonen bei der Fleischproduktion nicht mehr gilt und die strengeren Zulassungskriterien für Chemikalien in Gefahr seien.'] Prediction: ['Der europäische Verbot von Wachstumshormonen bei der Fleischproduktion ist nicht mehr gilt.\nDas wird befürchtet, dass das Verbot nicht mehr gilt und die strengeren Zulassungskriterien für Chemikalien in Gefahr seien.'] Label: [['Auch gibt es Ängste, dass die strengeren Zulassungskriterien für Chemikalien in Gefahr seien.']] Sacrebleu: {'score': 25.50846965854251, 'counts': [11, 9, 7, 6], 'totals': [33, 32, 31, 30], 'precisions': [33.333333333333336, 28.125, 22.580645161290324, 20.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 15} Bleu: {'bleu': 0.25508469658542515, 'precisions': [0.3333333333333333, 0.28125, 0.22580645161290322, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 33, 'reference_length': 15} Rouge: {'rouge1': 0.42553191489361697, 'rouge2': 0.35555555555555557, 'rougeL': 0.42553191489361697, 'rougeLsum': 0.42553191489361697} Sari: {'sari': 43.82629866500834} Flesh Reading Ease: 48.0 ---------------------------------------- Source: ['Aber auch die Amerikaner haben Vorbehalte. Sie sorgen sich um die weniger strengen Zulassungsverfahren der Europäischen Union für Medikamente und den geringeren Schutz der Verbraucher in Sachen Finanzgeschäfte.'] Prediction: ['Die Amerikaner haben Vorbehalte.\nSie sorgen sich um die weniger strengen Zulassungsverfahren der Europäischen Union für Medikamente und den geringeren Schutz der Verbraucher in Sachen Finanzgeschäfte.'] Label: [['Aber auch die Amerikaner sorgen sich, zum Beispiel um die weniger strengen Zulassungsverfahren der EU für Medikamente.']] Sacrebleu: {'score': 21.281701380712917, 'counts': [12, 7, 4, 3], 'totals': [28, 27, 26, 25], 'precisions': [42.857142857142854, 25.925925925925927, 15.384615384615385, 12.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 19} Bleu: {'bleu': 0.21281701380712922, 'precisions': [0.42857142857142855, 0.25925925925925924, 0.15384615384615385, 0.12], 'brevity_penalty': 1.0, 'length_ratio': 1.4736842105263157, 'translation_length': 28, 'reference_length': 19} Rouge: {'rouge1': 0.5531914893617021, 'rouge2': 0.39999999999999997, 'rougeL': 0.5531914893617021, 'rougeLsum': 0.5531914893617021} Sari: {'sari': 16.441687112869378} Flesh Reading Ease: 32.45 ---------------------------------------- Source: ['Spielerisch geht dann gar nichts mehr, sondern nur noch mühsam.'] Prediction: ['Die Schweizer Schweizer Schweizer kämpfen sich nicht mehr.\nDas sind nur noch mühsam.'] Label: [['Spielerisch geht dann gar nichts mehr.']] Sacrebleu: {'score': 5.255923420816887, 'counts': [2, 1, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [13.333333333333334, 7.142857142857143, 3.8461538461538463, 2.0833333333333335], 'bp': 1.0, 'sys_len': 15, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 15, 'reference_length': 7} Rouge: {'rouge1': 0.09523809523809522, 'rouge2': 0.0, 'rougeL': 0.09523809523809522, 'rougeLsum': 0.09523809523809522} Sari: {'sari': 19.173881673881674} Flesh Reading Ease: 91.6 ---------------------------------------- Source: ['Sie sind erfinderisch und täuschen Sehschwächen vor, argumentieren mit „Brille vergessen“ und kommen irgendwie durch den Tag.'] Prediction: ['Eine der Täter wurde in der Nacht auf Sonntag mit seinem Mann aufgefunden.\nSie argumentieren mit "Brille vergessen" und kommen durch den Tag.\nDie Täter werden sich erfinderisch und täuschen Sehschwächen vorgefunden.'] Label: [['Sie sind erfinderisch und täuschen Sehschwächen vor und kommen irgendwie durch den Tag.']] Sacrebleu: {'score': 14.040493781054332, 'counts': [11, 7, 4, 2], 'totals': [37, 36, 35, 34], 'precisions': [29.72972972972973, 19.444444444444443, 11.428571428571429, 5.882352941176471], 'bp': 1.0, 'sys_len': 37, 'ref_len': 14} Bleu: {'bleu': 0.1404049378105433, 'precisions': [0.2972972972972973, 0.19444444444444445, 0.11428571428571428, 0.058823529411764705], 'brevity_penalty': 1.0, 'length_ratio': 2.642857142857143, 'translation_length': 37, 'reference_length': 14} Rouge: {'rouge1': 0.47058823529411764, 'rouge2': 0.32653061224489793, 'rougeL': 0.27450980392156865, 'rougeLsum': 0.47058823529411764} Sari: {'sari': 38.25118508942038} Flesh Reading Ease: 64.0 ---------------------------------------- Source: ['Analphabetismus bewirkt Leiden, Isolation, Menschen am Arbeitsplatz ziehen sich zurück, sie verlieren ihr Selbstwertgefühl und häufig den Job.'] Prediction: ['In der Schweiz gibt es neu einen Selbstwertgefühl.\nIn der Schweiz gibt es neu einen Selbstwertgefühl.\nIn der Schweiz gibt es einen Selbstwertgefühl.'] Label: [['Analphabetismus bewirkt Leiden und Isolation.\nMenschen am Arbeitsplatz ziehen sich zurück, verlieren ihr Selbstwertgefühl und häufig den Job.']] Sacrebleu: {'score': 1.9011755113058346, 'counts': [3, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [11.538461538461538, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2380952380952381, 'translation_length': 26, 'reference_length': 21} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.044444444444444446, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 12.459157152139609} Flesh Reading Ease: 90.4 ---------------------------------------- Source: ['In Deutschland gibt es verschiedene Initiativen, die sich zur „Nationalen Strategie für Alphabetisierung und Grundbildung Erwachsener“ zusammengeschlossen haben.'] Prediction: ['In Deutschland gibt es verschiedene Initiativen, die sich zur Alphabetisierung und Grundbildung Erwachsener zusammengeschlossen haben.\nIn Deutschland gibt es verschiedene Initiativen, die sich zur Nationalen Strategie für Alphabetisierung und Grundbildung Erwachsener zusammengeschlossen haben.'] Label: [['Es gibt verschiedene Initiativen, die sich zur „Nationalen Strategie für Alphabetisierung und Grundbildung Erwachsener“ zusammengeschlossen haben.']] Sacrebleu: {'score': 25.402308575415578, 'counts': [15, 11, 8, 5], 'totals': [37, 36, 35, 34], 'precisions': [40.54054054054054, 30.555555555555557, 22.857142857142858, 14.705882352941176], 'bp': 1.0, 'sys_len': 37, 'ref_len': 18} Bleu: {'bleu': 0.2540230857541557, 'precisions': [0.40540540540540543, 0.3055555555555556, 0.22857142857142856, 0.14705882352941177], 'brevity_penalty': 1.0, 'length_ratio': 2.0555555555555554, 'translation_length': 37, 'reference_length': 18} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.5714285714285714, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.627450980392157} Sari: {'sari': 22.434602434602436} Flesh Reading Ease: 11.4 ---------------------------------------- Source: ['Dazu gibt es eine Wanderausstellung „Lesen & Schreiben – Mein Schlüssel zur Welt“.'] Prediction: ['Am 19.\nJuni findet in der Nacht auf Sonntag statt.\nDie Wanderausstellung "Lesen & Schreiben Mein Schlüssel zur Welt" findest du in der Nacht statt.\nDie Wanderausstellung wird in der Nacht auf Sonntag auf Sonntag stattfinden.'] Label: [['Dazu gibt es eine Ausstellung „Lesen & Schreiben – Mein Schlüssel zur Welt“.']] Sacrebleu: {'score': 4.278299570397255, 'counts': [6, 3, 1, 0], 'totals': [42, 41, 40, 39], 'precisions': [14.285714285714286, 7.317073170731708, 2.5, 1.2820512820512822], 'bp': 1.0, 'sys_len': 42, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.07317073170731707, 0.025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 42, 'reference_length': 14} Rouge: {'rouge1': 0.2916666666666667, 'rouge2': 0.26086956521739124, 'rougeL': 0.2916666666666667, 'rougeLsum': 0.2916666666666667} Sari: {'sari': 17.207792207792206} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['Trinkwasser, das den Menschen von den Wasserversorgern ihrer Stadt oder Gemeinde zur Verfügung gestellt wird, gilt als Grundnahrungsmittel und ist das am besten kontrollierte Lebensmittel überhaupt.'] Prediction: ['Der Lebensmittel für Trinkwasser ist überhaupt.\nDer Grundnahrungsmittel ist ein am besten kontrollierter Lebensmittel überhaupt.'] Label: [['Trinkwasser gilt als Grundnahrungsmittel und ist das am besten kontrollierte Lebensmittel überhaupt.']] Sacrebleu: {'score': 12.03921753741131, 'counts': [8, 3, 1, 0], 'totals': [17, 16, 15, 14], 'precisions': [47.05882352941177, 18.75, 6.666666666666667, 3.5714285714285716], 'bp': 1.0, 'sys_len': 17, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.47058823529411764, 0.1875, 0.06666666666666667, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3076923076923077, 'translation_length': 17, 'reference_length': 13} Rouge: {'rouge1': 0.5, 'rouge2': 0.15384615384615383, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 34.249888999888995} Flesh Reading Ease: 43.8 ---------------------------------------- Source: ['Die Massentierhaltung verbraucht Unmengen an Futter.'] Prediction: ['Unmengen an Futter verbraucht Unmengen an Futter.\nDie Massentierhaltung verbraucht Unmengen an Futter.'] Label: [['Aber die Massentierhaltung verbraucht Unmengen an Futter.']] Sacrebleu: {'score': 32.37722713145643, 'counts': [6, 5, 4, 3], 'totals': [15, 14, 13, 12], 'precisions': [40.0, 35.714285714285715, 30.76923076923077, 25.0], 'bp': 1.0, 'sys_len': 15, 'ref_len': 8} Bleu: {'bleu': 0.3237722713145643, 'precisions': [0.4, 0.35714285714285715, 0.3076923076923077, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.875, 'translation_length': 15, 'reference_length': 8} Rouge: {'rouge1': 0.6, 'rouge2': 0.5555555555555556, 'rougeL': 0.6, 'rougeLsum': 0.6} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 44.8 ---------------------------------------- Source: ['Die Ausscheidungen – die Gülle – landet auf den Feldern für die Düngung genau dieser Pflanzen.'] Prediction: ['Auf den Feldern landet auf den Feldern für die Düngung genau dieser Pflanzen.\nDie Ausscheidungen landet auf den Feldern für die Düngung genau dieser Pflanzen.'] Label: [['Die Ausscheidungen – die Gülle – landet auf den Feldern für die Düngung dieser Pflanzen.']] Sacrebleu: {'score': 28.574404296987996, 'counts': [13, 9, 6, 4], 'totals': [27, 26, 25, 24], 'precisions': [48.148148148148145, 34.61538461538461, 24.0, 16.666666666666668], 'bp': 1.0, 'sys_len': 27, 'ref_len': 16} Bleu: {'bleu': 0.28574404296988, 'precisions': [0.48148148148148145, 0.34615384615384615, 0.24, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 1.6875, 'translation_length': 27, 'reference_length': 16} Rouge: {'rouge1': 0.6222222222222222, 'rouge2': 0.46511627906976744, 'rougeL': 0.5777777777777777, 'rougeLsum': 0.5777777777777777} Sari: {'sari': 29.977656658379555} Flesh Reading Ease: 73.9 ---------------------------------------- Source: ['Doch die Menge macht’s: Denn Nitrat ist gut löslich und reichert sich im Trinkwasser an, ein Zuviel an Nitrat können auch Pflanzen speichern.'] Prediction: ['Nitrat ist gut löslich und reichert sich im Trinkwasser an.\nDenn Pflanzen können auch Pflanzen speichern.'] Label: [['Nitrat ist gut löslich und reichert sich im Trinkwasser an.']] Sacrebleu: {'score': 57.30574043798692, 'counts': [11, 10, 9, 8], 'totals': [18, 17, 16, 15], 'precisions': [61.111111111111114, 58.8235294117647, 56.25, 53.333333333333336], 'bp': 1.0, 'sys_len': 18, 'ref_len': 11} Bleu: {'bleu': 0.573057404379869, 'precisions': [0.6111111111111112, 0.5882352941176471, 0.5625, 0.5333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 18, 'reference_length': 11} Rouge: {'rouge1': 0.7586206896551725, 'rouge2': 0.7407407407407407, 'rougeL': 0.7586206896551725, 'rougeLsum': 0.7586206896551725} Sari: {'sari': 76.40957929335123} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['In hoher Konzentration aber schadet es den Menschen.50'] Prediction: ['In der Schweiz schadet es den Menschen.\nIn hoher Konzentration schadet es den Menschen.'] Label: [['In hoher Konzentration aber schadet es.50']] Sacrebleu: {'score': 11.980914528565991, 'counts': [6, 3, 1, 0], 'totals': [16, 15, 14, 13], 'precisions': [37.5, 20.0, 7.142857142857143, 3.8461538461538463], 'bp': 1.0, 'sys_len': 16, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.375, 0.2, 0.07142857142857142, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 16, 'reference_length': 8} Rouge: {'rouge1': 0.4761904761904762, 'rouge2': 0.3157894736842105, 'rougeL': 0.4761904761904762, 'rougeLsum': 0.4761904761904762} Sari: {'sari': 17.916666666666668} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Milligramm pro Liter Wasser (mg/l) sind erlaubt, aber Messungen wie zum Beispiel beim Wasserversorger im Bundesland Niedersachsen haben Werte von 250 mg/l ermittelt.'] Prediction: ['Im Bundesland Niedersachsen werden Milligramm pro Liter Wasser (mg/l) erlaubt.\nWerte von 250 mg/l ermittelt, ist derzeit unklar.'] Label: [['Milligramm pro Liter Wasser (mg/l) sind erlaubt.\nMessungen wie zum Beispiel beim Wasserversorger im Bundesland Niedersachsen haben Werte von 250 mg/l ermittelt.']] Sacrebleu: {'score': 49.77406353213103, 'counts': [21, 16, 12, 10], 'totals': [27, 26, 25, 24], 'precisions': [77.77777777777777, 61.53846153846154, 48.0, 41.666666666666664], 'bp': 0.8948393168143697, 'sys_len': 27, 'ref_len': 30} Bleu: {'bleu': 0.4977406353213107, 'precisions': [0.7777777777777778, 0.6153846153846154, 0.48, 0.4166666666666667], 'brevity_penalty': 0.8948393168143697, 'length_ratio': 0.9, 'translation_length': 27, 'reference_length': 30} Rouge: {'rouge1': 0.7272727272727272, 'rouge2': 0.5714285714285715, 'rougeL': 0.5909090909090908, 'rougeLsum': 0.7272727272727272} Sari: {'sari': 32.29287795222294} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Umweltverbände in Deutschland fordern eine Trendumkehr im Wasserschutz.'] Prediction: ['Umweltverbände in Deutschland fordern eine Trendumkehr im Wasserschutz.\nSie fordern eine Trendumkehr im Wasserschutz.'] Label: [['Umweltverbände in Deutschland fordern eine Umkehr im Wasserschutz.']] Sacrebleu: {'score': 30.62049088236489, 'counts': [8, 6, 4, 2], 'totals': [16, 15, 14, 13], 'precisions': [50.0, 40.0, 28.571428571428573, 15.384615384615385], 'bp': 1.0, 'sys_len': 16, 'ref_len': 9} Bleu: {'bleu': 0.30620490882364876, 'precisions': [0.5, 0.4, 0.2857142857142857, 0.15384615384615385], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 16, 'reference_length': 9} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.5454545454545454, 'rougeL': 0.6666666666666667, 'rougeLsum': 0.6666666666666667} Sari: {'sari': 58.54660045836516} Flesh Reading Ease: 32.6 ---------------------------------------- Source: ['Sie verweisen darauf, dass die Überdüngung schon heute jährliche Kosten von bis zu 25 Milliarden Euro für sauberes Trinkwasser verursache.'] Prediction: ['Die Überdüngung von bis zu 25 Milliarden Euro für sauberes Trinkwasser verursache.\nDie Kosten von bis zu 25 Milliarden Euro verursache sich heute jährliche Kosten von bis zu 25 Milliarden Euro.'] Label: [['Sie verweisen darauf, dass durch die Überdüngung schon heute jährliche Kosten von bis zu 25 Milliarden Euro für sauberes Trinkwasser entstehen.']] Sacrebleu: {'score': 34.46704815151319, 'counts': [14, 11, 10, 9], 'totals': [33, 32, 31, 30], 'precisions': [42.42424242424242, 34.375, 32.25806451612903, 30.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 23} Bleu: {'bleu': 0.34467048151513185, 'precisions': [0.42424242424242425, 0.34375, 0.3225806451612903, 0.3], 'brevity_penalty': 1.0, 'length_ratio': 1.434782608695652, 'translation_length': 33, 'reference_length': 23} Rouge: {'rouge1': 0.5862068965517241, 'rouge2': 0.5357142857142857, 'rougeL': 0.44827586206896547, 'rougeLsum': 0.5862068965517241} Sari: {'sari': 31.357947232947236} Flesh Reading Ease: 53.35 ---------------------------------------- Source: ['Industrie 4.0 bedeutet, dass Menschen und Maschinen und die gesamten Prozesse in einer Produktion vernetzt sind und miteinander kommunizieren.'] Prediction: ['Die gesamten Prozesse in einer Produktion wurden in der Schweiz vernetzt.\nDie gesamten Prozesse wurden miteinander kommunizieren.\nDie gesamten Prozesse wurden in der Schweiz vernetzt.'] Label: [['Industrie 4.0 bedeutet, dass Menschen und Maschinen und alle Prozesse in einer Produktion vernetzt sind und miteinander kommunizieren.']] Sacrebleu: {'score': 12.500763055889768, 'counts': [8, 5, 3, 1], 'totals': [28, 27, 26, 25], 'precisions': [28.571428571428573, 18.51851851851852, 11.538461538461538, 4.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 20} Bleu: {'bleu': 0.1250076305588977, 'precisions': [0.2857142857142857, 0.18518518518518517, 0.11538461538461539, 0.04], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 28, 'reference_length': 20} Rouge: {'rouge1': 0.3181818181818182, 'rouge2': 0.1904761904761905, 'rougeL': 0.3181818181818182, 'rougeLsum': 0.3181818181818182} Sari: {'sari': 15.109758536482676} Flesh Reading Ease: 48.85 ---------------------------------------- Source: ['Die Maschinen werden immer „intelligenter“, Produktionsprozesse werden für den Menschen vordergründig einfacher, aber auch komplexer.'] Prediction: ['Die Maschinen in der Schweiz sind immer wieder komplexer.\nDie Maschinen werden immer wieder einfacher, aber auch komplexer.'] Label: [['Die Maschinen werden immer intelligenter, Produktionsprozesse werden für den Menschen einfacher, aber auch komplexer.']] Sacrebleu: {'score': 34.00215619680846, 'counts': [10, 8, 6, 4], 'totals': [21, 20, 19, 18], 'precisions': [47.61904761904762, 40.0, 31.57894736842105, 22.22222222222222], 'bp': 1.0, 'sys_len': 21, 'ref_len': 17} Bleu: {'bleu': 0.3400215619680846, 'precisions': [0.47619047619047616, 0.4, 0.3157894736842105, 0.2222222222222222], 'brevity_penalty': 1.0, 'length_ratio': 1.2352941176470589, 'translation_length': 21, 'reference_length': 17} Rouge: {'rouge1': 0.4848484848484848, 'rouge2': 0.3870967741935484, 'rougeL': 0.4848484848484848, 'rougeLsum': 0.4848484848484848} Sari: {'sari': 41.91771191771192} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Immer dann, wenn neue Erfindungen in der Technik den Menschen Arbeit abnehmen, spricht man von einer industriellen Revolution.'] Prediction: ['Die revolutionäre Technik ist eine neue revolution.\nDie Menschen Arbeit wird von einer industriellen Revolution abgegeben.\nDie revolutionäre Technik ist eine neue Technik, die Menschen Arbeit abnehmen, sollen neue Erfindungen in der Technik abnehmen.'] Label: [['Immer dann, wenn neue Maschinen den Menschen Arbeit abgenommen haben, spricht man von einer industriellen Revolution.']] Sacrebleu: {'score': 7.978741405529227, 'counts': [10, 4, 2, 1], 'totals': [39, 38, 37, 36], 'precisions': [25.641025641025642, 10.526315789473685, 5.405405405405405, 2.7777777777777777], 'bp': 1.0, 'sys_len': 39, 'ref_len': 19} Bleu: {'bleu': 0.07978741405529223, 'precisions': [0.2564102564102564, 0.10526315789473684, 0.05405405405405406, 0.027777777777777776], 'brevity_penalty': 1.0, 'length_ratio': 2.0526315789473686, 'translation_length': 39, 'reference_length': 19} Rouge: {'rouge1': 0.2692307692307693, 'rouge2': 0.16, 'rougeL': 0.2692307692307693, 'rougeLsum': 0.2692307692307693} Sari: {'sari': 20.69545665755276} Flesh Reading Ease: 34.15 ---------------------------------------- Source: ['Der Kunde bestellt zum Beispiel sein Auto über das Internet und konfiguriert es nach seinen Ideen und Wünschen.'] Prediction: ['Ein Auto konnte seinen Ideen und Wünschen konfiguriert werden.\nDer Kunde bestellt sein Auto über das Internet und konfiguriert es nach seinen Ideen und Wünschen.'] Label: [['Der Kunde bestellt zum Beispiel sein Auto über das Internet und kann es nach seinen Ideen und Wünschen konfigurieren.']] Sacrebleu: {'score': 39.60970942970262, 'counts': [16, 12, 9, 6], 'totals': [27, 26, 25, 24], 'precisions': [59.25925925925926, 46.15384615384615, 36.0, 25.0], 'bp': 1.0, 'sys_len': 27, 'ref_len': 20} Bleu: {'bleu': 0.3960970942970261, 'precisions': [0.5925925925925926, 0.46153846153846156, 0.36, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.35, 'translation_length': 27, 'reference_length': 20} Rouge: {'rouge1': 0.6808510638297872, 'rouge2': 0.5777777777777778, 'rougeL': 0.6808510638297872, 'rougeLsum': 0.6808510638297872} Sari: {'sari': 24.585914718994566} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Unternehmen kommen weg von der Massenproduktion und Lagerhaltung hin zu Einzelanfertigungen nach Bedarf.'] Prediction: ['Unternehmen kommen weg von der Massenproduktion und Lagerhaltung hin zu Einzelanfertigungen nach Bedarf.\nUnternehmen kommen weg von der Massenproduktion und Lagerhaltung hin zu Einzelanfertigungen nach Bedarf.'] Label: [['Unternehmen gehen von der Massenproduktion und Lagerhaltung zu Einzelanfertigungen nach Bedarf.']] Sacrebleu: {'score': 25.60440513907562, 'counts': [11, 8, 6, 4], 'totals': [28, 27, 26, 25], 'precisions': [39.285714285714285, 29.62962962962963, 23.076923076923077, 16.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 12} Bleu: {'bleu': 0.2560440513907562, 'precisions': [0.39285714285714285, 0.2962962962962963, 0.23076923076923078, 0.16], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 28, 'reference_length': 12} Rouge: {'rouge1': 0.5405405405405405, 'rouge2': 0.4, 'rougeL': 0.5405405405405405, 'rougeLsum': 0.5405405405405405} Sari: {'sari': 57.01587301587302} Flesh Reading Ease: 20.75 ---------------------------------------- Source: ['Industrie 4.0 verlangt immer bessere Qualifizierung.'] Prediction: ['Industrie 4.0 verlangt immer bessere Qualifizierung.\nDie Quali-Quali-Quali-Quali-Quali-Quali-Quali-Final verlangt immer bessere Qualifizierung.'] Label: [['Industrie 4.0 verlangt vom Menschen eine immer bessere Qualifizierung.']] Sacrebleu: {'score': 25.712008025141323, 'counts': [7, 5, 3, 1], 'totals': [14, 13, 12, 11], 'precisions': [50.0, 38.46153846153846, 25.0, 9.090909090909092], 'bp': 1.0, 'sys_len': 14, 'ref_len': 10} Bleu: {'bleu': 0.25712008025141314, 'precisions': [0.5, 0.38461538461538464, 0.25, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 14, 'reference_length': 10} Rouge: {'rouge1': 0.4666666666666667, 'rouge2': 0.35714285714285715, 'rougeL': 0.4666666666666667, 'rougeLsum': 0.4666666666666667} Sari: {'sari': 58.82575757575758} Flesh Reading Ease: -48.31 ---------------------------------------- Source: ['Er muss Computerprogramme beherrschen, anpassen, verstehen, wie die Maschinen und Prozesse zusammenpassen und mit ihnen kommunizieren.'] Prediction: ['Ein Computerprogramm-Einblicke muss mit der Maschinen und Prozesse zusammenpassen.\nDie Maschinen und Prozesse kommunizieren kommunizieren.'] Label: [['Er muss Computerprogramme beherrschen.\nEr muss verstehen, wie die Maschinen und Prozesse zusammenpassen und kommunizieren.']] Sacrebleu: {'score': 17.765987008252424, 'counts': [9, 4, 2, 1], 'totals': [17, 16, 15, 14], 'precisions': [52.94117647058823, 25.0, 13.333333333333334, 7.142857142857143], 'bp': 0.9428731438548749, 'sys_len': 17, 'ref_len': 18} Bleu: {'bleu': 0.17765987008252418, 'precisions': [0.5294117647058824, 0.25, 0.13333333333333333, 0.07142857142857142], 'brevity_penalty': 0.9428731438548749, 'length_ratio': 0.9444444444444444, 'translation_length': 17, 'reference_length': 18} Rouge: {'rouge1': 0.5161290322580646, 'rouge2': 0.2758620689655172, 'rougeL': 0.45161290322580644, 'rougeLsum': 0.45161290322580644} Sari: {'sari': 36.24248040841544} Flesh Reading Ease: 8.7 ---------------------------------------- Source: ['Schon jetzt ist sicher, dass man hoch qualifizierte Arbeiter braucht.'] Prediction: ['Manche Arbeiter brauchen sich nicht mehr qualifiziert.\nSie braucht sich nach dem qualifizierten Arbeitskonzern.'] Label: [['Schon jetzt ist sicher, dass man in Zukunft mehr hoch qualifizierte Arbeiter braucht.']] Sacrebleu: {'score': 3.4585921141027365, 'counts': [4, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [25.0, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0666666666666667, 'translation_length': 16, 'reference_length': 15} Rouge: {'rouge1': 0.22222222222222224, 'rouge2': 0.0, 'rougeL': 0.14814814814814817, 'rougeLsum': 0.14814814814814817} Sari: {'sari': 9.725829725829726} Flesh Reading Ease: 56.0 ---------------------------------------- Source: ['Schwere körperliche Arbeiten werden mehr und mehr von Maschinen und Robotern übernommen.'] Prediction: ['Die körperlichen Arbeiten werden mehr und mehr von Maschinen und Robotern übernommen.\nDie körperlichen Arbeiten werden mehr und mehr von Maschinen und Robotern übernommen.'] Label: [['Schwere körperliche Arbeiten werden immer öfter von Maschinen und Robotern übernommen.']] Sacrebleu: {'score': 20.01670147593022, 'counts': [8, 6, 4, 3], 'totals': [26, 25, 24, 23], 'precisions': [30.76923076923077, 24.0, 16.666666666666668, 13.043478260869565], 'bp': 1.0, 'sys_len': 26, 'ref_len': 12} Bleu: {'bleu': 0.2001670147593021, 'precisions': [0.3076923076923077, 0.24, 0.16666666666666666, 0.13043478260869565], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 26, 'reference_length': 12} Rouge: {'rouge1': 0.42105263157894735, 'rouge2': 0.2777777777777778, 'rougeL': 0.42105263157894735, 'rougeLsum': 0.42105263157894735} Sari: {'sari': 25.136054421768705} Flesh Reading Ease: 51.0 ---------------------------------------- Source: ['Die Vernetzung ermöglicht das Arbeiten von jedem Ort aus und ist zeitlich flexibler.'] Prediction: ['Die Vernetzung der Arbeiten von jedem Ort ist zeitlich flexibler.\nDie Vernetzung ermöglicht das Arbeiten von jedem Ort aus und ist zeitlich flexibler.'] Label: [['Gut ist: Die Vernetzung über das Internet ermöglicht das Arbeiten von jedem Ort aus und man ist zeitlich flexibler.']] Sacrebleu: {'score': 40.188875403206985, 'counts': [15, 11, 8, 6], 'totals': [25, 24, 23, 22], 'precisions': [60.0, 45.833333333333336, 34.78260869565217, 27.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 21} Bleu: {'bleu': 0.40188875403207003, 'precisions': [0.6, 0.4583333333333333, 0.34782608695652173, 0.2727272727272727], 'brevity_penalty': 1.0, 'length_ratio': 1.1904761904761905, 'translation_length': 25, 'reference_length': 21} Rouge: {'rouge1': 0.6818181818181818, 'rouge2': 0.5238095238095238, 'rougeL': 0.6818181818181818, 'rougeLsum': 0.6363636363636365} Sari: {'sari': 61.85457516339869} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['Die neue Generation der Roboter wie YuMi - das ist die Kurzform für „You and Me“ des Mannheimer Unternehmens ABB - ist nicht mehr in Käfigen eingesperrt, sondern arbeitet Seite an Seite mit Menschen.'] Prediction: ['Die neue Generation der Roboter wie YuMi ist nicht mehr in Käfigen eingesperrt.\nDie neue Generation der Roboter wie YuMi arbeitet Seite an Seite mit Menschen.'] Label: [['Die neue Generation der Roboter wie YuMi - das ist die Kurzform für „You and Me“ des Mannheimer Unternehmens ABB - ist nicht mehr in Käfigen eingesperrt.']] Sacrebleu: {'score': 40.66689638009577, 'counts': [14, 12, 10, 8], 'totals': [28, 27, 26, 25], 'precisions': [50.0, 44.44444444444444, 38.46153846153846, 32.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 28} Bleu: {'bleu': 0.4066689638009577, 'precisions': [0.5, 0.4444444444444444, 0.38461538461538464, 0.32], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 28, 'reference_length': 28} Rouge: {'rouge1': 0.5555555555555556, 'rouge2': 0.46153846153846156, 'rougeL': 0.5185185185185185, 'rougeLsum': 0.5185185185185185} Sari: {'sari': 38.018042786644} Flesh Reading Ease: 55.85 ---------------------------------------- Source: ['Sie nehmen ihm eintönige oder körperlich schwere Arbeiten ab.'] Prediction: ['Eine Frau hat ihren Job in der Schweiz eintönig oder körperlich schwere Arbeiten abgegeben.\nSie hat ihn eintönig oder körperlich schwere Arbeiten abgegeben.\nSie hat ihn eintönig oder körperlich schwere Arbeiten abgegeben.'] Label: [['Sie nehmen dem Menschen eintönige oder körperlich schwere Arbeiten ab.']] Sacrebleu: {'score': 7.315986666459885, 'counts': [6, 3, 2, 1], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 8.823529411764707, 6.0606060606060606, 3.125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 11} Bleu: {'bleu': 0.07315986666459885, 'precisions': [0.17142857142857143, 0.08823529411764706, 0.06060606060606061, 0.03125], 'brevity_penalty': 1.0, 'length_ratio': 3.1818181818181817, 'translation_length': 35, 'reference_length': 11} Rouge: {'rouge1': 0.27999999999999997, 'rouge2': 0.16666666666666669, 'rougeL': 0.27999999999999997, 'rougeLsum': 0.27999999999999997} Sari: {'sari': 32.95634920634921} Flesh Reading Ease: 52.3 ---------------------------------------- Source: ['Oder der Leichtbauroboter Iiwa der Firma Kuka: Er ist in der Lage, ein Bier auszuschenken.'] Prediction: ['Der Leichtbauroboter Iiwa der Firma Kuka ist in der Lage ein Bier auszuschenken.\nDer Leichtbauroboter ist in der Lage ein Bier auszuschenken.'] Label: [['Oder der Leichtbauroboter Iiwa der Firma Kuka: Er kann ein Bier ausschenken.']] Sacrebleu: {'score': 18.038302998635977, 'counts': [9, 5, 3, 2], 'totals': [24, 23, 22, 21], 'precisions': [37.5, 21.73913043478261, 13.636363636363637, 9.523809523809524], 'bp': 1.0, 'sys_len': 24, 'ref_len': 14} Bleu: {'bleu': 0.18038302998635977, 'precisions': [0.375, 0.21739130434782608, 0.13636363636363635, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 1.7142857142857142, 'translation_length': 24, 'reference_length': 14} Rouge: {'rouge1': 0.4705882352941177, 'rouge2': 0.37499999999999994, 'rougeL': 0.4705882352941177, 'rougeLsum': 0.4705882352941177} Sari: {'sari': 37.031565656565654} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Von allen 16 Bundesländern Deutschland ist Bayern regelmäßig das beliebteste Land.'] Prediction: ['Bayern ist in Deutschland regelmäßig das beliebteste Land.\nDie 16 Bundesländern Deutschland sind Bayern regelmäßig das beliebteste Land.'] Label: [['Von allen 16 Bundesländern Deutschland ist Bayern das beliebteste Land.']] Sacrebleu: {'score': 18.45895819969781, 'counts': [9, 5, 3, 1], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 26.31578947368421, 16.666666666666668, 5.882352941176471], 'bp': 1.0, 'sys_len': 20, 'ref_len': 11} Bleu: {'bleu': 0.1845895819969781, 'precisions': [0.45, 0.2631578947368421, 0.16666666666666666, 0.058823529411764705], 'brevity_penalty': 1.0, 'length_ratio': 1.8181818181818181, 'translation_length': 20, 'reference_length': 11} Rouge: {'rouge1': 0.5625, 'rouge2': 0.3333333333333333, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 23.04563492063492} Flesh Reading Ease: 42.3 ---------------------------------------- Source: ['Hier begegnet man vielen Wanderern, im Winter ist Skifahren angesagt.'] Prediction: ['Die Schweizer Skifahren sind im Winter angesagt.\nDie Schweizer begegneten vielen Wanderern.\nIm Winter ist die Skifahren angesagt.'] Label: [['Hier trifft man viele Wanderer, im Winter fährt man Ski.']] Sacrebleu: {'score': 4.019656738893367, 'counts': [3, 1, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [14.285714285714286, 5.0, 2.6315789473684212, 1.3888888888888888], 'bp': 1.0, 'sys_len': 21, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.05, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 21, 'reference_length': 12} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.07407407407407408, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 38.93849206349206} Flesh Reading Ease: 57.0 ---------------------------------------- Source: ['Die Eiszeit hat die bayerischen Nordalpen besonders geformt:'] Prediction: ['Die bayerische Nordalpen hat die Eiszeit besonders geformt.\nDie Eiszeit hat die bayerischen Nordalpen besonders geformt.'] Label: [['Die Landschaft ist von der Eiszeit geformt:']] Sacrebleu: {'score': 2.8265205879007453, 'counts': [3, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [16.666666666666668, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 18, 'reference_length': 8} Rouge: {'rouge1': 0.26086956521739124, 'rouge2': 0.0, 'rougeL': 0.26086956521739124, 'rougeLsum': 0.26086956521739124} Sari: {'sari': 20.698924731182796} Flesh Reading Ease: 60.85 ---------------------------------------- Source: ['München gilt als eine der schönsten Städte Deutschlands.'] Prediction: ['Die Schweizer Frau München (27) gilt als eine der schönsten Städte Deutschlands.\nDie Frau gilt als eine der schönsten Städte.\nDie Frau gilt als eine der schönsten Städte Deutschlands.'] Label: [['München gehört zu den schönsten Städten Deutschlands.']] Sacrebleu: {'score': 2.5889065173943995, 'counts': [4, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.25, 'translation_length': 34, 'reference_length': 8} Rouge: {'rouge1': 0.2553191489361702, 'rouge2': 0.13333333333333333, 'rougeL': 0.2553191489361702, 'rougeLsum': 0.2553191489361702} Sari: {'sari': 40.54487179487179} Flesh Reading Ease: 82.55 ---------------------------------------- Source: ['Sie hat etwa 1,5 Millionen Einwohner und das Oktoberfest – das größte Volksfest der Welt mit jährlich rund 6 Millionen Gästen.'] Prediction: ['Das größte Volksfest der Welt hat jährlich rund 6 Millionen Gästen gewonnen.\nDie Welt hat etwa 1,5 Millionen Einwohner und das Oktoberfest mit jährlich rund 6 Millionen Gästen.'] Label: [['Sie hat etwa 1,5 Millionen Einwohner und ist bekannt durch das Oktoberfest – das größte Volksfest der Welt mit jährlich rund 6 Millionen Gästen.']] Sacrebleu: {'score': 44.18975777649827, 'counts': [19, 15, 11, 8], 'totals': [30, 29, 28, 27], 'precisions': [63.333333333333336, 51.724137931034484, 39.285714285714285, 29.62962962962963], 'bp': 1.0, 'sys_len': 30, 'ref_len': 25} Bleu: {'bleu': 0.4418975777649826, 'precisions': [0.6333333333333333, 0.5172413793103449, 0.39285714285714285, 0.2962962962962963], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 30, 'reference_length': 25} Rouge: {'rouge1': 0.7540983606557378, 'rouge2': 0.6440677966101696, 'rougeL': 0.5573770491803278, 'rougeLsum': 0.7540983606557378} Sari: {'sari': 27.990937365937363} Flesh Reading Ease: 60.7 ---------------------------------------- Source: ['Wem das zu viel Rummel ist hat tausende andere Möglichkeiten, die Stadt zu genießen, etwa auf dem Viktualienmarkt:'] Prediction: ['In der Stadt Zürich wurde ein Rummel auf dem Viktualienmarkt geschickt.\nDas ist das zu viel Rummel, der das zu viel Rummel ist.\nDie Stadt hat tausende andere Möglichkeiten, die Stadt zu genießen, etwa auf dem Viktualienmarkt.'] Label: [['Wem das zu viel ist, der hat viele andere Möglichkeiten, die Stadt zu genießen, etwa auf dem Viktualienmarkt:']] Sacrebleu: {'score': 30.707100423935433, 'counts': [19, 14, 11, 9], 'totals': [43, 42, 41, 40], 'precisions': [44.18604651162791, 33.333333333333336, 26.829268292682926, 22.5], 'bp': 1.0, 'sys_len': 43, 'ref_len': 22} Bleu: {'bleu': 0.3070710042393544, 'precisions': [0.4418604651162791, 0.3333333333333333, 0.2682926829268293, 0.225], 'brevity_penalty': 1.0, 'length_ratio': 1.9545454545454546, 'translation_length': 43, 'reference_length': 22} Rouge: {'rouge1': 0.6, 'rouge2': 0.44827586206896547, 'rougeL': 0.5666666666666667, 'rougeLsum': 0.5666666666666667} Sari: {'sari': 41.435596528584334} Flesh Reading Ease: 68.25 ---------------------------------------- Source: ['Ganz in der Nähe der Leopoldstraße - Münchens bekanntester Boulevard - empfiehlt die Süddeutsche Zeitung einen Abstecher in eine Seitenstraße des Stadtteils Schwabing.'] Prediction: ['In Münchens bekanntester Boulevard empfiehlt ein Abstecher einen Abstecher in eine Seitenstraße des Stadtteils Schwabing.\nDie Süddeutsche Zeitung hat einen Abstecher in eine Seitenstraße des Stadtteils Schwabing empfiehlt.'] Label: [['Ganz in der Nähe der Leopoldstraße - Münchens bekanntester Boulevard - empfiehlt die Süddeutsche Zeitung einen Besuch des Stadtteils Schwabing.']] Sacrebleu: {'score': 13.461801293778908, 'counts': [12, 6, 3, 1], 'totals': [30, 29, 28, 27], 'precisions': [40.0, 20.689655172413794, 10.714285714285714, 3.7037037037037037], 'bp': 1.0, 'sys_len': 30, 'ref_len': 21} Bleu: {'bleu': 0.13461801293778908, 'precisions': [0.4, 0.20689655172413793, 0.10714285714285714, 0.037037037037037035], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 30, 'reference_length': 21} Rouge: {'rouge1': 0.5555555555555556, 'rouge2': 0.34615384615384615, 'rougeL': 0.5185185185185185, 'rougeLsum': 0.5185185185185185} Sari: {'sari': 15.054417198522001} Flesh Reading Ease: 49.0 ---------------------------------------- Source: ['Wen ein Leid plagt, der geht zum Arzt – oder er googelt.'] Prediction: ['Ein Leid ist in den vergangenen Tagen gestorben.\nDer Mann geht zum Arzt oder er googelt.\nDas ist der erste Mal, der selbst hatte einen Leid.'] Label: [['Wer krank ist, der geht zum Arzt – oder er googelt.']] Sacrebleu: {'score': 12.861981016228478, 'counts': [10, 6, 3, 1], 'totals': [30, 29, 28, 27], 'precisions': [33.333333333333336, 20.689655172413794, 10.714285714285714, 3.7037037037037037], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.12861981016228477, 'precisions': [0.3333333333333333, 0.20689655172413793, 0.10714285714285714, 0.037037037037037035], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.4444444444444444, 'rouge2': 0.3529411764705882, 'rougeL': 0.4444444444444444, 'rougeLsum': 0.4444444444444444} Sari: {'sari': 37.82257094757095} Flesh Reading Ease: 95.25 ---------------------------------------- Source: ['Manchmal ist, besonders auf dem Land, der Weg zum Arzt weit, daher scheint es einfacher, im Internet nach Symptomen und Lösungen zu recherchieren.'] Prediction: ['Im Internet scheint es einfacher, im Internet nach Symptomen und Lösungen zu recherchieren.\nDas scheint es einfacher, im Internet nach Symptomen und Lösungen zu recherchieren.'] Label: [['Oft sogar scheint es einfacher zu sein, im Internet nach Symptomen und Lösungen zu recherchieren.']] Sacrebleu: {'score': 36.119525154926606, 'counts': [14, 11, 9, 7], 'totals': [29, 28, 27, 26], 'precisions': [48.275862068965516, 39.285714285714285, 33.333333333333336, 26.923076923076923], 'bp': 1.0, 'sys_len': 29, 'ref_len': 17} Bleu: {'bleu': 0.36119525154926607, 'precisions': [0.4827586206896552, 0.39285714285714285, 0.3333333333333333, 0.2692307692307692], 'brevity_penalty': 1.0, 'length_ratio': 1.7058823529411764, 'translation_length': 29, 'reference_length': 17} Rouge: {'rouge1': 0.6046511627906976, 'rouge2': 0.4878048780487804, 'rougeL': 0.6046511627906976, 'rougeLsum': 0.5581395348837209} Sari: {'sari': 63.51651474413623} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Hier wird deutlich, dass zum einen nach häufigen Erkrankungen, aber auch nach Tabukrankheiten gesucht wird.'] Prediction: ['Einige Personen wurden in der Schweiz verletzt, dass sie nach häufigen Erkrankungen gesucht werden können.\nDie beiden werden nach häufigen Erkrankungen gesucht.'] Label: [['Hier wird deutlich, dass nach häufigen Erkrankungen, aber auch nach Tabukrankheiten gesucht wird.']] Sacrebleu: {'score': 7.929026506841378, 'counts': [8, 3, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [32.0, 12.5, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.32, 0.125, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5625, 'translation_length': 25, 'reference_length': 16} Rouge: {'rouge1': 0.358974358974359, 'rouge2': 0.16216216216216217, 'rougeL': 0.358974358974359, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 18.416349445761206} Flesh Reading Ease: 52.0 ---------------------------------------- Source: ['Mehr als 30 Prozent der bewerteten Webseiten schnitten mit „mangelhaft“ oder sogar „ungenügend“ ab.'] Prediction: ['30 Prozent der bewerteten Webseiten schnitten mit "mangelhaft“ oder sogar „ungenügend“ ab.\nDie bewerteten Webseiten schnitten mit "mangelhaft“ oder sogar „ungenügend“ ab.'] Label: [['Das Ergebnis: Mehr als 30 Prozent der bewerteten Webseiten schnitten mit „mangelhaft“ oder sogar „ungenügend“ ab.']] Sacrebleu: {'score': 35.59528809154242, 'counts': [12, 10, 8, 6], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 40.0, 33.333333333333336, 26.08695652173913], 'bp': 1.0, 'sys_len': 26, 'ref_len': 18} Bleu: {'bleu': 0.3559528809154241, 'precisions': [0.46153846153846156, 0.4, 0.3333333333333333, 0.2608695652173913], 'brevity_penalty': 1.0, 'length_ratio': 1.4444444444444444, 'translation_length': 26, 'reference_length': 18} Rouge: {'rouge1': 0.6341463414634146, 'rouge2': 0.6153846153846153, 'rougeL': 0.6341463414634146, 'rougeLsum': 0.6341463414634146} Sari: {'sari': 26.256613756613756} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Alle 100 Webseiten bekamen nur die Durchschnittsnote „ausreichend“ (4+).In einer zumindest in Deutschland rechtlichen Grauzone bewegen sich Ärzte, die Ferndiagnosen über das Internet stellen und Rezepte ausstellen - so wie in Großbritannien schon üblich.'] Prediction: ['In Deutschland sind Ärzte über das Internet ausgestellt.\nSie bewegen sich Ärzte, die Ferndiagnosen über das Internet stellen und Rezepte ausstellen.'] Label: [['Alle 100 Webseiten bekamen nur die Durchschnittsnote „ausreichend“ (4+).In einer zumindest in Deutschland rechtlichen Grauzone bewegen sich Ärzte, die Ferndiagnosen über das Internet stellen und Rezepte ausstellen.']] Sacrebleu: {'score': 38.338953462265664, 'counts': [17, 13, 12, 11], 'totals': [24, 23, 22, 21], 'precisions': [70.83333333333333, 56.52173913043478, 54.54545454545455, 52.38095238095238], 'bp': 0.6592406302004437, 'sys_len': 24, 'ref_len': 34} Bleu: {'bleu': 0.3833895346226567, 'precisions': [0.7083333333333334, 0.5652173913043478, 0.5454545454545454, 0.5238095238095238], 'brevity_penalty': 0.6592406302004439, 'length_ratio': 0.7058823529411765, 'translation_length': 24, 'reference_length': 34} Rouge: {'rouge1': 0.5714285714285715, 'rouge2': 0.5106382978723405, 'rougeL': 0.5714285714285715, 'rougeLsum': 0.5714285714285715} Sari: {'sari': 33.06296226586081} Flesh Reading Ease: 58.35 ---------------------------------------- Source: ['Erlaubt ist das hierzulande nur, wenn sich Arzt und Patient bereits kennen, also der Patient schon in der Praxis zur Sprechstunde anwesend war und die Krankengeschichte bekannt ist.'] Prediction: ['Der Patient in der Praxis ist schon in der Praxis anwesend war und die Krankengeschichte bekannt.\nErlaubt ist das hierzulande nur, wenn sich Arzt und Patient bereits kennen, also der Patient schon in der Praxis zur Sprechstunde anwesend war und die Krankengeschichte bekannt ist.'] Label: [['Erlaubt ist das hierzulande nur, wenn sich Arzt und Patient bereits kennen, also der Patient schon in der Praxis zur Sprechstunde anwesend war und die Krankengeschichte kennt.']] Sacrebleu: {'score': 57.45679798349298, 'counts': [29, 27, 26, 25], 'totals': [48, 47, 46, 45], 'precisions': [60.416666666666664, 57.4468085106383, 56.52173913043478, 55.55555555555556], 'bp': 1.0, 'sys_len': 48, 'ref_len': 30} Bleu: {'bleu': 0.5745679798349298, 'precisions': [0.6041666666666666, 0.574468085106383, 0.5652173913043478, 0.5555555555555556], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 48, 'reference_length': 30} Rouge: {'rouge1': 0.732394366197183, 'rouge2': 0.7246376811594203, 'rougeL': 0.732394366197183, 'rougeLsum': 0.732394366197183} Sari: {'sari': 65.05430185521035} Flesh Reading Ease: 58.55 ---------------------------------------- Source: ['Es gilt als die älteste, noch heute gültige Lebensmittelgesetzgebung – weltweit!'] Prediction: ['Die Lebensmittelgesetzgebung ist weltweit.\nEs gilt als die älteste, noch heute gültige Lebensmittelgesetzgebung.'] Label: [['Es gilt als das älteste, noch heute gültige Lebensmittelgesetz – weltweit!']] Sacrebleu: {'score': 31.53554052490134, 'counts': [9, 6, 4, 2], 'totals': [16, 15, 14, 13], 'precisions': [56.25, 40.0, 28.571428571428573, 15.384615384615385], 'bp': 1.0, 'sys_len': 16, 'ref_len': 13} Bleu: {'bleu': 0.31535540524901323, 'precisions': [0.5625, 0.4, 0.2857142857142857, 0.15384615384615385], 'brevity_penalty': 1.0, 'length_ratio': 1.2307692307692308, 'translation_length': 16, 'reference_length': 13} Rouge: {'rouge1': 0.7200000000000001, 'rouge2': 0.5217391304347826, 'rougeL': 0.64, 'rougeLsum': 0.7200000000000001} Sari: {'sari': 38.19911025793379} Flesh Reading Ease: 27.25 ---------------------------------------- Source: ['Beschlossen haben es übrigens die Herzöge Wilhelm IV. und Ludwig X., eigentlich aus Not, denn zu der Zeit waren Nahrungsmittel in Bayern sehr knapp.'] Prediction: ['Die Herzöge Wilhelm IV.\nund Ludwig X., haben sich in Bayern nicht mehr zu der Zeit verlassen.\nSie haben sich übrigens aus Not geschlossen.\nSie haben sich zu der Zeit nach Not geschlossen.'] Label: [['Beschlossen haben es übrigens die Herzöge Wilhelm IV.\nund Ludwig X. Zu der Zeit waren Nahrungsmittel in Bayern sehr knapp.']] Sacrebleu: {'score': 21.28264733921646, 'counts': [15, 9, 6, 5], 'totals': [39, 38, 37, 36], 'precisions': [38.46153846153846, 23.68421052631579, 16.216216216216218, 13.88888888888889], 'bp': 1.0, 'sys_len': 39, 'ref_len': 23} Bleu: {'bleu': 0.2128264733921646, 'precisions': [0.38461538461538464, 0.23684210526315788, 0.16216216216216217, 0.1388888888888889], 'brevity_penalty': 1.0, 'length_ratio': 1.6956521739130435, 'translation_length': 39, 'reference_length': 23} Rouge: {'rouge1': 0.5454545454545455, 'rouge2': 0.37735849056603776, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.4727272727272727} Sari: {'sari': 33.15421433617779} Flesh Reading Ease: 85.65 ---------------------------------------- Source: ['Und die wertvollen Getreide Weizen und Roggen wollte man zum Brotbacken reservieren.'] Prediction: ['Die wertvollen Getreide Weizen und Roggen wollten sich zum Brotbacken reservieren.\nDie wertvollen Getreide Weizen und Roggen wollten man zum Brotbacken reservieren.'] Label: [['Und die wertvollen Getreide Weizen und Roggen wollte man für Brot reservieren.']] Sacrebleu: {'score': 17.51489536280261, 'counts': [8, 5, 3, 2], 'totals': [24, 23, 22, 21], 'precisions': [33.333333333333336, 21.73913043478261, 13.636363636363637, 9.523809523809524], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.1751489536280261, 'precisions': [0.3333333333333333, 0.21739130434782608, 0.13636363636363635, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.5142857142857142, 'rouge2': 0.30303030303030304, 'rougeL': 0.5142857142857142, 'rougeLsum': 0.4571428571428572} Sari: {'sari': 27.456615022404492} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Ist man in Bayern, dann trinkt man Bier.'] Prediction: ['Bayern München trinkt mehrmals zu Bier.\nDer Schweizer trinkt auch immer mehr an Bayern München.\nDer Bayern-Spieler tritt auf den Sieg zurück.'] Label: [['In Bayern trinkt man Bier.']] Sacrebleu: {'score': 3.5823421191287177, 'counts': [4, 1, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 4.166666666666667, 2.1739130434782608, 1.1363636363636365], 'bp': 1.0, 'sys_len': 25, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.041666666666666664, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.166666666666667, 'translation_length': 25, 'reference_length': 6} Rouge: {'rouge1': 0.1935483870967742, 'rouge2': 0.0, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.1935483870967742} Sari: {'sari': 34.43452380952382} Flesh Reading Ease: 84.95 ---------------------------------------- Source: ['Auf dem Oktoberfest in der bayerischen Hauptstadt trinkt man besonders viel, rund 7,5 Millionen Liter in 2 Wochen!'] Prediction: ['Am 2.\nOktoberfest in der bayerischen Hauptstadt trinkt man 7,5 Millionen Liter in 2 Wochen.\nDas erste Oktoberfest in der Hauptstadt trinkt man besonders viel, rund 7,5 Millionen Liter in 2 Wochen.'] Label: [['Auf dem Oktoberfest in München trinkt man besonders viel, rund 7,5 Millionen Liter in 2 Wochen!']] Sacrebleu: {'score': 32.15859729512526, 'counts': [14, 12, 10, 9], 'totals': [36, 35, 34, 33], 'precisions': [38.888888888888886, 34.285714285714285, 29.41176470588235, 27.272727272727273], 'bp': 1.0, 'sys_len': 36, 'ref_len': 18} Bleu: {'bleu': 0.3215859729512527, 'precisions': [0.3888888888888889, 0.34285714285714286, 0.29411764705882354, 0.2727272727272727], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 36, 'reference_length': 18} Rouge: {'rouge1': 0.5384615384615384, 'rouge2': 0.48000000000000004, 'rougeL': 0.5384615384615384, 'rougeLsum': 0.5384615384615384} Sari: {'sari': 27.998251034133602} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ['Bier, um auch gleich ein Klischee zu bestätigen, ist das Lieblingsgetränk der Deutschen.'] Prediction: ['Am 19.\nApril startet der Schweizer Film-Rapper Sängerin Andrea (30) in der Radio-Section deiner 20-Minuten-App (ganz unten im Leben).\nIn der Leiste wird sie von der 20-Minuten-App bekannt gegeben.\nIm Interview mit Sängerin Andrea (30) spricht sie über ihre Lieblings-Liebes-Erinnerungen, die sich auf dem Radio-Section deiner 20-Minuten-App bekannt haben.'] Label: [['Bier ist das Lieblingsgetränk der Deutschen.']] Sacrebleu: {'score': 0.6519556472039479, 'counts': [2, 0, 0, 0], 'totals': [66, 65, 64, 63], 'precisions': [3.0303030303030303, 0.7692307692307693, 0.390625, 0.1984126984126984], 'bp': 1.0, 'sys_len': 66, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.030303030303030304, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 9.428571428571429, 'translation_length': 66, 'reference_length': 7} Rouge: {'rouge1': 0.028985507246376815, 'rouge2': 0.0, 'rougeL': 0.028985507246376815, 'rougeLsum': 0.028985507246376815} Sari: {'sari': 26.379731379731382} Flesh Reading Ease: 40.85 ---------------------------------------- Source: ['Traditionell trinkt man das Bier in Masskrügen. Das ist ein Bierkrug, der das Volumen einer Mass fasst, genau ein Liter.'] Prediction: ['In der Schweiz ist ein Bierkrug einer Masskrügen genau ein Liter gekommen.\nDas ist ein Bierkrug, der das Volumen einer Mass fasst, genau ein Liter.'] Label: [['Ein Bierkrug auf dem Oktoberfest umfasst genau ein Liter.']] Sacrebleu: {'score': 8.517399705356638, 'counts': [5, 3, 2, 1], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 10.714285714285714, 7.407407407407407, 3.8461538461538463], 'bp': 1.0, 'sys_len': 29, 'ref_len': 10} Bleu: {'bleu': 0.08517399705356635, 'precisions': [0.1724137931034483, 0.10714285714285714, 0.07407407407407407, 0.038461538461538464], 'brevity_penalty': 1.0, 'length_ratio': 2.9, 'translation_length': 29, 'reference_length': 10} Rouge: {'rouge1': 0.28571428571428575, 'rouge2': 0.18181818181818182, 'rougeL': 0.28571428571428575, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 43.584715937657116} Flesh Reading Ease: 73.9 ---------------------------------------- Source: ['Ganz billig ist die Mass Bier nicht – knapp unter 11 Euro liegt der Preis.'] Prediction: ['Die Preis von 11 Euro liegt der Preis.\nDie Mass Bier sind knapp unter 11 Euro.'] Label: [['Ganz billig ist die Mass Bier nicht: etwas weniger als 11 Euro kostet das Getränk.']] Sacrebleu: {'score': 6.423094863383858, 'counts': [5, 2, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 11.764705882352942, 3.125, 1.6666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.11764705882352941, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0588235294117647, 'translation_length': 18, 'reference_length': 17} Rouge: {'rouge1': 0.3125, 'rouge2': 0.20000000000000004, 'rougeL': 0.3125, 'rougeLsum': 0.3125} Sari: {'sari': 21.921296296296298} Flesh Reading Ease: 101.8 ---------------------------------------- Source: ['Die Wirte auf dem Oktoberfest verdienen gut daran: Der Umsatz soll laut der Wirtschaftszeitung Handelsblatt etwa 955 Millionen Euro betragen.'] Prediction: ['Der Umsatz der Wirte auf dem Oktoberfest beträgt 955 Millionen Euro.\nDer Umsatz soll etwa 955 Millionen Euro betragen.'] Label: [['Die Wirte auf dem Oktoberfest verdienen gut daran, der Umsatz soll laut der Wirtschaftszeitung Handelsblatt etwa 955 Millionen Euro betragen.']] Sacrebleu: {'score': 35.653300298570315, 'counts': [13, 9, 6, 4], 'totals': [21, 20, 19, 18], 'precisions': [61.904761904761905, 45.0, 31.57894736842105, 22.22222222222222], 'bp': 0.9534969548334766, 'sys_len': 21, 'ref_len': 22} Bleu: {'bleu': 0.3565330029857031, 'precisions': [0.6190476190476191, 0.45, 0.3157894736842105, 0.2222222222222222], 'brevity_penalty': 0.9534969548334766, 'length_ratio': 0.9545454545454546, 'translation_length': 21, 'reference_length': 22} Rouge: {'rouge1': 0.65, 'rouge2': 0.47368421052631576, 'rougeL': 0.6, 'rougeLsum': 0.6} Sari: {'sari': 27.485793471501278} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Menschen über 50 Jahre mit ihren meist ergrauten Haaren – daher der Begriff „Silver Society“ – prägen das Bild der Gesellschaft:'] Prediction: ['Die Gold-Skeptikerin "Silver Society" prägen das Bild der Gesellschaft.\nSie prägen das Bild der Gesellschaft:'] Label: [['Menschen über 50 Jahre mit ihren grauen Haaren – daher der Begriff „Silver Society“ – prägen das Bild der Gesellschaft:']] Sacrebleu: {'score': 23.331806256115037, 'counts': [7, 5, 4, 3], 'totals': [19, 18, 17, 16], 'precisions': [36.8421052631579, 27.77777777777778, 23.529411764705884, 18.75], 'bp': 0.9000876262522591, 'sys_len': 19, 'ref_len': 21} Bleu: {'bleu': 0.23331806256115045, 'precisions': [0.3684210526315789, 0.2777777777777778, 0.23529411764705882, 0.1875], 'brevity_penalty': 0.9000876262522594, 'length_ratio': 0.9047619047619048, 'translation_length': 19, 'reference_length': 21} Rouge: {'rouge1': 0.4864864864864865, 'rouge2': 0.39999999999999997, 'rougeL': 0.43243243243243246, 'rougeLsum': 0.43243243243243246} Sari: {'sari': 21.65916205451585} Flesh Reading Ease: 61.35 ---------------------------------------- Source: ['Wenn sie in den Ruhestand geht, droht Deutschland ein Mangel an Fachkräften, eine Überalterung und in letzter Konsequenz ein Rückgang der Produktivität.'] Prediction: ['Deutschland hat einen Mangel an Fachkräften, eine Überalterung und ein Rückgang der Produktivität.\nDie Produktivität droht in Deutschland ein Mangel an Fachkräften, eine Überalterung und in letzter Konsequenz ein Rückgang der Produktivität.'] Label: [['Wenn sie in den Ruhestand geht, droht Deutschland ein Mangel an Fachkräften und eine Überalterung.']] Sacrebleu: {'score': 12.632368169934818, 'counts': [12, 5, 3, 2], 'totals': [36, 35, 34, 33], 'precisions': [33.333333333333336, 14.285714285714286, 8.823529411764707, 6.0606060606060606], 'bp': 1.0, 'sys_len': 36, 'ref_len': 17} Bleu: {'bleu': 0.12632368169934813, 'precisions': [0.3333333333333333, 0.14285714285714285, 0.08823529411764706, 0.06060606060606061], 'brevity_penalty': 1.0, 'length_ratio': 2.1176470588235294, 'translation_length': 36, 'reference_length': 17} Rouge: {'rouge1': 0.4, 'rouge2': 0.22641509433962267, 'rougeL': 0.32727272727272727, 'rougeLsum': 0.32727272727272727} Sari: {'sari': 11.675725108787992} Flesh Reading Ease: 35.3 ---------------------------------------- Source: ['Durch besondere Arbeitszeitregelungen, ergonomische Arbeitsplätze und Qualifizierungen will man sie so lange wie möglich im Job halten.'] Prediction: ['Ein ergonomischer Arbeitszeitregelungen, ergonomische Arbeitsplätze und Qualifizierungen soll so lange wie möglich im Job halten.\nDurch besondere Arbeitszeitregelungen, ergonomische Arbeitsplätze und Qualifizierungen will man sie so lange wie möglich im Job halten.'] Label: [['Durch besondere Arbeitszeiten, ergonomische Arbeitsplätze und Qualifizierungen will man sie so lange wie möglich im Job halten.']] Sacrebleu: {'score': 43.88085877849529, 'counts': [18, 16, 14, 13], 'totals': [36, 35, 34, 33], 'precisions': [50.0, 45.714285714285715, 41.1764705882353, 39.39393939393939], 'bp': 1.0, 'sys_len': 36, 'ref_len': 19} Bleu: {'bleu': 0.4388085877849529, 'precisions': [0.5, 0.45714285714285713, 0.4117647058823529, 0.3939393939393939], 'brevity_penalty': 1.0, 'length_ratio': 1.894736842105263, 'translation_length': 36, 'reference_length': 19} Rouge: {'rouge1': 0.6545454545454545, 'rouge2': 0.6037735849056604, 'rougeL': 0.6545454545454545, 'rougeLsum': 0.6545454545454545} Sari: {'sari': 64.28272478458959} Flesh Reading Ease: 17.75 ---------------------------------------- Source: ['Die meisten Deutschen gehen mit 65 oder 67 in den Ruhestand, der zunehmend aktiver wird.'] Prediction: ['Die meisten Deutschen gehen mit 65 oder 67 in den Ruhestand.\nDie meisten Deutschen gehen mit 65 oder 67 in den Ruhestand, der zunehmend aktiver wird.'] Label: [['Die meisten Deutschen gehen mit 65 oder 67 in den Ruhestand.']] Sacrebleu: {'score': 37.99538284139644, 'counts': [12, 11, 10, 9], 'totals': [29, 28, 27, 26], 'precisions': [41.37931034482759, 39.285714285714285, 37.03703703703704, 34.61538461538461], 'bp': 1.0, 'sys_len': 29, 'ref_len': 12} Bleu: {'bleu': 0.3799538284139645, 'precisions': [0.41379310344827586, 0.39285714285714285, 0.37037037037037035, 0.34615384615384615], 'brevity_penalty': 1.0, 'length_ratio': 2.4166666666666665, 'translation_length': 29, 'reference_length': 12} Rouge: {'rouge1': 0.5945945945945945, 'rouge2': 0.5714285714285715, 'rougeL': 0.5945945945945945, 'rougeLsum': 0.5945945945945945} Sari: {'sari': 80.33963641722262} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Die Generation der Menschen in den besten Jahren – Best Ager – ist besonders aktiv und hat eine Menge vor.'] Prediction: ['Best Ager-Menschen sind in den besten Jahren eine Menge vor.\nDie Generation der Menschen in den besten Jahren ist besonders aktiv und hat eine Menge vor.'] Label: [['Die Generation der Menschen in den besten Jahren – Best Ager – ist besonders aktiv.']] Sacrebleu: {'score': 30.213753973567677, 'counts': [13, 9, 7, 5], 'totals': [28, 27, 26, 25], 'precisions': [46.42857142857143, 33.333333333333336, 26.923076923076923, 20.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 16} Bleu: {'bleu': 0.3021375397356768, 'precisions': [0.4642857142857143, 0.3333333333333333, 0.2692307692307692, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 28, 'reference_length': 16} Rouge: {'rouge1': 0.65, 'rouge2': 0.5263157894736842, 'rougeL': 0.5499999999999999, 'rougeLsum': 0.5499999999999999} Sari: {'sari': 19.65533070568788} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Und etliche arbeiten in Jobs:'] Prediction: ['Unsere Jobs arbeiten in der Schweiz.\nUnd etliche arbeiten in Jobs.'] Label: [['Und viele arbeiten in Jobs:']] Sacrebleu: {'score': 12.35622127262679, 'counts': [4, 2, 1, 0], 'totals': [13, 12, 11, 10], 'precisions': [30.76923076923077, 16.666666666666668, 9.090909090909092, 5.0], 'bp': 1.0, 'sys_len': 13, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.3076923076923077, 0.16666666666666666, 0.09090909090909091, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 13, 'reference_length': 6} Rouge: {'rouge1': 0.5000000000000001, 'rouge2': 0.28571428571428575, 'rougeL': 0.5000000000000001, 'rougeLsum': 0.5000000000000001} Sari: {'sari': 14.761904761904765} Flesh Reading Ease: 75.05 ---------------------------------------- Source: ['In Deutschland haben rund 900.000 Rentner einen sogenannten Minijob, in dem man 450 Euro hinzu verdient, ohne dass die staatliche Rente gekürzt wird.'] Prediction: ['In Deutschland haben rund 900.000 Rentner einen Minijob, in dem man 450 Euro hinzu verdient, ohne dass die staatliche Rente gekürzt wird.\nDie Rentner haben rund 900"000 Rentner einen sogenannten Minijob verdient.'] Label: [['In Deutschland haben rund 900.000 Rentner einen sogenannten Minijob, in dem man 450 Euro hinzu verdient.']] Sacrebleu: {'score': 40.385137919303446, 'counts': [18, 17, 14, 11], 'totals': [38, 37, 36, 35], 'precisions': [47.36842105263158, 45.945945945945944, 38.888888888888886, 31.428571428571427], 'bp': 1.0, 'sys_len': 38, 'ref_len': 18} Bleu: {'bleu': 0.4038513791930346, 'precisions': [0.47368421052631576, 0.4594594594594595, 0.3888888888888889, 0.3142857142857143], 'brevity_penalty': 1.0, 'length_ratio': 2.111111111111111, 'translation_length': 38, 'reference_length': 18} Rouge: {'rouge1': 0.6538461538461539, 'rouge2': 0.6399999999999999, 'rougeL': 0.6153846153846154, 'rougeLsum': 0.6538461538461539} Sari: {'sari': 43.00851441919679} Flesh Reading Ease: 69.85 ---------------------------------------- Source: ['Mit 95 Thesen protestierte er gegen den Ablasshandel, mit dem sich die Menschen von ihren Sünden freikaufen konnten.'] Prediction: ['Der Ablasshandel der Menschen in den Nähe der Schweiz wurde von 95 Thesen gegen den Ablasshandel verhaftet.\n95 Thesen protestierten gegen den Ablasshandel.'] Label: [['Mit 95 Thesen protestierte er gegen den Ablasshandel.\nDamit konnten sich die Menschen von ihren Sünden freikaufen.']] Sacrebleu: {'score': 12.409597120849801, 'counts': [9, 4, 2, 1], 'totals': [25, 24, 23, 22], 'precisions': [36.0, 16.666666666666668, 8.695652173913043, 4.545454545454546], 'bp': 1.0, 'sys_len': 25, 'ref_len': 19} Bleu: {'bleu': 0.12409597120849801, 'precisions': [0.36, 0.16666666666666666, 0.08695652173913043, 0.045454545454545456], 'brevity_penalty': 1.0, 'length_ratio': 1.3157894736842106, 'translation_length': 25, 'reference_length': 19} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.15, 'rougeL': 0.2380952380952381, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 24.13573706808707} Flesh Reading Ease: 57.35 ---------------------------------------- Source: ['So verfasste er am 31. Oktober einen Brief mit seinen Thesen, um eine Erneuerung der Kirche auszulösen.'] Prediction: ['Ein Mann hat einen Brief mit seinen Thesen, um eine Erneuerung der Kirche auszulösen.\nEr verfasste einen Brief mit seinen Thesen, um eine Erneuerung der Kirche auszulösen.'] Label: [['Luther veröffentlichte am 31.\nOktober einen Brief mit 95 Thesen.']] Sacrebleu: {'score': 5.30918756028263, 'counts': [6, 2, 1, 0], 'totals': [31, 30, 29, 28], 'precisions': [19.35483870967742, 6.666666666666667, 3.4482758620689653, 1.7857142857142858], 'bp': 1.0, 'sys_len': 31, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.06666666666666667, 0.034482758620689655, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5833333333333335, 'translation_length': 31, 'reference_length': 12} Rouge: {'rouge1': 0.2, 'rouge2': 0.10526315789473682, 'rougeL': 0.2, 'rougeLsum': 0.2} Sari: {'sari': 19.39484126984127} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['In der Folge wurde Europa im 16. und 17. Jahrhundert von Glaubenskriegen wie dem Dreißigjährigen Krieg erschüttert.'] Prediction: ['In der Folge wurde Europa im 16. und 17.\nJahrhundert von Glaubenskriegen wie dem Dreißigjährigen Krieg erschüttert.\nDer Dreißigjährige wurde in der Folge von Glaubenskriegen wie dem Dreißigjährigen Krieg erschüttert.'] Label: [['In langen Jahren danach wurde Europa im 16. und 17.\nJahrhundert von Glaubenskriegen wie dem Dreißigjährigen Krieg erschüttert.']] Sacrebleu: {'score': 48.281061888285386, 'counts': [18, 16, 15, 14], 'totals': [34, 33, 32, 31], 'precisions': [52.94117647058823, 48.484848484848484, 46.875, 45.16129032258065], 'bp': 1.0, 'sys_len': 34, 'ref_len': 21} Bleu: {'bleu': 0.48281061888285387, 'precisions': [0.5294117647058824, 0.48484848484848486, 0.46875, 0.45161290322580644], 'brevity_penalty': 1.0, 'length_ratio': 1.619047619047619, 'translation_length': 34, 'reference_length': 21} Rouge: {'rouge1': 0.6101694915254237, 'rouge2': 0.5614035087719298, 'rougeL': 0.6101694915254237, 'rougeLsum': 0.6101694915254237} Sari: {'sari': 63.8981575034706} Flesh Reading Ease: 53.0 ---------------------------------------- Source: ['Neben seinen Thesen sorgte Luther mit seiner Bibelübersetzung dafür, dass nicht nur Mönche die Bibel lesen konnten.'] Prediction: ['Der US-Bundesstaat Alabama hat seine Bibelübersetzung für seinen Thesen gesorgt.\nNun sorgte Luther mit seiner Bibelübersetzung dafür, dass nicht nur Mönche die Bibel lesen konnten.'] Label: [['Neben seinen Thesen übersetzte Luther die Bibel, damit nicht nur Mönche die Bibel lesen konnten.']] Sacrebleu: {'score': 27.668736912821892, 'counts': [12, 8, 6, 5], 'totals': [28, 27, 26, 25], 'precisions': [42.857142857142854, 29.62962962962963, 23.076923076923077, 20.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 17} Bleu: {'bleu': 0.27668736912821895, 'precisions': [0.42857142857142855, 0.2962962962962963, 0.23076923076923078, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.6470588235294117, 'translation_length': 28, 'reference_length': 17} Rouge: {'rouge1': 0.5106382978723403, 'rouge2': 0.3555555555555555, 'rougeL': 0.5106382978723403, 'rougeLsum': 0.5106382978723403} Sari: {'sari': 39.232036183649086} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Er gab sein Dasein als Mönch auf, heiratete und begründete mit seinen Schriften die evangelischen Kirchen.'] Prediction: ['Ein Dasein heiratete mit seinen Schriften die evangelischen Kirchen.\nEr gab sein Dasein als Mönch auf, heiratete und begründete mit seinen Schriften die evangelischen Kirchen.\nNun hat er seinen Schriften heiratet.'] Label: [['Er gab sein Dasein als Mönch auf, heiratete und begründete mit seinen Schriften die evangelische Kirche.']] Sacrebleu: {'score': 40.835740400840734, 'counts': [16, 14, 13, 12], 'totals': [35, 34, 33, 32], 'precisions': [45.714285714285715, 41.1764705882353, 39.39393939393939, 37.5], 'bp': 1.0, 'sys_len': 35, 'ref_len': 18} Bleu: {'bleu': 0.4083574040084074, 'precisions': [0.45714285714285713, 0.4117647058823529, 0.3939393939393939, 0.375], 'brevity_penalty': 1.0, 'length_ratio': 1.9444444444444444, 'translation_length': 35, 'reference_length': 18} Rouge: {'rouge1': 0.6274509803921569, 'rouge2': 0.6122448979591837, 'rougeL': 0.6274509803921569, 'rougeLsum': 0.6274509803921569} Sari: {'sari': 63.582024083888896} Flesh Reading Ease: 58.55 ---------------------------------------- Source: ['18 Millionen Tonnen Nahrungsmittel, das sind, so hat die Umweltstiftung WWF Deutschland ausgerechnet, 313 Kilogramm – pro Sekunde, die im Müll landen.'] Prediction: ['Die Umweltstiftung WWF Deutschland hat 18 Millionen Tonnen Nahrungsmittel ausgerechnet, 313 Kilogramm pro Sekunde, die im Müll landen.\nDie Umweltstiftung WWF Deutschland hat die Umweltstiftung rund 313 Kilogramm pro Sekunde ausgerechnet, die im Müll landen.'] Label: [['18 Millionen Tonnen Nahrungsmittel, das sind 313 Kilogramm – pro Sekunde, die in den Müll wandern, wie die Umweltstiftung WWF Deutschland ausgerechnet hat.']] Sacrebleu: {'score': 17.377208785560796, 'counts': [20, 10, 5, 2], 'totals': [40, 39, 38, 37], 'precisions': [50.0, 25.641025641025642, 13.157894736842104, 5.405405405405405], 'bp': 1.0, 'sys_len': 40, 'ref_len': 27} Bleu: {'bleu': 0.17377208785560805, 'precisions': [0.5, 0.2564102564102564, 0.13157894736842105, 0.05405405405405406], 'brevity_penalty': 1.0, 'length_ratio': 1.4814814814814814, 'translation_length': 40, 'reference_length': 27} Rouge: {'rouge1': 0.5666666666666667, 'rouge2': 0.37931034482758624, 'rougeL': 0.5333333333333333, 'rougeLsum': 0.3666666666666667} Sari: {'sari': 31.628365554678783} Flesh Reading Ease: 45.5 ---------------------------------------- Source: ['Die Normen der Europäischen Union schreiben makellose Ware vor, viele krumme Gurken und zu kleine Möhren schaffen es erst gar nicht in den Supermarkt.'] Prediction: ['Der Europäische Union schreibt makellose Ware vor, viele krumme Gurken und zu kleine Möhren.\nDie Normen der Europäischen Union schreiben makellose Ware vor, viele krumme Gurken und zu kleine Möhren.\nDie Supermarkt-Normen der Europäischen Union schreiben makellose Ware vor, viele krumme Gurken und zu kleine Möhren.'] Label: [['Die Normen der Europäischen Union schreiben makellose Ware vor.\nKrumme Gurken zum Beispiel haben kaum eine Chance.']] Sacrebleu: {'score': 15.78320617937872, 'counts': [12, 8, 7, 6], 'totals': [52, 51, 50, 49], 'precisions': [23.076923076923077, 15.686274509803921, 14.0, 12.244897959183673], 'bp': 1.0, 'sys_len': 52, 'ref_len': 19} Bleu: {'bleu': 0.15783206179378728, 'precisions': [0.23076923076923078, 0.1568627450980392, 0.14, 0.12244897959183673], 'brevity_penalty': 1.0, 'length_ratio': 2.736842105263158, 'translation_length': 52, 'reference_length': 19} Rouge: {'rouge1': 0.3380281690140845, 'rouge2': 0.2898550724637681, 'rougeL': 0.3380281690140845, 'rougeLsum': 0.3380281690140845} Sari: {'sari': 56.3030303030303} Flesh Reading Ease: 41.85 ---------------------------------------- Source: ['Doch hier sind die Vorschriften inzwischen gelockert und einige Händler verkaufen auch „unperfektes“ Obst und Gemüse – wenn denn nur mehr Kunden zugreifen würden!'] Prediction: ['Vorschriften sind inzwischen gelockert und einige Händler verkaufen auch Obst und Gemüse.\nDas ist der erste Mal, dass nur mehr Kunden zugreifen würden.'] Label: [['Doch hier sind die Vorschriften inzwischen gelockert und einige Händler verkaufen auch „unperfektes“ Obst und Gemüse.']] Sacrebleu: {'score': 32.685141385924574, 'counts': [13, 9, 7, 5], 'totals': [26, 25, 24, 23], 'precisions': [50.0, 36.0, 29.166666666666668, 21.73913043478261], 'bp': 1.0, 'sys_len': 26, 'ref_len': 17} Bleu: {'bleu': 0.32685141385924577, 'precisions': [0.5, 0.36, 0.2916666666666667, 0.21739130434782608], 'brevity_penalty': 1.0, 'length_ratio': 1.5294117647058822, 'translation_length': 26, 'reference_length': 17} Rouge: {'rouge1': 0.6363636363636364, 'rouge2': 0.4761904761904762, 'rougeL': 0.5909090909090908, 'rougeLsum': 0.5909090909090908} Sari: {'sari': 38.639201919856006} Flesh Reading Ease: 63.2 ---------------------------------------- Source: ['Tatsache ist auch: Die wenigsten Lebensmittel, die im Hausmüll landen, gehören wirklich hinein.'] Prediction: ['Die wenigsten Lebensmittel, die im Hausmüll landen, gehören wirklich hinein.\nDie wenigsten Lebensmittel, die im Hausmüll landen, gehören wirklich hinein.'] Label: [['Tatsache ist: Die wenigsten Lebensmittel, die im Müll landen, gehören wirklich hinein.']] Sacrebleu: {'score': 35.59528809154242, 'counts': [12, 10, 8, 6], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 40.0, 33.333333333333336, 26.08695652173913], 'bp': 1.0, 'sys_len': 26, 'ref_len': 16} Bleu: {'bleu': 0.3559528809154241, 'precisions': [0.46153846153846156, 0.4, 0.3333333333333333, 0.2608695652173913], 'brevity_penalty': 1.0, 'length_ratio': 1.625, 'translation_length': 26, 'reference_length': 16} Rouge: {'rouge1': 0.5789473684210527, 'rouge2': 0.5, 'rougeL': 0.5789473684210527, 'rougeLsum': 0.5789473684210527} Sari: {'sari': 45.33566263384787} Flesh Reading Ease: 47.15 ---------------------------------------- Source: ['Würde man einfach weniger kaufen oder richtig lagern und auch besser verarbeiten, gäbe es das Problem nicht.'] Prediction: ['Würde man einfach weniger kaufen oder richtig lagern und auch besser verarbeiten?\nDas Problem ist nicht bekannt, wie es das Problem ist.'] Label: [['Einfach weniger kaufen oder richtig lagern löst das Problem.']] Sacrebleu: {'score': 16.76784955078518, 'counts': [8, 5, 3, 2], 'totals': [25, 24, 23, 22], 'precisions': [32.0, 20.833333333333332, 13.043478260869565, 9.090909090909092], 'bp': 1.0, 'sys_len': 25, 'ref_len': 10} Bleu: {'bleu': 0.16767849550785174, 'precisions': [0.32, 0.20833333333333334, 0.13043478260869565, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 25, 'reference_length': 10} Rouge: {'rouge1': 0.48484848484848486, 'rouge2': 0.3870967741935484, 'rougeL': 0.48484848484848486, 'rougeLsum': 0.48484848484848486} Sari: {'sari': 52.763157894736835} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Wenn das abgelaufen ist, wird der Joghurt oder der Käse weggeworfen.'] Prediction: ['Der Joghurt oder der Käse wird weggeworfen.\nDas ist der Joghurt oder der Käse weggeworfen.'] Label: [['Wenn das abgelaufen ist, wird der Joghurt oder der Käse häufig einfach weggeworfen.']] Sacrebleu: {'score': 26.220676436185983, 'counts': [9, 5, 3, 2], 'totals': [17, 16, 15, 14], 'precisions': [52.94117647058823, 31.25, 20.0, 14.285714285714286], 'bp': 1.0, 'sys_len': 17, 'ref_len': 15} Bleu: {'bleu': 0.26220676436185975, 'precisions': [0.5294117647058824, 0.3125, 0.2, 0.14285714285714285], 'brevity_penalty': 1.0, 'length_ratio': 1.1333333333333333, 'translation_length': 17, 'reference_length': 15} Rouge: {'rouge1': 0.625, 'rouge2': 0.3333333333333333, 'rougeL': 0.5625, 'rougeLsum': 0.5625} Sari: {'sari': 18.497543945114277} Flesh Reading Ease: 73.05 ---------------------------------------- Source: ['Doch „abgelaufen“ bedeutet in den seltensten Fällen „nicht mehr genießbar“.'] Prediction: ['In den seltensten Fällen wurde einige Menschen über die Tage geschickt.\nDie Tage gab es in den seltensten Fällen über den Tod.'] Label: [['Doch „abgelaufen“ bedeutet nicht „nicht mehr genießbar“.\nOft kann man die Ware noch Wochen später essen.']] Sacrebleu: {'score': 2.0705706652424007, 'counts': [3, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [12.5, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 24, 'reference_length': 18} Rouge: {'rouge1': 0.04761904761904762, 'rouge2': 0.0, 'rougeL': 0.04761904761904762, 'rougeLsum': 0.04761904761904762} Sari: {'sari': 16.507936507936506} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Über ihre Webseite oder ihre App organisieren sie sich.'] Prediction: ['Eine App-Sache organisiert sich über ihre Webseite oder ihre App.\nSie organisiert sich über ihre Webseite oder ihre App.'] Label: [['Über ihre Webseite organisieren sie sich.']] Sacrebleu: {'score': 4.319402267866687, 'counts': [4, 1, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [19.047619047619047, 5.0, 2.6315789473684212, 1.3888888888888888], 'bp': 1.0, 'sys_len': 21, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.19047619047619047, 0.05, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 21, 'reference_length': 7} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.16666666666666666, 'rougeL': 0.3846153846153846, 'rougeLsum': 0.23076923076923075} Sari: {'sari': 24.57266721717589} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Rund 14,5 Millionen Diesel-PKW tuckern aktuell über Deutschlands Straßen.'] Prediction: ['Deutschlands-Staßen tuckern 14,5 Millionen Diesel-PKW aktuell über Deutschlands Straßen.\nDie Diesel-PKW-Tuckers sind rund 14,5 Millionen Franken tuckern aktuell über Deutschlands Straßen.'] Label: [['Rund 14,5 Millionen Diesel-PKW fahren aktuell über Deutschlands Straßen.']] Sacrebleu: {'score': 20.617350508583826, 'counts': [8, 6, 4, 2], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 27.272727272727273, 19.047619047619047, 10.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 10} Bleu: {'bleu': 0.20617350508583818, 'precisions': [0.34782608695652173, 0.2727272727272727, 0.19047619047619047, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.3, 'translation_length': 23, 'reference_length': 10} Rouge: {'rouge1': 0.5238095238095238, 'rouge2': 0.45000000000000007, 'rougeL': 0.47619047619047616, 'rougeLsum': 0.5238095238095238} Sari: {'sari': 60.053827751196174} Flesh Reading Ease: 29.1 ---------------------------------------- Source: ['Die meisten von ihnen – nach den Zahlen des Kraftfahrt-Bundesamts rund 13,2 Millionen – produzieren beim Verbrennen von Dieseltreibstoff zu viele Schadstoffe, darunter die gefährlichen Stickoxide.'] Prediction: ['Dieseltreibstoff produziert zu viele Schadstoffe.\nDie meisten von ihnen produzieren beim Verbrennen von Dieseltreibstoff zu viele Schadstoffe, darunter die gefährlichen Stickoxide.'] Label: [['Die meisten von ihnen – nach den Zahlen des Kraftfahrt-Bundesamts rund 13,2 Millionen – produzieren beim Verbrennen von Dieseltreibstoff zu viele Schadstoffe.']] Sacrebleu: {'score': 43.353471935824025, 'counts': [13, 11, 9, 7], 'totals': [24, 23, 22, 21], 'precisions': [54.166666666666664, 47.82608695652174, 40.90909090909091, 33.333333333333336], 'bp': 1.0, 'sys_len': 24, 'ref_len': 23} Bleu: {'bleu': 0.4335347193582402, 'precisions': [0.5416666666666666, 0.4782608695652174, 0.4090909090909091, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.0434782608695652, 'translation_length': 24, 'reference_length': 23} Rouge: {'rouge1': 0.5454545454545454, 'rouge2': 0.47619047619047616, 'rougeL': 0.5454545454545454, 'rougeLsum': 0.5454545454545454} Sari: {'sari': 23.453025968048106} Flesh Reading Ease: 29.1 ---------------------------------------- Source: ['Der Rest, also nur 1,3 Millionen Diesel-PKW, hat vergleichsweise geringe Schadstoffemissionen und erfüllt die so genannte Euro-6-Norm mit maximal 80 Milligramm Stickoxide pro Kilometer.'] Prediction: ['Der Rest, also nur 1,3 Millionen Diesel-PKW, hat vergleichsweise geringe Schadstoffemissionen.\nDer Rest erfüllt die so genannte Euro-6-Norm mit maximal 80 Milligramm Stickoxide pro Kilometer.'] Label: [['Nur etwa 1,3 Millionen Diesel-PKW haben geringe Schadstoffemissionen und erfüllen die so genannte Euro-6-Norm: maximal 80 Milligramm Stickoxide pro Kilometer.']] Sacrebleu: {'score': 39.09443137613962, 'counts': [18, 14, 10, 7], 'totals': [31, 30, 29, 28], 'precisions': [58.064516129032256, 46.666666666666664, 34.48275862068966, 25.0], 'bp': 1.0, 'sys_len': 31, 'ref_len': 24} Bleu: {'bleu': 0.3909443137613962, 'precisions': [0.5806451612903226, 0.4666666666666667, 0.3448275862068966, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.2916666666666667, 'translation_length': 31, 'reference_length': 24} Rouge: {'rouge1': 0.7636363636363636, 'rouge2': 0.5660377358490567, 'rougeL': 0.7636363636363636, 'rougeLsum': 0.7636363636363636} Sari: {'sari': 39.26909438625882} Flesh Reading Ease: 32.95 ---------------------------------------- Source: ['Gegen die Luftverschmutzung nützen Fahrverbote aber nur wenig, vielleicht helfen gute Filter oder gar insgesamt weniger Autos.'] Prediction: ['Die Luftverschmutzung nützen Fahrverbote aber nur wenig, vielleicht helfen gute Filter oder gar insgesamt weniger Autos.\nDie Veranstaltungen sind noch unklar.'] Label: [['Gegen die Luftverschmutzung nützen Fahrverbote aber nur wenig, vielleicht helfen gute Filter oder weniger Autos.']] Sacrebleu: {'score': 52.45322414712718, 'counts': [15, 13, 11, 9], 'totals': [24, 23, 22, 21], 'precisions': [62.5, 56.52173913043478, 50.0, 42.857142857142854], 'bp': 1.0, 'sys_len': 24, 'ref_len': 17} Bleu: {'bleu': 0.5245322414712715, 'precisions': [0.625, 0.5652173913043478, 0.5, 0.42857142857142855], 'brevity_penalty': 1.0, 'length_ratio': 1.411764705882353, 'translation_length': 24, 'reference_length': 17} Rouge: {'rouge1': 0.7894736842105263, 'rouge2': 0.7222222222222222, 'rougeL': 0.7894736842105263, 'rougeLsum': 0.7894736842105263} Sari: {'sari': 28.217522420108626} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['Am 1. Januar 2016 waren 25.502 Elektroautos angemeldet, unter den Hybrid-Pkw sind es etwas mehr: 130.365. Hybrid-PKW kombinieren den Elektroantrieb mit dem Verbrennungsmotor und sind von daher schadstoffärmer als reine Verbrennungsmotoren.'] Prediction: ['Der Hybrid-PKW kombinierte mit dem Verbrennungsmotor.\nDer KW kombinierte mit dem Verbrennungsmotor.'] Label: [['Aber am 1.\nJanuar 2016 waren erst 25.502 Elektroautos angemeldet, unter den Hybrid-Pkw sind es etwas mehr: 130.365.\nHybrid-PKW kombinieren den Elektroantrieb mit dem Verbrennungsmotor.']] Sacrebleu: {'score': 6.2744800769942675, 'counts': [6, 3, 2, 1], 'totals': [14, 13, 12, 11], 'precisions': [42.857142857142854, 23.076923076923077, 16.666666666666668, 9.090909090909092], 'bp': 0.31890655732397044, 'sys_len': 14, 'ref_len': 30} Bleu: {'bleu': 0.06274480076994265, 'precisions': [0.42857142857142855, 0.23076923076923078, 0.16666666666666666, 0.09090909090909091], 'brevity_penalty': 0.31890655732397044, 'length_ratio': 0.4666666666666667, 'translation_length': 14, 'reference_length': 30} Rouge: {'rouge1': 0.23809523809523808, 'rouge2': 0.15, 'rougeL': 0.23809523809523808, 'rougeLsum': 0.23809523809523808} Sari: {'sari': 19.34397891505735} Flesh Reading Ease: 39.45 ---------------------------------------- Source: ['Um Anreize zu schaffen gibt es eine Prämie seit Juni 2016 den sogenannten Umweltbonus:'] Prediction: ['Im Juni 2016 wurde ein sogenanntes Umweltbonus in der Schweiz verhaftet.\nNun wurde er von der Prämie seit Juni 2016 verhaftet.\nNun gibt es eine Prämie zu schaffen:'] Label: [['Als Anreiz gibt es den Umweltbonus seit Juni 2016:']] Sacrebleu: {'score': 6.106432774355545, 'counts': [7, 3, 1, 0], 'totals': [31, 30, 29, 28], 'precisions': [22.580645161290324, 10.0, 3.4482758620689653, 1.7857142857142858], 'bp': 1.0, 'sys_len': 31, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.22580645161290322, 0.1, 0.034482758620689655, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1, 'translation_length': 31, 'reference_length': 10} Rouge: {'rouge1': 0.30769230769230765, 'rouge2': 0.16216216216216217, 'rougeL': 0.20512820512820512, 'rougeLsum': 0.2564102564102564} Sari: {'sari': 45.72368421052631} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['Bis zu 4.000 Euro bekommt der Käufer erstattet, wenn er ein Elektro- oder Hybrid-Fahrzeug kauft.'] Prediction: ['Der Käufer bekommt ein Elektro oder Hybrid-Fahrzeug.\nDas kauft der Käufer zu 4.000 Euro.'] Label: [['Bis zu 4.000 Euro bekommt der Käufer zurück, wenn er ein Elektro- oder Hybrid-Fahrzeug kauft.']] Sacrebleu: {'score': 14.073159429818396, 'counts': [11, 4, 1, 0], 'totals': [16, 15, 14, 13], 'precisions': [68.75, 26.666666666666668, 7.142857142857143, 3.8461538461538463], 'bp': 0.9394130628134758, 'sys_len': 16, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.6875, 0.26666666666666666, 0.07142857142857142, 0.0], 'brevity_penalty': 0.9394130628134758, 'length_ratio': 0.9411764705882353, 'translation_length': 16, 'reference_length': 17} Rouge: {'rouge1': 0.7567567567567567, 'rouge2': 0.5142857142857143, 'rougeL': 0.4864864864864865, 'rougeLsum': 0.6486486486486486} Sari: {'sari': 18.720322886989557} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Außerdem fällt die jährliche Steuer, die fast alle Autos in Deutschland zahlen müssen, für einige Jahre weg.'] Prediction: ['Die jährliche Steuer in Deutschland fällt für einige Jahre weg.\nDie jährliche Autos fällt für einige Jahre weg.'] Label: [['Außerdem fällt die jährliche Steuer für einige Jahre weg.']] Sacrebleu: {'score': 21.31456897111116, 'counts': [8, 5, 3, 2], 'totals': [20, 19, 18, 17], 'precisions': [40.0, 26.31578947368421, 16.666666666666668, 11.764705882352942], 'bp': 1.0, 'sys_len': 20, 'ref_len': 10} Bleu: {'bleu': 0.21314568971111159, 'precisions': [0.4, 0.2631578947368421, 0.16666666666666666, 0.11764705882352941], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 20, 'reference_length': 10} Rouge: {'rouge1': 0.5945945945945945, 'rouge2': 0.4571428571428571, 'rougeL': 0.5405405405405406, 'rougeLsum': 0.48648648648648646} Sari: {'sari': 62.08240809277078} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Dieser Spruch der Feuerwehr sagt schon viel aus über die Einstellung zu ihrem Beruf:'] Prediction: ['Ein Spruch der Feuerwehr sagt, dass die Einstellung zu ihrem Beruf geht.\nDie Feuerwehr hatte sich nun aus dem Spital geäussert.'] Label: [['Dieser Spruch der Feuerwehr zeigt die Einstellung zum Beruf:']] Sacrebleu: {'score': 7.7075324887553816, 'counts': [6, 3, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [25.0, 13.043478260869565, 4.545454545454546, 2.380952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.13043478260869565, 0.045454545454545456, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 24, 'reference_length': 10} Rouge: {'rouge1': 0.3870967741935484, 'rouge2': 0.20689655172413796, 'rougeL': 0.3870967741935484, 'rougeLsum': 0.3870967741935484} Sari: {'sari': 37.754629629629626} Flesh Reading Ease: 75.9 ---------------------------------------- Source: ['Als Retter in der Not genießen Feuerwehrleute ein besonderes Ansehen – weltweit übrigens, wie die Gesellschaft für Konsum-, Markt- und Absatzforschung e. V. (GfK Verein) in der Studie „Trust in Professions 2015“ herausgefunden hat.'] Prediction: ['Ein besonderes Ansehen in der Not genießen Feuerwehrleute hat eine Studie herausgefunden.\nDer Grund: Die Gesellschaft für Konsum-, Markt und Absatzforschung e. V. (GfK Verein) hat in der Studie "Trust in Professions 2015" herausgefunden.'] Label: [['Sie sind die Retter in der Not.\nUnd daher haben Feuerwehrleute ein besonderes Ansehen weltweit.\nDies zeigt die Studie Gesellschaft für Konsum-, Markt- und Absatzforschung e. V. (GfK Verein) „Trust in Professions 2015“.']] Sacrebleu: {'score': 32.2401531434696, 'counts': [25, 16, 11, 8], 'totals': [44, 43, 42, 41], 'precisions': [56.81818181818182, 37.2093023255814, 26.19047619047619, 19.51219512195122], 'bp': 1.0, 'sys_len': 44, 'ref_len': 41} Bleu: {'bleu': 0.322401531434696, 'precisions': [0.5681818181818182, 0.37209302325581395, 0.2619047619047619, 0.1951219512195122], 'brevity_penalty': 1.0, 'length_ratio': 1.0731707317073171, 'translation_length': 44, 'reference_length': 41} Rouge: {'rouge1': 0.6857142857142857, 'rouge2': 0.5, 'rougeL': 0.5714285714285715, 'rougeLsum': 0.6571428571428571} Sari: {'sari': 45.095411841571824} Flesh Reading Ease: 51.7 ---------------------------------------- Source: ['In über 29.000 Interviews wurden Menschen aus 27 Ländern weltweit nach ihrem Vertrauen in 32 Berufsgruppen gefragt.'] Prediction: ['In über 29.000 Interviews wurden Menschen aus 27 Ländern weltweit nach ihrem Vertrauen in 32 Berufsgruppen gefragt.\nIn über 29.000 Interviews wurden Menschen aus 27 Ländern in 32 Berufsgruppen gefragt.'] Label: [['Hier wurden Menschen aus 27 Ländern weltweit nach ihrem Vertrauen in 32 Berufsgruppen gefragt.']] Sacrebleu: {'score': 40.846382376535125, 'counts': [14, 13, 12, 11], 'totals': [32, 31, 30, 29], 'precisions': [43.75, 41.935483870967744, 40.0, 37.93103448275862], 'bp': 1.0, 'sys_len': 32, 'ref_len': 15} Bleu: {'bleu': 0.4084638237653514, 'precisions': [0.4375, 0.41935483870967744, 0.4, 0.3793103448275862], 'brevity_penalty': 1.0, 'length_ratio': 2.1333333333333333, 'translation_length': 32, 'reference_length': 15} Rouge: {'rouge1': 0.5714285714285713, 'rouge2': 0.5531914893617021, 'rougeL': 0.5714285714285713, 'rougeLsum': 0.5714285714285713} Sari: {'sari': 62.12674393002261} Flesh Reading Ease: 73.05 ---------------------------------------- Source: ['In Deutschland haben alle Berufe, die für Recht, Ordnung und Sicherheit sorgen, ein hohes Ansehen.'] Prediction: ['Deutschland hat alle Berufe für Recht, Ordnung und Sicherheit ein hohes Ansehen.\nIn Deutschland haben alle Berufe ein hohes Ansehen.'] Label: [['In Deutschland haben alle Berufe ein hohes Ansehen, die für Recht, Ordnung und Sicherheit sorgen.']] Sacrebleu: {'score': 51.02002548573252, 'counts': [15, 12, 10, 8], 'totals': [23, 22, 21, 20], 'precisions': [65.21739130434783, 54.54545454545455, 47.61904761904762, 40.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 18} Bleu: {'bleu': 0.5102002548573253, 'precisions': [0.6521739130434783, 0.5454545454545454, 0.47619047619047616, 0.4], 'brevity_penalty': 1.0, 'length_ratio': 1.2777777777777777, 'translation_length': 23, 'reference_length': 18} Rouge: {'rouge1': 0.7567567567567567, 'rouge2': 0.6857142857142857, 'rougeL': 0.4864864864864864, 'rougeLsum': 0.7567567567567567} Sari: {'sari': 49.028494653494654} Flesh Reading Ease: 53.0 ---------------------------------------- Source: ['Das sind Rechtsanwälte, Richter und Polizisten, die im Vergleich zu Berufskollegen in Europa oder weltweit besser abschneiden.'] Prediction: ['Der Rechtsanwälte, Richter und Polizisten, die im Vergleich zu Berufskollegen in Europa oder weltweit besser abschneiden, sind in den letzten Tagen besser abschneiden.\nDas sind Rechtsanwälte, Richter und Polizisten, die im Vergleich zu Berufskollegen in Europa oder weltweit besser abschneiden.'] Label: [['Das sind Rechtsanwälte, Richter und Polizisten.']] Sacrebleu: {'score': 12.237355828108319, 'counts': [8, 6, 5, 4], 'totals': [47, 46, 45, 44], 'precisions': [17.02127659574468, 13.043478260869565, 11.11111111111111, 9.090909090909092], 'bp': 1.0, 'sys_len': 47, 'ref_len': 8} Bleu: {'bleu': 0.12237355828108318, 'precisions': [0.1702127659574468, 0.13043478260869565, 0.1111111111111111, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 5.875, 'translation_length': 47, 'reference_length': 8} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.2553191489361702, 'rougeL': 0.2857142857142857, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 48.84810604580909} Flesh Reading Ease: 37.15 ---------------------------------------- Source: ['Und auch Journalisten und Werbefachleute schneiden in Europa schlecht ab.'] Prediction: ['Die Schweiz schneidet in Europa schlecht ab.\nAuch auch Werbefachleute schneiden in Europa schlecht ab.'] Label: [['Auch Journalisten und Werbefachleute schneiden in Europa schlecht ab.']] Sacrebleu: {'score': 36.005658542850306, 'counts': [8, 6, 5, 4], 'totals': [17, 16, 15, 14], 'precisions': [47.05882352941177, 37.5, 33.333333333333336, 28.571428571428573], 'bp': 1.0, 'sys_len': 17, 'ref_len': 10} Bleu: {'bleu': 0.360056585428503, 'precisions': [0.47058823529411764, 0.375, 0.3333333333333333, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 17, 'reference_length': 10} Rouge: {'rouge1': 0.5833333333333334, 'rouge2': 0.45454545454545453, 'rougeL': 0.5833333333333334, 'rougeLsum': 0.5833333333333334} Sari: {'sari': 34.87826987826988} Flesh Reading Ease: 67.2 ---------------------------------------- Source: ['Die drei bevölkerungsreichsten Städte der Erde sind Tokio (37,75 Millionen Menschen), der Großraum Jakarta (fast 40 Millionen) und Delhi (25,73 Millionen).'] Prediction: ['Die drei bevölkerungsreichsten Städte der Erde sind Tokio (37,75 Millionen Menschen), der Großraum Jakarta (fast 40 Millionen) und Delhi (25,73 Millionen).\nTokio und Delhi sind die drei bevölkerungsreichsten Städte der Erde.'] Label: [['Die drei bevölkerungsreichsten Städte der Erde sind Tokio (37,75 Millionen Menschen), der Großraum Jakarta (fast 40 Millionen) und Delhi (25,73 Millionen).Immer']] Sacrebleu: {'score': 71.39960441195745, 'counts': [29, 28, 27, 26], 'totals': [40, 39, 38, 37], 'precisions': [72.5, 71.7948717948718, 71.05263157894737, 70.27027027027027], 'bp': 1.0, 'sys_len': 40, 'ref_len': 30} Bleu: {'bleu': 0.7139960441195747, 'precisions': [0.725, 0.717948717948718, 0.7105263157894737, 0.7027027027027027], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 40, 'reference_length': 30} Rouge: {'rouge1': 0.7999999999999999, 'rouge2': 0.7936507936507937, 'rougeL': 0.7999999999999999, 'rougeLsum': 0.7999999999999999} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 47.5 ---------------------------------------- Source: ['Immer größer, immer mehr Menschen, immer mehr Ressourcen – das ist der Trend der Urbanisierung.'] Prediction: ['Der Urbanisierung von Zürich hat einen neuen Trend.\nImmer größer, immer mehr Menschen, immer mehr Ressourcen ist der Trend der Urbanisierung.\nImmer größer, immer mehr Menschen, immer mehr Ressourcen ist der Trend der Urbanisierung.'] Label: [['größer, immer mehr Menschen, immer mehr Ressourcen – das ist der Trend der Urbanisierung.']] Sacrebleu: {'score': 29.85344389331794, 'counts': [15, 13, 11, 9], 'totals': [41, 40, 39, 38], 'precisions': [36.58536585365854, 32.5, 28.205128205128204, 23.68421052631579], 'bp': 1.0, 'sys_len': 41, 'ref_len': 17} Bleu: {'bleu': 0.2985344389331795, 'precisions': [0.36585365853658536, 0.325, 0.28205128205128205, 0.23684210526315788], 'brevity_penalty': 1.0, 'length_ratio': 2.411764705882353, 'translation_length': 41, 'reference_length': 17} Rouge: {'rouge1': 0.5098039215686275, 'rouge2': 0.44897959183673475, 'rougeL': 0.5098039215686275, 'rougeLsum': 0.5098039215686275} Sari: {'sari': 27.893493770941973} Flesh Reading Ease: 63.4 ---------------------------------------- Source: ['Dies führt zu weniger bezahlbarem Wohnraum, wachsenden Elendsvierten; Armut und Kriminalität steigen, die Infrastruktur bricht teilweise zusammen.'] Prediction: ['Weniger bezahlbarem Wohnraum, wachsenden Elendsvierten steigen, die Infrastruktur bricht teilweise zusammen.\nDie Infrastruktur bricht teilweise teilweise zusammen.\nDie Infrastruktur bricht teilweise teilweise zusammen.'] Label: [['Doch dies bedeutet zu wenig bezahlbarer Wohnraum, die Elendsviertel wachsen, Armut und Kriminalität steigen, die Infrastruktur bricht teilweise zusammen.']] Sacrebleu: {'score': 26.43589525275458, 'counts': [10, 8, 6, 5], 'totals': [28, 27, 26, 25], 'precisions': [35.714285714285715, 29.62962962962963, 23.076923076923077, 20.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 23} Bleu: {'bleu': 0.2643589525275458, 'precisions': [0.35714285714285715, 0.2962962962962963, 0.23076923076923078, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.2173913043478262, 'translation_length': 28, 'reference_length': 23} Rouge: {'rouge1': 0.37209302325581395, 'rouge2': 0.24390243902439024, 'rougeL': 0.3255813953488372, 'rougeLsum': 0.3255813953488372} Sari: {'sari': 40.90714463901071} Flesh Reading Ease: 14.35 ---------------------------------------- Source: ['Die Slums tragen besonders stark zum Ausstoß von Treibhausgasen bei.'] Prediction: ['In Treibhausgasen wurde ein Zusammenhang mit einem Slum geschickt.\nDie Slums tragen besonders stark zum Ausstoß von Treibhausgasen bei.'] Label: [['Die Slums der riesigen Städte tragen besonders stark zum Ausstoß von Treibhausgasen bei.']] Sacrebleu: {'score': 41.24794077825947, 'counts': [11, 9, 7, 6], 'totals': [21, 20, 19, 18], 'precisions': [52.38095238095238, 45.0, 36.8421052631579, 33.333333333333336], 'bp': 1.0, 'sys_len': 21, 'ref_len': 14} Bleu: {'bleu': 0.41247940778259484, 'precisions': [0.5238095238095238, 0.45, 0.3684210526315789, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 21, 'reference_length': 14} Rouge: {'rouge1': 0.6060606060606061, 'rouge2': 0.5161290322580646, 'rougeL': 0.6060606060606061, 'rougeLsum': 0.6060606060606061} Sari: {'sari': 63.99592731829574} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Die Entwicklung in den Regionen in der Nähe der Städte steht daher an erster Stelle.'] Prediction: ['Die Entwicklung in den Regionen in der Nähe der Städte steht an erster Stelle.\nDie Entwicklung in den Regionen in der Nähe der Städte steht daher an erster Stelle.'] Label: [['Die Entwicklung in den Regionen in der Nähe der Städte und die Lebensbedingungen der Menschen stehen an erster Stelle.']] Sacrebleu: {'score': 37.16044264721395, 'counts': [15, 12, 10, 8], 'totals': [31, 30, 29, 28], 'precisions': [48.38709677419355, 40.0, 34.48275862068966, 28.571428571428573], 'bp': 1.0, 'sys_len': 31, 'ref_len': 20} Bleu: {'bleu': 0.37160442647213937, 'precisions': [0.4838709677419355, 0.4, 0.3448275862068966, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.55, 'translation_length': 31, 'reference_length': 20} Rouge: {'rouge1': 0.6296296296296297, 'rouge2': 0.5000000000000001, 'rougeL': 0.6296296296296297, 'rougeLsum': 0.5555555555555556} Sari: {'sari': 61.72669922669923} Flesh Reading Ease: 66.05 ---------------------------------------- Source: ['Warum muss man sich unbedingt Geschenke kaufen?'] Prediction: ['Der Geschenke-Kollegen hat sich in der Nacht auf Sonntag in Geschenke geschickt.\nEr muss sich unbedingt Geschenke kaufen.\nDer Mann muss sich unbedingt Geschenke kaufen.'] Label: [['Warum muss man unbedingt Geschenke kaufen?']] Sacrebleu: {'score': 5.341413623819777, 'counts': [4, 2, 1, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 7.407407407407407, 3.8461538461538463, 2.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.07407407407407407, 0.038461538461538464, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 28, 'reference_length': 7} Rouge: {'rouge1': 0.25, 'rouge2': 0.13333333333333333, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 25.555555555555554} Flesh Reading Ease: 66.4 ---------------------------------------- Source: ['Das hat einen ganz besonderen Wert für den Beschenkten: Aufmerksamkeit, gemeinsame Zeit und geschenkte Erlebnisse.'] Prediction: ['Der Beschenkten hat einen besonderen Wert für den Beschenkten: Aufmerksamkeit, gemeinsame Zeit und geschenkte Erlebnisse.\nDas hat einen ganz besonderen Wert für den Beschenkten: Aufmerksamkeit, gemeinsame Zeit und geschenkte Erlebnisse.'] Label: [['Das hat einen ganz besonderen Wert: Aufmerksamkeit, gemeinsame Zeit und geschenkte Erlebnisse.']] Sacrebleu: {'score': 34.18429290049754, 'counts': [15, 13, 11, 9], 'totals': [36, 35, 34, 33], 'precisions': [41.666666666666664, 37.142857142857146, 32.35294117647059, 27.272727272727273], 'bp': 1.0, 'sys_len': 36, 'ref_len': 15} Bleu: {'bleu': 0.3418429290049754, 'precisions': [0.4166666666666667, 0.37142857142857144, 0.3235294117647059, 0.2727272727272727], 'brevity_penalty': 1.0, 'length_ratio': 2.4, 'translation_length': 36, 'reference_length': 15} Rouge: {'rouge1': 0.5454545454545454, 'rouge2': 0.4761904761904761, 'rougeL': 0.5454545454545454, 'rougeLsum': 0.5454545454545454} Sari: {'sari': 61.171436588103255} Flesh Reading Ease: 42.15 ---------------------------------------- Source: ['Die einen lieben sie, die anderen finden sie überflüssig – aber eines ist sicher: Weihnachtsfeiern mit Kolleginnen und Kollegen und Freunden fördern das Miteinander – vorausgesetzt, man ist kreativ genug und belässt es nicht bei einem Plätzchenessen in der Mittagspause.'] Prediction: ['Weihnachtsfeiern mit Kolleginnen und Kollegen fördern das Miteinander.\nDas ist vorausgesetzt, man ist kreativ genug und belässt es nicht bei einem Plätzchenessen in der Mittagspause.'] Label: [['Weihnachtsfeiern mit Kolleginnen und Kollegen oder mit Freunden fördern das Miteinander.']] Sacrebleu: {'score': 20.941084252099134, 'counts': [9, 7, 5, 3], 'totals': [28, 27, 26, 25], 'precisions': [32.142857142857146, 25.925925925925927, 19.23076923076923, 12.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 12} Bleu: {'bleu': 0.2094108425209914, 'precisions': [0.32142857142857145, 0.25925925925925924, 0.19230769230769232, 0.12], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 28, 'reference_length': 12} Rouge: {'rouge1': 0.45000000000000007, 'rouge2': 0.368421052631579, 'rougeL': 0.45000000000000007, 'rougeLsum': 0.45000000000000007} Sari: {'sari': 47.69791650676575} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Was sich anbietet, ist zum Beispiel ein gemeinsamer Nachmittag draußen, etwa zum Eisstockschießen mit anschließendem Besuch auf dem Weihnachtsmarkt.'] Prediction: ['Im Weihnachtsmarkt ist ein Beispiel eines Eisstockschießen mit anschließendem Besuch auf dem Weihnachtsmarkt gesucht.\nDas Beispiel wurde zum Eisstockschießen mit anschließendem Besuch auf dem Weihnachtsmarkt gesucht.'] Label: [['Ein gemeinsamer Nachmittag draußen, etwa zum Eisstockschießen mit anschließendem Besuch auf dem Weihnachtsmarkt, ist sehr beliebt.']] Sacrebleu: {'score': 25.567957494892184, 'counts': [10, 7, 6, 5], 'totals': [28, 27, 26, 25], 'precisions': [35.714285714285715, 25.925925925925927, 23.076923076923077, 20.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 19} Bleu: {'bleu': 0.25567957494892185, 'precisions': [0.35714285714285715, 0.25925925925925924, 0.23076923076923078, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.4736842105263157, 'translation_length': 28, 'reference_length': 19} Rouge: {'rouge1': 0.5306122448979592, 'rouge2': 0.4255319148936171, 'rougeL': 0.4897959183673469, 'rougeLsum': 0.44897959183673464} Sari: {'sari': 39.10953749315818} Flesh Reading Ease: 55.85 ---------------------------------------- Source: ['Trifft man sich mit Freunden, ist es entspannt, wenn alle gemeinsam kochen und sich ein Motto überlegen – rein vegetarisch, fernöstlich, rustikal oder eben weihnachtlich mit internationalen Rezepten.'] Prediction: ['Freunden sind sich mit Freunden überlegen.\nSie sind sich mit einem Motto überlegen.\nDie Freunde sind sich mit einem Motto überlegen.'] Label: [['Trifft man sich mit Freunden, ist es entspannt, wenn alle gemeinsam kochen – rein vegetarisch, fernöstlich, rustikal oder eben weihnachtlich mit internationalen Rezepten.']] Sacrebleu: {'score': 5.63267669297827, 'counts': [5, 2, 1, 0], 'totals': [24, 23, 22, 21], 'precisions': [20.833333333333332, 8.695652173913043, 4.545454545454546, 2.380952380952381], 'bp': 0.846481724890614, 'sys_len': 24, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.20833333333333334, 0.08695652173913043, 0.045454545454545456, 0.0], 'brevity_penalty': 0.846481724890614, 'length_ratio': 0.8571428571428571, 'translation_length': 24, 'reference_length': 28} Rouge: {'rouge1': 0.1818181818181818, 'rouge2': 0.09523809523809525, 'rougeL': 0.1818181818181818, 'rougeLsum': 0.13636363636363635} Sari: {'sari': 10.455761820794148} Flesh Reading Ease: 79.4 ---------------------------------------- Source: ['Hier werden Dinge, die man eigentlich nicht braucht, schön verpackt, mit einer Nummer versehen und verlost.'] Prediction: ['Der Schweizer Nummer-Konzert hat einen neuen Fragen geschickt.\nDiese werden von der Nummer versehen und verlost.\nDie Nummer-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert-Konzert von 20 Minuten'] Label: [['Hier werden Dinge, die man eigentlich nicht braucht, schön verpackt, bekommen eine Nummer und werden verlost.']] Sacrebleu: {'score': 4.141141330484801, 'counts': [5, 1, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 4.545454545454546, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.045454545454545456, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.15, 'translation_length': 23, 'reference_length': 20} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.05714285714285714, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 13.328877005347591} Flesh Reading Ease: -493.91 ---------------------------------------- Source: ['Nichts stimmt so sehr auf die Festtage ein wie der Weihnachtsbaum, den man zusammen mit der Familie aussucht.'] Prediction: ['Der Weihnachtsbaum wurde in der Nacht auf Sonntag auf Sonntag auf Sonntag ausgeschlossen.\nNichts stimmt so sehr auf die Festtage ein wie der Weihnachtsbaum, den man zusammen mit der Familie aussucht.'] Label: [['Zu Weihnachten gehört der Weihnachtsbaum, den man zusammen mit der Familie aussucht.']] Sacrebleu: {'score': 29.043915404545313, 'counts': [11, 10, 9, 8], 'totals': [34, 33, 32, 31], 'precisions': [32.35294117647059, 30.303030303030305, 28.125, 25.806451612903224], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.2904391540454532, 'precisions': [0.3235294117647059, 0.30303030303030304, 0.28125, 0.25806451612903225], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.4090909090909091, 'rouge2': 0.3809523809523809, 'rougeL': 0.4090909090909091, 'rougeLsum': 0.4090909090909091} Sari: {'sari': 55.71647509578545} Flesh Reading Ease: 70.9 ---------------------------------------- Source: ['Ein gemeinsamer Besuch eines Weihnachtskonzertes erhellt die Sinne und erweckt Vorfreude auf die anstehenden Weihnachtsfeiertage.'] Prediction: ['Ein gemeinsamer Besuch eines Weihnachtskonzertes erweckt die Sinne und erweckt Vorfreude auf die anstehenden Weihnachtsfeiertage.\nDie Sinne erweckt die Sinne und erweckt Vorfreude auf die anstehenden Weihnachtsfeiertage.'] Label: [['Ein Weihnachtskonzert stimmt besonders schön ein auf die Weihnachtsfeiertage.']] Sacrebleu: {'score': 3.848169719653079, 'counts': [5, 2, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 7.142857142857143, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.9, 'translation_length': 29, 'reference_length': 10} Rouge: {'rouge1': 0.21621621621621623, 'rouge2': 0.05714285714285715, 'rougeL': 0.21621621621621623, 'rougeLsum': 0.21621621621621623} Sari: {'sari': 39.60960960960961} Flesh Reading Ease: 31.95 ---------------------------------------- Source: ['Das wusste schon der amerikanische Philosoph Ralph Waldo Emerson.'] Prediction: ['Der amerikanische Philosoph Ralph Waldo Emerson hat einen neuen Wissenschaftler.\nEr wurde zuvor als ein Paar ausgewählter Schlagzeilen geschickt.\nEr wurde von einem amerikanischen Aufenthalt von Waldo Emerson vermutet.'] Label: [['Das sagte der amerikanische Philosoph Ralph Waldo Emerson.']] Sacrebleu: {'score': 11.36535202319117, 'counts': [6, 4, 3, 2], 'totals': [32, 31, 30, 29], 'precisions': [18.75, 12.903225806451612, 10.0, 6.896551724137931], 'bp': 1.0, 'sys_len': 32, 'ref_len': 9} Bleu: {'bleu': 0.11365352023191169, 'precisions': [0.1875, 0.12903225806451613, 0.1, 0.06896551724137931], 'brevity_penalty': 1.0, 'length_ratio': 3.5555555555555554, 'translation_length': 32, 'reference_length': 9} Rouge: {'rouge1': 0.31578947368421056, 'rouge2': 0.2777777777777778, 'rougeL': 0.31578947368421056, 'rougeLsum': 0.31578947368421056} Sari: {'sari': 54.20935545935546} Flesh Reading Ease: 47.45 ---------------------------------------- Source: ['Und so sind die Wörter des Jahres, die die Gesellschaft für deutsche Sprache e. V. (GfdS) alle Jahre wieder auswählt, ein interessanter Rückblick in das gerade vergangene Jahr.'] Prediction: ['Die Gesellschaft für deutsche Sprache e. V. (GfdS) wurde alle Jahre wieder auswählt.\nDie Wörter des Jahres sind wieder auswählt, ein interessanter Rückblick in das gerade vergangene Jahr.'] Label: [['Die Wörter des Jahres, die die Gesellschaft für deutsche Sprache e. V. (GfdS) jedes Jahr auswählt, sind daher ein interessanter Rückblick in das gerade vergangene Jahr.']] Sacrebleu: {'score': 59.77021697441377, 'counts': [27, 22, 18, 15], 'totals': [35, 34, 33, 32], 'precisions': [77.14285714285714, 64.70588235294117, 54.54545454545455, 46.875], 'bp': 1.0, 'sys_len': 35, 'ref_len': 33} Bleu: {'bleu': 0.5977021697441378, 'precisions': [0.7714285714285715, 0.6470588235294118, 0.5454545454545454, 0.46875], 'brevity_penalty': 1.0, 'length_ratio': 1.0606060606060606, 'translation_length': 35, 'reference_length': 33} Rouge: {'rouge1': 0.8253968253968254, 'rouge2': 0.6885245901639345, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.7936507936507938} Sari: {'sari': 46.49905922628173} Flesh Reading Ease: 59.55 ---------------------------------------- Source: ['Postfaktisch bedeutet: Die „gefühlte“ Wahrheit ist für manche Menschen wichtiger als Tatsachen.'] Prediction: ['Die Wahrheit in den USA ist wichtiger als Tatsachen.\nDie "gefühlte“ Wahrheit ist für manche Menschen wichtiger als Tatsachen.'] Label: [['Postfaktisch bedeutet „gefühlte“ Wahrheit.\nSie ist für manche Menschen wichtiger als Tatsachen.']] Sacrebleu: {'score': 33.07108401836139, 'counts': [10, 7, 6, 5], 'totals': [22, 21, 20, 19], 'precisions': [45.45454545454545, 33.333333333333336, 30.0, 26.31578947368421], 'bp': 1.0, 'sys_len': 22, 'ref_len': 14} Bleu: {'bleu': 0.3307108401836138, 'precisions': [0.45454545454545453, 0.3333333333333333, 0.3, 0.2631578947368421], 'brevity_penalty': 1.0, 'length_ratio': 1.5714285714285714, 'translation_length': 22, 'reference_length': 14} Rouge: {'rouge1': 0.6285714285714286, 'rouge2': 0.5454545454545455, 'rougeL': 0.6285714285714286, 'rougeLsum': 0.6285714285714286} Sari: {'sari': 52.6989921842863} Flesh Reading Ease: 71.05 ---------------------------------------- Source: ['In den politischen und gesellschaftlichen Diskussionen stehen heute oft eher die Emotionen statt Fakten im Mittelpunkt und sogar Lügen werden von einigen Menschen akzeptiert.'] Prediction: ['In den politischen und gesellschaftlichen Diskussionen stehen heute oft eher die Emotionen statt Fakten im Mittelpunkt.\nDiese sind oft einige Menschen akzeptiert.'] Label: [['In den politischen und gesellschaftlichen Diskussionen stehen heute oft die Emotionen statt Fakten im Mittelpunkt.\nEinige Menschen akzeptieren sogar Lügen.']] Sacrebleu: {'score': 58.68136174076831, 'counts': [18, 14, 12, 10], 'totals': [24, 23, 22, 21], 'precisions': [75.0, 60.869565217391305, 54.54545454545455, 47.61904761904762], 'bp': 1.0, 'sys_len': 24, 'ref_len': 22} Bleu: {'bleu': 0.5868136174076833, 'precisions': [0.75, 0.6086956521739131, 0.5454545454545454, 0.47619047619047616], 'brevity_penalty': 1.0, 'length_ratio': 1.0909090909090908, 'translation_length': 24, 'reference_length': 22} Rouge: {'rouge1': 0.7906976744186046, 'rouge2': 0.6829268292682926, 'rougeL': 0.7906976744186046, 'rougeLsum': 0.7906976744186046} Sari: {'sari': 64.15607049838798} Flesh Reading Ease: 46.15 ---------------------------------------- Source: ['Auf Platz 2: Brexit (aus: Britain + Exit).'] Prediction: ['Die EU will noch nicht mit Brexit ausnehmen.\nAuch die EU will noch nicht mit einem Exit-Plan ausnehmen.'] Label: [['Auf Platz 2 steht das Wort Brexit (aus: Britain + Exit).']] Sacrebleu: {'score': 2.276859592073037, 'counts': [2, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [10.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 20, 'reference_length': 15} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.0, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 9.792568542568542} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Die Herkunft des Wortes ist ein passendes Beispiel für postfaktische Politik.'] Prediction: ['Die Herkunft des Wortes ist ein passendes Beispiel für postfaktische Politik.\nDie Herkunft des Wortes ist ein passendes Beispiel für postfaktische Politik.'] Label: [['Die Herkunft des Wortes ist ein Beispiel für postfaktische Politik.']] Sacrebleu: {'score': 34.14133873034847, 'counts': [11, 9, 7, 5], 'totals': [24, 23, 22, 21], 'precisions': [45.833333333333336, 39.130434782608695, 31.818181818181817, 23.80952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 11} Bleu: {'bleu': 0.34141338730348464, 'precisions': [0.4583333333333333, 0.391304347826087, 0.3181818181818182, 0.23809523809523808], 'brevity_penalty': 1.0, 'length_ratio': 2.1818181818181817, 'translation_length': 24, 'reference_length': 11} Rouge: {'rouge1': 0.6285714285714286, 'rouge2': 0.5454545454545454, 'rougeL': 0.6285714285714286, 'rougeLsum': 0.6285714285714286} Sari: {'sari': 69.95280720984044} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Denn mit vielen gezielten Fehlinformationen bekamen die Befürworter des Austritts Großbritanniens die Stimmen in der Bevölkerung.'] Prediction: ['Die Befürworter des Austritts Großbritanniens bekamen die Stimmen in der Bevölkerung.\nDie Befürworter des Austritts Großbritanniens bekamen die Stimmen in der Bevölkerung.'] Label: [['Denn mit vielen falschen Informationen bekamen die Befürworter des Austritts Großbritanniens aus der EU die Stimmen der Bevölkerung.']] Sacrebleu: {'score': 17.729842264695016, 'counts': [12, 7, 3, 1], 'totals': [24, 23, 22, 21], 'precisions': [50.0, 30.434782608695652, 13.636363636363637, 4.761904761904762], 'bp': 1.0, 'sys_len': 24, 'ref_len': 19} Bleu: {'bleu': 0.17729842264695017, 'precisions': [0.5, 0.30434782608695654, 0.13636363636363635, 0.047619047619047616], 'brevity_penalty': 1.0, 'length_ratio': 1.263157894736842, 'translation_length': 24, 'reference_length': 19} Rouge: {'rouge1': 0.5714285714285715, 'rouge2': 0.425531914893617, 'rougeL': 0.5306122448979592, 'rougeLsum': 0.48979591836734687} Sari: {'sari': 45.53210040279006} Flesh Reading Ease: 34.45 ---------------------------------------- Source: ['Er spielt an auf die Veröffentlichung der Panama-Papiere.'] Prediction: ['Ein US-Amerikaner hat seine Veröffentlichung auf die Veröffentlichung der Panama-Papiere verstorben.\nEr spielt an auf die Veröffentlichung der Panama-Papiere.'] Label: [['Er meint die Veröffentlichung der Panama-Papiere.']] Sacrebleu: {'score': 17.793925745339383, 'counts': [6, 4, 3, 2], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 20.0, 15.789473684210526, 11.11111111111111], 'bp': 1.0, 'sys_len': 21, 'ref_len': 7} Bleu: {'bleu': 0.17793925745339384, 'precisions': [0.2857142857142857, 0.2, 0.15789473684210525, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 21, 'reference_length': 7} Rouge: {'rouge1': 0.42424242424242425, 'rouge2': 0.3225806451612903, 'rougeL': 0.42424242424242425, 'rougeLsum': 0.42424242424242425} Sari: {'sari': 54.722222222222214} Flesh Reading Ease: 24.25 ---------------------------------------- Source: ['Es geht um Geldwäsche und Steuerbetrug.'] Prediction: ['Der Geldwäsche und Steuerbetrug geht um Geldwäsche und Steuerbetrug.\nEs geht um Geldwäsche und Steuerbetrug.'] Label: [['Sie dienen der Geldwäsche und dem Steuerbetrug.']] Sacrebleu: {'score': 6.468490584192431, 'counts': [4, 2, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [23.529411764705884, 12.5, 3.3333333333333335, 1.7857142857142858], 'bp': 1.0, 'sys_len': 17, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.125, 'translation_length': 17, 'reference_length': 8} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.25, 'rougeL': 0.3846153846153846, 'rougeLsum': 0.3846153846153846} Sari: {'sari': 50.49242424242425} Flesh Reading Ease: 55.5 ---------------------------------------- Source: ['Einige führende Politiker waren beteiligt und mussten zurücktreten.'] Prediction: ['Einige führende Politiker waren beteiligt und mussten zurücktreten.\nEinige führende Politiker waren beteiligt und mussten zurücktreten.'] Label: [['Einige bekannte Politiker waren beteiligt.']] Sacrebleu: {'score': 9.083627868206413, 'counts': [5, 2, 1, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 11.764705882352942, 6.25, 3.3333333333333335], 'bp': 1.0, 'sys_len': 18, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.11764705882352941, 0.0625, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 18, 'reference_length': 6} Rouge: {'rouge1': 0.32000000000000006, 'rouge2': 0.17391304347826086, 'rougeL': 0.32000000000000006, 'rougeLsum': 0.32000000000000006} Sari: {'sari': 44.70238095238095} Flesh Reading Ease: 8.2 ---------------------------------------- Source: ['Aber viele Deutsche verlassen auch ihr Land – rund 25.000 jedes Jahr.'] Prediction: ['Die Schweiz verlassen auch ihr Land.\nDas Land verlassen auch auch auch in der Schweiz.\nAuch in der Schweiz ist ein Land der meisten Deutsche.'] Label: [['Einige Deutsche verlassen ihr Land – rund 25.000 jedes Jahr.']] Sacrebleu: {'score': 3.3582360261774293, 'counts': [5, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.17857142857142858, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5454545454545454, 'translation_length': 28, 'reference_length': 11} Rouge: {'rouge1': 0.22857142857142856, 'rouge2': 0.06060606060606061, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.22857142857142856} Sari: {'sari': 17.43777056277056} Flesh Reading Ease: 101.5 ---------------------------------------- Source: ['Eine Veröffentlichung der OECD zeigt: 2011 lebten rund 3,4 Millionen in Deutschland geborene Menschen in einem anderen OECD-Land.'] Prediction: ['Die Veröffentlichung der OECD zeigt: 2011 lebten rund 3,4 Millionen in Deutschland geborene Menschen in einem anderen Land.\nDie Veröffentlichung der OECD zeigt: 2011 lebten rund 3,4 Millionen in Deutschland geborene Menschen in einem anderen OECD-Land.'] Label: [['Eine Veröffentlichung der OECD (Organisation für wirtschaftliche Zusammenarbeit und Entwicklung) zeigt: 2011 lebten rund 3,4 Millionen in Deutschland geborene Menschen in einem anderen Land.']] Sacrebleu: {'score': 41.165349184859494, 'counts': [19, 17, 15, 13], 'totals': [40, 39, 38, 37], 'precisions': [47.5, 43.58974358974359, 39.473684210526315, 35.13513513513514], 'bp': 1.0, 'sys_len': 40, 'ref_len': 28} Bleu: {'bleu': 0.411653491848595, 'precisions': [0.475, 0.4358974358974359, 0.39473684210526316, 0.35135135135135137], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 40, 'reference_length': 28} Rouge: {'rouge1': 0.5588235294117647, 'rouge2': 0.5151515151515152, 'rougeL': 0.5588235294117647, 'rougeLsum': 0.5588235294117647} Sari: {'sari': 36.22488632781782} Flesh Reading Ease: 45.0 ---------------------------------------- Source: ['Zu den Motiven, Deutschland den Rücken zu kehren, hat man herausgefunden, dass es für fast 67 Prozent berufliche Gründe waren.'] Prediction: ['Die Schweiz hat sich mit dem Coronavirus infiziert.\nEs wird für 67 Prozent berufliche Gründe geschlossen.'] Label: [['Für fast 67 Prozent der Auswanderer waren es berufliche Gründe, Deutschland zu verlassen.']] Sacrebleu: {'score': 6.423094863383858, 'counts': [5, 2, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 11.764705882352942, 3.125, 1.6666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.11764705882352941, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 18, 'reference_length': 15} Rouge: {'rouge1': 0.4848484848484848, 'rouge2': 0.2580645161290323, 'rougeL': 0.42424242424242425, 'rougeLsum': 0.42424242424242425} Sari: {'sari': 38.1712962962963} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Für über 41 Prozent der Befragten war Unzufriedenheit mit dem Leben in Deutschland der Grund, auszuwandern.'] Prediction: ['Der Bund hat sich mit einem Unzufriedenheit-Bewegungsgebot in Deutschland ausgegeben.\n41 Prozent der Befragten war Unzufriedenheit mit dem Leben in Deutschland der Grund auszuwandern.'] Label: [['Über 41 Prozent der Befragten waren unzufrieden mit dem Leben in Deutschland.']] Sacrebleu: {'score': 23.258634617455257, 'counts': [10, 7, 5, 3], 'totals': [26, 25, 24, 23], 'precisions': [38.46153846153846, 28.0, 20.833333333333332, 13.043478260869565], 'bp': 1.0, 'sys_len': 26, 'ref_len': 13} Bleu: {'bleu': 0.2325863461745526, 'precisions': [0.38461538461538464, 0.28, 0.20833333333333334, 0.13043478260869565], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 26, 'reference_length': 13} Rouge: {'rouge1': 0.48648648648648657, 'rouge2': 0.4, 'rougeL': 0.48648648648648657, 'rougeLsum': 0.48648648648648657} Sari: {'sari': 45.6436347545153} Flesh Reading Ease: 39.3 ---------------------------------------- Source: ['Und fast 47 Prozent erhofften sich mehr Geld, das heißt ein höheres Einkommen.'] Prediction: ['Einige Prozent erhofften sich mehr Geld, das heißt ein höheres Einkommen.\nDie Schweizer Grenze erhofften sich mehr Geld.'] Label: [['Und fast 47 Prozent wünschten sich ein höheres Einkommen.']] Sacrebleu: {'score': 12.58220555845937, 'counts': [6, 3, 2, 1], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 15.0, 10.526315789473685, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 10} Bleu: {'bleu': 0.1258220555845937, 'precisions': [0.2857142857142857, 0.15, 0.10526315789473684, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 21, 'reference_length': 10} Rouge: {'rouge1': 0.3870967741935483, 'rouge2': 0.20689655172413793, 'rougeL': 0.3870967741935483, 'rougeLsum': 0.3870967741935483} Sari: {'sari': 19.932518461930226} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Immer mehr deutsche Studierende zieht es ins Ausland.'] Prediction: ['Die deutsche Studierende sind in der Schweiz nicht mehr.\nSie sind in der Schweiz nach mehreren Tagen gekommen.\nSie sind in der Schweiz nicht mehr bekannt.'] Label: [['Im Ausland studierenImmer mehr deutsche Studierende gehen ins Ausland.']] Sacrebleu: {'score': 3.0603367373678014, 'counts': [4, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [13.793103448275861, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.13793103448275862, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.9, 'translation_length': 29, 'reference_length': 10} Rouge: {'rouge1': 0.17142857142857146, 'rouge2': 0.06060606060606061, 'rougeL': 0.1142857142857143, 'rougeLsum': 0.17142857142857146} Sari: {'sari': 42.38095238095238} Flesh Reading Ease: 89.4 ---------------------------------------- Source: ['Viele studieren in Österreich (31.000), in den Niederlanden (25.000), in Großbritannien (16.000) und in der Schweiz (12.000).Diese internationale Mobilität ist wichtig, denn Auslandsaufenthalte im Studium sind oft wichtige Zusatzqualifikationen für den späteren Beruf.'] Prediction: ['Die internationale Mobilität der Auslandsaufenthalte ist wichtig, denn Auslandsaufenthalte im Studium sind oft wichtige Zusatzqualifikationen für den späteren Beruf.\nDas internationale Mobilität ist wichtig, denn Auslandsaufenthalte im Studium sind oft wichtige Zusatzqualifikationen für den späteren Beruf.'] Label: [['Viele studieren in Österreich (31.000), in den Niederlanden (25.000), in Großbritannien (16.000) und in der Schweiz (12.000).Diese internationale Mobilität ist wichtig.\nAuslandsaufenthalte im Studium sind oft eine wichtige Zusatzqualifikation für den späteren Beruf.']] Sacrebleu: {'score': 21.127185910664792, 'counts': [20, 11, 8, 5], 'totals': [40, 39, 38, 37], 'precisions': [50.0, 28.205128205128204, 21.05263157894737, 13.513513513513514], 'bp': 0.8394570207692074, 'sys_len': 40, 'ref_len': 47} Bleu: {'bleu': 0.2112718591066479, 'precisions': [0.5, 0.28205128205128205, 0.21052631578947367, 0.13513513513513514], 'brevity_penalty': 0.8394570207692074, 'length_ratio': 0.851063829787234, 'translation_length': 40, 'reference_length': 47} Rouge: {'rouge1': 0.4523809523809524, 'rouge2': 0.3170731707317073, 'rougeL': 0.42857142857142855, 'rougeLsum': 0.40476190476190477} Sari: {'sari': 12.456418473493478} Flesh Reading Ease: -1.81 ---------------------------------------- Source: ['Auslandsaufenthalte im Studium gehören schon an vielen Hochschulen zu den Studiengängen.'] Prediction: ['Auslandsaufenthalte im Studium gehören schon an vielen Hochschulen zu den Studiengängen.\nDas ist der erste Mal in der Schweiz.'] Label: [['Auslandsaufenthalte im Studium gehören an vielen Hochschulen zu den Studiengängen.']] Sacrebleu: {'score': 39.41004770986059, 'counts': [11, 9, 7, 5], 'totals': [21, 20, 19, 18], 'precisions': [52.38095238095238, 45.0, 36.8421052631579, 27.77777777777778], 'bp': 1.0, 'sys_len': 21, 'ref_len': 11} Bleu: {'bleu': 0.394100477098606, 'precisions': [0.5238095238095238, 0.45, 0.3684210526315789, 0.2777777777777778], 'brevity_penalty': 1.0, 'length_ratio': 1.9090909090909092, 'translation_length': 21, 'reference_length': 11} Rouge: {'rouge1': 0.7272727272727273, 'rouge2': 0.6451612903225806, 'rougeL': 0.7272727272727273, 'rougeLsum': 0.7272727272727273} Sari: {'sari': 61.61947387650712} Flesh Reading Ease: 65.2 ---------------------------------------- Source: ['Auch für die Entwicklung der Persönlichkeit bedeuten Auslandsaufenthalte viel, etwa dem Erwerb von Fremdsprachen und interkulturellen Kompetenzen.'] Prediction: ['Die Persönlichkeit bedeuten Auslandsaufenthalte viel.\nDas Erwerb von Fremdsprachen und interkulturellen Kompetenzen ist auch für die Entwicklung der Persönlichkeit bedeuten Auslandsaufenthalte viel.'] Label: [['Auch für die Entwicklung der Persönlichkeit ist ein Studium im Ausland wichtig.']] Sacrebleu: {'score': 16.020720994064927, 'counts': [7, 4, 3, 2], 'totals': [24, 23, 22, 21], 'precisions': [29.166666666666668, 17.391304347826086, 13.636363636363637, 9.523809523809524], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.16020720994064927, 'precisions': [0.2916666666666667, 0.17391304347826086, 0.13636363636363635, 0.09523809523809523], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.4615384615384615, 'rouge2': 0.3783783783783784, 'rougeL': 0.41025641025641024, 'rougeLsum': 0.41025641025641024} Sari: {'sari': 53.72987117552336} Flesh Reading Ease: 22.75 ---------------------------------------- Source: ['Endlich mal ein Winter, der seinen Namen verdient!'] Prediction: ['Der Namen-Winter ist ein Winter, der seinen Namen verdient.\nDer Namen-Winter ist seit Jahren nicht mehr ganz nach der Welt.\nDer Namen-Winter ist sehr nicht mehr nach der Namen-Nacht.'] Label: [['Endlich ein Winter, der seinen Namen verdient!']] Sacrebleu: {'score': 17.101456688527577, 'counts': [7, 6, 5, 4], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 18.75, 16.129032258064516, 13.333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 9} Bleu: {'bleu': 0.1710145668852757, 'precisions': [0.21212121212121213, 0.1875, 0.16129032258064516, 0.13333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 3.6666666666666665, 'translation_length': 33, 'reference_length': 9} Rouge: {'rouge1': 0.30000000000000004, 'rouge2': 0.2631578947368421, 'rougeL': 0.30000000000000004, 'rougeLsum': 0.30000000000000004} Sari: {'sari': 49.41158378658378} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['Der Jahresbeginn in Deutschland hatte viel Frost und Schnee im Gepäck – sehr zur Freude der Wintersportfans.'] Prediction: ['Die Schweizer Wintersportfans sind sehr zur Freude.\nDer Jahresbeginn hatte viel Frost und Schnee im Gepäck.\nDerzeit hatte sie sehr zur Freude geben.'] Label: [['Der Jahresbeginn in Deutschland brachte viel Frost und Schnee – sehr zur Freude der Wintersportfans.']] Sacrebleu: {'score': 15.326859947928295, 'counts': [11, 6, 3, 1], 'totals': [26, 25, 24, 23], 'precisions': [42.30769230769231, 24.0, 12.5, 4.3478260869565215], 'bp': 1.0, 'sys_len': 26, 'ref_len': 16} Bleu: {'bleu': 0.1532685994792829, 'precisions': [0.4230769230769231, 0.24, 0.125, 0.043478260869565216], 'brevity_penalty': 1.0, 'length_ratio': 1.625, 'translation_length': 26, 'reference_length': 16} Rouge: {'rouge1': 0.5263157894736842, 'rouge2': 0.3888888888888889, 'rougeL': 0.4736842105263159, 'rougeLsum': 0.4736842105263159} Sari: {'sari': 26.045865054485738} Flesh Reading Ease: 78.7 ---------------------------------------- Source: ['Und endlich kamen auch die Bewohner der flacheren Regionen auf ihre Kosten.'] Prediction: ['Die Bewohner der flacheren Regionen kamen auf ihre Kosten.\nDie Bewohner der flacheren Regionen kamen auf ihre Kosten.'] Label: [['Da kamen auch die Bewohner der flacheren Regionen auf ihre Kosten.']] Sacrebleu: {'score': 24.688498672025876, 'counts': [9, 6, 4, 2], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 31.57894736842105, 22.22222222222222, 11.764705882352942], 'bp': 1.0, 'sys_len': 20, 'ref_len': 12} Bleu: {'bleu': 0.24688498672025874, 'precisions': [0.45, 0.3157894736842105, 0.2222222222222222, 0.11764705882352941], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 20, 'reference_length': 12} Rouge: {'rouge1': 0.6206896551724137, 'rouge2': 0.4444444444444445, 'rougeL': 0.6206896551724137, 'rougeLsum': 0.5517241379310345} Sari: {'sari': 39.344707580001696} Flesh Reading Ease: 48.15 ---------------------------------------- Source: ['Doch wenn es keine steilen Skipisten gibt, kann man sich trotzdem auf Skier stellen:'] Prediction: ['Die Schweizer Skier-Tour ist nicht mehr geworden.\nDoch wenn es keine steilen Skipisten gibt, kann man sich trotzdem auf Skier stellen.'] Label: [['Doch auch ohne steile Skipisten kann man sich auf Skier stellen:']] Sacrebleu: {'score': 10.583814787289993, 'counts': [8, 4, 2, 0], 'totals': [24, 23, 22, 21], 'precisions': [33.333333333333336, 17.391304347826086, 9.090909090909092, 2.380952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.17391304347826086, 0.09090909090909091, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 24, 'reference_length': 12} Rouge: {'rouge1': 0.4848484848484849, 'rouge2': 0.25806451612903225, 'rougeL': 0.4848484848484849, 'rougeLsum': 0.4848484848484849} Sari: {'sari': 11.147660818713451} Flesh Reading Ease: 75.9 ---------------------------------------- Source: ['Skilanglauf ist schon seit vielen Jahren „in“ und ideal, um fit zu bleiben oder zu werden.'] Prediction: ['Skilanglauf ist schon seit vielen Jahren "in“ und ideal, um fit zu bleiben oder zu werden.\nDer Skilanglauf-Profi ist seit vielen Jahren "in“ und ideal, um fit zu bleiben oder zu werden.'] Label: [['Skilanglauf ist schon seit vielen Jahren „in“.\nLanglauf ist ideal, um fit zu bleiben oder zu werden.']] Sacrebleu: {'score': 36.14568672646885, 'counts': [18, 14, 12, 10], 'totals': [38, 37, 36, 35], 'precisions': [47.36842105263158, 37.83783783783784, 33.333333333333336, 28.571428571428573], 'bp': 1.0, 'sys_len': 38, 'ref_len': 20} Bleu: {'bleu': 0.36145686726468845, 'precisions': [0.47368421052631576, 0.3783783783783784, 0.3333333333333333, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 38, 'reference_length': 20} Rouge: {'rouge1': 0.64, 'rouge2': 0.5416666666666666, 'rougeL': 0.64, 'rougeLsum': 0.64} Sari: {'sari': 46.84585391777173} Flesh Reading Ease: 76.25 ---------------------------------------- Source: ['Das Laufen ist dennoch sehr anstrengend, aber es macht fit.'] Prediction: ['Das Laufen ist sehr anstrengend, aber es macht fit.\nDas Laufen ist dennoch sehr anstrengend, aber es macht fit.'] Label: [['Das Laufen ist dennoch sehr anstrengend.']] Sacrebleu: {'score': 21.08445456905128, 'counts': [7, 5, 4, 3], 'totals': [23, 22, 21, 20], 'precisions': [30.434782608695652, 22.727272727272727, 19.047619047619047, 15.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 7} Bleu: {'bleu': 0.2108445456905127, 'precisions': [0.30434782608695654, 0.22727272727272727, 0.19047619047619047, 0.15], 'brevity_penalty': 1.0, 'length_ratio': 3.2857142857142856, 'translation_length': 23, 'reference_length': 7} Rouge: {'rouge1': 0.4799999999999999, 'rouge2': 0.4347826086956522, 'rougeL': 0.4799999999999999, 'rougeLsum': 0.4799999999999999} Sari: {'sari': 61.94392230576441} Flesh Reading Ease: 88.6 ---------------------------------------- Source: ['Kitesurfen im Sommer und Snowkiten im Winter – ein Trend, der sich auch in den letzten Jahren durchgesetzt hat.'] Prediction: ['Kitesurfen im Sommer und Snowkiten im Winter sind ein Trend, der sich auch in den letzten Jahren durchgesetzt hat.\nDas ist ein Trend, der sich auch in den letzten Jahren durchgesetzt hat.'] Label: [['Kitesurfen im Sommer und Snowkiten im Winter – das ist ein weiterer Trend.']] Sacrebleu: {'score': 18.16725573641283, 'counts': [11, 7, 5, 4], 'totals': [36, 35, 34, 33], 'precisions': [30.555555555555557, 20.0, 14.705882352941176, 12.121212121212121], 'bp': 1.0, 'sys_len': 36, 'ref_len': 14} Bleu: {'bleu': 0.1816725573641283, 'precisions': [0.3055555555555556, 0.2, 0.14705882352941177, 0.12121212121212122], 'brevity_penalty': 1.0, 'length_ratio': 2.5714285714285716, 'translation_length': 36, 'reference_length': 14} Rouge: {'rouge1': 0.5, 'rouge2': 0.38095238095238093, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 42.327094226520565} Flesh Reading Ease: 76.25 ---------------------------------------- Source: ['Allerdings sind hier eher die mutigen Sportler am Start.'] Prediction: ['Am Start von den Schweizer Nationalmannschaftler sind sich am Start.\nDie mutigen Sportler sind am Start.'] Label: [['Allerdings ist das eher für die mutigen Sportler.']] Sacrebleu: {'score': 4.753622060013117, 'counts': [3, 1, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [16.666666666666668, 5.882352941176471, 3.125, 1.6666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.058823529411764705, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 18, 'reference_length': 9} Rouge: {'rouge1': 0.24000000000000005, 'rouge2': 0.1739130434782609, 'rougeL': 0.24000000000000005, 'rougeLsum': 0.24000000000000005} Sari: {'sari': 52.35042735042734} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Neben den Rodlern auf ihren Schlitten sieht man häufig Menschen in dicken Gummireifen – neudeutsch „Snowtubing“!'] Prediction: ['Im Video-Datum "Snowtubing" sieht man in dicken Gummireifen.\nIm Text handelt es sich um den Rücktritt der Menschen, die sich in dicken Gummireifen sind.\nIm Text handelt es sich um den Rücktritt der Menschen, die sich in dicken Gummireifen sieht.'] Label: [['Neben den Rodlern auf ihren Schlitten sieht man häufig Menschen in dicken Gummireifen, man sagt auch „Snowtubing“ dazu.']] Sacrebleu: {'score': 4.214084329284785, 'counts': [9, 3, 1, 0], 'totals': [47, 46, 45, 44], 'precisions': [19.148936170212767, 6.521739130434782, 2.2222222222222223, 1.1363636363636365], 'bp': 1.0, 'sys_len': 47, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.19148936170212766, 0.06521739130434782, 0.022222222222222223, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.35, 'translation_length': 47, 'reference_length': 20} Rouge: {'rouge1': 0.25806451612903225, 'rouge2': 0.1, 'rougeL': 0.19354838709677416, 'rougeLsum': 0.22580645161290322} Sari: {'sari': 21.770451770451775} Flesh Reading Ease: 73.1 ---------------------------------------- Source: ['Auch Hundeschlittentouren wie in Alaska sind im Wintersportangebot.'] Prediction: ['In Alaska sind auch Hundeschlittentouren wie in Alaska.\nDie Hundeschlittentouren sind im Wintersportangebot.'] Label: [['Und auch Hundeschlittentouren wie in Alaska werden angeboten.']] Sacrebleu: {'score': 25.748661016289674, 'counts': [6, 4, 3, 2], 'totals': [15, 14, 13, 12], 'precisions': [40.0, 28.571428571428573, 23.076923076923077, 16.666666666666668], 'bp': 1.0, 'sys_len': 15, 'ref_len': 9} Bleu: {'bleu': 0.25748661016289676, 'precisions': [0.4, 0.2857142857142857, 0.23076923076923078, 0.16666666666666666], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 15, 'reference_length': 9} Rouge: {'rouge1': 0.4761904761904762, 'rouge2': 0.4210526315789474, 'rougeL': 0.4761904761904762, 'rougeLsum': 0.4761904761904762} Sari: {'sari': 57.777777777777786} Flesh Reading Ease: 38.95 ---------------------------------------- Source: ['Inzwischen gibt es sechs Skihallen in Deutschland – mit allem Drum und Dran wie Lift und Skihütten.'] Prediction: ['In Deutschland gibt es sechs Skihallen.\nMit allem Drum und Dran wie Lift und Skihütten gibt es sechs Skihallen.'] Label: [['Inzwischen gibt es in Deutschland sechs Skihallen.']] Sacrebleu: {'score': 8.896962872669691, 'counts': [6, 3, 1, 0], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 15.0, 5.2631578947368425, 2.7777777777777777], 'bp': 1.0, 'sys_len': 21, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.15, 0.05263157894736842, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.625, 'translation_length': 21, 'reference_length': 8} Rouge: {'rouge1': 0.4444444444444444, 'rouge2': 0.23999999999999996, 'rougeL': 0.29629629629629634, 'rougeLsum': 0.29629629629629634} Sari: {'sari': 46.61016218081435} Flesh Reading Ease: 82.75 ---------------------------------------- Source: ['Hier kann man das ganze Jahr zumindest rodeln, Skifahren oder Snowboarden und sich für den nächsten Winter fit machen.'] Prediction: ['Das nächste Winter ist nicht mehr nach der Trennung.\nDas ist das ganze Jahr zumindest zumindest rodeln, Skifahren oder Snowboarden.\nDas hat das nächste Jahr zumindest zumindest zumindest zumindest fit machen.'] Label: [['Hier kann man das ganze Jahr zumindest rodeln, Skifahren oder Snowboarden.']] Sacrebleu: {'score': 22.375611789845944, 'counts': [10, 9, 7, 5], 'totals': [35, 34, 33, 32], 'precisions': [28.571428571428573, 26.470588235294116, 21.21212121212121, 15.625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 13} Bleu: {'bleu': 0.2237561178984595, 'precisions': [0.2857142857142857, 0.2647058823529412, 0.21212121212121213, 0.15625], 'brevity_penalty': 1.0, 'length_ratio': 2.6923076923076925, 'translation_length': 35, 'reference_length': 13} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.3333333333333333, 'rougeL': 0.36363636363636365, 'rougeLsum': 0.36363636363636365} Sari: {'sari': 47.84295820101041} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Kurz vor der Fastenzeit wird im Karneval ausgelassen gefeiert.'] Prediction: ['Im Karneval wird derzeit ausgelassen.\nDie Fastenzeit wird im Karneval ausgelassen.\nDie Fahrt wird ausgelassen.'] Label: [['Im Karneval wird ausgelassen gefeiert.']] Sacrebleu: {'score': 10.052686727030013, 'counts': [5, 3, 1, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 17.647058823529413, 6.25, 3.3333333333333335], 'bp': 1.0, 'sys_len': 18, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.17647058823529413, 0.0625, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 18, 'reference_length': 6} Rouge: {'rouge1': 0.4, 'rouge2': 0.3333333333333333, 'rougeL': 0.4, 'rougeLsum': 0.4} Sari: {'sari': 39.71681096681097} Flesh Reading Ease: 52.15 ---------------------------------------- Source: ['Mit Spiel und Tanz, Umzügen, Sitzungen und Kostümen wird die Regierung verspottet.'] Prediction: ['Die Regierung verspottet die Corona-Regierung.\nMit Spiel und Tanz, Umzügen, Sitzungen und Kostümen wird die Regierung verspottet.'] Label: [['Mit Spiel und Tanz, Umzügen, Sitzungen und Kostümen werden die Politiker verspottet.']] Sacrebleu: {'score': 47.44757224228201, 'counts': [13, 10, 8, 7], 'totals': [21, 20, 19, 18], 'precisions': [61.904761904761905, 50.0, 42.10526315789474, 38.888888888888886], 'bp': 1.0, 'sys_len': 21, 'ref_len': 15} Bleu: {'bleu': 0.4744757224228198, 'precisions': [0.6190476190476191, 0.5, 0.42105263157894735, 0.3888888888888889], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 21, 'reference_length': 15} Rouge: {'rouge1': 0.7058823529411764, 'rouge2': 0.5625, 'rougeL': 0.7058823529411764, 'rougeLsum': 0.7058823529411764} Sari: {'sari': 60.406223893066} Flesh Reading Ease: 42.8 ---------------------------------------- Source: ['Karneval vereint die Menschen, denn es schafft Geselligkeit durch gemeinsames Singen und Tanzen.'] Prediction: ['Die Menschen in der Schweiz sind sich geworden.\nDie Menschen sind sich dabei, dass es schafft, dass sie sich in Singen und Tanzen schaffen.'] Label: [['Karneval vereint die Menschen, es bedeutet fröhliches Zusammensein.']] Sacrebleu: {'score': 1.8884748972625875, 'counts': [4, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.8, 'translation_length': 28, 'reference_length': 10} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.06451612903225806, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 31.875000000000004} Flesh Reading Ease: 91.95 ---------------------------------------- Source: ['Beim Verkleiden kann man in eine andere Rolle schlüpfen.'] Prediction: ['Beim Verkleiden kann man in eine andere Rolle schlüpfen.\nDer Verkehrsgericht verursachte eine andere Rolle.\nDer Verkehrsgericht vermutet, dass man in eine andere Rolle schlüpfen kann.'] Label: [['Mit einem Kostüm kann man sogar in eine andere Rolle schlüpfen – für ein paar Stunden oder Tage.']] Sacrebleu: {'score': 13.821098063724328, 'counts': [8, 5, 3, 2], 'totals': [30, 29, 28, 27], 'precisions': [26.666666666666668, 17.24137931034483, 10.714285714285714, 7.407407407407407], 'bp': 1.0, 'sys_len': 30, 'ref_len': 19} Bleu: {'bleu': 0.13821098063724324, 'precisions': [0.26666666666666666, 0.1724137931034483, 0.10714285714285714, 0.07407407407407407], 'brevity_penalty': 1.0, 'length_ratio': 1.5789473684210527, 'translation_length': 30, 'reference_length': 19} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.2608695652173913, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 54.942279942279946} Flesh Reading Ease: 54.3 ---------------------------------------- Source: ['In der neuen Rolle zeigt man sich anders und sieht auch andere anders – ein Perspektivwechsel findet statt - wenn auch nur für ein paar Tage.'] Prediction: ['In der neuen Rolle zeigt man sich anders und sieht auch andere anders.\nEin Perspektivwechsel findet statt.\nDas ist nicht bekannt, sondern auch nur für ein paar Tage.'] Label: [['In der neuen Rolle zeigt man sich anders und sieht auch andere anders.']] Sacrebleu: {'score': 40.846382376535125, 'counts': [14, 13, 12, 11], 'totals': [32, 31, 30, 29], 'precisions': [43.75, 41.935483870967744, 40.0, 37.93103448275862], 'bp': 1.0, 'sys_len': 32, 'ref_len': 14} Bleu: {'bleu': 0.4084638237653514, 'precisions': [0.4375, 0.41935483870967744, 0.4, 0.3793103448275862], 'brevity_penalty': 1.0, 'length_ratio': 2.2857142857142856, 'translation_length': 32, 'reference_length': 14} Rouge: {'rouge1': 0.6190476190476191, 'rouge2': 0.6, 'rougeL': 0.6190476190476191, 'rougeLsum': 0.6190476190476191} Sari: {'sari': 62.50966452201655} Flesh Reading Ease: 82.95 ---------------------------------------- Source: ['Wolfgang Oelsner, Psychotherapeut und Karnevalsexperte, erklärt, dass sich die Menschen nach Exotik, nach Wandel sehnen.'] Prediction: ['Die Menschen in der Schweiz sind nach Exotik, nach Wandel sehnen.\nDas zeigt eine Psychotherapeut und Karnevalsexperte.\nDie Menschen sind nach Exotik, nach Wandel sehnen.'] Label: [['Wolfgang Oelsner, Psychotherapeut und Karnevalsexperte, erklärt, dass sich die Menschen nach Wandel sehnen.']] Sacrebleu: {'score': 12.288887055424896, 'counts': [10, 5, 3, 1], 'totals': [30, 29, 28, 27], 'precisions': [33.333333333333336, 17.24137931034483, 10.714285714285714, 3.7037037037037037], 'bp': 1.0, 'sys_len': 30, 'ref_len': 17} Bleu: {'bleu': 0.12288887055424895, 'precisions': [0.3333333333333333, 0.1724137931034483, 0.10714285714285714, 0.037037037037037035], 'brevity_penalty': 1.0, 'length_ratio': 1.7647058823529411, 'translation_length': 30, 'reference_length': 17} Rouge: {'rouge1': 0.41025641025641024, 'rouge2': 0.2702702702702703, 'rougeL': 0.41025641025641024, 'rougeLsum': 0.41025641025641024} Sari: {'sari': 15.683354133575374} Flesh Reading Ease: 72.25 ---------------------------------------- Source: ['Als Cowboy oder Prinzessin verkleidet erlebt man diesen Perspektivwechsel.'] Prediction: ['Der Schweizer Cowboy hat seine Perspektivwechsel verkleidet.\nAls er verkleidet er, wurde er von der Perspektivwechsel verkleidet.'] Label: [['Als Cowboy oder Prinzessin verkleidet erlebt man einen Perspektivwechsel.']] Sacrebleu: {'score': 2.862999365766888, 'counts': [5, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [25.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 20, 'reference_length': 10} Rouge: {'rouge1': 0.30769230769230765, 'rouge2': 0.0, 'rougeL': 0.23076923076923078, 'rougeLsum': 0.30769230769230765} Sari: {'sari': 16.167328042328045} Flesh Reading Ease: 48.65 ---------------------------------------- Source: ['Die gewohnte Ordnung werde aufgelöst, aber innerhalb bestimmter Spielregeln.'] Prediction: ['Die gewohnte Ordnung der Spieler wird aufgelöst.\nDas wird innerhalb bestimmter Spielregeln gewohnt.'] Label: [['Die gewohnte Ordnung werde aufgelöst.']] Sacrebleu: {'score': 12.30068628846377, 'counts': [5, 3, 1, 0], 'totals': [15, 14, 13, 12], 'precisions': [33.333333333333336, 21.428571428571427, 7.6923076923076925, 4.166666666666667], 'bp': 1.0, 'sys_len': 15, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.21428571428571427, 0.07692307692307693, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 15, 'reference_length': 6} Rouge: {'rouge1': 0.5, 'rouge2': 0.33333333333333337, 'rougeL': 0.5, 'rougeLsum': 0.5} Sari: {'sari': 38.28102453102453} Flesh Reading Ease: 56.5 ---------------------------------------- Source: ['Es zählt nicht, was man normalerweise ist oder verdient.'] Prediction: ['Der Schweizer warnt vor einem Jahr 2020 mit einem grossen Verlust.\nEr wurde von der Schweiz verdient.\nNun ist erstmals nicht mehr gekommen, was man normalerweise ist oder verdient ist.'] Label: [['Es ist nicht wichtig, wer man im Alltag ist oder wie viel Geld man verdient.']] Sacrebleu: {'score': 3.6612667086152575, 'counts': [8, 2, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 6.0606060606060606, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.23529411764705882, 0.06060606060606061, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 34, 'reference_length': 17} Rouge: {'rouge1': 0.26666666666666666, 'rouge2': 0.046511627906976744, 'rougeL': 0.26666666666666666, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 39.733115468409586} Flesh Reading Ease: 82.25 ---------------------------------------- Source: ['Heute ist Karneval in Städten wie Köln oder Düsseldorf eine einzige Party, und die Kostüme und Masken richten sich nach Filmhits aus Hollywood oder politischer Aktualität.'] Prediction: ['Die Karneval-Party in Städten wie Köln oder Düsseldorf ist eine einzige Party.\nDie Kostüme und Masken richten sich nach Filmhits aus Hollywood oder politischer Aktualität.\nDie Kostüme und Masken richten sich nach Filmhits aus Hollywood oder politischer Aktualität.'] Label: [['Heute ist Karneval in Städten wie Köln oder Düsseldorf eine einzige Party.\nDie Kostüme und Masken orientieren sich oft an Filmhits aus Hollywood.']] Sacrebleu: {'score': 31.73124869958418, 'counts': [20, 14, 11, 8], 'totals': [41, 40, 39, 38], 'precisions': [48.78048780487805, 35.0, 28.205128205128204, 21.05263157894737], 'bp': 1.0, 'sys_len': 41, 'ref_len': 25} Bleu: {'bleu': 0.3173124869958419, 'precisions': [0.4878048780487805, 0.35, 0.28205128205128205, 0.21052631578947367], 'brevity_penalty': 1.0, 'length_ratio': 1.64, 'translation_length': 41, 'reference_length': 25} Rouge: {'rouge1': 0.6301369863013698, 'rouge2': 0.4788732394366198, 'rougeL': 0.6027397260273973, 'rougeLsum': 0.6027397260273973} Sari: {'sari': 41.40274075534005} Flesh Reading Ease: 44.45 ---------------------------------------- Source: ['Besonders beliebt sollen Kostüme der Könige aus der Fantasy-Serie „Game of Thrones“ sein. Der allerneueste Trend aber sind Faschingskostüme mit LED-Beleuchtung.'] Prediction: ['Die Könige aus "Game of Thrones" sind mit Faschingskostüme mit LED-Beleuchtung.\nDas ist die erste Trend in der Serie.\nDie Kostüme der Könige sind besonders beliebt.'] Label: [['Besonders beliebt sind Kostüme der Könige aus der Fantasy-Serie „Game of Thrones“ und Kostüme mit LED-Beleuchtung.']] Sacrebleu: {'score': 9.23806317622409, 'counts': [11, 5, 2, 0], 'totals': [31, 30, 29, 28], 'precisions': [35.483870967741936, 16.666666666666668, 6.896551724137931, 1.7857142857142858], 'bp': 1.0, 'sys_len': 31, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.3548387096774194, 0.16666666666666666, 0.06896551724137931, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8235294117647058, 'translation_length': 31, 'reference_length': 17} Rouge: {'rouge1': 0.6923076923076923, 'rouge2': 0.43999999999999995, 'rougeL': 0.3846153846153846, 'rougeLsum': 0.5769230769230769} Sari: {'sari': 36.263955342902705} Flesh Reading Ease: 66.0 ---------------------------------------- Source: ['Über 80 Prozent aller Einwohner in Deutschland besitzen also ein Zweirad.'] Prediction: ['Die Schweiz hat einen Zweirad für die Schweiz.\n80 Prozent aller Einwohner in Deutschland besitzen also ein Zweirad.'] Label: [['So haben über 80 Prozent aller Einwohner in Deutschland ein Zweirad.']] Sacrebleu: {'score': 30.024908760987614, 'counts': [9, 7, 5, 3], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 36.8421052631579, 27.77777777777778, 17.647058823529413], 'bp': 1.0, 'sys_len': 20, 'ref_len': 12} Bleu: {'bleu': 0.3002490876098761, 'precisions': [0.45, 0.3684210526315789, 0.2777777777777778, 0.17647058823529413], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 20, 'reference_length': 12} Rouge: {'rouge1': 0.5333333333333333, 'rouge2': 0.42857142857142855, 'rougeL': 0.5333333333333333, 'rougeLsum': 0.5333333333333333} Sari: {'sari': 23.346560846560845} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Damit ist das Fahrrad beliebter als das Auto – wer hätte das gedacht im Autoland Deutschland.'] Prediction: ['Im Autoland Deutschland ist das Fahrrad beliebter als das Auto.\nDamit ist das Fahrrad beliebter als das Auto.'] Label: [['Damit ist das Fahrrad beliebter als das Auto.']] Sacrebleu: {'score': 40.1577332834242, 'counts': [9, 8, 7, 6], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 42.10526315789474, 38.888888888888886, 35.294117647058826], 'bp': 1.0, 'sys_len': 20, 'ref_len': 9} Bleu: {'bleu': 0.40157733283424196, 'precisions': [0.45, 0.42105263157894735, 0.3888888888888889, 0.35294117647058826], 'brevity_penalty': 1.0, 'length_ratio': 2.2222222222222223, 'translation_length': 20, 'reference_length': 9} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.5833333333333334, 'rougeL': 0.6153846153846153, 'rougeLsum': 0.6153846153846153} Sari: {'sari': 80.85699023199024} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Ein erstes Modell erfand im Jahr 1817 der Mannheimer Forstbeamte Karl Freiherr von Drais.'] Prediction: ['Der Mannheimer Forstbeamte Karl Freiherr von Drais hat ein Modell erfasst.\nDer Mannheimer Forstbeamte hatte seinen ersten Modell erfasst.'] Label: [['Ein erstes Modell erfand im Jahr 1817 Karl Freiherr von Drais aus Mannheim.']] Sacrebleu: {'score': 12.58220555845937, 'counts': [6, 3, 2, 1], 'totals': [21, 20, 19, 18], 'precisions': [28.571428571428573, 15.0, 10.526315789473685, 5.555555555555555], 'bp': 1.0, 'sys_len': 21, 'ref_len': 14} Bleu: {'bleu': 0.1258220555845937, 'precisions': [0.2857142857142857, 0.15, 0.10526315789473684, 0.05555555555555555], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 21, 'reference_length': 14} Rouge: {'rouge1': 0.37499999999999994, 'rouge2': 0.2, 'rougeL': 0.25, 'rougeLsum': 0.3125} Sari: {'sari': 22.64099326599327} Flesh Reading Ease: 53.5 ---------------------------------------- Source: ['Doch damals war man noch weit entfernt von Pedalen, Ketten oder einer Gangschaltung.'] Prediction: ['Derzeit war man in der Schweiz zu mehreren Täter entfernt.\nDas war man noch weit entfernt.'] Label: [['Doch damals gab es noch keine Pedale, Ketten oder eine Gangschaltung.']] Sacrebleu: {'score': 2.5540496664715904, 'counts': [2, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [11.11111111111111, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3846153846153846, 'translation_length': 18, 'reference_length': 13} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 25.992063492063494} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['Das Rad von Karl Drais war ein Laufrad aus Holz, auch Draisine genannt nach seinem Erfinder.'] Prediction: ['Karl Drais ist ein Laufrad aus Holz.\nDer Rad von Karl Drais war ein Laufrad aus Holz.\nDas Rad war ein Laufrad aus Holz.'] Label: [['Das Rad von Karl Drais war ein Laufrad aus Holz.']] Sacrebleu: {'score': 34.775476333824344, 'counts': [11, 10, 8, 7], 'totals': [27, 26, 25, 24], 'precisions': [40.74074074074074, 38.46153846153846, 32.0, 29.166666666666668], 'bp': 1.0, 'sys_len': 27, 'ref_len': 11} Bleu: {'bleu': 0.34775476333824323, 'precisions': [0.4074074074074074, 0.38461538461538464, 0.32, 0.2916666666666667], 'brevity_penalty': 1.0, 'length_ratio': 2.4545454545454546, 'translation_length': 27, 'reference_length': 11} Rouge: {'rouge1': 0.5882352941176471, 'rouge2': 0.5625, 'rougeL': 0.5294117647058825, 'rougeLsum': 0.5882352941176471} Sari: {'sari': 68.28093203093204} Flesh Reading Ease: 101.8 ---------------------------------------- Source: ['Fahrräder schonen die Umwelt, denn sie verpesten nicht die Luft mit Abgasen und schädigen nicht durch Lärm.'] Prediction: ['Fahrräder schädigen nicht durch Lärm.\nDas ist nicht das erste Mal, sondern auch das erste Mal.\nDas ist nicht das erste Mal, denn die Umwelt schädigen nicht durch Lärm.'] Label: [['Fahrräder schonen die Umwelt, denn sie verschmutzen die Luft nicht mit Abgasen.']] Sacrebleu: {'score': 3.5410607693940146, 'counts': [7, 2, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 6.0606060606060606, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.20588235294117646, 0.06060606060606061, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 34, 'reference_length': 14} Rouge: {'rouge1': 0.25531914893617025, 'rouge2': 0.08888888888888888, 'rougeL': 0.21276595744680854, 'rougeLsum': 0.21276595744680854} Sari: {'sari': 24.848782555093234} Flesh Reading Ease: 88.4 ---------------------------------------- Source: ['Experten schätzen, dass in den großen Städten bis zu 30 Prozent der Fahrten mit dem Auto auf den Radverkehr umgestellt werden könnten.'] Prediction: ['In den großen Städten könnten bis zu 30 Prozent der Fahrten mit dem Auto auf den Radverkehr umgestellt werden.\nExperten schätzen, dass in den großen Städten bis zu 30 Prozent der Fahrten mit dem Auto auf den Radverkehr umgestellt werden könnten.'] Label: [['Experten schätzen: In den großen Städten kann man bis zu 30 Prozent der Fahrten mit dem Rad anstatt mit dem Auto erledigen.']] Sacrebleu: {'score': 24.95535972635078, 'counts': [18, 13, 9, 6], 'totals': [44, 43, 42, 41], 'precisions': [40.90909090909091, 30.232558139534884, 21.428571428571427, 14.634146341463415], 'bp': 1.0, 'sys_len': 44, 'ref_len': 24} Bleu: {'bleu': 0.24955359726350776, 'precisions': [0.4090909090909091, 0.3023255813953488, 0.21428571428571427, 0.14634146341463414], 'brevity_penalty': 1.0, 'length_ratio': 1.8333333333333333, 'translation_length': 44, 'reference_length': 24} Rouge: {'rouge1': 0.547945205479452, 'rouge2': 0.4507042253521127, 'rougeL': 0.4931506849315069, 'rougeLsum': 0.4931506849315069} Sari: {'sari': 54.29998913869881} Flesh Reading Ease: 65.9 ---------------------------------------- Source: ['Wer also mit dem Auto zur Arbeit fährt und wieder nach Hause, spart bei zehn Kilometern täglich jedes Jahr rund 350 Kilogramm CO2-Emissionen.'] Prediction: ['Wer mit dem Auto zur Arbeit fährt und wieder nach Hause, spart bei zehn Kilometern täglich jedes Jahr rund 350 Kilogramm CO2-Emissionen.\nDas Auto spart bei zehn Kilometern täglich jedes Jahr rund 350 Kilogramm CO2-Emissionen.'] Label: [['Wer jeden Tag mit dem Auto zur Arbeit fährt und wieder nach Hause, spart bei zehn Kilometern täglich jedes Jahr rund 350 Kilogramm CO2-Emissionen.']] Sacrebleu: {'score': 58.552351359636695, 'counts': [26, 24, 23, 22], 'totals': [42, 41, 40, 39], 'precisions': [61.904761904761905, 58.53658536585366, 57.5, 56.41025641025641], 'bp': 1.0, 'sys_len': 42, 'ref_len': 28} Bleu: {'bleu': 0.5855235135963667, 'precisions': [0.6190476190476191, 0.5853658536585366, 0.575, 0.5641025641025641], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 42, 'reference_length': 28} Rouge: {'rouge1': 0.7462686567164178, 'rouge2': 0.7076923076923076, 'rougeL': 0.7462686567164178, 'rougeLsum': 0.7462686567164178} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 57.2 ---------------------------------------- Source: ['Durch regelmäßiges Radfahren erhöht sich die Lebenserwartung um 3 bis 14 Monate.'] Prediction: ['Durch regelmäßiges Radfahren erhöht sich die Lebenserwartung um 3 bis 14 Monate.\nDie Lebenserwartung erhöht sich um 3 bis 14 Monate.'] Label: [['Regelmäßiges Radfahren erhöht die Lebenserwartung um 3 bis 14 Monate.']] Sacrebleu: {'score': 32.59889346257789, 'counts': [10, 8, 6, 5], 'totals': [23, 22, 21, 20], 'precisions': [43.47826086956522, 36.36363636363637, 28.571428571428573, 25.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 11} Bleu: {'bleu': 0.3259889346257788, 'precisions': [0.43478260869565216, 0.36363636363636365, 0.2857142857142857, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 2.090909090909091, 'translation_length': 23, 'reference_length': 11} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.5882352941176471, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.6666666666666666} Sari: {'sari': 68.48544973544973} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['Nur rund fünf Zentimeter groß, ohne Schwanz, und 15 bis 35 Gramm schwer ist die kleine Haselmaus.'] Prediction: ['Nur fünf Zentimeter groß, ohne Schwanz, und 15 bis 35 Gramm schwer ist die kleine Haselmaus.\nDie kleine Haselmaus ist nur fünf Zentimeter groß, ohne Schwanz, und 15 bis 35 Gramm schwer.'] Label: [['Die Haselmaus ist ohne Schwanz nur fünf Zentimeter groß und 15 bis 35 Gramm schwer.']] Sacrebleu: {'score': 24.283216483861978, 'counts': [16, 11, 7, 5], 'totals': [38, 37, 36, 35], 'precisions': [42.10526315789474, 29.72972972972973, 19.444444444444443, 14.285714285714286], 'bp': 1.0, 'sys_len': 38, 'ref_len': 16} Bleu: {'bleu': 0.24283216483861972, 'precisions': [0.42105263157894735, 0.2972972972972973, 0.19444444444444445, 0.14285714285714285], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 38, 'reference_length': 16} Rouge: {'rouge1': 0.6399999999999999, 'rouge2': 0.45833333333333326, 'rougeL': 0.56, 'rougeLsum': 0.56} Sari: {'sari': 69.593554965846} Flesh Reading Ease: 82.1 ---------------------------------------- Source: ['Sie schläft den ganzen Winter über und ist meistens nachts unterwegs, um Nüsse, Beeren, Samen und Insekten zu fressen.'] Prediction: ['Die Schweizerin hat sich am Sonntag über ihre ganzen Winter geschlagen.\nSie schlägt den ganzen Winter über und ist meistens nachts unterwegs, um Nüsse, Beeren, Samen und Insekten zu fressen.'] Label: [['Sie ist meistens nachts unterwegs, um Nüsse, Beeren, Samen und Insekten zu fressen.']] Sacrebleu: {'score': 43.83794346185183, 'counts': [17, 15, 14, 13], 'totals': [35, 34, 33, 32], 'precisions': [48.57142857142857, 44.11764705882353, 42.42424242424242, 40.625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 17} Bleu: {'bleu': 0.4383794346185184, 'precisions': [0.4857142857142857, 0.4411764705882353, 0.42424242424242425, 0.40625], 'brevity_penalty': 1.0, 'length_ratio': 2.0588235294117645, 'translation_length': 35, 'reference_length': 17} Rouge: {'rouge1': 0.6086956521739131, 'rouge2': 0.5454545454545454, 'rougeL': 0.6086956521739131, 'rougeLsum': 0.6086956521739131} Sari: {'sari': 61.750075206984214} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Da sehr viel natürlicher Lebensraum zerstört ist, etwa durch Gebäude, ist die Haselmaus bedroht.'] Prediction: ['Der Haselmaus ist sehr viel natürlicher Lebensraum zerstört.\nDas ist durch Gebäude bedroht.\nEs ist die Haselmaus bedroht.'] Label: [['Ihr natürlicher Lebensraum ist häufig zerstört, etwa durch Gebäude.']] Sacrebleu: {'score': 5.908002399935303, 'counts': [7, 2, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [33.333333333333336, 10.0, 2.6315789473684212, 1.3888888888888888], 'bp': 1.0, 'sys_len': 21, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.1, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9090909090909092, 'translation_length': 21, 'reference_length': 11} Rouge: {'rouge1': 0.5294117647058824, 'rouge2': 0.3125, 'rougeL': 0.47058823529411764, 'rougeLsum': 0.5294117647058824} Sari: {'sari': 31.98626909153225} Flesh Reading Ease: 68.7 ---------------------------------------- Source: ['Den Waldkauz sieht man kaum, aber man kann ihn hören und erkennt ihn sofort.'] Prediction: ['Ein Waldkauz sieht man kaum, aber man kann ihn hören und erkennt ihn sofort sofort.\nDas hatte der Waldkauz in den vergangenen Tagen geschickt.\nDas hatte der Waldkauz in der Nacht auf Sonntag gegeben.'] Label: [['Den Waldkauz sieht man kaum.\nMan kann ihn hören:']] Sacrebleu: {'score': 9.072069007511594, 'counts': [8, 5, 3, 1], 'totals': [38, 37, 36, 35], 'precisions': [21.05263157894737, 13.513513513513514, 8.333333333333334, 2.857142857142857], 'bp': 1.0, 'sys_len': 38, 'ref_len': 11} Bleu: {'bleu': 0.09072069007511598, 'precisions': [0.21052631578947367, 0.13513513513513514, 0.08333333333333333, 0.02857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 3.4545454545454546, 'translation_length': 38, 'reference_length': 11} Rouge: {'rouge1': 0.4444444444444445, 'rouge2': 0.3255813953488372, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.4444444444444445} Sari: {'sari': 34.02738873327109} Flesh Reading Ease: 80.95 ---------------------------------------- Source: ['Mit seinem typischen „Huuh-Hu-Huuh“ ruft er in die Nacht.'] Prediction: ['Ein Mann hat in der Nacht auf Sonntag seinen ehemaligen Tag über seinen neuen Tag geschickt.\nEr ruft in die Nacht und ruft in die Nacht.'] Label: [['Mit seinem „Huuh-Hu-Huuh“ ruft er in die Nacht.']] Sacrebleu: {'score': 8.839374326825924, 'counts': [5, 3, 2, 1], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 11.11111111111111, 7.6923076923076925, 4.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 9} Bleu: {'bleu': 0.08839374326825923, 'precisions': [0.17857142857142858, 0.1111111111111111, 0.07692307692307693, 0.04], 'brevity_penalty': 1.0, 'length_ratio': 3.111111111111111, 'translation_length': 28, 'reference_length': 9} Rouge: {'rouge1': 0.2777777777777778, 'rouge2': 0.11764705882352941, 'rougeL': 0.2222222222222222, 'rougeLsum': 0.2222222222222222} Sari: {'sari': 32.95634920634921} Flesh Reading Ease: 90.95 ---------------------------------------- Source: ['Siedlungs- und Straßenbau bedrohen ihren Lebensraum.'] Prediction: ['In den USA wurden sie in den vergangenen Tagen verletzt.\nSie wurden in den vergangenen Tagen verletzt.\nSie wurden in den vergangenen Tagen bedroht.'] Label: [['Ihr Lebensraum ist durch Wohnsiedlungen und Straßen bedroht.']] Sacrebleu: {'score': 2.775638555723182, 'counts': [2, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [7.407407407407407, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.07407407407407407, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 27, 'reference_length': 9} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 61.590909090909086} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Es wächst auf vielen Wiesen, aber kaum jemand nimmt es wahr.'] Prediction: ['Die Schweizer Wirtschaftler haben sich auf vielen Wiesen geschlossen.\nDas wächst auf vielen Wiesen, aber kaum jemand nimmt es wahr.'] Label: [['Es wächst auf vielen Wiesen, aber man übersieht es schnell.']] Sacrebleu: {'score': 21.800193956058234, 'counts': [8, 5, 4, 3], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 22.727272727272727, 19.047619047619047, 15.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 12} Bleu: {'bleu': 0.21800193956058223, 'precisions': [0.34782608695652173, 0.22727272727272727, 0.19047619047619047, 0.15], 'brevity_penalty': 1.0, 'length_ratio': 1.9166666666666667, 'translation_length': 23, 'reference_length': 12} Rouge: {'rouge1': 0.43749999999999994, 'rouge2': 0.3333333333333333, 'rougeL': 0.43749999999999994, 'rougeLsum': 0.43749999999999994} Sari: {'sari': 19.541765424118367} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Dank seiner Glasfassade erinnert das 110 Meter hohe Gebäude an einen Kristall.'] Prediction: ['Dank seiner Glasfassade erinnert das 110 Meter hohe Gebäude an einen Kristall.\nDas 110 Meter hohe Gebäude erinnert das 110 Meter hohe Gebäude an einen Kristall.'] Label: [['Die Fassade der Elbphilharmonie ist aus Glas und erinnert an einen Kristall.']] Sacrebleu: {'score': 8.839374326825924, 'counts': [5, 3, 2, 1], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 11.11111111111111, 7.6923076923076925, 4.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 13} Bleu: {'bleu': 0.08839374326825923, 'precisions': [0.17857142857142858, 0.1111111111111111, 0.07692307692307693, 0.04], 'brevity_penalty': 1.0, 'length_ratio': 2.1538461538461537, 'translation_length': 28, 'reference_length': 13} Rouge: {'rouge1': 0.1951219512195122, 'rouge2': 0.10256410256410255, 'rougeL': 0.1951219512195122, 'rougeLsum': 0.1951219512195122} Sari: {'sari': 45.375550375550375} Flesh Reading Ease: 61.7 ---------------------------------------- Source: ['Beeindruckend sind auch die Eckdaten der Elbphilharmonie – inzwischen liebevoll „Elphi“ genannt: zwei Konzertsäle, ein Hotel, 45 Luxus-Appartements zu rund 35.000 Euro pro Quadratmeter, ein Parkhaus, 26 Etagen und 120.000 Quadratmeter Nutzfläche.'] Prediction: ['Inzwischen liebevoll "Elphi" sind inzwischen liebevoll die Elbphilharmonie beeindruckend.\nZwei Konzertsäle, ein Hotel, 45 Luxus-Appartements zu rund 35.000 Euro pro Quadratmeter, ein Parkhaus, 26 Etagen und 120.000 Quadratmeter Nutzfläche.'] Label: [['Beeindruckend sind auch die Eckdaten der Elbphilharmonie: zwei Konzertsäle, ein Hotel, 45 Luxus-Appartements, ein Parkhaus, 26 Etagen und 120.000 Quadratmeter Nutzfläche.']] Sacrebleu: {'score': 43.44095290605816, 'counts': [21, 16, 14, 12], 'totals': [37, 36, 35, 34], 'precisions': [56.75675675675676, 44.44444444444444, 40.0, 35.294117647058826], 'bp': 1.0, 'sys_len': 37, 'ref_len': 27} Bleu: {'bleu': 0.4344095290605815, 'precisions': [0.5675675675675675, 0.4444444444444444, 0.4, 0.35294117647058826], 'brevity_penalty': 1.0, 'length_ratio': 1.3703703703703705, 'translation_length': 37, 'reference_length': 27} Rouge: {'rouge1': 0.7457627118644068, 'rouge2': 0.5614035087719298, 'rougeL': 0.711864406779661, 'rougeLsum': 0.711864406779661} Sari: {'sari': 39.943081258571006} Flesh Reading Ease: 38.15 ---------------------------------------- Source: ['Die Bauzeit lag bei zehn Jahren.'] Prediction: ['Die Bauzeit lag bei zehn Jahren.\nDie Bauzeit lag bei zehn Jahren.'] Label: [['Es dauerte zehn Jahre bis das Konzerthaus fertig war.']] Sacrebleu: {'score': 3.377156414337854, 'counts': [2, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [14.285714285714286, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 14, 'reference_length': 10} Rouge: {'rouge1': 0.09523809523809525, 'rouge2': 0.0, 'rougeL': 0.09523809523809525, 'rougeLsum': 0.09523809523809525} Sari: {'sari': 37.03703703703704} Flesh Reading Ease: 97.95 ---------------------------------------- Source: ['Das Herzstück der Elbphilharmonie ist der große Konzertsaal.'] Prediction: ['Im Konzertsaal der Elbphilharmonie ist ein Herzstück der Elbphilharmonie gestorben.\nDas Herzstück der Elbphilharmonie ist der große Konzertsaal.\nDie Elbphilharmonie ist in den letzten Tagen gestorben.'] Label: [['Der wichtigste Raum der Elbphilharmonie ist der große Konzertsaal.']] Sacrebleu: {'score': 19.59280139287723, 'counts': [7, 6, 5, 4], 'totals': [29, 28, 27, 26], 'precisions': [24.137931034482758, 21.428571428571427, 18.51851851851852, 15.384615384615385], 'bp': 1.0, 'sys_len': 29, 'ref_len': 10} Bleu: {'bleu': 0.1959280139287724, 'precisions': [0.2413793103448276, 0.21428571428571427, 0.18518518518518517, 0.15384615384615385], 'brevity_penalty': 1.0, 'length_ratio': 2.9, 'translation_length': 29, 'reference_length': 10} Rouge: {'rouge1': 0.4102564102564103, 'rouge2': 0.3243243243243243, 'rougeL': 0.4102564102564103, 'rougeLsum': 0.358974358974359} Sari: {'sari': 61.23015873015872} Flesh Reading Ease: 48.45 ---------------------------------------- Source: ['Die Orgel ist mitten zwischen den Zuschauern platziert. Ihre 4.765 Pfeifen brauchen daher eine Spezialbeschichtung.'] Prediction: ['Die Orgel ist mitten zwischen den Zuschauern platziert.\n4.765 Pfeifen brauchen eine Spezialbeschichtung.'] Label: [['Die Orgel ist mitten zwischen den Zuschauern platziert und hat 4.765 Orgelpfeifen.']] Sacrebleu: {'score': 50.31747626530137, 'counts': [10, 7, 6, 5], 'totals': [15, 14, 13, 12], 'precisions': [66.66666666666667, 50.0, 46.15384615384615, 41.666666666666664], 'bp': 1.0, 'sys_len': 15, 'ref_len': 13} Bleu: {'bleu': 0.5031747626530138, 'precisions': [0.6666666666666666, 0.5, 0.46153846153846156, 0.4166666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.1538461538461537, 'translation_length': 15, 'reference_length': 13} Rouge: {'rouge1': 0.7407407407407408, 'rouge2': 0.64, 'rougeL': 0.7407407407407408, 'rougeLsum': 0.7407407407407408} Sari: {'sari': 60.45369710543284} Flesh Reading Ease: 50.65 ---------------------------------------- Source: ['Und damit nichts die Konzerterlebnisse stört– kein Tuten der Schiffe, kein Brummen der Dieselmaschinen – wurde der 12.500 Tonnen schwere Saal vom restlichen Gebäude getrennt.'] Prediction: ['Der 12.500 Tonnen schwere Saal wurde vom restlichen Gebäude getrennt.\nDer 12.500 Tonnen schwere Saal wurde vom restlichen Gebäude getrennt.'] Label: [['Der 12.500 Tonnen schwere Saal ist vom restlichen Gebäude getrennt, damit keine Geräusche von außen die Konzerte stören können.']] Sacrebleu: {'score': 27.809355999594505, 'counts': [10, 7, 5, 3], 'totals': [22, 21, 20, 19], 'precisions': [45.45454545454545, 33.333333333333336, 25.0, 15.789473684210526], 'bp': 1.0, 'sys_len': 22, 'ref_len': 21} Bleu: {'bleu': 0.278093559995945, 'precisions': [0.45454545454545453, 0.3333333333333333, 0.25, 0.15789473684210525], 'brevity_penalty': 1.0, 'length_ratio': 1.0476190476190477, 'translation_length': 22, 'reference_length': 21} Rouge: {'rouge1': 0.4489795918367347, 'rouge2': 0.3829787234042554, 'rougeL': 0.4489795918367347, 'rougeLsum': 0.4489795918367347} Sari: {'sari': 60.22964425534019} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Genügend Arbeitsplätze für alle: Das ist die Voraussetzung für nachhaltiges und inklusives Wirtschaftswachstum.'] Prediction: ['Genügend Arbeitsplätze für alle: Das ist die Voraussetzung für nachhaltiges und inklusives Wirtschaftswachstum.\nDas ist die Voraussetzung für nachhaltiges und inklusives Wirtschaftswachstum.'] Label: [['Genügend Arbeitsplätze für alle: Das ist die Voraussetzung für nachhaltiges Wirtschaftswachstum.']] Sacrebleu: {'score': 42.91327815646989, 'counts': [13, 11, 9, 8], 'totals': [25, 24, 23, 22], 'precisions': [52.0, 45.833333333333336, 39.130434782608695, 36.36363636363637], 'bp': 1.0, 'sys_len': 25, 'ref_len': 13} Bleu: {'bleu': 0.42913278156469875, 'precisions': [0.52, 0.4583333333333333, 0.391304347826087, 0.36363636363636365], 'brevity_penalty': 1.0, 'length_ratio': 1.9230769230769231, 'translation_length': 25, 'reference_length': 13} Rouge: {'rouge1': 0.7142857142857143, 'rouge2': 0.65, 'rougeL': 0.7142857142857143, 'rougeLsum': 0.7142857142857143} Sari: {'sari': 70.17715617715618} Flesh Reading Ease: 28.6 ---------------------------------------- Source: ['Nach der Arbeitsmarktprognose 2030 für Deutschland wird es auf dem Arbeitsmarkt große Probleme geben, denn es werden viele Fachkräfte fehlen.'] Prediction: ['Die Prognose 2030 für Deutschland wird auf dem Arbeitsmarkt große Probleme geben.\nEs werden viele Fachkräfte fehlen.'] Label: [['Der demografische Wandel bedeutet für Deutschland große Probleme.\nDenn wenn die jetzigen Fachkräfte im Ruhestand sind, werden viele Fachkräfte fehlen.']] Sacrebleu: {'score': 20.206749398182257, 'counts': [10, 6, 3, 2], 'totals': [19, 18, 17, 16], 'precisions': [52.63157894736842, 33.333333333333336, 17.647058823529413, 12.5], 'bp': 0.8101577349324267, 'sys_len': 19, 'ref_len': 23} Bleu: {'bleu': 0.20206749398182258, 'precisions': [0.5263157894736842, 0.3333333333333333, 0.17647058823529413, 0.125], 'brevity_penalty': 0.8101577349324267, 'length_ratio': 0.8260869565217391, 'translation_length': 19, 'reference_length': 23} Rouge: {'rouge1': 0.5454545454545454, 'rouge2': 0.380952380952381, 'rougeL': 0.5, 'rougeLsum': 0.5454545454545454} Sari: {'sari': 48.85197648355543} Flesh Reading Ease: 60.35 ---------------------------------------- Source: ['In Deutschland könnten daher in den kommenden 15 Jahren 5,8 bis 7,7 Millionen Arbeitskräfte fehlen, zeigt eine Studie der Boston Consulting Group.'] Prediction: ['Deutschland könnte in den kommenden 15 Jahren 5,8 bis 7,7 Millionen Arbeitskräfte fehlen.\nIn den kommenden 15 Jahren könnten 5,8 bis 7,7 Millionen Arbeitskräfte fehlen.'] Label: [['In Deutschland könnten in 15 Jahren 5,8 bis 7,7 Millionen Arbeitskräfte fehlen.\nDas zeigt eine Studie der Boston Consulting Group.']] Sacrebleu: {'score': 32.508335831521066, 'counts': [14, 8, 7, 6], 'totals': [27, 26, 25, 24], 'precisions': [51.851851851851855, 30.76923076923077, 28.0, 25.0], 'bp': 1.0, 'sys_len': 27, 'ref_len': 22} Bleu: {'bleu': 0.32508335831521057, 'precisions': [0.5185185185185185, 0.3076923076923077, 0.28, 0.25], 'brevity_penalty': 1.0, 'length_ratio': 1.2272727272727273, 'translation_length': 27, 'reference_length': 22} Rouge: {'rouge1': 0.5614035087719298, 'rouge2': 0.43636363636363634, 'rougeL': 0.4912280701754386, 'rougeLsum': 0.5614035087719298} Sari: {'sari': 36.71717010205411} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Tatsache ist aber auch: Die Digitalisierung ist nicht mehr aufzuhalten und wird einige Arbeitsplätze kosten.'] Prediction: ['Die Digitalisierung ist nicht mehr aufzuhalten und wird einige Arbeitsplätze kosten.\nDie Digitalisierung ist nicht mehr aufzuhalten und wird einige Arbeitsplätze kosten.'] Label: [['Tatsache ist aber auch: Die Digitalisierung ist nicht mehr aufzuhalten.\nSie wird einige Arbeitsplätze kosten.']] Sacrebleu: {'score': 35.59739463323481, 'counts': [13, 9, 7, 5], 'totals': [24, 23, 22, 21], 'precisions': [54.166666666666664, 39.130434782608695, 31.818181818181817, 23.80952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 18} Bleu: {'bleu': 0.35597394633234813, 'precisions': [0.5416666666666666, 0.391304347826087, 0.3181818181818182, 0.23809523809523808], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 24, 'reference_length': 18} Rouge: {'rouge1': 0.6, 'rouge2': 0.47368421052631576, 'rougeL': 0.6, 'rougeLsum': 0.5499999999999999} Sari: {'sari': 22.563995215311007} Flesh Reading Ease: 34.45 ---------------------------------------- Source: ['Dies ist eines der Ergebnisse einer Prognose von PwC und dem Wifor-Institut.'] Prediction: ['PwC hat eine Prognose von PwC und dem Wifor-Institut.\nDie Prognose ist eines der Ergebnisse einer Prognose von PwC und dem Wifor-Institut.'] Label: [['Dies ist eines der Ergebnisse einer Prognose von PwC und des WifOR-Instituts.']] Sacrebleu: {'score': 33.8796999974464, 'counts': [10, 8, 7, 6], 'totals': [24, 23, 22, 21], 'precisions': [41.666666666666664, 34.78260869565217, 31.818181818181817, 28.571428571428573], 'bp': 1.0, 'sys_len': 24, 'ref_len': 13} Bleu: {'bleu': 0.338796999974464, 'precisions': [0.4166666666666667, 0.34782608695652173, 0.3181818181818182, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.8461538461538463, 'translation_length': 24, 'reference_length': 13} Rouge: {'rouge1': 0.5405405405405406, 'rouge2': 0.4571428571428571, 'rougeL': 0.5405405405405406, 'rougeLsum': 0.5405405405405406} Sari: {'sari': 26.64452495974235} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Und Digitalisierung und Zuwanderung können den demografischen Wandel zwar abschwächen, aber auf lange Sicht nicht ausgleichen.'] Prediction: ['Im demografischen Wandel wird ein Wandel auf lange Sicht nicht ausgleichen.\nDas wird auf lange Sicht nicht ausgleichen.'] Label: [['Digitalisierung und Zuwanderung können den demografischen Wandel zwar abschwächen, aber auf lange Sicht nicht ausgleichen.']] Sacrebleu: {'score': 26.529518334824456, 'counts': [8, 6, 4, 3], 'totals': [20, 19, 18, 17], 'precisions': [40.0, 31.57894736842105, 22.22222222222222, 17.647058823529413], 'bp': 1.0, 'sys_len': 20, 'ref_len': 17} Bleu: {'bleu': 0.26529518334824453, 'precisions': [0.4, 0.3157894736842105, 0.2222222222222222, 0.17647058823529413], 'brevity_penalty': 1.0, 'length_ratio': 1.1764705882352942, 'translation_length': 20, 'reference_length': 17} Rouge: {'rouge1': 0.39999999999999997, 'rouge2': 0.30303030303030304, 'rougeL': 0.39999999999999997, 'rougeLsum': 0.39999999999999997} Sari: {'sari': 18.93816388862828} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Die Analyse zeigt, dass die Digitalisierung ein großes Potential für die Produktivität der Wirtschaft hat.'] Prediction: ['Die Digitalisierung hat ein großes Potential für die Produktivität der Wirtschaft hat.\nDie Analyse zeigt, dass die Digitalisierung ein großes Potential für die Produktivität der Wirtschaft hat.'] Label: [['Die Digitalisierung bietet also große Chancen für den Arbeitsmarkt der Zukunft.']] Sacrebleu: {'score': 3.1221929756173616, 'counts': [5, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [16.666666666666668, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 30, 'reference_length': 12} Rouge: {'rouge1': 0.26086956521739135, 'rouge2': 0.09090909090909091, 'rougeL': 0.26086956521739135, 'rougeLsum': 0.26086956521739135} Sari: {'sari': 38.04935767410413} Flesh Reading Ease: 43.65 ---------------------------------------- Source: ['Aber die Digitalisierung verlangt hohe Qualifikationen.'] Prediction: ['Die Digitalisierung verlangt hohe Qualifikationen.\nAuch die Schweizer Quali-Quali-Entwicklungen sind verlangt.'] Label: [['Die Digitalisierung verlangt hohe Qualifikationen.']] Sacrebleu: {'score': 38.05803001674947, 'counts': [6, 5, 4, 3], 'totals': [13, 12, 11, 10], 'precisions': [46.15384615384615, 41.666666666666664, 36.36363636363637, 30.0], 'bp': 1.0, 'sys_len': 13, 'ref_len': 6} Bleu: {'bleu': 0.38058030016749456, 'precisions': [0.46153846153846156, 0.4166666666666667, 0.36363636363636365, 0.3], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 13, 'reference_length': 6} Rouge: {'rouge1': 0.5555555555555556, 'rouge2': 0.5, 'rougeL': 0.5555555555555556, 'rougeLsum': 0.5555555555555556} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: -1.01 ---------------------------------------- Source: ['Der demografische Wandel bedeutet für Deutschland, dass nur eine gute fundierte Bildung und ein Ausbau der beruflichen Weiterbildung die Zukunft sichert.'] Prediction: ['Die Zukunft für eine gute Fundierte Bildung und ein Ausbau der beruflichen Weiterbildung sichert.\nDer demografische Wandel bedeutet für Deutschland, dass nur eine gute fundierte Bildung und ein Ausbau der beruflichen Weiterbildung die Zukunft sichert.'] Label: [['Der demografische Wandel bedeutet für Deutschland, dass nur eine gute Bildung und ein Ausbau der beruflichen Weiterbildung die Zukunft sichert.']] Sacrebleu: {'score': 51.71569013307547, 'counts': [22, 20, 18, 16], 'totals': [38, 37, 36, 35], 'precisions': [57.89473684210526, 54.054054054054056, 50.0, 45.714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 22} Bleu: {'bleu': 0.5171569013307548, 'precisions': [0.5789473684210527, 0.5405405405405406, 0.5, 0.45714285714285713], 'brevity_penalty': 1.0, 'length_ratio': 1.7272727272727273, 'translation_length': 38, 'reference_length': 22} Rouge: {'rouge1': 0.7241379310344828, 'rouge2': 0.6785714285714285, 'rougeL': 0.7241379310344828, 'rougeLsum': 0.7241379310344828} Sari: {'sari': 72.84242458661062} Flesh Reading Ease: 39.65 ---------------------------------------- Source: ['Die Vereinbarkeit von Familie und Beruf, die bessere berufliche Integration von Migranten sowie die verbesserte Anerkennung von Qualifikationen sind weitere Anforderungen, die Deutschlands Zukunft sichern helfen.'] Prediction: ['Die Vereinbarkeit von Familie und Beruf, die bessere berufliche Integration von Migranten sowie die verbesserte Anerkennung von Qualifikationen sind, sind weitere Anforderungen, die Deutschlands Zukunft sichern helfen.\nDie Vereinbarkeit von Familie und Beruf, die bessere berufliche Integration von Migranten sowie die verbesserte Anerkennung von Qualifikationen sind, sind weitere Anforderungen, die Deutschlands Zukunft sichern helfen.'] Label: [['Familie und Beruf müssen sich vereinbaren lassen, Migranten müssen besser integriert und ihre Qualifikationen anerkannt werden.']] Sacrebleu: {'score': 2.7802976979741234, 'counts': [8, 2, 1, 0], 'totals': [62, 61, 60, 59], 'precisions': [12.903225806451612, 3.278688524590164, 1.6666666666666667, 0.847457627118644], 'bp': 1.0, 'sys_len': 62, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.03278688524590164, 0.016666666666666666, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4444444444444446, 'translation_length': 62, 'reference_length': 18} Rouge: {'rouge1': 0.16666666666666666, 'rouge2': 0.05714285714285715, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.1388888888888889} Sari: {'sari': 38.77235895548773} Flesh Reading Ease: 6.75 ---------------------------------------- Source: ['Der Festtag wurde populär und gelangte nach Europa. Nach Großbritannien und Skandinavien griffen auch die Deutschen die Idee auf.'] Prediction: ['Am Freitag wurde in Europa ein Festtag gefunden.\nDie Deutschschweizerinnen und Schweizer waren populär.\nDie Festtag-Gruppe hatte in Europa einen Festtag gefunden.'] Label: [['Der Festtag gelangte nach Europa und über Großbritannien und Skandinavien nach Deutschland.']] Sacrebleu: {'score': 2.1300733682208985, 'counts': [4, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9230769230769231, 'translation_length': 25, 'reference_length': 13} Rouge: {'rouge1': 0.16216216216216217, 'rouge2': 0.0, 'rougeL': 0.10810810810810811, 'rougeLsum': 0.16216216216216217} Sari: {'sari': 37.669457735247214} Flesh Reading Ease: 44.0 ---------------------------------------- Source: ['1923 organisierte der Verband Deutscher Blumengeschäftsinhaber eine Aktion mit Plakaten, auf denen stand „Ehret die Mutter“ – ganz unpolitisch einfach nur als Tag der Blumenwünsche.'] Prediction: ['Der Deutscher Blumengeschäftsinhaber hat eine Aktion mit Plakaten für seinen Blumenwünsche geschickt.\nDie Aktion wurde nur als Tag der Blumenwünsche organisiert.'] Label: [['1923 organisierte der Verband Deutscher Blumengeschäftsinhaber eine Aktion mit Plakaten, auf denen stand „Ehret die Mutter“.\nEs war ein Tag der Blumenwünsche.']] Sacrebleu: {'score': 16.01590957725875, 'counts': [11, 6, 3, 1], 'totals': [23, 22, 21, 20], 'precisions': [47.82608695652174, 27.272727272727273, 14.285714285714286, 5.0], 'bp': 0.9167169520254864, 'sys_len': 23, 'ref_len': 25} Bleu: {'bleu': 0.1601590957725875, 'precisions': [0.4782608695652174, 0.2727272727272727, 0.14285714285714285, 0.05], 'brevity_penalty': 0.9167169520254864, 'length_ratio': 0.92, 'translation_length': 23, 'reference_length': 25} Rouge: {'rouge1': 0.5306122448979592, 'rouge2': 0.3404255319148936, 'rougeL': 0.5306122448979592, 'rougeLsum': 0.4897959183673469} Sari: {'sari': 22.743806581015882} Flesh Reading Ease: 40.8 ---------------------------------------- Source: ['Die Nationalsozialisten machten aus dem Muttertag einen Tag der Heldinnen, die möglichst viele Nachkommen gebären sollten, um den Fortbestand des Volkes zu sichern – oder einfach für die grausame Tatsache, dass man Soldaten brauchte.'] Prediction: ['Die Nationalsozialisten machten aus dem Muttertag einen Tag der Heldinnen, die möglichst viele Nachkommen gebären sollten, um den Fortbestand des Volkes zu sichern.\nDie Nationalsozialisten machten aus dem Muttertag einen Tag der Heldinnen, die möglichst viele Nachkommen gebären sollten, um den Fortbestand des Volkes zu sichern.'] Label: [['Die Nationalsozialisten machten aus dem Muttertag einen Tag der Heldinnen.\nGeehrt werden sollten die Frauen, die möglichst viele Nachkommen gebären, denn man brauchte Soldaten.']] Sacrebleu: {'score': 27.145462349785312, 'counts': [21, 14, 12, 10], 'totals': [52, 51, 50, 49], 'precisions': [40.38461538461539, 27.45098039215686, 24.0, 20.408163265306122], 'bp': 1.0, 'sys_len': 52, 'ref_len': 28} Bleu: {'bleu': 0.2714546234978531, 'precisions': [0.40384615384615385, 0.27450980392156865, 0.24, 0.20408163265306123], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 52, 'reference_length': 28} Rouge: {'rouge1': 0.5, 'rouge2': 0.40540540540540543, 'rougeL': 0.5, 'rougeLsum': 0.47368421052631576} Sari: {'sari': 54.331309693151795} Flesh Reading Ease: 40.0 ---------------------------------------- Source: ['Nach dem Zweiten Weltkrieg und dem Ende des Nationalsozialismus wurde der Muttertag daher zunächst nicht mehr gefeiert.'] Prediction: ['Der Muttertag wurde nicht mehr gefeiert.\nDer Muttertag wurde nach dem Zweiten Weltkrieg und dem Ende des Nationalsozialismus nicht mehr gefeiert.'] Label: [['Nach dem Zweiten Weltkrieg und dem Ende des Nationalsozialismus wurde der Muttertag zunächst nicht mehr gefeiert.']] Sacrebleu: {'score': 42.16890913810254, 'counts': [14, 10, 8, 6], 'totals': [23, 22, 21, 20], 'precisions': [60.869565217391305, 45.45454545454545, 38.095238095238095, 30.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 17} Bleu: {'bleu': 0.42168909138102545, 'precisions': [0.6086956521739131, 0.45454545454545453, 0.38095238095238093, 0.3], 'brevity_penalty': 1.0, 'length_ratio': 1.3529411764705883, 'translation_length': 23, 'reference_length': 17} Rouge: {'rouge1': 0.7894736842105262, 'rouge2': 0.6111111111111112, 'rougeL': 0.6315789473684211, 'rougeLsum': 0.7368421052631577} Sari: {'sari': 52.35930735930735} Flesh Reading Ease: 52.5 ---------------------------------------- Source: ['Der Muttertag löst regelmäßig Diskussionen aus.'] Prediction: ['Der Muttertag löst regelmäßig Diskussionen aus.\nDer Muttertag löst regelmäßig Diskussionen aus.'] Label: [['Der Muttertag wird immer wieder diskutiert.']] Sacrebleu: {'score': 6.285596338261262, 'counts': [3, 1, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [21.428571428571427, 7.6923076923076925, 4.166666666666667, 2.272727272727273], 'bp': 1.0, 'sys_len': 14, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.21428571428571427, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 14, 'reference_length': 7} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.1, 'rougeL': 0.18181818181818182, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 40.71428571428572} Flesh Reading Ease: 27.75 ---------------------------------------- Source: ['Warum schenkt man einer Mutter nur an einem Tag Blumen, wenn die Blumen-Werbung daran erinnert?'] Prediction: ['Eine Mutter schenkt an einem Tag Blumen, wenn die Blumen-Werbung daran erinnert.\nDie Blumen-Werbung daran erinnert sich um eine Mutter.\nDie Mutter schenkt das Blumen-Gebiet nur an einem Tag Blumen.'] Label: [['Warum schenkt man einer Mutter nur an einem Tag Blumen?']] Sacrebleu: {'score': 11.084119214562044, 'counts': [7, 4, 3, 2], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 12.121212121212121, 9.375, 6.451612903225806], 'bp': 1.0, 'sys_len': 34, 'ref_len': 11} Bleu: {'bleu': 0.11084119214562044, 'precisions': [0.20588235294117646, 0.12121212121212122, 0.09375, 0.06451612903225806], 'brevity_penalty': 1.0, 'length_ratio': 3.090909090909091, 'translation_length': 34, 'reference_length': 11} Rouge: {'rouge1': 0.3255813953488372, 'rouge2': 0.1951219512195122, 'rougeL': 0.3255813953488372, 'rougeLsum': 0.3255813953488372} Sari: {'sari': 17.699948400412797} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Schließlich ist sie tagtäglich für ihre Kinder da.'] Prediction: ['Eine Kinder-Kollegin ist in den USA gestorben.\nSie ist tagtäglich für ihre Kinder da.'] Label: [['Sie ist schließlich immer für einen da.']] Sacrebleu: {'score': 7.3140318268287645, 'counts': [5, 2, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [31.25, 13.333333333333334, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.3125, 0.13333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 16, 'reference_length': 8} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.16666666666666666, 'rougeL': 0.3846153846153846, 'rougeLsum': 0.3846153846153846} Sari: {'sari': 34.77182539682539} Flesh Reading Ease: 67.7 ---------------------------------------- Source: ['So ergab eine Umfrage des Meinungsforschungsinstituts YouGov in Deutschland: 80 Prozent der Erwachsenen schenken ihrer Mutter etwas zu Muttertag.'] Prediction: ['Eine Umfrage des Meinungsforschungsinstituts YouGov in Deutschland zeigt, 80 Prozent der Erwachsenen schenken ihrer Mutter etwas zu Muttertag.\n80 Prozent der Erwachsenen schenken ihrer Mutter etwas zu Muttertag.'] Label: [['So ergab eine Umfrage des Meinungsforschungsinstituts YouGov: 80 Prozent der Erwachsenen schenken ihrer Mutter etwas zu Muttertag.']] Sacrebleu: {'score': 39.98597655764616, 'counts': [15, 13, 11, 9], 'totals': [31, 30, 29, 28], 'precisions': [48.38709677419355, 43.333333333333336, 37.93103448275862, 32.142857142857146], 'bp': 1.0, 'sys_len': 31, 'ref_len': 19} Bleu: {'bleu': 0.39985976557646163, 'precisions': [0.4838709677419355, 0.43333333333333335, 0.3793103448275862, 0.32142857142857145], 'brevity_penalty': 1.0, 'length_ratio': 1.631578947368421, 'translation_length': 31, 'reference_length': 19} Rouge: {'rouge1': 0.6666666666666667, 'rouge2': 0.6046511627906976, 'rougeL': 0.6666666666666667, 'rougeLsum': 0.6666666666666667} Sari: {'sari': 37.424466002052206} Flesh Reading Ease: 43.15 ---------------------------------------- Source: ['18 Prozent der Befragten dagegen sehen keinen Grund, den Muttertag besonders zu feiern.'] Prediction: ['Die Befragten des Befragten sind nicht mehr gefragt, den Muttertag besonders zu feiern.\nDie Muttertag-Befragten sind 18 Prozent der Befragten.'] Label: [['18 Prozent dagegen sehen keinen Grund, den Muttertag besonders zu feiern.']] Sacrebleu: {'score': 27.748702735605818, 'counts': [9, 7, 5, 4], 'totals': [23, 22, 21, 20], 'precisions': [39.130434782608695, 31.818181818181817, 23.80952380952381, 20.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 13} Bleu: {'bleu': 0.27748702735605824, 'precisions': [0.391304347826087, 0.3181818181818182, 0.23809523809523808, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.7692307692307692, 'translation_length': 23, 'reference_length': 13} Rouge: {'rouge1': 0.43749999999999994, 'rouge2': 0.3333333333333333, 'rougeL': 0.31249999999999994, 'rougeLsum': 0.43749999999999994} Sari: {'sari': 30.435744810744808} Flesh Reading Ease: 58.85 ---------------------------------------- Source: ['Zu den ersten ökologischen Gebäuden im europäischen Raum gehörten die Pfahlbauten der Jungsteinzeit und Bronzezeit zwischen ca. 4.300 v. Chr. und 800 v. Chr. Diese waren bis ins letzte Detail nachhaltig:'] Prediction: ['Im europäischen Raum gehörten die Pfahlbauten der Jungsteinzeit und Bronzezeit zwischen ca.\n4.300 v. Chr.\nund 800 v. Chr.\nDiese waren bis ins letzte Detail nachhaltig.'] Label: [['Zu den ersten ökologischen Gebäuden im europäischen Raum gehörten die Pfahlbauten der Jungsteinzeit und Bronzezeit (ca.\n4.300 v. Chr.\nund 800 v.\nChr.).\nSie waren komplett nachhaltig:']] Sacrebleu: {'score': 56.402204853905644, 'counts': [25, 20, 18, 16], 'totals': [32, 31, 30, 29], 'precisions': [78.125, 64.51612903225806, 60.0, 55.172413793103445], 'bp': 0.8824969025845955, 'sys_len': 32, 'ref_len': 36} Bleu: {'bleu': 0.5640220485390559, 'precisions': [0.78125, 0.6451612903225806, 0.6, 0.5517241379310345], 'brevity_penalty': 0.8824969025845955, 'length_ratio': 0.8888888888888888, 'translation_length': 32, 'reference_length': 36} Rouge: {'rouge1': 0.7666666666666667, 'rouge2': 0.6551724137931035, 'rougeL': 0.7666666666666667, 'rougeLsum': 0.7666666666666667} Sari: {'sari': 26.67227043160253} Flesh Reading Ease: 71.85 ---------------------------------------- Source: ['Ausgerechnet ein Wolkenkratzer mit viel Glas und Stahl war eines der ersten ökologischen Gebäude (Green Building) in Deutschland:'] Prediction: ['Ein Wolkenkratzer mit viel Glas und Stahl war eines der ersten ökologischen Gebäudes in Deutschland.\nEr war eines der ersten ökologischen Gebäudes (Green Building) in Deutschland: Ein Wolkenkratzer mit viel Glas und Stahl war eines der ersten ökologischen Gebäudes (Green Building) in Deutschland:'] Label: [['Ein Wolkenkratzer mit viel Glas und Stahl war eines der ersten ökologischen Gebäude (Green Building) in Deutschland:']] Sacrebleu: {'score': 32.672546783997234, 'counts': [19, 17, 15, 13], 'totals': [50, 49, 48, 47], 'precisions': [38.0, 34.69387755102041, 31.25, 27.659574468085108], 'bp': 1.0, 'sys_len': 50, 'ref_len': 20} Bleu: {'bleu': 0.3267254678399723, 'precisions': [0.38, 0.3469387755102041, 0.3125, 0.2765957446808511], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 50, 'reference_length': 20} Rouge: {'rouge1': 0.53125, 'rouge2': 0.48387096774193544, 'rougeL': 0.53125, 'rougeLsum': 0.53125} Sari: {'sari': 41.48245273245273} Flesh Reading Ease: 53.2 ---------------------------------------- Source: ['Der britische Architekt Sir Norman Foster, Träger des Nachhaltigkeitspreises 2012 für Architektur und Baukunst, hat bei diesem Gebäude vor allem den Energiebedarf im Blick gehabt.'] Prediction: ['Der britische Architekt Sir Norman Foster hat bei einem Gebäude den Energiebedarf im Blick gehabt.\nDer britische Architekt Sir Norman Foster, Träger des Nachhaltigkeitspreises 2012 für Architektur und Baukunst, hat bei diesem Gebäude vor allem den Energiebedarf im Blick gehabt.'] Label: [['Der britische Architekt Sir Norman Foster, Träger des Nachhaltigkeitspreises 2012 für Architektur und Baukunst, hat bei diesem Gebäude den Energiebedarf intelligent gelöst.']] Sacrebleu: {'score': 46.77877486660131, 'counts': [23, 21, 19, 17], 'totals': [44, 43, 42, 41], 'precisions': [52.27272727272727, 48.83720930232558, 45.23809523809524, 41.46341463414634], 'bp': 1.0, 'sys_len': 44, 'ref_len': 25} Bleu: {'bleu': 0.4677877486660129, 'precisions': [0.5227272727272727, 0.4883720930232558, 0.4523809523809524, 0.4146341463414634], 'brevity_penalty': 1.0, 'length_ratio': 1.76, 'translation_length': 44, 'reference_length': 25} Rouge: {'rouge1': 0.6571428571428571, 'rouge2': 0.6470588235294118, 'rougeL': 0.6571428571428571, 'rougeLsum': 0.6571428571428571} Sari: {'sari': 64.60664181028922} Flesh Reading Ease: 43.0 ---------------------------------------- Source: ['So gibt es dank der doppelten Außenfassade Frischluft, eine Klimaanlage wird kaum gebraucht.'] Prediction: ['Eine Klimaanlage wird kaum gebraucht.\nDie Außenfassade Frischluft ist eine doppelte Außenfassade.\nDie Klimaanlage wird kaum gebraucht.'] Label: [['Durch die doppelte Außenfassade gibt es Frischluft, eine Klimaanlage wird kaum gebraucht.']] Sacrebleu: {'score': 21.951524426618455, 'counts': [9, 5, 3, 2], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 26.31578947368421, 16.666666666666668, 11.764705882352942], 'bp': 1.0, 'sys_len': 20, 'ref_len': 14} Bleu: {'bleu': 0.21951524426618454, 'precisions': [0.45, 0.2631578947368421, 0.16666666666666666, 0.11764705882352941], 'brevity_penalty': 1.0, 'length_ratio': 1.4285714285714286, 'translation_length': 20, 'reference_length': 14} Rouge: {'rouge1': 0.625, 'rouge2': 0.4, 'rougeL': 0.5625, 'rougeLsum': 0.5625} Sari: {'sari': 55.657399374504635} Flesh Reading Ease: 33.9 ---------------------------------------- Source: ['Im Gebäude selbst gibt es neun Gärten.'] Prediction: ['Im Gebäude selbst gibt es neun Gärten.\nIm Gebäude selbst gibt es neun Gärten.'] Label: [['Im Gebäude gibt es neun Gärten.']] Sacrebleu: {'score': 26.33201939239632, 'counts': [7, 5, 3, 2], 'totals': [16, 15, 14, 13], 'precisions': [43.75, 33.333333333333336, 21.428571428571427, 15.384615384615385], 'bp': 1.0, 'sys_len': 16, 'ref_len': 7} Bleu: {'bleu': 0.26332019392396333, 'precisions': [0.4375, 0.3333333333333333, 0.21428571428571427, 0.15384615384615385], 'brevity_penalty': 1.0, 'length_ratio': 2.2857142857142856, 'translation_length': 16, 'reference_length': 7} Rouge: {'rouge1': 0.6153846153846153, 'rouge2': 0.5, 'rougeL': 0.6153846153846153, 'rougeLsum': 0.6153846153846153} Sari: {'sari': 66.7063492063492} Flesh Reading Ease: 91.1 ---------------------------------------- Source: ['Es bedeutet aber auch: die Natur zu schonen und wenig Fläche zu verbrauchen.'] Prediction: ['Die Natur zu schonen und wenig Fläche verbrauchen weniger Fläche.\nDas bedeutet aber auch, weniger Fläche zu verbrauchen.'] Label: [['Wichtig beim Green Building ist es die Natur zu schonen und wenig Fläche zu verbrauchen.']] Sacrebleu: {'score': 33.11822752222955, 'counts': [9, 8, 6, 4], 'totals': [21, 20, 19, 18], 'precisions': [42.857142857142854, 40.0, 31.57894736842105, 22.22222222222222], 'bp': 1.0, 'sys_len': 21, 'ref_len': 16} Bleu: {'bleu': 0.33118227522229554, 'precisions': [0.42857142857142855, 0.4, 0.3157894736842105, 0.2222222222222222], 'brevity_penalty': 1.0, 'length_ratio': 1.3125, 'translation_length': 21, 'reference_length': 16} Rouge: {'rouge1': 0.5405405405405405, 'rouge2': 0.5142857142857143, 'rougeL': 0.5405405405405405, 'rougeLsum': 0.5405405405405405} Sari: {'sari': 53.704473798651875} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Ein Kriterium ist ein geringer Energieverbrauch, ein weiterer Aspekt sind möglichst geringe Transportkosten und kurze Transportwege der Bauteile.'] Prediction: ['Ein Kriterium ist ein geringer Energieverbrauch.\nEs ist ein geringer Energieverbrauch, ein weiterer Aspekt sind möglichst geringe Transportkosten und kurze Transportwege der Bauteile.'] Label: [['Ein Kriterium ist ein geringer Energieverbrauch.\nVon Bedeutung sind auch möglichst geringe Transportkosten und kurze Transportwege der Bauteile.']] Sacrebleu: {'score': 53.11613208274919, 'counts': [17, 14, 12, 10], 'totals': [26, 25, 24, 23], 'precisions': [65.38461538461539, 56.0, 50.0, 43.47826086956522], 'bp': 1.0, 'sys_len': 26, 'ref_len': 20} Bleu: {'bleu': 0.5311613208274918, 'precisions': [0.6538461538461539, 0.56, 0.5, 0.43478260869565216], 'brevity_penalty': 1.0, 'length_ratio': 1.3, 'translation_length': 26, 'reference_length': 20} Rouge: {'rouge1': 0.744186046511628, 'rouge2': 0.6341463414634146, 'rougeL': 0.744186046511628, 'rougeLsum': 0.744186046511628} Sari: {'sari': 64.32728436269078} Flesh Reading Ease: 39.8 ---------------------------------------- Source: ['Das bedeutet zum Beispiel, dass 20 Prozent weniger Wärme verbraucht werden soll, wobei der Anteil an erneuerbaren Energieformen erhöht wird.'] Prediction: ['20 Prozent weniger Wärme sollen in der Schweiz verbraucht werden.\nDas bedeutet zum Beispiel, dass 20 Prozent weniger Wärme verbraucht werden soll, wobei der Anteil an erneuerbaren Energieformen erhöht wird.'] Label: [['Das bedeutet zum Beispiel, dass 20 Prozent weniger Wärme verbraucht werden soll.\nDabei soll der Anteil an erneuerbaren Energieformen erhöht werden.']] Sacrebleu: {'score': 51.322324353568106, 'counts': [22, 18, 15, 13], 'totals': [34, 33, 32, 31], 'precisions': [64.70588235294117, 54.54545454545455, 46.875, 41.935483870967744], 'bp': 1.0, 'sys_len': 34, 'ref_len': 24} Bleu: {'bleu': 0.5132232435356809, 'precisions': [0.6470588235294118, 0.5454545454545454, 0.46875, 0.41935483870967744], 'brevity_penalty': 1.0, 'length_ratio': 1.4166666666666667, 'translation_length': 34, 'reference_length': 24} Rouge: {'rouge1': 0.75, 'rouge2': 0.6666666666666666, 'rougeL': 0.7142857142857143, 'rougeLsum': 0.75} Sari: {'sari': 63.22176819164772} Flesh Reading Ease: 53.85 ---------------------------------------- Source: ['Unsere Mode soll schön bunt, knitterfrei oder wasserabstoßend sein. Aber umweltbewusst und nachhaltig ist sie nicht – ganz zu schweigen von den Bedingungen, unter denen sie in vielen Entwicklungsländern hergestellt wird.'] Prediction: ['Unsere Mode soll schön bunt, knitterfrei oder wasserabstoßend sein.\nAber umweltbewusst und nachhaltig ist sie nicht.\nDie neuen Funktionen sind in vielen Entwicklungsländern hergestellt.'] Label: [['Schön bunt soll sie sein, unsere Mode, aber umweltbewusst und nachhaltig ist sie nicht.\nSchlimm sind auch oft die Bedingungen, unter denen die Mode in vielen Entwicklungsländern hergestellt wird.']] Sacrebleu: {'score': 26.452935525992732, 'counts': [18, 9, 7, 5], 'totals': [28, 27, 26, 25], 'precisions': [64.28571428571429, 33.333333333333336, 26.923076923076923, 20.0], 'bp': 0.8071177470053894, 'sys_len': 28, 'ref_len': 34} Bleu: {'bleu': 0.26452935525992727, 'precisions': [0.6428571428571429, 0.3333333333333333, 0.2692307692307692, 0.2], 'brevity_penalty': 0.8071177470053892, 'length_ratio': 0.8235294117647058, 'translation_length': 28, 'reference_length': 34} Rouge: {'rouge1': 0.7241379310344828, 'rouge2': 0.4642857142857143, 'rougeL': 0.5862068965517241, 'rougeLsum': 0.6206896551724138} Sari: {'sari': 47.26812222054229} Flesh Reading Ease: 55.0 ---------------------------------------- Source: ['Einige Hersteller zeigen jedoch, dass es auch anders geht.'] Prediction: ['Einige Hersteller zeigen jedoch, dass es auch anders geht.\nSie sind einige von ihnen und ihnen auch anders geht.\nSie sind einige von ihnen und ihnen auch anders geht.'] Label: [['Aber einige Hersteller zeigen, dass es auch anders geht.']] Sacrebleu: {'score': 19.431006284310183, 'counts': [10, 7, 5, 4], 'totals': [33, 32, 31, 30], 'precisions': [30.303030303030305, 21.875, 16.129032258064516, 13.333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 11} Bleu: {'bleu': 0.19431006284310173, 'precisions': [0.30303030303030304, 0.21875, 0.16129032258064516, 0.13333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 33, 'reference_length': 11} Rouge: {'rouge1': 0.42105263157894735, 'rouge2': 0.3333333333333333, 'rougeL': 0.42105263157894735, 'rougeLsum': 0.42105263157894735} Sari: {'sari': 60.899470899470906} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['Öko-Mode, auch Eco-Fashion genannt, lässt sich kurz so beschreiben: frei von Schadstoffen, sozialverträglich produziert, umweltgerecht.'] Prediction: ['Öko-Mode hat einen neuen Schadstoff-Fashion-Fashion-Konzern lanciert.\nDer Schweizer Luxus-Fashion-Konzern Öko-Mode hat eine neue Formel-Fashion-Konzern beschreibt.\nDie Schweizer Luxus-Fashion-Konzern Öko-Mode hat einen neuen Zusammenhang mit der Schweiz beschreibt.'] Label: [['Öko-Mode, auch Eco-Fashion genannt, ist frei von Schadstoffen.\nSie wird sozialverträglich produziert und ist umweltgerecht.']] Sacrebleu: {'score': 1.633898440122165, 'counts': [3, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [10.0, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5789473684210527, 'translation_length': 30, 'reference_length': 19} Rouge: {'rouge1': 0.10526315789473684, 'rouge2': 0.03636363636363636, 'rougeL': 0.10526315789473684, 'rougeLsum': 0.10526315789473684} Sari: {'sari': 23.27576754385965} Flesh Reading Ease: 24.75 ---------------------------------------- Source: ['Das heißt zum Beispiel, dass bestimmte Standards zum Schutz der Näherinnen eingehalten werden, keine umweltschädlichen Chemikalien verwendet werden oder die Wolle aus kontrolliert biologischer Tierhaltung kommt.'] Prediction: ['Ein Schweizer Beispiel hat eine neue Beispiel-Debatte für Chemikalien und Wolle geschafft.\nDas heißt zum Beispiel, dass bestimmte Standards zum Schutz der Näherinnen eingehalten werden, keine umweltschädlichen Chemikalien verwendet werden oder die Wolle aus kontrolliert biologischer Tierhaltung kommt.'] Label: [['Das heißt zum Beispiel, dass bestimmte Standards zum Schutz der Näherinnen gelten, keine umweltschädlichen Chemikalien verwendet werden oder die Wolle aus kontrolliert biologischer Tierhaltung kommt.']] Sacrebleu: {'score': 59.023273121391505, 'counts': [27, 25, 23, 21], 'totals': [42, 41, 40, 39], 'precisions': [64.28571428571429, 60.97560975609756, 57.5, 53.84615384615385], 'bp': 1.0, 'sys_len': 42, 'ref_len': 28} Bleu: {'bleu': 0.5902327312139146, 'precisions': [0.6428571428571429, 0.6097560975609756, 0.575, 0.5384615384615384], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 42, 'reference_length': 28} Rouge: {'rouge1': 0.7605633802816901, 'rouge2': 0.7246376811594204, 'rougeL': 0.7605633802816901, 'rougeLsum': 0.7605633802816901} Sari: {'sari': 64.39425231162217} Flesh Reading Ease: 32.3 ---------------------------------------- Source: ['Bio-Baumwolle, Leinen, Hanf und Lyocell sind die bekanntesten Textilien, aus denen Öko-Mode produziert wird.'] Prediction: ['Die bekanntesten Produktionen der Schweiz sind Bio-Baumwolle, Leinen, Hanf und Lyocell.\nDie bekanntesten Produktionen sind aus den Öko-Mode produziert.'] Label: [['Bio-Baumwolle, Leinen, Hanf und Lyocell sind häufig die Textilien, aus denen Öko-Mode gemacht wird.']] Sacrebleu: {'score': 28.073304156067923, 'counts': [11, 6, 5, 4], 'totals': [23, 22, 21, 20], 'precisions': [47.82608695652174, 27.272727272727273, 23.80952380952381, 20.0], 'bp': 1.0, 'sys_len': 23, 'ref_len': 18} Bleu: {'bleu': 0.28073304156067924, 'precisions': [0.4782608695652174, 0.2727272727272727, 0.23809523809523808, 0.2], 'brevity_penalty': 1.0, 'length_ratio': 1.2777777777777777, 'translation_length': 23, 'reference_length': 18} Rouge: {'rouge1': 0.5789473684210527, 'rouge2': 0.33333333333333326, 'rougeL': 0.5263157894736842, 'rougeLsum': 0.5263157894736842} Sari: {'sari': 37.78090717849754} Flesh Reading Ease: 41.8 ---------------------------------------- Source: ['IVN zertifiziert BEST“ und „Naturleder IVN zertifiziert“ vom Internationalen Verband der Naturtextilwirtschaft (IVN).'] Prediction: ['Der Internationale Verband der Naturtextilwirtschaft (IVN) hat den meisten Best und Naturleder entwickelt.\nDas ist der erste Mal in der Schweiz.\nDas ist der erste Mal in der Schweiz.'] Label: [['IVN zertifiziert BEST“ und „Naturleder IVN zertifiziert“ vom Internationalen Verband der Naturtextilwirtschaft (IVN).Die']] Sacrebleu: {'score': 14.410670132605604, 'counts': [8, 5, 4, 3], 'totals': [34, 33, 32, 31], 'precisions': [23.529411764705884, 15.151515151515152, 12.5, 9.67741935483871], 'bp': 1.0, 'sys_len': 34, 'ref_len': 17} Bleu: {'bleu': 0.1441067013260561, 'precisions': [0.23529411764705882, 0.15151515151515152, 0.125, 0.0967741935483871], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 34, 'reference_length': 17} Rouge: {'rouge1': 0.32558139534883723, 'rouge2': 0.24390243902439027, 'rougeL': 0.23255813953488377, 'rougeLsum': 0.23255813953488377} Sari: {'sari': 16.550925925925924} Flesh Reading Ease: 70.85 ---------------------------------------- Source: ['Sie versprechen strengste Anforderungen weltweit an nachhaltig produzierte Textilien und Lederwaren. Hier geht es um die gesamte Produktionskette.'] Prediction: ['Die gesamte Produktionskette versprechen strengste Anforderungen weltweit an nachhaltig produzierte Textilien und Lederwaren.\nHier geht es um die gesamte Produktionskette.'] Label: [['strengen Anforderungen der Siegel an nachhaltig produzierte Textilien und Lederwaren umfassen die gesamte Produktion.']] Sacrebleu: {'score': 25.306188056493337, 'counts': [10, 6, 4, 3], 'totals': [22, 21, 20, 19], 'precisions': [45.45454545454545, 28.571428571428573, 20.0, 15.789473684210526], 'bp': 1.0, 'sys_len': 22, 'ref_len': 15} Bleu: {'bleu': 0.25306188056493334, 'precisions': [0.45454545454545453, 0.2857142857142857, 0.2, 0.15789473684210525], 'brevity_penalty': 1.0, 'length_ratio': 1.4666666666666666, 'translation_length': 22, 'reference_length': 15} Rouge: {'rouge1': 0.5294117647058824, 'rouge2': 0.37499999999999994, 'rougeL': 0.5294117647058824, 'rougeLsum': 0.5294117647058824} Sari: {'sari': 49.06375787954735} Flesh Reading Ease: 12.05 ---------------------------------------- Source: ['Sie beginnt bei den Naturfasern bis zum fertigen Produkt und umfasst Umweltstandards, verbietet gefährliche Chemikalien und sorgt für faire Sozialstandards.'] Prediction: ['Die Naturfaser in den USA sind bis zum fertigen Produkt und umfasst Umweltstandards.\nSie sorgen für faire Sozialstandards.'] Label: [['Sie beginnt bei den Naturfasern bis zum fertigen Produkt.\nDazu gehören auch Umweltstandards und Sozialstandards.\nGefährliche Chemikalien sind verboten.']] Sacrebleu: {'score': 15.337765880164852, 'counts': [12, 4, 2, 1], 'totals': [20, 19, 18, 17], 'precisions': [60.0, 21.05263157894737, 11.11111111111111, 5.882352941176471], 'bp': 0.9048374180359595, 'sys_len': 20, 'ref_len': 22} Bleu: {'bleu': 0.15337765880164855, 'precisions': [0.6, 0.21052631578947367, 0.1111111111111111, 0.058823529411764705], 'brevity_penalty': 0.9048374180359595, 'length_ratio': 0.9090909090909091, 'translation_length': 20, 'reference_length': 22} Rouge: {'rouge1': 0.5, 'rouge2': 0.15789473684210525, 'rougeL': 0.35, 'rougeLsum': 0.45} Sari: {'sari': 32.30220072325336} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Ein beliebter Badeort mit vielen Stränden und Wassersport ist Deutschlands größter See, der Bodensee, ganz im Süden.'] Prediction: ['Deutschlands größter See ist ein beliebter Badeort.\nDer Bodensee ist ganz im Süden.'] Label: [['Ein beliebter Badeort mit vielen Stränden und Wassersport ist Deutschlands größter See, der Bodensee, ganz im Süden.2016']] Sacrebleu: {'score': 18.690139011176726, 'counts': [11, 6, 3, 1], 'totals': [15, 14, 13, 12], 'precisions': [73.33333333333333, 42.857142857142854, 23.076923076923077, 8.333333333333334], 'bp': 0.6703200460356393, 'sys_len': 15, 'ref_len': 21} Bleu: {'bleu': 0.18690139011176726, 'precisions': [0.7333333333333333, 0.42857142857142855, 0.23076923076923078, 0.08333333333333333], 'brevity_penalty': 0.6703200460356393, 'length_ratio': 0.7142857142857143, 'translation_length': 15, 'reference_length': 21} Rouge: {'rouge1': 0.7777777777777778, 'rouge2': 0.5294117647058824, 'rougeL': 0.5555555555555556, 'rougeLsum': 0.5555555555555556} Sari: {'sari': 15.460157126823795} Flesh Reading Ease: 68.2 ---------------------------------------- Source: ['2016 gab es in Deutschland 2.292 Badegewässer, die meisten sind Seen.'] Prediction: ['Deutschland hat 2.292 Badegewässer mehr als 2,000 Menschen.\nDie meisten sind Seen.'] Label: [['gab es in Deutschland 2.292 Badegewässer, die meisten sind Seen.']] Sacrebleu: {'score': 21.97281387499715, 'counts': [7, 4, 2, 1], 'totals': [14, 13, 12, 11], 'precisions': [50.0, 30.76923076923077, 16.666666666666668, 9.090909090909092], 'bp': 1.0, 'sys_len': 14, 'ref_len': 12} Bleu: {'bleu': 0.21972813874997157, 'precisions': [0.5, 0.3076923076923077, 0.16666666666666666, 0.09090909090909091], 'brevity_penalty': 1.0, 'length_ratio': 1.1666666666666667, 'translation_length': 14, 'reference_length': 12} Rouge: {'rouge1': 0.6666666666666665, 'rouge2': 0.4799999999999999, 'rougeL': 0.6666666666666665, 'rougeLsum': 0.6666666666666665} Sari: {'sari': 23.691933066933068} Flesh Reading Ease: 76.55 ---------------------------------------- Source: ['Sie werden nach einer in ganz Europa gültigen Richtlinie überwacht.'] Prediction: ['Eine in ganz Europa gültigen Richtlinie wird überwacht.\nSie wird nach einer in ganz Europa gültigen Richtlinie überwacht.'] Label: [['Sie werden überwacht, dazu gibt es eine europäische Richtlinie.']] Sacrebleu: {'score': 2.7076576267554477, 'counts': [4, 0, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [20.0, 2.6315789473684212, 1.3888888888888888, 0.7352941176470589], 'bp': 1.0, 'sys_len': 20, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8181818181818181, 'translation_length': 20, 'reference_length': 11} Rouge: {'rouge1': 0.26666666666666666, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 27.361111111111107} Flesh Reading Ease: 54.0 ---------------------------------------- Source: ['Die Untersuchungen achten dabei vor allem auf zwei Darmbakterien, die krank machen.'] Prediction: ['Zwei Darmbakterien sind in der Schweiz krank geworden.\nSie wurden dabei aufgefunden, die krank machen zu haben.\nDie Untersuchungen achten auf zwei Darmbakterien, die krank machen.'] Label: [['Die Untersuchungen achten dabei vor allem auf Darmbakterien, die krank machen.']] Sacrebleu: {'score': 19.775876971405587, 'counts': [11, 7, 5, 3], 'totals': [31, 30, 29, 28], 'precisions': [35.483870967741936, 23.333333333333332, 17.24137931034483, 10.714285714285714], 'bp': 1.0, 'sys_len': 31, 'ref_len': 13} Bleu: {'bleu': 0.19775876971405587, 'precisions': [0.3548387096774194, 0.23333333333333334, 0.1724137931034483, 0.10714285714285714], 'brevity_penalty': 1.0, 'length_ratio': 2.3846153846153846, 'translation_length': 31, 'reference_length': 13} Rouge: {'rouge1': 0.4864864864864865, 'rouge2': 0.28571428571428575, 'rougeL': 0.43243243243243246, 'rougeLsum': 0.4864864864864865} Sari: {'sari': 26.956894643647626} Flesh Reading Ease: 60.15 ---------------------------------------- Source: ['Fast alle geprüften Badegewässer – 98 Prozent – erfüllen die Anforderungen der EU-Richtlinie.'] Prediction: ['Einige Badegewässer erfüllen die Anforderungen der EU-Richtlinie.\nFast alle geprüften Badegewässer erfüllen die Anforderungen der EU-Richtlinie.'] Label: [['Fast alle geprüften Badegewässer – 98 Prozent – erfüllen die EU-Richtlinie.']] Sacrebleu: {'score': 18.16725573641283, 'counts': [8, 5, 2, 1], 'totals': [18, 17, 16, 15], 'precisions': [44.44444444444444, 29.41176470588235, 12.5, 6.666666666666667], 'bp': 1.0, 'sys_len': 18, 'ref_len': 12} Bleu: {'bleu': 0.1816725573641283, 'precisions': [0.4444444444444444, 0.29411764705882354, 0.125, 0.06666666666666667], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 18, 'reference_length': 12} Rouge: {'rouge1': 0.6111111111111112, 'rouge2': 0.4705882352941177, 'rougeL': 0.6111111111111112, 'rougeLsum': 0.6111111111111112} Sari: {'sari': 15.776815776815777} Flesh Reading Ease: 2.35 ---------------------------------------- Source: ['Im nordöstlichen Bundesland Mecklenburg-Vorpommern, wo es sehr viele Seen gibt, sind die Bedingungen für die Umwelt besonders gut.'] Prediction: ['Im nordöstlichen Bundesland Mecklenburg-Vorpommern sind die Bedingungen für die Umwelt besonders gut.\nIm nordöstlichen Bundesland Mecklenburg-Vorpommern sind die Bedingungen für die Umwelt besonders gut.'] Label: [['Im Bundesland Mecklenburg-Vorpommern im Nord-Osten gibt es sehr viele Seen.\nHier sind die Bedingungen für die Umwelt besonders gut.']] Sacrebleu: {'score': 34.20941751050785, 'counts': [13, 9, 7, 6], 'totals': [26, 25, 24, 23], 'precisions': [50.0, 36.0, 29.166666666666668, 26.08695652173913], 'bp': 1.0, 'sys_len': 26, 'ref_len': 21} Bleu: {'bleu': 0.3420941751050785, 'precisions': [0.5, 0.36, 0.2916666666666667, 0.2608695652173913], 'brevity_penalty': 1.0, 'length_ratio': 1.2380952380952381, 'translation_length': 26, 'reference_length': 21} Rouge: {'rouge1': 0.576923076923077, 'rouge2': 0.44, 'rougeL': 0.576923076923077, 'rougeLsum': 0.5} Sari: {'sari': 48.97153561346389} Flesh Reading Ease: 33.45 ---------------------------------------- Source: ['Es sind die Düngemittel, die Sorgen bereiten.'] Prediction: ['Die Düngemittel sind die Sorgen bereiten.\nDie Düngemittel sind die Sorgen bereiten.'] Label: [['Hier macht der Stickstoff aus Düngemitteln Probleme.']] Sacrebleu: {'score': 2.8398387225677895, 'counts': [1, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [7.142857142857143, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 14, 'reference_length': 8} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 35.714285714285715} Flesh Reading Ease: 57.0 ---------------------------------------- Source: ['Die Stickstoffe führen zu einem starken Wachstum von Algen.'] Prediction: ['In Algen wurde eine Stickstoffe gefunden.\nDie Stickstoffe führen zu einem starken Wachstum von Algen.'] Label: [['Das führt zu einem starken Wachstum von Algen.']] Sacrebleu: {'score': 34.82352832757854, 'counts': [7, 6, 5, 4], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 37.5, 33.333333333333336, 28.571428571428573], 'bp': 1.0, 'sys_len': 17, 'ref_len': 9} Bleu: {'bleu': 0.34823528327578535, 'precisions': [0.4117647058823529, 0.375, 0.3333333333333333, 0.2857142857142857], 'brevity_penalty': 1.0, 'length_ratio': 1.8888888888888888, 'translation_length': 17, 'reference_length': 9} Rouge: {'rouge1': 0.56, 'rouge2': 0.43478260869565216, 'rougeL': 0.56, 'rougeLsum': 0.56} Sari: {'sari': 59.333607568901684} Flesh Reading Ease: 61.35 ---------------------------------------- Source: ['Diese nehmen den Wasserlebewesen den Sauerstoff.'] Prediction: ['Die Wasserlebewesen in den Schweizer Stadt Zürich sind gestorben.\nSie nehmen den Sauerstoff.'] Label: [['Dadurch haben die Lebewesen im Wasser nicht genug Sauerstoff.']] Sacrebleu: {'score': 5.255923420816887, 'counts': [2, 1, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [13.333333333333334, 7.142857142857143, 3.8461538461538463, 2.0833333333333335], 'bp': 1.0, 'sys_len': 15, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.07142857142857142, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 15, 'reference_length': 10} Rouge: {'rouge1': 0.17391304347826086, 'rouge2': 0.0, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.17391304347826086} Sari: {'sari': 51.63690476190476} Flesh Reading Ease: 62.35 ---------------------------------------- Source: ['Im Jahr 2016 waren über 53,4 Millionen deutsche Urlauber insgesamt 1,7 Milliarden Reisetage unterwegs.'] Prediction: ['Der deutsche Urlauber hat seine Reisetage im Jahr 2016 von über 53,4 Millionen deutsche Urlauber unterwegs.\nIm Jahr 2016 waren über 53,4 Millionen deutsche Urlauber insgesamt 1,7 Milliarden Reisetage unterwegs.'] Label: [['Im Jahr 2016 waren 53,4 Millionen deutsche Urlauber insgesamt 1,7 Milliarden Reisetage unterwegs.']] Sacrebleu: {'score': 35.325806521467335, 'counts': [14, 12, 10, 8], 'totals': [32, 31, 30, 29], 'precisions': [43.75, 38.70967741935484, 33.333333333333336, 27.586206896551722], 'bp': 1.0, 'sys_len': 32, 'ref_len': 14} Bleu: {'bleu': 0.3532580652146734, 'precisions': [0.4375, 0.3870967741935484, 0.3333333333333333, 0.27586206896551724], 'brevity_penalty': 1.0, 'length_ratio': 2.2857142857142856, 'translation_length': 32, 'reference_length': 14} Rouge: {'rouge1': 0.625, 'rouge2': 0.5652173913043478, 'rougeL': 0.625, 'rougeLsum': 0.625} Sari: {'sari': 62.98466151539615} Flesh Reading Ease: 42.15 ---------------------------------------- Source: ['Dazu gehören Kurzreisen und Städtereisen, Sonnen- und Badeurlaube und auch Schiffsreisen.'] Prediction: ['Dazu gehören Kurzreisen und Städtereisen, Sonnen und Badeurlaube und auch Schiffsreisen.\nDas ist der erste Mal in der Schweiz.'] Label: [['Dazu gehören Kurzreisen in Städte, Badeurlaube und Schiffsreisen.']] Sacrebleu: {'score': 10.062635309001745, 'counts': [9, 4, 1, 0], 'totals': [22, 21, 20, 19], 'precisions': [40.90909090909091, 19.047619047619047, 5.0, 2.6315789473684212], 'bp': 1.0, 'sys_len': 22, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.4090909090909091, 0.19047619047619047, 0.05, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2, 'translation_length': 22, 'reference_length': 10} Rouge: {'rouge1': 0.5806451612903225, 'rouge2': 0.2758620689655173, 'rougeL': 0.5161290322580645, 'rougeLsum': 0.5806451612903225} Sari: {'sari': 48.665038665038665} Flesh Reading Ease: 65.2 ---------------------------------------- Source: ['über 70 Prozent dieser Reisen fanden mit dem Auto oder Wohnmobil statt.'] Prediction: ['70 Prozent der Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer verzeichneten sich mit dem Auto oder Wohnmobil.\nDie Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schweizer Schwe'] Label: [['Weit über 70 Prozent dieser Reisen fanden mit dem Auto oder Wohnmobil statt.']] Sacrebleu: {'score': 1.7532419389094471, 'counts': [8, 5, 3, 2], 'totals': [226, 225, 224, 223], 'precisions': [3.5398230088495577, 2.2222222222222223, 1.3392857142857142, 0.8968609865470852], 'bp': 1.0, 'sys_len': 226, 'ref_len': 14} Bleu: {'bleu': 0.017532419389094465, 'precisions': [0.035398230088495575, 0.022222222222222223, 0.013392857142857142, 0.008968609865470852], 'brevity_penalty': 1.0, 'length_ratio': 16.142857142857142, 'translation_length': 226, 'reference_length': 14} Rouge: {'rouge1': 0.0588235294117647, 'rouge2': 0.0423728813559322, 'rougeL': 0.0588235294117647, 'rougeLsum': 0.0588235294117647} Sari: {'sari': 17.600373482726425} Flesh Reading Ease: -49.51 ---------------------------------------- Source: ['Bei Auslandsreisen nehmen 55 Prozent das Flugzeug.'] Prediction: ['Bei Auslandsreisen nehmen 55 Prozent das Flugzeug.\nBei Auslandsreisen nehmen 55 Prozent das Flugzeug.'] Label: [['Bei Reisen ins Ausland fliegen 55 Prozent mit dem Flugzeug.']] Sacrebleu: {'score': 7.3140318268287645, 'counts': [5, 2, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [31.25, 13.333333333333334, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.3125, 0.13333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 16, 'reference_length': 11} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.09090909090909093, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 43.44729344729345} Flesh Reading Ease: 61.85 ---------------------------------------- Source: ['Pro Person und pro Kilometer stößt ein Flugzeug 211 Gramm klimaschädliches Kohlendioxid aus.'] Prediction: ['Im Flugzeug 211 Gramm klimaschädliches Kohlendioxid ausgebaut wurde ein Flugzeug mit einem Flugzeug 211 Gramm klimaschädliches Kohlendioxid ausgestossen.\nDie klimaschädlichen Kohlendioxid-Positives sind für Pro Person und pro Kilometer geschlossen.'] Label: [['Pro Person und pro Kilometer produziert ein Flugzeug 211 Gramm Kohlendioxid.\nDas schadet dem Klima.']] Sacrebleu: {'score': 17.271600094426358, 'counts': [12, 7, 4, 2], 'totals': [31, 30, 29, 28], 'precisions': [38.70967741935484, 23.333333333333332, 13.793103448275861, 7.142857142857143], 'bp': 1.0, 'sys_len': 31, 'ref_len': 17} Bleu: {'bleu': 0.17271600094426348, 'precisions': [0.3870967741935484, 0.23333333333333334, 0.13793103448275862, 0.07142857142857142], 'brevity_penalty': 1.0, 'length_ratio': 1.8235294117647058, 'translation_length': 31, 'reference_length': 17} Rouge: {'rouge1': 0.40816326530612246, 'rouge2': 0.2978723404255319, 'rougeL': 0.20408163265306123, 'rougeLsum': 0.40816326530612246} Sari: {'sari': 56.80465367965368} Flesh Reading Ease: 25.1 ---------------------------------------- Source: ['Zum Vergleich: Ein Pkw produziert 142 Gramm, die Bahn im Fernverkehr 41 Gramm.'] Prediction: ['Ein Pkw produziert 142 Gramm, die Bahn im Fernverkehr 41 Gramm.\nDas produziert 142 Gramm und 41 Gramm.'] Label: [['Zum Vergleich: Ein Pkw produziert 142 Gramm, die Bahn 41 Gramm.']] Sacrebleu: {'score': 39.41004770986059, 'counts': [11, 9, 7, 5], 'totals': [21, 20, 19, 18], 'precisions': [52.38095238095238, 45.0, 36.8421052631579, 27.77777777777778], 'bp': 1.0, 'sys_len': 21, 'ref_len': 14} Bleu: {'bleu': 0.394100477098606, 'precisions': [0.5238095238095238, 0.45, 0.3684210526315789, 0.2777777777777778], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 21, 'reference_length': 14} Rouge: {'rouge1': 0.6206896551724137, 'rouge2': 0.5185185185185185, 'rougeL': 0.6206896551724137, 'rougeLsum': 0.6206896551724137} Sari: {'sari': 23.175381263616558} Flesh Reading Ease: 94.95 ---------------------------------------- Source: ['Nach NABU-Informationen stoßen Kreuzfahrtschiffe täglich rund 450 Kilogramm Rußpartikel, 5.250 Kilogramm Stickoxide und 7.500 Kilogramm Schwefeldioxide aus.'] Prediction: ['In Kreuzfahrtschiffe wurden rund 450 Kilogramm Rußpartikel, 5.250 Kilogramm Stickoxide und 7.500 Kilogramm Schwefeldioxide ausgesteckt.\nDie NABU-Informationen des Kreuzfahrtschiffe sind unklar.'] Label: [['Nach NABU-Informationen stoßen Kreuzfahrtschiffe rund 450 Kilogramm Rußpartikel aus.\nDazu kommen 5.250 Kilogramm Stickoxide und 7.500 Kilogramm Schwefeldioxide – jeden Tag.']] Sacrebleu: {'score': 36.89395297607967, 'counts': [15, 9, 7, 5], 'totals': [24, 23, 22, 21], 'precisions': [62.5, 39.130434782608695, 31.818181818181817, 23.80952380952381], 'bp': 1.0, 'sys_len': 24, 'ref_len': 23} Bleu: {'bleu': 0.3689395297607966, 'precisions': [0.625, 0.391304347826087, 0.3181818181818182, 0.23809523809523808], 'brevity_penalty': 1.0, 'length_ratio': 1.0434782608695652, 'translation_length': 24, 'reference_length': 23} Rouge: {'rouge1': 0.68, 'rouge2': 0.5416666666666666, 'rougeL': 0.6, 'rougeLsum': 0.68} Sari: {'sari': 43.949792443111235} Flesh Reading Ease: 28.45 ---------------------------------------- Source: ['Das Problem ist, dass Passagierschiffe meist keine Filteranlagen haben und die Umwelt erheblich belasten.'] Prediction: ['Passagierschiffe meist keine Filteranlagen.\nDas Problem ist, dass Passagierschiffe keine Filteranlagen haben und die Umwelt erheblich belasten.'] Label: [['Das Problem ist, dass Passagierschiffe meist keine Filteranlagen haben.']] Sacrebleu: {'score': 39.29362089069849, 'counts': [11, 9, 7, 4], 'totals': [20, 19, 18, 17], 'precisions': [55.0, 47.36842105263158, 38.888888888888886, 23.529411764705884], 'bp': 1.0, 'sys_len': 20, 'ref_len': 11} Bleu: {'bleu': 0.39293620890698494, 'precisions': [0.55, 0.47368421052631576, 0.3888888888888889, 0.23529411764705882], 'brevity_penalty': 1.0, 'length_ratio': 1.8181818181818181, 'translation_length': 20, 'reference_length': 11} Rouge: {'rouge1': 0.6923076923076924, 'rouge2': 0.6666666666666666, 'rougeL': 0.6153846153846153, 'rougeLsum': 0.6923076923076924} Sari: {'sari': 47.51724763979666} Flesh Reading Ease: 25.25 ---------------------------------------- Source: ['Das Umweltbundesamt appelliert an das Bewusstsein der Reisenden: Gibt es eine Alternative zum Flugzeug oder zum Auto?'] Prediction: ['Das Umweltbundesamt appelliert an das Bewusstsein der Reisenden: Gibt es eine Alternative zum Flugzeug oder zum Auto?\nDie Umweltbundesamt appelliert an das Bewusstsein der Reisenden: Gibt es eine Alternative zum Flugzeug oder zum Auto?'] Label: [['Das Umweltbundesamt appelliert: Gibt es eine Alternative zum Flugzeug oder zum Auto?']] Sacrebleu: {'score': 29.512829627446493, 'counts': [14, 12, 10, 8], 'totals': [38, 37, 36, 35], 'precisions': [36.8421052631579, 32.432432432432435, 27.77777777777778, 22.857142857142858], 'bp': 1.0, 'sys_len': 38, 'ref_len': 14} Bleu: {'bleu': 0.2951282962744651, 'precisions': [0.3684210526315789, 0.32432432432432434, 0.2777777777777778, 0.22857142857142856], 'brevity_penalty': 1.0, 'length_ratio': 2.7142857142857144, 'translation_length': 38, 'reference_length': 14} Rouge: {'rouge1': 0.5217391304347826, 'rouge2': 0.45454545454545453, 'rougeL': 0.5217391304347826, 'rougeLsum': 0.5217391304347826} Sari: {'sari': 58.790541954383755} Flesh Reading Ease: 46.0 ---------------------------------------- Source: ['Einige Reiseanbieter bieten inzwischen umweltfreundliche Reisen an.'] Prediction: ['In der Schweiz bieten inzwischen umweltfreundliche Reisen an.\nEinige Reiseanbieter bieten inzwischen umweltfreundliche Reisen an.'] Label: [['Einige Reiseanbieter bieten umweltfreundliche Reisen an.']] Sacrebleu: {'score': 20.706193828327603, 'counts': [7, 5, 3, 1], 'totals': [17, 16, 15, 14], 'precisions': [41.1764705882353, 31.25, 20.0, 7.142857142857143], 'bp': 1.0, 'sys_len': 17, 'ref_len': 7} Bleu: {'bleu': 0.207061938283276, 'precisions': [0.4117647058823529, 0.3125, 0.2, 0.07142857142857142], 'brevity_penalty': 1.0, 'length_ratio': 2.4285714285714284, 'translation_length': 17, 'reference_length': 7} Rouge: {'rouge1': 0.5714285714285715, 'rouge2': 0.4210526315789473, 'rougeL': 0.5714285714285715, 'rougeLsum': 0.5714285714285715} Sari: {'sari': 56.388888888888886} Flesh Reading Ease: 26.25 ---------------------------------------- Source: ['Der Brasilianer Claudemir Jeronimo Baretto – besser bekannt als Cacau – spielte für Deutschland 281 Mal in der Bundesliga und 22 Mal in der deutschen Nationalmannschaft.'] Prediction: ['Der Brasilianer Claudemir Jeronimo Baretto spielte für Deutschland 281 Mal in der Bundesliga und 22 Mal in der deutschen Nationalmannschaft.\nDer Brasilianer Claudemir Jeronimo Baretto spielte für Deutschland 281 Mal in der Bundesliga und 22 Mal in der deutschen Nationalmannschaft.'] Label: [['Der Brasilianer Claudemir Jeronimo Baretto – besser bekannt als Cacau – spielte für Deutschland 281 Mal in der Bundesliga Fußball.\n22 Mal spielte er in der deutschen Nationalmannschaft.']] Sacrebleu: {'score': 34.49071268844682, 'counts': [22, 16, 12, 9], 'totals': [42, 41, 40, 39], 'precisions': [52.38095238095238, 39.02439024390244, 30.0, 23.076923076923077], 'bp': 1.0, 'sys_len': 42, 'ref_len': 30} Bleu: {'bleu': 0.34490712688446806, 'precisions': [0.5238095238095238, 0.3902439024390244, 0.3, 0.23076923076923078], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 42, 'reference_length': 30} Rouge: {'rouge1': 0.6, 'rouge2': 0.47058823529411764, 'rougeL': 0.6, 'rougeLsum': 0.5714285714285714} Sari: {'sari': 23.436272197561223} Flesh Reading Ease: 31.3 ---------------------------------------- Source: ['Seine Aufgabe: Menschen mit Migrationshintergrund in Deutschland noch besser zu integrieren.'] Prediction: ['Migranten in Deutschland sind noch besser zu integrieren.\nDie Aufgabe: Menschen mit Migrationshintergrund in Deutschland noch besser zu integrieren.'] Label: [['Seine Aufgabe: Integration von Menschen mit Migrationshintergrund in Deutschland.']] Sacrebleu: {'score': 19.228544753133768, 'counts': [8, 5, 3, 2], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 23.80952380952381, 15.0, 10.526315789473685], 'bp': 1.0, 'sys_len': 22, 'ref_len': 11} Bleu: {'bleu': 0.19228544753133758, 'precisions': [0.36363636363636365, 0.23809523809523808, 0.15, 0.10526315789473684], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 22, 'reference_length': 11} Rouge: {'rouge1': 0.42857142857142855, 'rouge2': 0.30769230769230765, 'rougeL': 0.42857142857142855, 'rougeLsum': 0.42857142857142855} Sari: {'sari': 26.186232068585007} Flesh Reading Ease: 41.8 ---------------------------------------- Source: ['Und dabei hilft der Fußball.'] Prediction: ['Der Fußball-Star ist ein Jahr nach dem Coronavirus.\nEr war mit dem Virus auf der Suche.\nEr war mit dem Virus auf der Suche.'] Label: [['Dabei hilft der Fußball.']] Sacrebleu: {'score': 1.6504045595709425, 'counts': [2, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [7.407407407407407, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.07407407407407407, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.4, 'translation_length': 27, 'reference_length': 5} Rouge: {'rouge1': 0.1935483870967742, 'rouge2': 0.13793103448275865, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.1935483870967742} Sari: {'sari': 13.373015873015873} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['Davon haben 2,1 Millionen einen Migrationshintergrund.'] Prediction: ['Davon haben 2,1 Millionen Menschen einen Migrationshintergrund.\nDas hat 2,1 Millionen Franken einen Migrationshintergrund.'] Label: [['2,1 Millionen haben einen Migrationshintergrund.']] Sacrebleu: {'score': 11.980914528565991, 'counts': [6, 3, 1, 0], 'totals': [16, 15, 14, 13], 'precisions': [37.5, 20.0, 7.142857142857143, 3.8461538461538463], 'bp': 1.0, 'sys_len': 16, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.375, 0.2, 0.07142857142857142, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 16, 'reference_length': 6} Rouge: {'rouge1': 0.5454545454545454, 'rouge2': 0.3, 'rougeL': 0.45454545454545453, 'rougeLsum': 0.45454545454545453} Sari: {'sari': 51.4423076923077} Flesh Reading Ease: 20.9 ---------------------------------------- Source: ['Im Jahr 2016 haben ungefähr 40.000 Ausländer eine Spielberechtigung beantragt.'] Prediction: ['40.000 Ausländer haben eine Spielberechtigung beantragt.\nIm Jahr 2016 haben ungefähr 40.000 Ausländer eine Spielberechtigung beantragt.'] Label: [['Im Jahr 2016 haben ungefähr 40.000 Ausländer eine Spielerlaubnis beantragt.']] Sacrebleu: {'score': 42.51768826212765, 'counts': [10, 8, 6, 5], 'totals': [18, 17, 16, 15], 'precisions': [55.55555555555556, 47.05882352941177, 37.5, 33.333333333333336], 'bp': 1.0, 'sys_len': 18, 'ref_len': 11} Bleu: {'bleu': 0.4251768826212766, 'precisions': [0.5555555555555556, 0.47058823529411764, 0.375, 0.3333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.6363636363636365, 'translation_length': 18, 'reference_length': 11} Rouge: {'rouge1': 0.7058823529411765, 'rouge2': 0.625, 'rougeL': 0.7058823529411765, 'rougeLsum': 0.7058823529411765} Sari: {'sari': 61.75417175417176} Flesh Reading Ease: 34.3 ---------------------------------------- Source: ['Für viele Flüchtlinge, besonders die Kinder, bietet sich hier eine Chance.'] Prediction: ['Für viele Flüchtlinge, besonders die Kinder, bietet sich hier eine Chance.\nDie Flüchtlinge bieten sich hier eine Chance.'] Label: [['Hier bekommen viele Flüchtlinge, besonders die Kinder, eine Chance.']] Sacrebleu: {'score': 32.3384287069116, 'counts': [10, 8, 6, 4], 'totals': [22, 21, 20, 19], 'precisions': [45.45454545454545, 38.095238095238095, 30.0, 21.05263157894737], 'bp': 1.0, 'sys_len': 22, 'ref_len': 12} Bleu: {'bleu': 0.32338428706911604, 'precisions': [0.45454545454545453, 0.38095238095238093, 0.3, 0.21052631578947367], 'brevity_penalty': 1.0, 'length_ratio': 1.8333333333333333, 'translation_length': 22, 'reference_length': 12} Rouge: {'rouge1': 0.5806451612903225, 'rouge2': 0.41379310344827586, 'rougeL': 0.5161290322580645, 'rougeLsum': 0.5161290322580645} Sari: {'sari': 56.92891649413389} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['Fast 3.000 Vereine beteiligen sich bereits an der Kampagne „2:0 für ein Willkommen“, ein Programm der Deutschen Kinder- und Jugendstiftung.'] Prediction: ['Die Deutschen Kinder und Jugendstiftung hat eine Kampagne für ein Willkommen geschafft.\nFast 3.000 Vereine beteiligen sich bereits an der Kampagne "2:0 für ein Willkommen".'] Label: [['Fast 3.000 Vereine beteiligen sich schon an der Kampagne „2:0 für ein Willkommen“.\nDas ist ein Programm der Deutschen Kinder- und Jugendstiftung.']] Sacrebleu: {'score': 25.593313004630918, 'counts': [18, 10, 6, 3], 'totals': [31, 30, 29, 28], 'precisions': [58.064516129032256, 33.333333333333336, 20.689655172413794, 10.714285714285714], 'bp': 1.0, 'sys_len': 31, 'ref_len': 26} Bleu: {'bleu': 0.2559331300463092, 'precisions': [0.5806451612903226, 0.3333333333333333, 0.20689655172413793, 0.10714285714285714], 'brevity_penalty': 1.0, 'length_ratio': 1.1923076923076923, 'translation_length': 31, 'reference_length': 26} Rouge: {'rouge1': 0.7407407407407408, 'rouge2': 0.6153846153846153, 'rougeL': 0.5555555555555556, 'rougeLsum': 0.7407407407407408} Sari: {'sari': 26.156696685406867} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Hier kooperiert ein Verein der Bundesliga oder 2. Bundesliga mit lokalen Bildungsträgern, Initiativen oder auch Amateurvereinen.'] Prediction: ['Der Bundesliga und 2.\nBundesliga sind ein Verein der Bundesliga oder 2.\nBundesliga mit lokalen Bildungsträgern, Initiativen oder auch Amateurvereinen.\nDer Verein kooperiert mit lokalen Bildungsträgern, Initiativen oder auch Amateurvereinen.'] Label: [['Hier kooperiert ein Verein der Bundesliga oder 2.\nBundesliga mit Partnern wie Bildungsträgern oder Amateurvereinen.']] Sacrebleu: {'score': 24.735124939523608, 'counts': [14, 9, 7, 6], 'totals': [36, 35, 34, 33], 'precisions': [38.888888888888886, 25.714285714285715, 20.58823529411765, 18.181818181818183], 'bp': 1.0, 'sys_len': 36, 'ref_len': 17} Bleu: {'bleu': 0.2473512493952361, 'precisions': [0.3888888888888889, 0.2571428571428571, 0.20588235294117646, 0.18181818181818182], 'brevity_penalty': 1.0, 'length_ratio': 2.1176470588235294, 'translation_length': 36, 'reference_length': 17} Rouge: {'rouge1': 0.5416666666666666, 'rouge2': 0.34782608695652173, 'rougeL': 0.5, 'rougeLsum': 0.5416666666666666} Sari: {'sari': 21.806565656565656} Flesh Reading Ease: 37.95 ---------------------------------------- Source: ['Es gibt Trainingsangebote oder regelmäßige Fußballturniere.'] Prediction: ['Der Schweizer Trainingsangebote und regelmäßige Fußballturniere sind unter anderem auf der Suche.\nDas Team ist auf der Suche nach dem Trainingsangebote und regelmäßigen Turniere.'] Label: [['Es gibt Fußballtraining oder regelmäßige Fußballturniere.']] Sacrebleu: {'score': 3.197383344450448, 'counts': [3, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [11.538461538461538, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.11538461538461539, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.7142857142857144, 'translation_length': 26, 'reference_length': 7} Rouge: {'rouge1': 0.2222222222222222, 'rouge2': 0.1764705882352941, 'rougeL': 0.2222222222222222, 'rougeLsum': 0.2222222222222222} Sari: {'sari': 22.916666666666664} Flesh Reading Ease: 33.45 ---------------------------------------- Source: ['Seit Herbst 2015 können Kinder von Flüchtlingen zwischen acht und 14 Jahren an einem wöchentlichen Training teilnehmen.'] Prediction: ['Einige Kinder von Flüchtlingen können an einem Training teilnehmen.\nDie Kinder können sich an einem wöchentlichen Training teilnehmen.'] Label: [['Seit Herbst 2015 können Kinder von Flüchtlingen zwischen acht und 14 Jahren jede Woche an einem Training teilnehmen.']] Sacrebleu: {'score': 24.688498672025876, 'counts': [9, 6, 4, 2], 'totals': [20, 19, 18, 17], 'precisions': [45.0, 31.57894736842105, 22.22222222222222, 11.764705882352942], 'bp': 1.0, 'sys_len': 20, 'ref_len': 19} Bleu: {'bleu': 0.24688498672025874, 'precisions': [0.45, 0.3157894736842105, 0.2222222222222222, 0.11764705882352941], 'brevity_penalty': 1.0, 'length_ratio': 1.0526315789473684, 'translation_length': 20, 'reference_length': 19} Rouge: {'rouge1': 0.47619047619047616, 'rouge2': 0.35, 'rougeL': 0.380952380952381, 'rougeLsum': 0.47619047619047616} Sari: {'sari': 20.760165760165762} Flesh Reading Ease: 48.15 ---------------------------------------- Source: ['Sie kicken gemeinsam mit Kindern eines Partnervereins des 1. FC Köln.'] Prediction: ['Die Schweizer Frau ist mit ihrem Partner eines 1.\nFC Köln.\nSie ist mit Kindern eines Partnervereins.\nSie ist mit dem 1.\nFC Köln mit Kindern eines Partnervereins.'] Label: [['Sie spielen gemeinsam mit Kindern eines Partnervereins des 1.\nFC Köln.']] Sacrebleu: {'score': 18.082588865422494, 'counts': [10, 7, 5, 3], 'totals': [33, 32, 31, 30], 'precisions': [30.303030303030305, 21.875, 16.129032258064516, 10.0], 'bp': 1.0, 'sys_len': 33, 'ref_len': 13} Bleu: {'bleu': 0.18082588865422486, 'precisions': [0.30303030303030304, 0.21875, 0.16129032258064516, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 2.5384615384615383, 'translation_length': 33, 'reference_length': 13} Rouge: {'rouge1': 0.4285714285714285, 'rouge2': 0.3, 'rougeL': 0.4285714285714285, 'rougeLsum': 0.4285714285714285} Sari: {'sari': 36.20617944147356} Flesh Reading Ease: 85.25 ---------------------------------------- Source: ['Bei der Initiative engagieren sich auch 180 deutsche Unternehmen für eine Integration von Flüchtlingen in den deutschen Arbeitsmarkt.'] Prediction: ['Die deutsche Flüchtlinge-Plattform Initiative hat eine Initiative für eine Integration von Flüchtlingen in den deutschen Arbeitsmarkt geschrieben.\n180 deutsche Unternehmen sind bei der Initiative für eine Integration von Flüchtlingen in den deutschen Arbeitsmarkt.'] Label: [['Es beteiligen sich auch 180 deutsche Unternehmen.\nSie engagieren sich für die Integration von Flüchtlingen in den deutschen Arbeitsmarkt.']] Sacrebleu: {'score': 23.892453894896075, 'counts': [13, 9, 7, 5], 'totals': [35, 34, 33, 32], 'precisions': [37.142857142857146, 26.470588235294116, 21.21212121212121, 15.625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 21} Bleu: {'bleu': 0.2389245389489607, 'precisions': [0.37142857142857144, 0.2647058823529412, 0.21212121212121213, 0.15625], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 35, 'reference_length': 21} Rouge: {'rouge1': 0.4666666666666667, 'rouge2': 0.3448275862068966, 'rougeL': 0.43333333333333335, 'rougeLsum': 0.43333333333333335} Sari: {'sari': 42.16339235184736} Flesh Reading Ease: 34.8 ---------------------------------------- Source: ['Besonders lange und vielseitig frühstücken die Deutschen am Wochenende – sie lieben ihr „Sonntagsfrühstück“.'] Prediction: ['Am Wochenende wurde die Deutsche Staatskanal ein Paar erschienen.\nDas hat sie am Wochenende entschieden.\nDas hat sie am Sonntag zu Gast geschlossen.'] Label: [['Besonders lange frühstücken die Deutschen am Wochenende.\nSie lieben ihr „Sonntagsfrühstück“.']] Sacrebleu: {'score': 3.632928877985223, 'counts': [5, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 26, 'reference_length': 13} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.05555555555555555, 'rougeL': 0.2105263157894737, 'rougeLsum': 0.15789473684210528} Sari: {'sari': 22.316490698843637} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['69 Prozent der Deutschen wünschen sich bei einem ausgiebigen Sonntagsfrühstück ein Ei.'] Prediction: ['In Deutschland wünschen sich die Prozent der Deutschen ein Ei.\n69 Prozent der Deutschen wünschen sich bei einem ausgiebigen Sonntagsfrühstück ein Ei.'] Label: [['69 Prozent der Deutschen wünschen sich beim Sonntagsfrühstück ein Ei.']] Sacrebleu: {'score': 29.45642544824926, 'counts': [10, 8, 6, 4], 'totals': [24, 23, 22, 21], 'precisions': [41.666666666666664, 34.78260869565217, 27.272727272727273, 19.047619047619047], 'bp': 1.0, 'sys_len': 24, 'ref_len': 11} Bleu: {'bleu': 0.29456425448249246, 'precisions': [0.4166666666666667, 0.34782608695652173, 0.2727272727272727, 0.19047619047619047], 'brevity_penalty': 1.0, 'length_ratio': 2.1818181818181817, 'translation_length': 24, 'reference_length': 11} Rouge: {'rouge1': 0.6153846153846155, 'rouge2': 0.5405405405405406, 'rougeL': 0.6153846153846155, 'rougeLsum': 0.6153846153846155} Sari: {'sari': 57.89063451467543} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Ein Brötchen ist ein kleines Brot, es kann aus Weißmehl oder Vollkorn bestehen oder auch süß sein.'] Prediction: ['Ein Brötchen ist ein kleines Brot.\nEs kann aus Weißmehl oder Vollkorn bestehen oder auch süß sein.\nDas ist ein kleines Brot.'] Label: [['Ein Brötchen ist ein kleines Brot.\nEs kann aus Weißmehl oder Vollkorn bestehen oder auch süß sein.']] Sacrebleu: {'score': 74.40006427141951, 'counts': [19, 18, 17, 16], 'totals': [25, 24, 23, 22], 'precisions': [76.0, 75.0, 73.91304347826087, 72.72727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 19} Bleu: {'bleu': 0.7440006427141954, 'precisions': [0.76, 0.75, 0.7391304347826086, 0.7272727272727273], 'brevity_penalty': 1.0, 'length_ratio': 1.3157894736842106, 'translation_length': 25, 'reference_length': 19} Rouge: {'rouge1': 0.8837209302325582, 'rouge2': 0.878048780487805, 'rougeL': 0.8837209302325582, 'rougeLsum': 0.8837209302325582} Sari: {'sari': 83.33333333333334} Flesh Reading Ease: 96.65 ---------------------------------------- Source: ['Liest man die Statistiken, so wird Müsli immer beliebter, jedenfalls wenn man den Umsatz betrachtet:'] Prediction: ['Einige Menschen sind in der Schweiz auf der Suche, die sich auf den Statistiken betrachtet werden.\nDie Statistiken sind das nicht mehr, sondern auch die Statistiken.'] Label: [['Müsli wird immer beliebter, wenn man den Umsatz betrachtet:']] Sacrebleu: {'score': 1.633898440122165, 'counts': [3, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [10.0, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.727272727272727, 'translation_length': 30, 'reference_length': 11} Rouge: {'rouge1': 0.1111111111111111, 'rouge2': 0.0, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.1111111111111111} Sari: {'sari': 22.67602495543672} Flesh Reading Ease: 67.55 ---------------------------------------- Source: ['Sieben Jahre zuvor lag der Umsatz noch bei 275 Millionen Euro.'] Prediction: ['Der Umsatz in der Schweiz ist noch bei 275 Millionen Euro.\nDie Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Umsatz-Geschäft zuvor ist noch bei 275 Millionen Euro.'] Label: [['Sieben Jahre zuvor lag der Umsatz bei 275 Millionen Euro.']] Sacrebleu: {'score': 18.1852348536183, 'counts': [8, 4, 3, 2], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 19.047619047619047, 15.0, 10.526315789473685], 'bp': 1.0, 'sys_len': 22, 'ref_len': 11} Bleu: {'bleu': 0.18185234853618293, 'precisions': [0.36363636363636365, 0.19047619047619047, 0.15, 0.10526315789473684], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 22, 'reference_length': 11} Rouge: {'rouge1': 0.23728813559322035, 'rouge2': 0.14035087719298245, 'rougeL': 0.20338983050847456, 'rougeLsum': 0.23728813559322035} Sari: {'sari': 29.545454545454547} Flesh Reading Ease: -87.41 ---------------------------------------- Source: ['Erfunden wurde es vor über 100 Jahren in der Schweiz von Dr. Bircher-Benner, der eine „Apfeldiätspeise“ für seine Patienten entwickelt hat.'] Prediction: ['Eine Apfeldiätspeise für seine Patienten wurde in der Schweiz entwickelt.\nEs wurde eine "Apfeldiätspeise" entwickelt.'] Label: [['Erfunden wurde es vor über 100 Jahren in der Schweiz von Dr. Bircher-Benner.\nEr erfand eine „Apfeldiätspeise“ für seine Patienten.']] Sacrebleu: {'score': 11.666372204487834, 'counts': [10, 4, 2, 0], 'totals': [19, 18, 17, 16], 'precisions': [52.63157894736842, 22.22222222222222, 11.764705882352942, 3.125], 'bp': 0.8101577349324267, 'sys_len': 19, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.5263157894736842, 0.2222222222222222, 0.11764705882352941, 0.0], 'brevity_penalty': 0.8101577349324267, 'length_ratio': 0.8260869565217391, 'translation_length': 19, 'reference_length': 23} Rouge: {'rouge1': 0.5853658536585366, 'rouge2': 0.41025641025641024, 'rougeL': 0.34146341463414637, 'rougeLsum': 0.5365853658536586} Sari: {'sari': 20.95844396128676} Flesh Reading Ease: 43.8 ---------------------------------------- Source: ['Heute kennen die Varianten keine Grenzen, es gibt unendlich viele Fertigmischungen zu kaufen.'] Prediction: ['Die Grenzen in der Schweiz sind unendlich viele Fertigmischungen zu kaufen.\nDie Grenzen sind keine Grenzen, es gibt unendlich viele Fertigmischungen zu kaufen.'] Label: [['Heute gibt es viele Fertigmischungen zu kaufen.']] Sacrebleu: {'score': 14.710052131359536, 'counts': [7, 4, 3, 2], 'totals': [26, 25, 24, 23], 'precisions': [26.923076923076923, 16.0, 12.5, 8.695652173913043], 'bp': 1.0, 'sys_len': 26, 'ref_len': 8} Bleu: {'bleu': 0.14710052131359536, 'precisions': [0.2692307692307692, 0.16, 0.125, 0.08695652173913043], 'brevity_penalty': 1.0, 'length_ratio': 3.25, 'translation_length': 26, 'reference_length': 8} Rouge: {'rouge1': 0.4, 'rouge2': 0.21428571428571427, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 48.65079365079366} Flesh Reading Ease: 57.35 ---------------------------------------- Source: ['Aber die Zutaten sind immer Getreide wie Haferflocken. Hinzu kommen Trockenobst und Nüsse.'] Prediction: ['Die Zutaten von Trockenobst und Nüsse sind immer wie Trockenobst und Trockenobst.\nTrockenobst und Nüsse sind immer wie Trockenobst und Trockenobst.'] Label: [['Aber die Zutaten sind immer Getreide wie Haferflocken, hinzu kommen Trockenobst und Nüsse.']] Sacrebleu: {'score': 8.668528067348738, 'counts': [8, 3, 1, 0], 'totals': [23, 22, 21, 20], 'precisions': [34.78260869565217, 13.636363636363637, 4.761904761904762, 2.5], 'bp': 1.0, 'sys_len': 23, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.34782608695652173, 0.13636363636363635, 0.047619047619047616, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5333333333333334, 'translation_length': 23, 'reference_length': 15} Rouge: {'rouge1': 0.4864864864864865, 'rouge2': 0.2857142857142857, 'rougeL': 0.4864864864864865, 'rougeLsum': 0.3783783783783784} Sari: {'sari': 18.584595959595962} Flesh Reading Ease: 58.35 ---------------------------------------- Source: ['Fast hätte „Toni Erdmann“ es geschafft: Die tragisch-komische Geschichte einer Vater-Tochter Beziehung war für die Goldene Palme in Cannes (2016) und den Oscar (2017) nominiert.'] Prediction: ['Toni Erdmann (24) ist eine tragisch-komische Geschichte für die Goldene Palme in Cannes (2016) und den Oscar (2017) nominiert.\nDie tragisch-komische Geschichte einer Vater-Tochter Beziehung war für die Goldene Palme in Cannes (2016) und den Oscar (2017) nominiert.\nDie tragisch-komische Geschichte einer Vater-Tochter Beziehung war für die Goldene Palme in Cannes (2016) und den Oscar (2017) nominiert.'] Label: [['Der Film „Toni Erdmann“, eine tragisch-komische Geschichte über einen Vater und seine Tochter, war für die Goldene Palme in Cannes (2016) und für den Oscar (2017) nominiert.']] Sacrebleu: {'score': 22.791969512731956, 'counts': [23, 18, 15, 12], 'totals': [74, 73, 72, 71], 'precisions': [31.08108108108108, 24.65753424657534, 20.833333333333332, 16.901408450704224], 'bp': 1.0, 'sys_len': 74, 'ref_len': 34} Bleu: {'bleu': 0.22791969512731958, 'precisions': [0.3108108108108108, 0.2465753424657534, 0.20833333333333334, 0.16901408450704225], 'brevity_penalty': 1.0, 'length_ratio': 2.176470588235294, 'translation_length': 74, 'reference_length': 34} Rouge: {'rouge1': 0.5263157894736842, 'rouge2': 0.3655913978494624, 'rougeL': 0.5052631578947369, 'rougeLsum': 0.4631578947368421} Sari: {'sari': 58.92057149987636} Flesh Reading Ease: 49.85 ---------------------------------------- Source: ['FilmNach einer Studie des Bundeswirtschaftsministeriums (BMWI) erwirtschaftet die deutsche Filmindustrie 13,6 Milliarden Euro im Jahr und sie beschäftigt 161.000 Menschen.'] Prediction: ['Die deutsche Filmindustrie erwirtschaftet 13,6 Milliarden Euro im Jahr.\n161.000 Menschen beschäftigt sie im Jahr.'] Label: [['FilmNach einer Studie des Bundeswirtschaftsministeriums (BMWI) erwirtschaftet die deutsche Filmindustrie 13,6 Milliarden Euro im Jahr - das ist die Bruttowertschöpfung.\nIn dieser Branche arbeiten 161.000 Menschen.']] Sacrebleu: {'score': 13.7267063163554, 'counts': [12, 6, 3, 2], 'totals': [17, 16, 15, 14], 'precisions': [70.58823529411765, 37.5, 20.0, 14.285714285714286], 'bp': 0.4654708140240617, 'sys_len': 17, 'ref_len': 30} Bleu: {'bleu': 0.13726706316355403, 'precisions': [0.7058823529411765, 0.375, 0.2, 0.14285714285714285], 'brevity_penalty': 0.4654708140240617, 'length_ratio': 0.5666666666666667, 'translation_length': 17, 'reference_length': 30} Rouge: {'rouge1': 0.5652173913043479, 'rouge2': 0.409090909090909, 'rougeL': 0.5217391304347826, 'rougeLsum': 0.5217391304347826} Sari: {'sari': 24.342592592592595} Flesh Reading Ease: 55.5 ---------------------------------------- Source: ['Denn sie hat große wirtschaftliche Bedeutung.'] Prediction: ['Eine Frau hat große wirtschaftliche Bedeutung.\nSie hat große wirtschaftliche Bedeutung.'] Label: [['Die Filmindustrie hat eine große wirtschaftliche Bedeutung.']] Sacrebleu: {'score': 20.448007360218387, 'counts': [5, 3, 2, 1], 'totals': [13, 12, 11, 10], 'precisions': [38.46153846153846, 25.0, 18.181818181818183, 10.0], 'bp': 1.0, 'sys_len': 13, 'ref_len': 8} Bleu: {'bleu': 0.2044800736021839, 'precisions': [0.38461538461538464, 0.25, 0.18181818181818182, 0.1], 'brevity_penalty': 1.0, 'length_ratio': 1.625, 'translation_length': 13, 'reference_length': 8} Rouge: {'rouge1': 0.5714285714285714, 'rouge2': 0.3157894736842105, 'rougeL': 0.4761904761904762, 'rougeLsum': 0.4761904761904762} Sari: {'sari': 60.21464646464647} Flesh Reading Ease: 45.8 ---------------------------------------- Source: ['Jeder Euro Wertschöpfung, der aus der Filmwirtschaft kommt, bedeutet zusätzlich 1,60 Euro an Wertschöpfung in der gesamten Volkswirtschaft.'] Prediction: ['Die Filmwirtschaft kommt zusätzlich 1,60 Euro an Wertschöpfung.\nDer Euro wertschöpfung kommt aus der Filmwirtschaft.\nDie Filmwirtschaft kommt zusätzlich 1,60 Euro an Wertschöpfung.'] Label: [['Denn jeder Euro Wertschöpfung, der aus der Filmwirtschaft kommt, bedeutet zusätzlich 1,60 Euro an Wertschöpfung in der gesamten Volkswirtschaft.']] Sacrebleu: {'score': 20.80315522738391, 'counts': [12, 7, 4, 2], 'totals': [26, 25, 24, 23], 'precisions': [46.15384615384615, 28.0, 16.666666666666668, 8.695652173913043], 'bp': 1.0, 'sys_len': 26, 'ref_len': 22} Bleu: {'bleu': 0.2080315522738391, 'precisions': [0.46153846153846156, 0.28, 0.16666666666666666, 0.08695652173913043], 'brevity_penalty': 1.0, 'length_ratio': 1.1818181818181819, 'translation_length': 26, 'reference_length': 22} Rouge: {'rouge1': 0.6037735849056605, 'rouge2': 0.5098039215686274, 'rougeL': 0.6037735849056605, 'rougeLsum': 0.5660377358490566} Sari: {'sari': 15.699671172816954} Flesh Reading Ease: 67.0 ---------------------------------------- Source: ['Das ist zum Beispiel die Verwertung der Filme außerhalb der Kinos, etwa auf DVD oder über die Filmfestspiele wie der Berlinale.'] Prediction: ['Die Kinos veröffentlicht ihren neuen Beispiel.\nDas ist zum Beispiel die Verwertung der Filme außerhalb der Kinos, etwa auf DVD oder über die Filmfestspiele wie der Berlinale.'] Label: [['Das ist zum Beispiel die Verwertung der Filme außerhalb der Kinos, etwa auf DVD.\nEs gibt mehrere bekannte Filmfestspiele wie die Berlinale.']] Sacrebleu: {'score': 53.13194408199878, 'counts': [21, 16, 13, 12], 'totals': [30, 29, 28, 27], 'precisions': [70.0, 55.172413793103445, 46.42857142857143, 44.44444444444444], 'bp': 1.0, 'sys_len': 30, 'ref_len': 25} Bleu: {'bleu': 0.5313194408199876, 'precisions': [0.7, 0.5517241379310345, 0.4642857142857143, 0.4444444444444444], 'brevity_penalty': 1.0, 'length_ratio': 1.2, 'translation_length': 30, 'reference_length': 25} Rouge: {'rouge1': 0.7307692307692308, 'rouge2': 0.6, 'rougeL': 0.6923076923076923, 'rougeLsum': 0.7307692307692308} Sari: {'sari': 60.790535357133066} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['Es profitieren zum Beispiel die Gastronomie und der Einzelhandel.'] Prediction: ['Die Gastronomie und der Einzelhandel profitieren zum Beispiel die Gastronomie und der Einzelhandel.\nDie Gastronomie und der Einzelhandel profitieren zum Beispiel die Gastronomie und der Gastronomie.'] Label: [['Es profitieren die Gastronomie und der Einzelhandel.']] Sacrebleu: {'score': 17.098323692758395, 'counts': [7, 5, 4, 3], 'totals': [28, 27, 26, 25], 'precisions': [25.0, 18.51851851851852, 15.384615384615385, 12.0], 'bp': 1.0, 'sys_len': 28, 'ref_len': 8} Bleu: {'bleu': 0.17098323692758394, 'precisions': [0.25, 0.18518518518518517, 0.15384615384615385, 0.12], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 28, 'reference_length': 8} Rouge: {'rouge1': 0.36363636363636365, 'rouge2': 0.25806451612903225, 'rougeL': 0.36363636363636365, 'rougeLsum': 0.36363636363636365} Sari: {'sari': 49.43128766658179} Flesh Reading Ease: 26.6 ---------------------------------------- Source: ['Deutschland ist auch bekannt für seine Filmtechnik.'] Prediction: ['Die Schweizer Filmtechnik ist in Deutschland bekannt für seine Filmtechnik.\nDie Schweizer Filmtechnik ist auch bekannt für seine Filmtechnik.'] Label: [['Deutschland ist außerdem bekannt für seine Filmtechnik.']] Sacrebleu: {'score': 18.493046910349435, 'counts': [7, 4, 3, 2], 'totals': [21, 20, 19, 18], 'precisions': [33.333333333333336, 20.0, 15.789473684210526, 11.11111111111111], 'bp': 1.0, 'sys_len': 21, 'ref_len': 8} Bleu: {'bleu': 0.18493046910349434, 'precisions': [0.3333333333333333, 0.2, 0.15789473684210525, 0.1111111111111111], 'brevity_penalty': 1.0, 'length_ratio': 2.625, 'translation_length': 21, 'reference_length': 8} Rouge: {'rouge1': 0.4666666666666666, 'rouge2': 0.28571428571428575, 'rougeL': 0.4666666666666666, 'rougeLsum': 0.4666666666666666} Sari: {'sari': 50.6439393939394} Flesh Reading Ease: 65.2 ---------------------------------------- Source: ['Viele Spezialtechniken aus den Produktionen werden auch in anderen Branchen verwendet. Ein Beispiel sind Spezialkameras, die bei komplizierten medizinischen Eingriffen beste Bilder liefern.'] Prediction: ['Spezialtechniken aus den Produktionen werden auch in anderen Branchen verwendet.\nEin Beispiel sind bei komplizierten medizinischen Eingriffen beste Bilder liefern.'] Label: [['Viele Spezialtechniken aus dem Film werden auch in anderen Branchen verwendet, darunter Spezialkameras bei komplizierten medizinischen Operationen.']] Sacrebleu: {'score': 30.09429889037876, 'counts': [12, 8, 5, 3], 'totals': [22, 21, 20, 19], 'precisions': [54.54545454545455, 38.095238095238095, 25.0, 15.789473684210526], 'bp': 1.0, 'sys_len': 22, 'ref_len': 19} Bleu: {'bleu': 0.30094298890378757, 'precisions': [0.5454545454545454, 0.38095238095238093, 0.25, 0.15789473684210525], 'brevity_penalty': 1.0, 'length_ratio': 1.1578947368421053, 'translation_length': 22, 'reference_length': 19} Rouge: {'rouge1': 0.5945945945945946, 'rouge2': 0.45714285714285713, 'rougeL': 0.5945945945945946, 'rougeLsum': 0.5945945945945946} Sari: {'sari': 40.14741908383729} Flesh Reading Ease: 29.6 ---------------------------------------- Source: ['Über Listen haben die Parteien vorher festgelegt, welche Personen sie über die Zweitstimme ins Parlament schicken möchten.'] Prediction: ['Die Parteien haben sich vorher festgelegt, welche Personen über die Zweitstimme ins Parlament schicken möchten.\nDie Parteien haben sie vorher festgelegt, welche Personen über die Zweitstimme ins Parlament schicken möchten.'] Label: [['Die Parteien haben vorher festgelegt, welche Personen sie über die Zweitstimme ins Parlament schicken möchten.']] Sacrebleu: {'score': 34.33574272439591, 'counts': [17, 13, 10, 7], 'totals': [34, 33, 32, 31], 'precisions': [50.0, 39.39393939393939, 31.25, 22.580645161290324], 'bp': 1.0, 'sys_len': 34, 'ref_len': 17} Bleu: {'bleu': 0.34335742724395907, 'precisions': [0.5, 0.3939393939393939, 0.3125, 0.22580645161290322], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 34, 'reference_length': 17} Rouge: {'rouge1': 0.6666666666666666, 'rouge2': 0.5217391304347827, 'rougeL': 0.6666666666666666, 'rougeLsum': 0.625} Sari: {'sari': 56.28688441188441} Flesh Reading Ease: 42.15 ---------------------------------------- Source: ['Ob Angela Merkel zum vierten Mal als Bundeskanzlerin gewählt wird oder ob Martin Schulz, ihr Herausforderer, gewinnt, das entscheiden die Bürger nur indirekt.'] Prediction: ['Die Schweiz verliert einen vierten Mal als Bundeskanzlerin.\nDie Bürger sind nicht nur indirekt.\nDie Schweiz entscheiden die Bürger nur indirekt.'] Label: [['Wird Angela Merkel zum vierten Mal als Bundeskanzlerin gewählt?\nOder wird Martin Schulz gewinnen?\nDas entscheiden die Bürger nur indirekt.']] Sacrebleu: {'score': 29.45642544824926, 'counts': [10, 8, 6, 4], 'totals': [24, 23, 22, 21], 'precisions': [41.666666666666664, 34.78260869565217, 27.272727272727273, 19.047619047619047], 'bp': 1.0, 'sys_len': 24, 'ref_len': 23} Bleu: {'bleu': 0.29456425448249246, 'precisions': [0.4166666666666667, 0.34782608695652173, 0.2727272727272727, 0.19047619047619047], 'brevity_penalty': 1.0, 'length_ratio': 1.0434782608695652, 'translation_length': 24, 'reference_length': 23} Rouge: {'rouge1': 0.4444444444444445, 'rouge2': 0.37209302325581395, 'rougeL': 0.4444444444444445, 'rougeLsum': 0.4444444444444445} Sari: {'sari': 43.74038747570828} Flesh Reading Ease: 73.55 ---------------------------------------- Source: ['Erst die gewählten Mitglieder des Bundestages stimmen dann für den Bundeskanzler oder die Kanzlerin. Insgesamt 42 Parteien nehmen an der Wahl 2017 teil.'] Prediction: ['42 Parteien nehmen an der Wahl 2017 teil.\nInsgesamt 42 Parteien nehmen an der Wahl 2017 teil.'] Label: [['Erst die gewählten Mitglieder des Bundestages stimmen dann für den Bundeskanzler oder die Kanzlerin.42 Parteien nehmen an der Wahl 2017 teil.']] Sacrebleu: {'score': 33.50796439305594, 'counts': [10, 8, 7, 6], 'totals': [19, 18, 17, 16], 'precisions': [52.63157894736842, 44.44444444444444, 41.1764705882353, 37.5], 'bp': 0.7686205265937358, 'sys_len': 19, 'ref_len': 24} Bleu: {'bleu': 0.33507964393055945, 'precisions': [0.5263157894736842, 0.4444444444444444, 0.4117647058823529, 0.375], 'brevity_penalty': 0.7686205265937356, 'length_ratio': 0.7916666666666666, 'translation_length': 19, 'reference_length': 24} Rouge: {'rouge1': 0.39024390243902435, 'rouge2': 0.358974358974359, 'rougeL': 0.39024390243902435, 'rougeLsum': 0.39024390243902435} Sari: {'sari': 26.901692080653234} Flesh Reading Ease: 83.75 ---------------------------------------- Source: ['Die wichtigsten Parteien sind CDU/CSU, SPD, Bündnis 90/Die Grünen und die FDP.Noch Der Wahlkampf ist ein Kampf um die Stimmen der Wähler.'] Prediction: ['Der Wahlkampf ist ein Kampf um die Stimmen der Wähler.\nDie wichtigsten Parteien sind CDU/CSU, SPD, Bündnis 90/Die Grünen und die FDP.\nNoch der Wahlkampf ist ein Kampf um die Stimmen der Wähler.'] Label: [['Die wichtigsten Parteien sind CDU/CSU, SPD, Bündnis 90/Die Grünen und die FDP.Der Wahlkampf ist ein Kampf um die Stimmen der Wähler.']] Sacrebleu: {'score': 66.46247845960802, 'counts': [30, 28, 26, 24], 'totals': [42, 41, 40, 39], 'precisions': [71.42857142857143, 68.29268292682927, 65.0, 61.53846153846154], 'bp': 1.0, 'sys_len': 42, 'ref_len': 30} Bleu: {'bleu': 0.6646247845960804, 'precisions': [0.7142857142857143, 0.6829268292682927, 0.65, 0.6153846153846154], 'brevity_penalty': 1.0, 'length_ratio': 1.4, 'translation_length': 42, 'reference_length': 30} Rouge: {'rouge1': 0.8181818181818181, 'rouge2': 0.78125, 'rougeL': 0.8181818181818181, 'rougeLsum': 0.8181818181818181} Sari: {'sari': 73.43976761805081} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Gott sah, dass es gut war.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag zu Gast geworden.\nEr war mit seinem Partner auf der Kamera geworden.\nDer Mann war gut geworden, dass es gut war.'] Label: [['Gott sah: Das ist gut.']] Sacrebleu: {'score': 1.1216940038341034, 'counts': [2, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [5.128205128205129, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.05128205128205128, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.571428571428571, 'translation_length': 39, 'reference_length': 7} Rouge: {'rouge1': 0.049999999999999996, 'rouge2': 0.0, 'rougeL': 0.049999999999999996, 'rougeLsum': 0.049999999999999996} Sari: {'sari': 24.166666666666668} Flesh Reading Ease: 92.25 ---------------------------------------- Source: ['Dann trennte Gott zwischen die Helligkeit und von der Finsternis.'] Prediction: ['Der Finsternis ist ein grosser Gott.\nDer Mann trennte sich zwischen die Helligkeit und der Finsternis.'] Label: [['Dann trennte Gott das Licht und die Dunkelheit.']] Sacrebleu: {'score': 3.211547431691929, 'counts': [5, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [27.77777777777778, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 18, 'reference_length': 9} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.0, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.25} Sari: {'sari': 30.000000000000004} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Da entstand Helligkeit.'] Prediction: ['Die Polizei verliert nach einem Jahr 2020 einen Sieg in der Nacht auf Sonntag.\nDa entstand ein Paar, der sich nicht mehr verletzt hatte, wurde niemand verletzt.\nNun wurde der Mann von einem Mann verletzt.'] Label: [['Und es wurde hell.']] Sacrebleu: {'score': 1.092534162077208, 'counts': [2, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [5.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.0, 'translation_length': 40, 'reference_length': 5} Rouge: {'rouge1': 0.05128205128205128, 'rouge2': 0.0, 'rougeL': 0.05128205128205128, 'rougeLsum': 0.05128205128205128} Sari: {'sari': 54.704301075268816} Flesh Reading Ease: 86.4 ---------------------------------------- Source: ['Gott nannte die Helligkeit „Tag “, die Finsternis aber nannte er „Nacht “.'] Prediction: ['Der Finsternis wurde von der "Tag"-Staffel aufgefunden.\nDer Finsternis nannte nach der Helligkeit "Nacht " gewesen sein.'] Label: [['Und Gott nannte das Licht Tag.\nUnd Gott nannte die Dunkelheit Nacht.']] Sacrebleu: {'score': 2.4623373672221804, 'counts': [5, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [21.73913043478261, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.21739130434782608, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6428571428571428, 'translation_length': 23, 'reference_length': 14} Rouge: {'rouge1': 0.20689655172413793, 'rouge2': 0.0, 'rougeL': 0.20689655172413793, 'rougeLsum': 0.20689655172413793} Sari: {'sari': 43.184838037779215} Flesh Reading Ease: 60.85 ---------------------------------------- Source: ['Gott nannte das Trockene „Erde “ und den Ort des Wassers nannte er „Meer “.'] Prediction: ['Ein junger Mann wurde in der Nacht auf Sonntag von seinem 19.\nJuni verhaftet.\nEr wurde dabei von einem Trocken entdeckt.\nNun wurde er von einem Wassers-Trocken enthüllt.'] Label: [['Gott sagte: Die trockene Stelle nenne ich Erde.\nUnd Gott sagte: Das Wasser nenne ich Meer.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 32, 'reference_length': 20} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 57.936507936507944} Flesh Reading Ease: 71.25 ---------------------------------------- Source: ['Gott erschuf die großen Meereslebewesen und all die verschiedenen Lebewesen, die im Wasser schwärmen und all die verschiedenen geflügelten Tiere.'] Prediction: ['In den großen Meereslebewesen sind verschiedene Lebewesen geflügelt.\nDie verschiedenen Tiere sind im Wasser schwärmt.\nDie großen Meereslebewesen sind allerdings im Wasser schwärmt.'] Label: [['Und so geschah es: Da gab es große Lebe·wesen im Meer.\nViele Fische und andere Meeres·wesen.\nUnd viele verschiedene Vögel am Himmel.']] Sacrebleu: {'score': 2.1601524349994397, 'counts': [5, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [19.23076923076923, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.19230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 26, 'reference_length': 26} Rouge: {'rouge1': 0.11111111111111112, 'rouge2': 0.0, 'rougeL': 0.07407407407407408, 'rougeLsum': 0.11111111111111112} Sari: {'sari': 43.999287749287745} Flesh Reading Ease: 43.6 ---------------------------------------- Source: ['Im Anfang von Gottes Schöpfung von Himmel und Erde war die Erde nicht und nichts: Dunkelheit war über der Oberfläche der Tiefe und ein Wind Gottes stürmte über der Oberfläche des Wassers.'] Prediction: ['Im Anfang von Gottes Schöpfung von Himmel und Erde war die Erde nicht und nichts.\nDunkelheit war über der Oberfläche der Tiefe und ein Wind Gottes stürmte über der Oberfläche des Wassers.\nIm Anfang von Gottes Schöpfung von Himmel und Erde war die Erde nicht und nichts.'] Label: [['So hat Gott die Welt gemacht: Am Anfang gab es die Erde noch nicht.\nEs gab nur Wasser und Dunkelheit.\nEs war dunkel über dem Wasser.\nGott war ein Sturm.\nDer Sturm fegte über dem Wasser.']] Sacrebleu: {'score': 2.4133706294558275, 'counts': [15, 1, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [30.0, 2.0408163265306123, 1.0416666666666667, 0.5319148936170213], 'bp': 1.0, 'sys_len': 50, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.3, 0.02040816326530612, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1904761904761905, 'translation_length': 50, 'reference_length': 42} Rouge: {'rouge1': 0.2954545454545454, 'rouge2': 0.023255813953488372, 'rougeL': 0.2272727272727273, 'rougeLsum': 0.25} Sari: {'sari': 30.203241462991855} Flesh Reading Ease: 76.55 ---------------------------------------- Source: ['Es wurde Abend und es wurde Morgen: Ein „Tag “.'] Prediction: ['Ein Tag auf Social Media wurde von der 20.\nJuni veröffentlicht.\nEs wurde ein Tag gekommen.'] Label: [['Es wurde Abend.\nUnd es wurde Tag: Der 1.\nTag war zu Ende.']] Sacrebleu: {'score': 5.7259987315337755, 'counts': [8, 1, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [42.10526315789474, 5.555555555555555, 2.9411764705882355, 1.5625], 'bp': 1.0, 'sys_len': 19, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.42105263157894735, 0.05555555555555555, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1176470588235294, 'translation_length': 19, 'reference_length': 17} Rouge: {'rouge1': 0.4000000000000001, 'rouge2': 0.07142857142857144, 'rougeL': 0.26666666666666666, 'rougeLsum': 0.4000000000000001} Sari: {'sari': 43.154761904761905} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Es wurde Abend und es wurde Morgen: Ein zweiter Tag.'] Prediction: ['Im Alter von 24 Jahren wurde ein zweiter Tag vergangene Woche veröffentlicht.\nIm Alter von 24 Jahren wurde ein zweiter Tag veröffentlicht.\nNun wurde ein zweiter Tag veröffentlicht.'] Label: [['Es wurde Abend.\nUnd es wurde Morgen: Der 2.\nTag war zu Ende.']] Sacrebleu: {'score': 1.877081263233555, 'counts': [6, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [19.35483870967742, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.1935483870967742, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8235294117647058, 'translation_length': 31, 'reference_length': 17} Rouge: {'rouge1': 0.13636363636363635, 'rouge2': 0.0, 'rougeL': 0.13636363636363635, 'rougeLsum': 0.13636363636363635} Sari: {'sari': 18.23611111111111} Flesh Reading Ease: 65.4 ---------------------------------------- Source: ['Gott nannte das Schalenförmige „Himmel “.'] Prediction: ['Der Schalenförmige "Himmel" ist ein neuer Schalenförmiger.\nDie Schalenförmige wurde in den vergangenen Tagen verletzt.\nDie Schalenförmige wurde in der Nacht auf Sonntag von einem Mann festgenommen.'] Label: [['Gott sagte: Himmel.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.4, 'translation_length': 32, 'reference_length': 5} Rouge: {'rouge1': 0.0588235294117647, 'rouge2': 0.0, 'rougeL': 0.0588235294117647, 'rougeLsum': 0.0588235294117647} Sari: {'sari': 61.52777777777777} Flesh Reading Ease: 48.15 ---------------------------------------- Source: ['So geschah es.'] Prediction: ['Der französische Präsident hatte sich mit einem ähnlichen Schritt vor dem Jahr 2020 verstorben.\nEr warnt, dass er sich nicht mehr geschah es.\nNun hat er sich geschah, wie er sich das nicht mehr verstorben hatte.'] Label: [['Die Schale ist der Himmel.']] Sacrebleu: {'score': 0.8954307276600084, 'counts': [1, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [2.4390243902439024, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.024390243902439025, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.833333333333333, 'translation_length': 41, 'reference_length': 6} Rouge: {'rouge1': 0.046511627906976744, 'rouge2': 0.0, 'rougeL': 0.046511627906976744, 'rougeLsum': 0.046511627906976744} Sari: {'sari': 46.40804597701149} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['Dann sprach Gott: Das Wasser soll sich von unter dem Himmel weg an einen Ort sammeln und Trockenes soll zum Vorschein kommen.'] Prediction: ['Dann sprach Gott: Das Wasser soll sich von unter dem Himmel weg an einen Ort sammeln und Trockenes soll zum Vorschein kommen.\nDas Wasser soll sich von unter dem Himmel weg an einen Ort sammeln und Trockenes soll zum Vorschein kommen.'] Label: [['Da sagte Gott: Das Wasser unter dem Himmel soll sich sammeln.\nDas Wasser soll eine Stelle frei lassen.\nDie Stelle soll trocken sein.']] Sacrebleu: {'score': 14.499467512563468, 'counts': [16, 9, 5, 2], 'totals': [44, 43, 42, 41], 'precisions': [36.36363636363637, 20.930232558139537, 11.904761904761905, 4.878048780487805], 'bp': 1.0, 'sys_len': 44, 'ref_len': 27} Bleu: {'bleu': 0.14499467512563471, 'precisions': [0.36363636363636365, 0.20930232558139536, 0.11904761904761904, 0.04878048780487805], 'brevity_penalty': 1.0, 'length_ratio': 1.6296296296296295, 'translation_length': 44, 'reference_length': 27} Rouge: {'rouge1': 0.40625, 'rouge2': 0.22580645161290322, 'rougeL': 0.34375000000000006, 'rougeLsum': 0.34375000000000006} Sari: {'sari': 48.178913711286846} Flesh Reading Ease: 83.45 ---------------------------------------- Source: ['Es wurde Abend und es wurde Morgen:'] Prediction: ['Im Alter von 99 Jahren wurde am Freitag ein Mann verhaftet.\nEr wurde von der Polizei verhaftet.\nNun wurde er zu einer Woche verhaftet.'] Label: [['Es wurde Abend.\nUnd es wurde Morgen:']] Sacrebleu: {'score': 1.826472886268134, 'counts': [3, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [11.11111111111111, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 27, 'reference_length': 9} Rouge: {'rouge1': 0.12903225806451613, 'rouge2': 0.0, 'rougeL': 0.12903225806451613, 'rougeLsum': 0.12903225806451613} Sari: {'sari': 13.37719298245614} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Es wurde Abend und es wurde Morgen: Ein dritter Tag.'] Prediction: ['Im Alter von 24 Jahren wurde ein dritter Tag veröffentlicht.\nDas wurde Abend und es wurde Morgen.'] Label: [['Es wurde Abend.\nUnd es wurde Morgen: Der 3.\nTag war zu Ende.']] Sacrebleu: {'score': 10.657284485555579, 'counts': [8, 3, 1, 0], 'totals': [19, 18, 17, 16], 'precisions': [42.10526315789474, 16.666666666666668, 5.882352941176471, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.42105263157894735, 0.16666666666666666, 0.058823529411764705, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1176470588235294, 'translation_length': 19, 'reference_length': 17} Rouge: {'rouge1': 0.45161290322580644, 'rouge2': 0.3448275862068966, 'rougeL': 0.3870967741935484, 'rougeLsum': 0.3870967741935484} Sari: {'sari': 34.849123229404924} Flesh Reading Ease: 77.9 ---------------------------------------- Source: ['Gott machte die beiden großen Lichter: das größere Licht zur Herrschaft über den Tag und das kleinere Licht zur Herrschaft über die Nacht; auch die Sterne.'] Prediction: ['Die beiden großen Lichter sind das größere Licht zur Herrschaft über den Tag und das kleinere Licht zur Herrschaft über die Nacht.\nAuch die Sterne sind das größere Licht zur Herrschaft über den Tag und das kleinere Licht zur Herrschaft über die Nacht.'] Label: [['Gott machte 2 große Lichter: Das große Licht war für den Tag.\nWir nennen das Licht Sonne.\nDas kleine Licht war für die Nacht.\nWir nennen das Licht Mond.\nGott machte auch die Sterne.']] Sacrebleu: {'score': 5.381887058206485, 'counts': [15, 4, 1, 0], 'totals': [45, 44, 43, 42], 'precisions': [33.333333333333336, 9.090909090909092, 2.3255813953488373, 1.1904761904761905], 'bp': 1.0, 'sys_len': 45, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.09090909090909091, 0.023255813953488372, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.125, 'translation_length': 45, 'reference_length': 40} Rouge: {'rouge1': 0.40476190476190477, 'rouge2': 0.0975609756097561, 'rougeL': 0.30952380952380953, 'rougeLsum': 0.40476190476190477} Sari: {'sari': 29.544153175929022} Flesh Reading Ease: 76.6 ---------------------------------------- Source: ['Und Gott segnete sie folgendermaßen: „Seid fruchtbar und vermehrt euch und füllt das Wasser im Meer, und die Vögel sollen sich über der Erde vermehren! “'] Prediction: ['Eine Frau hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Bern vermehrt und fruchtbar und vermehrt euch.\nSie hatte sich in der Nacht fruchtbar und vermehrt euch und füllt das Wasser im Meer.\nDie Frau sei fruchtbar und vermehrt euch und füllt das Wasser im Meer, und die Vögel sollen sich über der Erde vermehren!'] Label: [['Gott segnete alle Lebe·wesen: Seid fruchtbar und vermehrt euch.\nIch möchte viele Tiere im Meer und viele Vögel auf dem Land.']] Sacrebleu: {'score': 6.820527636106667, 'counts': [11, 5, 3, 2], 'totals': [64, 63, 62, 61], 'precisions': [17.1875, 7.936507936507937, 4.838709677419355, 3.278688524590164], 'bp': 1.0, 'sys_len': 64, 'ref_len': 24} Bleu: {'bleu': 0.06820527636106664, 'precisions': [0.171875, 0.07936507936507936, 0.04838709677419355, 0.03278688524590164], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 64, 'reference_length': 24} Rouge: {'rouge1': 0.22988505747126436, 'rouge2': 0.1411764705882353, 'rougeL': 0.20689655172413796, 'rougeLsum': 0.20689655172413796} Sari: {'sari': 39.60292463527517} Flesh Reading Ease: 83.95 ---------------------------------------- Source: ['Dann sprach Gott: Das Wasser soll schwärmen mit Schwärmen lebendiger Wesen und Vögel sollen über der Erde unter dem Schalenförmigen des Himmels fliegen.'] Prediction: ['Dann sprach Gott: Das Wasser soll schwärmen mit Schwärmen lebendiger Wesen und Vögel unter dem Schalenförmigen des Himmels fliegen.\nDas Wasser soll schwärmen mit Schwärmen lebendiger Wesen und Vögel schwärmen über der Erde unter dem Schalenförmigen des Himmels fliegen.'] Label: [['Gott sagte: Ich möchte Leben im Wasser: Ich möchte Fische·Schwärme.\nUnd ich möchte Vögel am Himmel.']] Sacrebleu: {'score': 1.3667950042025578, 'counts': [6, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [14.285714285714286, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 42, 'reference_length': 20} Rouge: {'rouge1': 0.17142857142857143, 'rouge2': 0.02941176470588235, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.17142857142857143} Sari: {'sari': 36.7816091954023} Flesh Reading Ease: 55.2 ---------------------------------------- Source: ['Dann sprach Gott: Die Erde soll verschiedenste Arten von Lebewesen hervorbringen: Verschiedenste Arten von Vieh, Reptilien und wilden Tieren.'] Prediction: ['Der Lebewesen-Konzern hat verschiedene Arten von Lebewesen hervorbringen.\nDas soll verschiedene Arten von Vieh, Reptilien und wilden Tieren hervorbringen.\nDas hat die Erde aufgezeichnet.'] Label: [['Gott sagte: Ich möchte Tiere auf der Erde.\nAlle Arten: • Nutz·tiere, • wilde Tiere und • Reptilien.\n_Reptilien sind zum Beispiel Schlangen.']] Sacrebleu: {'score': 2.09096941710242, 'counts': [8, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [28.571428571428573, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 0.9310627797040228, 'sys_len': 28, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9310627797040228, 'length_ratio': 0.9333333333333333, 'translation_length': 28, 'reference_length': 30} Rouge: {'rouge1': 0.21276595744680854, 'rouge2': 0.0, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.21276595744680854} Sari: {'sari': 34.91350098091671} Flesh Reading Ease: 37.45 ---------------------------------------- Source: ['Gott sah, dass die Helligkeit gut war.'] Prediction: ['Die Helligkeit war gut.\nDie Helligkeit war gut.'] Label: [['Gott schaute herum: Und Gott war zufrieden.']] Sacrebleu: {'score': 4.990049701936832, 'counts': [2, 0, 0, 0], 'totals': [10, 9, 8, 7], 'precisions': [20.0, 5.555555555555555, 3.125, 1.7857142857142858], 'bp': 1.0, 'sys_len': 10, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1111111111111112, 'translation_length': 10, 'reference_length': 9} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 52.083333333333336} Flesh Reading Ease: 88.25 ---------------------------------------- Source: ['Es wurde Abend und es wurde Morgen: Ein fünfter Tag.'] Prediction: ['Ein fünfter Tag wurde in der Nacht auf Sonntagabend veröffentlicht.\nEs wurde Abend und es wurde Morgen.'] Label: [['Es wurde Abend.\nUnd es wurde Morgen.\nDer 5.\nTag war zu Ende.']] Sacrebleu: {'score': 19.51797195341104, 'counts': [9, 5, 3, 1], 'totals': [19, 18, 17, 16], 'precisions': [47.36842105263158, 27.77777777777778, 17.647058823529413, 6.25], 'bp': 1.0, 'sys_len': 19, 'ref_len': 17} Bleu: {'bleu': 0.1951797195341104, 'precisions': [0.47368421052631576, 0.2777777777777778, 0.17647058823529413, 0.0625], 'brevity_penalty': 1.0, 'length_ratio': 1.1176470588235294, 'translation_length': 19, 'reference_length': 17} Rouge: {'rouge1': 0.5625, 'rouge2': 0.4, 'rougeL': 0.4375, 'rougeLsum': 0.5625} Sari: {'sari': 59.27460160612335} Flesh Reading Ease: 77.9 ---------------------------------------- Source: ['Gott machte verschiedenste Arten von wilden Tieren, verschiedenste Arten von Vieh und all die verschiedenen Arten von Reptilien.'] Prediction: ['Der Schweizer Gast Gast hat seine Tiere gefährlich.\nDer Gast war mit wilden Tieren, verschiedenste Arten von Vieh und all die verschiedenen Arten von Reptilien.\nGast gab es auch die Tiere von Tieren und Vieh.'] Label: [['Gott machte alle die vielen verschiedenen Tiere.']] Sacrebleu: {'score': 1.3339264902154053, 'counts': [4, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [10.256410256410257, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.10256410256410256, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.875, 'translation_length': 39, 'reference_length': 8} Rouge: {'rouge1': 0.13953488372093023, 'rouge2': 0.0, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.13953488372093023} Sari: {'sari': 31.38888888888889} Flesh Reading Ease: 74.7 ---------------------------------------- Source: ['Weiterhin sprach Gott: Die Erde soll auf Erden Grünes grünen lassen: Samen tragendes Getreide und verschiedenste Arten von Frucht tragenden Fruchtbäumen, die deren Früchte ihren Samen in sich haben.'] Prediction: ['Erden Grünes soll eine Erde grünen lassen.\nSamen tragendes Getreide und verschiedenste Arten von Frucht tragenden Fruchtbäumen sollen die Früchte ihren Samen in sich haben.'] Label: [['Es ging weiter: Gott sagte: Auf der Erde soll es grün und bunt werden.\nKorn soll wachsen.\nAus dem Korn macht man Brot.\nBäume wachsen, Bäume sollen wachsen.\nAn den Bäumen soll Obst wachsen.']] Sacrebleu: {'score': 1.246223729071706, 'counts': [6, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [22.22222222222222, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 0.5737534207374327, 'sys_len': 27, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.0, 0.0, 0.0], 'brevity_penalty': 0.573753420737433, 'length_ratio': 0.6428571428571429, 'translation_length': 27, 'reference_length': 42} Rouge: {'rouge1': 0.17910447761194026, 'rouge2': 0.0, 'rougeL': 0.11940298507462686, 'rougeLsum': 0.17910447761194026} Sari: {'sari': 31.419082125603865} Flesh Reading Ease: 50.5 ---------------------------------------- Source: ['Auch allen wilden Tieren, allen Vögeln des Himmels und allen Reptilien, allem das in sich Lebensatem hat, gebe ich alle Pflanzen als Nahrung sein.'] Prediction: ['Der Himmel hat seine Tieren als Nahrung sein.\nAuch allen Tieren, allen Vögeln des Himmels und allen Reptilien, allem das in sich Lebensatem hat, gebe ich alle Pflanzen als Nahrung sein.'] Label: [['Das Korn und das Obst sollen auch für die Tiere sein.\nFür alle wilden Tiere und alle Vögel und alle Reptilien.\nSo geschah es: Alle haben von den Pflanzen gegessen.']] Sacrebleu: {'score': 2.9000744656730446, 'counts': [8, 1, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [22.22222222222222, 2.857142857142857, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.2222222222222222, 0.02857142857142857, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0588235294117647, 'translation_length': 36, 'reference_length': 34} Rouge: {'rouge1': 0.24615384615384617, 'rouge2': 0.0, 'rougeL': 0.1846153846153846, 'rougeLsum': 0.1846153846153846} Sari: {'sari': 29.807692307692307} Flesh Reading Ease: 65.05 ---------------------------------------- Source: ['Dann sprach Gott: Ein Schalenförmiges soll inmitten des Wassers entstehen und es soll ein Trenner zwischen Wasser und Wasser sein.'] Prediction: ['Ein Schalenförmiges soll inmitten des Wassers entstehen.\nEin Trenner soll zwischen Wasser und Wasser sein.\nDas Schalenförmiges soll inmitten des Wassers entstehen.'] Label: [['Da sagte Gott: Ich brauche einen Himmel.\nGott machte die Himmels·Schale.\nDie Schale teilt das Wasser.']] Sacrebleu: {'score': 2.1300733682208985, 'counts': [4, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [16.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.16, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 25, 'reference_length': 20} Rouge: {'rouge1': 0.09756097560975609, 'rouge2': 0.0, 'rougeL': 0.048780487804878044, 'rougeLsum': 0.09756097560975609} Sari: {'sari': 32.47418091168091} Flesh Reading Ease: 55.7 ---------------------------------------- Source: ['Dann sprach Gott: Lichter sollen am Schalenförmigen des Himmels entstehen, um zwischen den Tag und von der Nacht zu trennen.'] Prediction: ['Der Schalenförmigen des Himmels in Bern soll am Sonntag zwischen den Tag und der Nacht trennen.\nDas ist ein grosser Schutz, das sich am Schalenförmigen entstehen soll.\nDer Schalenförmigen soll zwischen den Tag und von der Nacht trennen.'] Label: [['Da sagte Gott: Ich will Lichter am Himmel.\nDie Lichter sollen über der Erde leuchten.\nDann gibt es Tag und Nacht.']] Sacrebleu: {'score': 2.4700774086427155, 'counts': [8, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [19.047619047619047, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.19047619047619047, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.68, 'translation_length': 42, 'reference_length': 25} Rouge: {'rouge1': 0.16129032258064516, 'rouge2': 0.03333333333333333, 'rougeL': 0.16129032258064516, 'rougeLsum': 0.16129032258064516} Sari: {'sari': 31.864316239316242} Flesh Reading Ease: 73.7 ---------------------------------------- Source: ['Gott sah, dass es gut war.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag zu Gast geworden.\nEr war mit seinem Partner auf der Kamera geworden.\nDer Mann war gut geworden, dass es gut war.'] Label: [['Gott sieht: Das ist gut.']] Sacrebleu: {'score': 1.1216940038341034, 'counts': [2, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [5.128205128205129, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.05128205128205128, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.571428571428571, 'translation_length': 39, 'reference_length': 7} Rouge: {'rouge1': 0.049999999999999996, 'rouge2': 0.0, 'rougeL': 0.049999999999999996, 'rougeLsum': 0.049999999999999996} Sari: {'sari': 32.870370370370374} Flesh Reading Ease: 92.25 ---------------------------------------- Source: ['Sie sollen über die Fische des Meers und über die Vögel des Himmels und übers Vieh und über die ganze Erde und über alle auf der Erde kriechenden Reptilien herrschen.'] Prediction: ['Die Fische des Meers sollen über die Vögel des Himmels und über die Vögel des Himmels und über die ganze Erde herrschen.\nDie Fische sollen über die Fische des Meers und über die Vögel des Himmels und über die ganze Erde und über alle auf der Erde kriechenden Reptilien herrschen.'] Label: [['Die Menschen sollen über alle Tiere bestimmen.']] Sacrebleu: {'score': 2.0943178884208566, 'counts': [5, 2, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [9.615384615384615, 3.9215686274509802, 1.0, 0.5102040816326531], 'bp': 1.0, 'sys_len': 52, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.09615384615384616, 0.0392156862745098, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.5, 'translation_length': 52, 'reference_length': 8} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.06896551724137931, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 37.48927498927499} Flesh Reading Ease: 67.25 ---------------------------------------- Source: ['Weiterhin sprach Gott: Ich will Menschen als mir ähnliches Bildnis machen!'] Prediction: ['Der Schweizer Gastronomiker und der Chef der Radio-Section deiner 20-Minuten-App (ganz unten im Leben) sprach mit seiner ähnlichen Bildung im Interview mit der Radio-Section deiner 20-Minuten-App (ganz unten im Leben im Leben).\nIm Interview spricht er ähnliches Bildnis, wie er sich ähnliches Bildnis machen will.'] Label: [['Da sagt Gott: Ich will Menschen machen.\nDie Menschen sollen mich auf der Erde vertreten.']] Sacrebleu: {'score': 0.9702695924258076, 'counts': [5, 0, 0, 0], 'totals': [56, 55, 54, 53], 'precisions': [8.928571428571429, 0.9090909090909091, 0.46296296296296297, 0.2358490566037736], 'bp': 1.0, 'sys_len': 56, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.08928571428571429, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.111111111111111, 'translation_length': 56, 'reference_length': 18} Rouge: {'rouge1': 0.0909090909090909, 'rouge2': 0.0, 'rougeL': 0.0303030303030303, 'rougeLsum': 0.0606060606060606} Sari: {'sari': 25.597870597870596} Flesh Reading Ease: 40.5 ---------------------------------------- Source: ['Gott schuf den Menschen als sein Bildnis, als Gottes Bildnis schuf er ihn, männlich und weiblich schuf er sie.'] Prediction: ['Gott schuf den Menschen als sein Bildnis, als Gottes Bildnis schuf er ihn, männlich und weiblich schuf er sie.\nDas Bildnis ist ein grosser Schritt, der sich auf den Menschen schuf sie.'] Label: [['Und Gott machtedie Menschen.\nDie Menschen vertraten Gott auf der Erde.\nDie Menschen waren Männer und Frauen.']] Sacrebleu: {'score': 1.675771139737561, 'counts': [8, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [21.62162162162162, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.21621621621621623, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.85, 'translation_length': 37, 'reference_length': 20} Rouge: {'rouge1': 0.27450980392156865, 'rouge2': 0.0, 'rougeL': 0.1568627450980392, 'rougeLsum': 0.19607843137254904} Sari: {'sari': 38.62745098039216} Flesh Reading Ease: 87.95 ---------------------------------------- Source: ['Dann segnete Gott sie und Gott sprach zu ihnen: Seid fruchtbar und vermehrt euch; füllt die Erde, unterwerft sie und herrscht über die Fische des Meeres, über die Vögel des Himmels und über alle Reptilien!'] Prediction: ['Eine Erde hat sich auf den Fisch des Meeres geschützt und vermehrt euch.\nDas hat sie auf den Fisch und füllt sie über die Fische des Meeres, über die Vögel des Himmels und über alle Reptilien.'] Label: [['Gott segnete die Menschen: Ihr Menschen sollt die Erde füllen.\nIhr sollt über die Fische bestimmen.\nUnd über die Vögel.\nUnd über die Reptilien.']] Sacrebleu: {'score': 7.265283493349406, 'counts': [11, 5, 2, 0], 'totals': [39, 38, 37, 36], 'precisions': [28.205128205128204, 13.157894736842104, 5.405405405405405, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.28205128205128205, 0.13157894736842105, 0.05405405405405406, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3448275862068966, 'translation_length': 39, 'reference_length': 29} Rouge: {'rouge1': 0.4, 'rouge2': 0.19047619047619047, 'rougeL': 0.3692307692307692, 'rougeLsum': 0.3692307692307692} Sari: {'sari': 42.039181142084466} Flesh Reading Ease: 80.1 ---------------------------------------- Source: ['Weiterhin sprach Gott: Hiermit gebe ich euch euch alles Samen tragende Getreide, das auf der Oberfläche der ganzen Erde ist, und alle Bäume, die in ihren Baumfrüchten Samen tragen.'] Prediction: ['Einige Samen tragen euch euch alles Samen tragende Getreide.\nHier gibt es euch euch euch alles Samen tragende Getreide.'] Label: [['Und dann sagte Gott: Ich gebe euch das Korn und die Getreide und alles Obstauf der ganzen Erde.']] Sacrebleu: {'score': 2.568331954752977, 'counts': [4, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [19.047619047619047, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.19047619047619047, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.05, 'translation_length': 21, 'reference_length': 20} Rouge: {'rouge1': 0.16216216216216214, 'rouge2': 0.0, 'rougeL': 0.16216216216216214, 'rougeLsum': 0.10810810810810811} Sari: {'sari': 31.541606541606544} Flesh Reading Ease: 65.2 ---------------------------------------- Source: ['Sie sollen als Zeichen für Festzeiten und für Tage und Jahre dienen und sie sollen als Lichter am Schalenförmigen des Himmels dienen, um über der Erde zu scheinen.'] Prediction: ['Eine Frau soll als Lichter am Schalenförmigen des Himmels dienen, um über der Erde zu scheinen.\nSie sollen als Lichter am Schalenförmigen des Himmels dienen, um über der Erde zu scheinen.'] Label: [['Und es gibt Jahres·zeiten.\nUnd es gibt Feste.\nUnd so geschah es: Die Lichter leuchteten über der Erde.']] Sacrebleu: {'score': 4.674499231292217, 'counts': [6, 2, 1, 0], 'totals': [35, 34, 33, 32], 'precisions': [17.142857142857142, 5.882352941176471, 3.0303030303030303, 1.5625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.17142857142857143, 0.058823529411764705, 0.030303030303030304, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5909090909090908, 'translation_length': 35, 'reference_length': 22} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.08, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 38.51851851851851} Flesh Reading Ease: 70.9 ---------------------------------------- Source: ['Sie sollen euch als Nahrung dienen.'] Prediction: ['Eine Frau soll als Nahrung dienen.\nSie sollen euch als Nahrung dienen.'] Label: [['Das könnt ihr alles essen.']] Sacrebleu: {'score': 2.8398387225677895, 'counts': [1, 0, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [7.142857142857143, 3.8461538461538463, 2.0833333333333335, 1.1363636363636365], 'bp': 1.0, 'sys_len': 14, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 14, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 35.41666666666667} Flesh Reading Ease: 86.25 ---------------------------------------- Source: ['Die Erde lies Grünes grünen: verschiedenste Arten von Samen tragendem Getreide und verschiedenste Arten von Frucht tragenden Fruchtbäumen, die deren Früchte ihren Samen in sich haben.'] Prediction: ['In Grünes sind verschiedenste Arten von Samen tragendem Getreide und verschiedenste Arten von Frucht tragenden Fruchtbäumen, die deren Früchte ihren Samen in sich haben.\nGrünes Grünes ist die Erde der grünen Erde, die verschiedenste Arten von Samen tragendem Getreide und verschiedenste Arten von Frucht tragenden Fruchtbäumen, die deren Früchte ihren Samen in sich haben.'] Label: [['So geschah es: Das Korn ist gewachsen.\nDie Bäume sind gewachsen.\nDie Erde wurde grün.']] Sacrebleu: {'score': 0.9196271525972168, 'counts': [5, 0, 0, 0], 'totals': [59, 58, 57, 56], 'precisions': [8.474576271186441, 0.8620689655172413, 0.43859649122807015, 0.22321428571428573], 'bp': 1.0, 'sys_len': 59, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.0847457627118644, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1052631578947367, 'translation_length': 59, 'reference_length': 19} Rouge: {'rouge1': 0.1518987341772152, 'rouge2': 0.025974025974025972, 'rougeL': 0.10126582278481013, 'rougeLsum': 0.12658227848101267} Sari: {'sari': 34.24694237801034} Flesh Reading Ease: 41.85 ---------------------------------------- Source: ['Gott machte das Schalenförmige und trennte so zwischen das Wasser welches unterhalb des Schalenförmigen und zwischen vom Wasser welches über dem Schalenförmigen.'] Prediction: ['Ein Schalenförmige trennte so zwischen das Wasser und das Schalenförmige.\nDer Mann trennte so zwischen das Wasser welches unterhalb des Schalenförmigen und zwischen vom Wasser welches über dem Schalenförmigen.'] Label: [['Wasser über die Schaleund Wasser unter der Schale.']] Sacrebleu: {'score': 1.696134390396339, 'counts': [4, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4444444444444446, 'translation_length': 31, 'reference_length': 9} Rouge: {'rouge1': 0.1951219512195122, 'rouge2': 0.0, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.0975609756097561} Sari: {'sari': 38.19444444444444} Flesh Reading Ease: 48.5 ---------------------------------------- Source: ['Gott setzte sie ans Schalenförmige des Himmels, damit sie über der Erde schienen und damit sie über den Tag und die Nacht herrschten und damit sie zwischen die Helligkeit und von der Finsternis trennten.'] Prediction: ['Gott hatte sich ans Schalenförmige des Himmels einen Tag und die Nacht herrschten.\nDer Finsternis trennte sie zwischen die Helligkeit und von der Finsternis.\nDie Schalenförmige setzte sie ans Schalenförmige des Himmels, damit sie über der Erde schienen und damit sie über den Tag und die Nacht herrschten.'] Label: [['Gott machte die Lichter an den Himmel.\nDie Lichter leuchteten über der Erde.\nSeitdem können wir Tag und Nacht unterscheiden.']] Sacrebleu: {'score': 4.47258328043203, 'counts': [13, 4, 1, 0], 'totals': [52, 51, 50, 49], 'precisions': [25.0, 7.8431372549019605, 2.0, 1.0204081632653061], 'bp': 1.0, 'sys_len': 52, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.0784313725490196, 0.02, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.260869565217391, 'translation_length': 52, 'reference_length': 23} Rouge: {'rouge1': 0.2777777777777778, 'rouge2': 0.08571428571428572, 'rougeL': 0.25, 'rougeLsum': 0.2777777777777778} Sari: {'sari': 40.4184842506923} Flesh Reading Ease: 70.4 ---------------------------------------- Source: ['Gott betrachtete, dass alles, was er gemacht hatte, sehr gut war.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in Zürich gemacht.\nEr war sehr gut, sehr gut war.\nDer Mann war sehr gut, sehr gut war.'] Label: [['Gott schaute herum: Das habe ich alles gemacht.\nUnd Gott war zufrieden.']] Sacrebleu: {'score': 2.7588924449082466, 'counts': [4, 1, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [12.5, 3.225806451612903, 1.6666666666666667, 0.8620689655172413], 'bp': 1.0, 'sys_len': 32, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.03225806451612903, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1333333333333333, 'translation_length': 32, 'reference_length': 15} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 34.9067599067599} Flesh Reading Ease: 106.65 ---------------------------------------- Source: ['Da sprach Gott: Helligkeit soll entstehen!'] Prediction: ['Ein Mann soll eine Frau aufgefunden haben, dass sie sich auf dem Coronavirus entstehen könnte.\nDas könnte sie sich mit dem Virus entstehen.\nDas könnte sie sich mit dem Virus entstehen.'] Label: [['Dann sagte Gott: Ich möchte Licht.']] Sacrebleu: {'score': 1.0559717178170818, 'counts': [1, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [2.857142857142857, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.02857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.375, 'translation_length': 35, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 46.726190476190474} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['Der sechste Tag.'] Prediction: ['Der Schweizer Gast hat seinen letzten Tag gegen den FC Basel geschlossen.\nDer sechste Mann spielte den Sieg auf der Welt.\nDer sechste Mann wurde zum ersten Mal sechs Mal geschickt.'] Label: [['Der 6.\nTag war Zu Ende.']] Sacrebleu: {'score': 1.5393730252811677, 'counts': [4, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.25, 'translation_length': 34, 'reference_length': 8} Rouge: {'rouge1': 0.1081081081081081, 'rouge2': 0.0, 'rougeL': 0.1081081081081081, 'rougeLsum': 0.1081081081081081} Sari: {'sari': 57.14285714285715} Flesh Reading Ease: 87.8 ---------------------------------------- Source: ['Es wurde Abend und es wurde Morgen: Ein vierter Tag.'] Prediction: ['Ein vierter Tag wurde in der Nacht auf Sonntagabend in der Nacht auf Sonntagabend vergangene Woche vergangene Woche vergangene Woche vergangene Woche erfasst.\nDer Vorfall wurde am Abend vergangene Woche vergangen.'] Label: [['Es wurd Abend.\nUnd es wurde Morgen.\nDer 4.\nTag war zu Ende.']] Sacrebleu: {'score': 2.9561645124389617, 'counts': [6, 1, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [18.181818181818183, 3.125, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.03125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9411764705882353, 'translation_length': 33, 'reference_length': 17} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 27.67401103798162} Flesh Reading Ease: 47.5 ---------------------------------------- Source: ['Erfreue uns so viele Tage, wie du uns bedrückt hast, so viele Jahre, wie wir Unglück gesehen haben!'] Prediction: ['Der Unglück-Konzern hat seine Tage verlassen.\nErst viele Jahre später wird erstmals Unglück gesehen.'] Label: [['Schenke uns Freude.\nWir hatten Sorgen.\nSchenke uns genau so viel Freude.']] Sacrebleu: {'score': 2.908317710573757, 'counts': [2, 0, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [12.5, 3.3333333333333335, 1.7857142857142858, 0.9615384615384616], 'bp': 1.0, 'sys_len': 16, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0666666666666667, 'translation_length': 16, 'reference_length': 15} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 49.24428104575163} Flesh Reading Ease: 44.3 ---------------------------------------- Source: ['Zeige deinen Knechten dein Handeln und deine Herrlichkeit ihren Kindern!'] Prediction: ['Zeige deinen Knechten dein Handeln und deine Herrlichkeit ihren Kindern!\nWir haben einen Kind mit dem Handeln geschickt und deinen Handeln geschickt.\nWir haben einen Kind mit dem Handeln zu tun, wie du ihnen kam.'] Label: [['Zeige deinen Dienern dein Tun.\nZeige deinen Kindern dein Tun.\nZeige uns dein Tun.']] Sacrebleu: {'score': 2.5802625919834825, 'counts': [7, 1, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [17.94871794871795, 2.6315789473684212, 1.3513513513513513, 0.6944444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.1794871794871795, 0.02631578947368421, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.2941176470588234, 'translation_length': 39, 'reference_length': 17} Rouge: {'rouge1': 0.24489795918367346, 'rouge2': 0.0425531914893617, 'rougeL': 0.20408163265306123, 'rougeLsum': 0.24489795918367346} Sari: {'sari': 41.04731525784157} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['Du schwemmst sie weg, sie sind wie Schlaf, am Morgen wie Gras, das aufsprosst.'] Prediction: ['Eine Frau wurde am Morgen wie Gras aufsprosst.\nSie schwemmst sie weg, sie sind wie Schlaf, das aufsprosst.'] Label: [['Du wischt die Menschen weg wie man Schlaf aus den Augen wischt.\nDie Menschen sind wie Gras.']] Sacrebleu: {'score': 5.809665204409192, 'counts': [8, 2, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [36.36363636363637, 9.523809523809524, 2.5, 1.3157894736842106], 'bp': 1.0, 'sys_len': 22, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.36363636363636365, 0.09523809523809523, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1578947368421053, 'translation_length': 22, 'reference_length': 19} Rouge: {'rouge1': 0.34285714285714286, 'rouge2': 0.12121212121212122, 'rougeL': 0.17142857142857143, 'rougeLsum': 0.34285714285714286} Sari: {'sari': 36.285971223021576} Flesh Reading Ease: 94.95 ---------------------------------------- Source: ['Ein Gebet von Mose, dem Mann Gottes: Mein Herr, eine sichere Wohnung bist du für uns gewesen von Generation zu Generation.'] Prediction: ['Eine sichere Wohnung bist du für uns gewesen von Generation zu Generation.\nDie Wohnung bist du für uns gewesen von Generation zu Generation.'] Label: [['Ein Gebet von Moses.\nMoses ist ein Mann GottesWir wohnen bei dir, Gott.\nImmer.']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3888888888888888, 'translation_length': 25, 'reference_length': 18} Rouge: {'rouge1': 0.05128205128205128, 'rouge2': 0.0, 'rougeL': 0.05128205128205128, 'rougeLsum': 0.05128205128205128} Sari: {'sari': 29.848484848484848} Flesh Reading Ease: 45.65 ---------------------------------------- Source: ['Kehre doch zurück, JHWH!'] Prediction: ['JHWH hat einen neuen Interview mit dem 20.\nJuni veröffentlicht.\nIm Interview spricht der Comedian über die Welt und die Welt.\nIm Interview spricht er über die Welt, dass er sich nicht mehr zurückkehren will.'] Label: [['Gott!']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 40, 'ref_len': 2} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 20.0, 'translation_length': 40, 'reference_length': 2} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 56.25} Flesh Reading Ease: 80.55 ---------------------------------------- Source: ['“ Denn tausend Jahre sind in deinen Augen wie der gestrige Tag, wenn er vergangen ist, oder eine Wache in der Nacht.'] Prediction: ['Der gestrige Mann wurde in der Nacht auf Sonntag gestorben.\nEr wurde dabei verhaftet, wenn er vergangen ist, oder eine Wache in der Nacht.\nDas hat er seit tausend Jahren verhaftet.'] Label: [['Tausend Jahre sind für dich wie ein Tag.\nTausend Jahre sind für dich wie eine Nacht.']] Sacrebleu: {'score': 2.4386622221532948, 'counts': [4, 1, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [11.11111111111111, 2.857142857142857, 1.4705882352941178, 0.7575757575757576], 'bp': 1.0, 'sys_len': 36, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.02857142857142857, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 36, 'reference_length': 18} Rouge: {'rouge1': 0.12244897959183673, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.12244897959183673} Sari: {'sari': 31.029040404040405} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['Die Freundlichkeit des Herrn, unseres Gottes sei über uns! Das Werk unserer Hände festige über uns, und das Werk unserer Hände, festige es!'] Prediction: ['Das Werk unserer Hände festige über uns, und das Werk unserer Hände, festige es!\nDas Werk unserer Hände, festige es!'] Label: [['Gottes Freundlichkeit sei mit uns!\nUnsere Hände werden stark.\nJa, Gott, mach unsere Hände stark!']] Sacrebleu: {'score': 2.449932250423938, 'counts': [7, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [28.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.28, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.25, 'translation_length': 25, 'reference_length': 20} Rouge: {'rouge1': 0.25, 'rouge2': 0.10526315789473685, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 32.55973715651135} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Am Morgen blüht es und sprosst auf, zum Abend verwelkt und verdorrt es.'] Prediction: ['Am Morgen blüht es in der Nacht auf Sonntag zu einem Abend.\nEin Mann sprechen von einem Abend und verdorrt es.\nDer Mann blüht und sprechen von einem Abend.'] Label: [['Das Gras wächst und blüht.\nDas Gras sieht schön aus.\nDas Gras verwelkt und vertrocknet.']] Sacrebleu: {'score': 1.8154533256373546, 'counts': [6, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [18.75, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.1875, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7777777777777777, 'translation_length': 32, 'reference_length': 18} Rouge: {'rouge1': 0.16326530612244897, 'rouge2': 0.0425531914893617, 'rougeL': 0.16326530612244897, 'rougeLsum': 0.16326530612244897} Sari: {'sari': 34.129901960784316} Flesh Reading Ease: 94.25 ---------------------------------------- Source: ['Du stellst unsere Fehler vor dich, unsere Geheimnisse vor das Licht deiner Gegenwart.'] Prediction: ['Der Schweizer Nationalrat hat einen Fehler geschlossen.\nDer Geheimnisse wird vor dem Licht deiner Gegenwart geschlossen.\nDer Schweizer Nationalrat hatte sich mit einem Fehler vor dem Licht geschlossen.'] Label: [['Gott sieht alle unsere Fehler.\nGott sieht auch die geheimen Fehler.']] Sacrebleu: {'score': 1.696134390396339, 'counts': [4, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [12.903225806451612, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 1.0, 'sys_len': 31, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.12903225806451613, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3846153846153846, 'translation_length': 31, 'reference_length': 13} Rouge: {'rouge1': 0.10256410256410255, 'rouge2': 0.0, 'rougeL': 0.10256410256410255, 'rougeLsum': 0.10256410256410255} Sari: {'sari': 43.5479797979798} Flesh Reading Ease: 59.55 ---------------------------------------- Source: ['Ja, alle unsere Tage fahren dahin durch deinen Zorn, wir vollenden unsere Jahre wie einen Seufzer.'] Prediction: ['Seit mehreren Tagen fahren das Jahr 2020 wie einen Seufzer.\nNun wird der 20-Jährige wieder aufgefordert, wie er sich auf dem Kino verhindert.\nWir haben sich dabei zu tun, wie sie sich auf dem Kino verhindern.'] Label: [['Alles geht vorbei durch Gottes Zorn.\nAlles ist Stöhnen und Seufzen.']] Sacrebleu: {'score': 1.0134961585174012, 'counts': [2, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [4.651162790697675, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.046511627906976744, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3076923076923075, 'translation_length': 43, 'reference_length': 13} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.33333333333333} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['Die Tage unserer Jahre, in ihnen sind siebzig Jahre, und mit Kraft achtzig Jahre.'] Prediction: ['Die Tage unserer Jahre, in ihnen sind siebzig Jahre, und mit Kraft achtzig Jahre.\nIn ihnen sind siebzig Jahre, und mit Kraft achtzig Jahre.'] Label: [['Der Mensch wird 70 Jahre alt.\nWenn der Mensch Kraft hat, wird er 80 Jahre alt.']] Sacrebleu: {'score': 2.01381482546679, 'counts': [6, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [20.689655172413794, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.20689655172413793, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5263157894736843, 'translation_length': 29, 'reference_length': 19} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.15, 'rougeLsum': 0.15} Sari: {'sari': 36.407766990291265} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['Wer erkennt die Stärke deines Zorns?'] Prediction: ['Der Zorns-Profi hat eine Stärke in der Stadt Zürich verlassen.\nEr erntete die Stärke in der Stadt Zürich.\nDer Zorns-Profi erntete sich auf eine Stärke in der Stadt Zürich.'] Label: [['Niemand ist stark gegen Gottes Zorn.\nWer kann wissen: Wie stark ist Gottes Zorn?']] Sacrebleu: {'score': 1.1599713834969503, 'counts': [1, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [3.125, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.03125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8823529411764706, 'translation_length': 32, 'reference_length': 17} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 47.36111111111111} Flesh Reading Ease: 76.7 ---------------------------------------- Source: ['Wie die Furcht vor dir ist dein Grimm. Darum lehre uns, unsere Tage zu zählen, damit wir ein Herz der Weisheit bekommen.'] Prediction: ['Der Grimm ist ein Herz der Weisheit bekommen.\nDarum lehre uns, unsere Tage zu zählen, damit wir ein Herz der Weisheit bekommen.'] Label: [['Darum lernen wir.\nUnsere Herzen werden weise.']] Sacrebleu: {'score': 2.042946039568498, 'counts': [4, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.888888888888889, 'translation_length': 26, 'reference_length': 9} Rouge: {'rouge1': 0.2, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.2} Sari: {'sari': 36.36363636363636} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Sättige uns am Morgen mit deiner Güte, dann werden wir jubeln und uns freuen an allen unseren Tagen!'] Prediction: ['Am Morgen wurde eine Güte von der Schweizer Welt geschickt.\nSie wurde dabei verletzt.\nDas ist nicht bekannt, sondern auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch a'] Label: [['Schenke uns morgens deine Liebe.\nWir freuen uns.\nGott!']] Sacrebleu: {'score': 0.1889678722649679, 'counts': [2, 0, 0, 0], 'totals': [224, 223, 222, 221], 'precisions': [0.8928571428571429, 0.2242152466367713, 0.11261261261261261, 0.05656108597285068], 'bp': 1.0, 'sys_len': 224, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.008928571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 18.666666666666668, 'translation_length': 224, 'reference_length': 12} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 48.47222222222222} Flesh Reading Ease: 47.8 ---------------------------------------- Source: ['Bevor die Berge geboren waren und du die Erde und die irdische Welt hervorgebracht hattest, und von Ewigkeit zu Ewigkeit bist du Gott.'] Prediction: ['Du bist eine Berge in der Schweiz hervorgebracht hatten und wird von Ewigkeit zu Ewigkeit bist du Gott.\nDer Chef der Schweiz hatte die Berge geboren und wurde von der Welt hervorgebracht.'] Label: [['Du bist älter als die Berge und die ganze Welt.']] Sacrebleu: {'score': 3.5410607693940146, 'counts': [7, 2, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [20.58823529411765, 6.0606060606060606, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.20588235294117646, 0.06060606060606061, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.090909090909091, 'translation_length': 34, 'reference_length': 11} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.09999999999999999, 'rougeL': 0.2857142857142857, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 37.63517757222793} Flesh Reading Ease: 76.25 ---------------------------------------- Source: ['und Ihr Stolz ist Mühe und Beschwerde, denn er ist schnell vergangen und wir fliegen davon.'] Prediction: ['Ein Mann ist in der Nacht auf Sonntag in Stolz (D) gestorben.\nEr ist schnell vergangen und wir fliegen davon.\nDer Mann fliegt davon und fliegt davon.'] Label: [['Wir haben es nicht leicht.\nDann ist das Leben schon vorbei.']] Sacrebleu: {'score': 1.526608193588886, 'counts': [3, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [9.375, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.09375, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4615384615384617, 'translation_length': 32, 'reference_length': 13} Rouge: {'rouge1': 0.10526315789473684, 'rouge2': 0.0, 'rougeL': 0.05263157894736842, 'rougeLsum': 0.10526315789473684} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 94.95 ---------------------------------------- Source: ['Du lässt den Menschen zum Staub zurückkehren und sprichst: „Kehrt zurück, ihr Kinder des Menschen!'] Prediction: ['Einige Menschen wollten ihr Kinder des Menschen zurückkehren.\nDie Frau lässt den Menschen zum Staub zurückkehren.'] Label: [['Du rufst: Kommt zurück zu mir!']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 18, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 18, 'reference_length': 8} Rouge: {'rouge1': 0.07692307692307693, 'rouge2': 0.0, 'rougeL': 0.07692307692307693, 'rougeLsum': 0.07692307692307693} Sari: {'sari': 29.166666666666668} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Denn wir vergehen durch deinen Zorn, und durch deine Zorneshitze werden wir verstört.'] Prediction: ['Wir vergehen durch einen Zorn, und durch deine Zorneshitze werden wir verstört.\nDas ist der erste Mal, dass sie sich durch einen Zorn vergehen werden kann.'] Label: [['Menschen vertrocknen vor Gottes Zorn.\nGottes heißer Zorn trocknet Menschen aus.']] Sacrebleu: {'score': 1.7557381354086663, 'counts': [4, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3076923076923075, 'translation_length': 30, 'reference_length': 13} Rouge: {'rouge1': 0.10256410256410256, 'rouge2': 0.0, 'rougeL': 0.10256410256410256, 'rougeLsum': 0.10256410256410256} Sari: {'sari': 35.8974358974359} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Da starb Elimelech, der Mann Noomis, und sie hinterblieb, sie und ihre beiden Söhne.'] Prediction: ['Elimelech und ihre beiden Söhne haben sich am Freitagabend in der Nähe des Jahres veröffentlicht.\nDie beiden starben Elimelech und ihre beiden Söhne.\nDie beiden hinterblieben Elimelech und ihre beiden Söhne.'] Label: [['Da stirbt Elimelech.\nNoomi bleibt alleine mit den beiden Söhnen.']] Sacrebleu: {'score': 1.5393730252811677, 'counts': [4, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [11.764705882352942, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.11764705882352941, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.8333333333333335, 'translation_length': 34, 'reference_length': 12} Rouge: {'rouge1': 0.1276595744680851, 'rouge2': 0.04444444444444444, 'rougeL': 0.1276595744680851, 'rougeLsum': 0.1276595744680851} Sari: {'sari': 36.688311688311686} Flesh Reading Ease: 58.55 ---------------------------------------- Source: ['Sie waren Efratiter aus Betlehem in Juda. Und so kamen sie ins Gebiet von nach Moab und blieben dort.'] Prediction: ['Efratiter aus Betlehem waren Efratiter aus Betlehem in Juda.\nSie blieben dort.\nSie sollen ins Gebiet von nach Moab und blieben dort.'] Label: [['Sie kommen aus Bethlehem und ziehen nach Moab.']] Sacrebleu: {'score': 3.9645132534206886, 'counts': [6, 1, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [24.0, 4.166666666666667, 2.1739130434782608, 1.1363636363636365], 'bp': 1.0, 'sys_len': 25, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.24, 0.041666666666666664, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7777777777777777, 'translation_length': 25, 'reference_length': 9} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.07142857142857142, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 35.63492063492063} Flesh Reading Ease: 73.25 ---------------------------------------- Source: ['Der Name des Mannes war Elimelech und der Name seiner Frau war Noomi und die Namen seiner beiden Söhne waren Machlon und Kiljon.'] Prediction: ['Ein Mann wurde in den vergangenen Tagen verhaftet.\nDer Name des Mannes war Elimelech und der Name seiner Frau war Noomi.\nDie Namen seiner beiden Söhne waren Machlon und Kiljon.'] Label: [['Der Mann heißt Elimelech.\nDer Name bedeutet: Mein Gott ist König.\nDie Frau heißt Noomi.\nDer Name bedeutet: lieblich.\nEin Sohn heißt Machlon.\nDer Name bedeutet: krank.\nEin anderer Sohn heißt Kiljon.\nDer Name heißt: verschwindet.']] Sacrebleu: {'score': 4.904262545500754, 'counts': [14, 5, 1, 0], 'totals': [33, 32, 31, 30], 'precisions': [42.42424242424242, 15.625, 3.225806451612903, 1.6666666666666667], 'bp': 0.6347364189402819, 'sys_len': 33, 'ref_len': 48} Bleu: {'bleu': 0.0, 'precisions': [0.42424242424242425, 0.15625, 0.03225806451612903, 0.0], 'brevity_penalty': 0.6347364189402819, 'length_ratio': 0.6875, 'translation_length': 33, 'reference_length': 48} Rouge: {'rouge1': 0.3287671232876712, 'rouge2': 0.056338028169014086, 'rougeL': 0.2191780821917808, 'rougeLsum': 0.3287671232876712} Sari: {'sari': 43.38235294117647} Flesh Reading Ease: 70.55 ---------------------------------------- Source: ['Und sie begann, zurückzukehren - sie und ihre Schwiegertöchter - aus dem Gebiet von Moab, weil sie in dem Gebiet von Moab gehört hatte, dass JHWH sein Volk besucht hatte, indem er ihm Brot gegeben hatte.'] Prediction: ['JHWH hat sein Brot in einem Gebiet von Moab besucht.\nDer Brot hatte seinen Brot gegeben.\nDer 20-Jährige wurde zurückzukehren.'] Label: [['Noomi will nach Hause.']] Sacrebleu: {'score': 1.506189323093867, 'counts': [1, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [4.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.04, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 25, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 42.857142857142854} Flesh Reading Ease: 68.0 ---------------------------------------- Source: ['Sie nahmen sich moabitische Frauen.'] Prediction: ['Eine Frau aus einem moabitischen Zürich nahmen sich in einem Interview mit einem Expert auf die Welt.\nSie nahmen sich in einem Interview zum Thema "Mutation" zu sehen.\nSie sind eine moabitische Frau, die sich nicht nur nach ihrem Job nahmen.'] Label: [['Die Söhne finden Frauen in Moab.']] Sacrebleu: {'score': 0.9243411456936733, 'counts': [2, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [4.25531914893617, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.0425531914893617, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.714285714285714, 'translation_length': 47, 'reference_length': 7} Rouge: {'rouge1': 0.08163265306122448, 'rouge2': 0.0, 'rougeL': 0.08163265306122448, 'rougeLsum': 0.08163265306122448} Sari: {'sari': 36.78955453149001} Flesh Reading Ease: 66.85 ---------------------------------------- Source: ['Der Name der einen war Orpa und der Name der anderen war Rut.'] Prediction: ['Ein Mann hat einen Orpa und einen anderen Name entdeckt.\nDer Name der anderen war Rut.'] Label: [['Eine Frau heißt Orpa.\nDer Name bedeutet: Wolke.\nDie andere Frau heißt Rut.\nDer Name bedeutet: Erfrischung.']] Sacrebleu: {'score': 8.282792882542141, 'counts': [7, 3, 1, 0], 'totals': [18, 17, 16, 15], 'precisions': [38.888888888888886, 17.647058823529413, 6.25, 3.3333333333333335], 'bp': 0.7574651283969664, 'sys_len': 18, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.3888888888888889, 0.17647058823529413, 0.0625, 0.0], 'brevity_penalty': 0.7574651283969664, 'length_ratio': 0.782608695652174, 'translation_length': 18, 'reference_length': 23} Rouge: {'rouge1': 0.34285714285714286, 'rouge2': 0.0606060606060606, 'rougeL': 0.22857142857142856, 'rougeLsum': 0.34285714285714286} Sari: {'sari': 38.30487137383689} Flesh Reading Ease: 84.25 ---------------------------------------- Source: ['Sie wohnten etwa zehn Jahre dort.'] Prediction: ['Eine Frau wohnte zehn Jahre dort.\nSie wohnte etwa zehn Jahre dort.'] Label: [['Sie wohnen zehn Jahre zusammen in Moab.']] Sacrebleu: {'score': 6.754312828675707, 'counts': [4, 1, 0, 0], 'totals': [14, 13, 12, 11], 'precisions': [28.571428571428573, 7.6923076923076925, 4.166666666666667, 2.272727272727273], 'bp': 1.0, 'sys_len': 14, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.75, 'translation_length': 14, 'reference_length': 8} Rouge: {'rouge1': 0.3157894736842105, 'rouge2': 0.11764705882352942, 'rougeL': 0.3157894736842105, 'rougeLsum': 0.3157894736842105} Sari: {'sari': 43.333333333333336} Flesh Reading Ease: 86.25 ---------------------------------------- Source: ['Da starben auch diese beiden - Machlon und Kiljon - , und es hinterblieb die Frau, ohne ihre beiden Kinder und ohne ihren Mann.'] Prediction: ['Eine Frau (27) und ihr Mann (28) sind bei einem Alter von Machlon und Kiljon (28) gestorben.\nSie starben auch ihren Mann und ihr Mann.\nSie hinterblieb die Frau, ohne ihre beiden Kinder und ohne ihren Mann.'] Label: [['Da sterben auch die beiden Söhne.\nDie Mutter Noomi bleibt alleine.']] Sacrebleu: {'score': 1.1622974570266493, 'counts': [5, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [10.638297872340425, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.10638297872340426, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6153846153846154, 'translation_length': 47, 'reference_length': 13} Rouge: {'rouge1': 0.12244897959183675, 'rouge2': 0.0, 'rougeL': 0.12244897959183675, 'rougeLsum': 0.12244897959183675} Sari: {'sari': 33.73015873015873} Flesh Reading Ease: 79.95 ---------------------------------------- Source: ['Da verließ ein Mann Betlehem in Juda, um sich in dem Gebiet von Moab niederzulassen - er, seine Frau und seine beiden Söhne.'] Prediction: ['Ein Mann, der in einem Gebiet von Moab niederzulassen hat, verliebt sich in einem Gebiet von Moab niederzulassen.\nDer Mann, der seine Frau und seine beiden Söhne verlieren, verliebt sich in einem Gebiet von Moab nieder.'] Label: [['Ein Mann lebt mit seiner Familie in Bethlehem.']] Sacrebleu: {'score': 2.077079238326844, 'counts': [4, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [9.523809523809524, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 1.0, 'sys_len': 42, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.666666666666667, 'translation_length': 42, 'reference_length': 9} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.046511627906976744, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 38.00163800163801} Flesh Reading Ease: 62.55 ---------------------------------------- Source: ['da, wo du sterben wirst, will ich sterben und dort will ich begraben werden!'] Prediction: ['Eine Frau wird von ihrem Mann aufgefunden, wo ihr sterben wirst.\nDie Frau will ihr sterben und dort will ich begraben werden.\nDie Frau wirbt ihren Mann auf, wo du sterben wirst, will iich sterben und dort will ich begraben werden.'] Label: [['Wo musst du sterben?\nIch will auch da sterben.\nUnd dort will ich begraben sein!']] Sacrebleu: {'score': 6.404023311471472, 'counts': [9, 4, 2, 1], 'totals': [47, 46, 45, 44], 'precisions': [19.148936170212767, 8.695652173913043, 4.444444444444445, 2.272727272727273], 'bp': 1.0, 'sys_len': 47, 'ref_len': 18} Bleu: {'bleu': 0.06404023311471473, 'precisions': [0.19148936170212766, 0.08695652173913043, 0.044444444444444446, 0.022727272727272728], 'brevity_penalty': 1.0, 'length_ratio': 2.611111111111111, 'translation_length': 47, 'reference_length': 18} Rouge: {'rouge1': 0.3928571428571429, 'rouge2': 0.2222222222222222, 'rougeL': 0.35714285714285715, 'rougeLsum': 0.35714285714285715} Sari: {'sari': 44.120653225916385} Flesh Reading Ease: 84.4 ---------------------------------------- Source: ['dein Volk sei mein Volk und dein Gott sei mein Gott;'] Prediction: ['Im Februar 2020 findet in der Nati statt.\nDer Schweizer Volk-Skipper Thomas Björnlich (31) verliert seinen Sieg.\nIm Interview mit Björnlich (34) spricht Björnlich über seinen Titel.\nIm Interview spricht Björnlich über seinen Titel und seine Welt.'] Label: [['Denn wir sind eine Familie.\nDeine Heimat ist meine Heimat.\nUnd dein Gott ist mein Gott.']] Sacrebleu: {'score': 1.0700143107304574, 'counts': [3, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [6.666666666666667, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3684210526315788, 'translation_length': 45, 'reference_length': 19} Rouge: {'rouge1': 0.034482758620689655, 'rouge2': 0.0, 'rougeL': 0.034482758620689655, 'rougeLsum': 0.034482758620689655} Sari: {'sari': 38.78378378378378} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['Solches tue mir JHWH und solches füge er hinzu, wenn nicht einzig der Tod uns scheiden wird.'] Prediction: ['JHWH hat seinen Song "Unchained" veröffentlicht.\nIm Text erklärt er, wenn nicht einzig der Tod von uns scheiden wird.\nIm Text gibts die besten Folgen der 20-Minuten-App.'] Label: [['Nur der Tod kann uns trennen.\nIch bleibe bei dir oder ich will sofort tot umfallen.']] Sacrebleu: {'score': 2.6556282775658278, 'counts': [5, 1, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [14.285714285714286, 2.9411764705882355, 1.5151515151515151, 0.78125], 'bp': 1.0, 'sys_len': 35, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.029411764705882353, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9444444444444444, 'translation_length': 35, 'reference_length': 18} Rouge: {'rouge1': 0.12765957446808507, 'rouge2': 0.04444444444444444, 'rougeL': 0.12765957446808507, 'rougeLsum': 0.12765957446808507} Sari: {'sari': 39.351851851851855} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Dahin, wohin du gehen wirst, will ich gehen, und da, wo du rasten wirst, will ich rasten;'] Prediction: ['Dahin, wohin du gehen wirst, will ich gehen, und da, wo du rasten wirst, will ich rasten.\nDas ist nicht so unklar, sondern, wohin du gehen wirst, will ich rasten.'] Label: [['Du gehst?\nGut.\nIch will mit dir gehen.\nDu ruhst?\nIch will mit dir ruhen.']] Sacrebleu: {'score': 1.3737889784665156, 'counts': [5, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [12.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0, 'translation_length': 40, 'reference_length': 20} Rouge: {'rouge1': 0.31111111111111117, 'rouge2': 0.0, 'rougeL': 0.26666666666666666, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 38.2078853046595} Flesh Reading Ease: 83.1 ---------------------------------------- Source: ['“ Da sah sie, wie entschlossen sie war, mit ihr zu gehen.'] Prediction: ['Eine Frau wurde von ihrem Mann aufgefunden, dass sie sich mit ihrem Mann gehen konnte.\nDie Frau war zuvor entschlossen und war mit ihr zu gehen.\nSie war zuvor mit ihrem Mann zu gehen, wie sie sich entschlossen war.'] Label: [['“ Da sieht Noomi: Rut ist fest entschlossen.\nRut will mit Noomi gehen.']] Sacrebleu: {'score': 2.092817867871188, 'counts': [5, 1, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [11.363636363636363, 2.3255813953488373, 1.1904761904761905, 0.6097560975609756], 'bp': 1.0, 'sys_len': 44, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.11363636363636363, 0.023255813953488372, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.75, 'translation_length': 44, 'reference_length': 16} Rouge: {'rouge1': 0.11764705882352941, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 32.98611111111111} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Da hörte sie auf, zu ihr zu sprechen.'] Prediction: ['Eine Frau war auf der Suche, zu ihr zu sprechen.\nSie war auf der Suche, zu ihr zu sprechen.\nDie Frau war auf der Suche, zu ihr zu sprechen.'] Label: [['Da hört Noomi auf zu reden.\nNoomi schweigt.']] Sacrebleu: {'score': 1.493369524819332, 'counts': [4, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 35, 'reference_length': 10} Rouge: {'rouge1': 0.10526315789473684, 'rouge2': 0.0, 'rougeL': 0.10526315789473684, 'rougeLsum': 0.10526315789473684} Sari: {'sari': 33.19892473118279} Flesh Reading Ease: 100.1 ---------------------------------------- Source: ['“ So also kehrte Noomi zurück.'] Prediction: ['Noomi (23) hat sich am Freitagabend zurückgezogen.\nDie beiden waren noch nie.\nSie wollten sich nicht mehr auf ihre Wohnung aufnehmen.'] Label: [['Aber Noomi ist wieder zu Hause.']] Sacrebleu: {'score': 1.7179060012299232, 'counts': [2, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [7.6923076923076925, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.7142857142857144, 'translation_length': 26, 'reference_length': 7} Rouge: {'rouge1': 0.07142857142857144, 'rouge2': 0.0, 'rougeL': 0.07142857142857144, 'rougeLsum': 0.07142857142857144} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 73.55 ---------------------------------------- Source: ['Und so gingen die beidengemeinsam, bis sie nach Betlehem kamen.'] Prediction: ['Die beiden waren nach Betlehem nach Betlehem.\nSie sollen sich nach Betlehem geschickt haben.\nDie beiden waren nach Betlehem gesucht.'] Label: [['Und so gehen Rut und Noomi zusammen.\nUnd Rut und Noomi kommen endlich nach Bethlehem.']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3529411764705883, 'translation_length': 23, 'reference_length': 17} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 50.48941798941799} Flesh Reading Ease: 68.0 ---------------------------------------- Source: ['“ Da sagte Rut: „Bestürme mich nicht, dich zu verlassen, vom mit-dir - Sein zurückzukehren!'] Prediction: ['Rut (30) und ihre Freundin (29) sind sich in der Nacht auf Sonntag zu Gast geworden.\nIn der neuen Folge wird sie von der Nacht auf Sonntag mit ihrem neuen Freundin (31) geschützt.\nAuf dem Podcast "Unchained" findest du jeden zweiten Dienstag in der Radio-Section deiner 20-Minuten-App (ganz unten in der Leiste), bei Spotify, Apple Podcasts und Tune In.'] Label: [['Da sagt Rut: „Sag nicht: Geh!\nUnd sag nicht: Ich soll dich allein lassen!']] Sacrebleu: {'score': 0.47462176237300036, 'counts': [1, 0, 0, 0], 'totals': [76, 75, 74, 73], 'precisions': [1.3157894736842106, 0.6666666666666666, 0.33783783783783783, 0.17123287671232876], 'bp': 1.0, 'sys_len': 76, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.013157894736842105, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 76, 'reference_length': 19} Rouge: {'rouge1': 0.051948051948051945, 'rouge2': 0.0, 'rougeL': 0.051948051948051945, 'rougeLsum': 0.051948051948051945} Sari: {'sari': 48.52513227513228} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Mit dir wollen wir zu deinem Volk zurückkehren!'] Prediction: ['Mit dir wollen wir zu deinem Volk zurückkehren.\nMit dir wollen wir zu deinem Volk zurückkehren.'] Label: [['Wir wollen mit dir gehen.']] Sacrebleu: {'score': 2.8265205879007453, 'counts': [3, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [16.666666666666668, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 18, 'reference_length': 6} Rouge: {'rouge1': 0.3478260869565218, 'rouge2': 0.09523809523809523, 'rougeL': 0.2608695652173913, 'rougeLsum': 0.1739130434782609} Sari: {'sari': 46.527777777777786} Flesh Reading Ease: 78.4 ---------------------------------------- Source: ['Und sie gingen auf dem Weg, um ins Land Juda zurückzukehren.'] Prediction: ['Eine Frau aus dem Land Israel wurde von einem Weg ins Land Juda zurückzukehren.\nSie gingen auf dem Weg, um ins Land Juda zurückzukehren.\nSie gingen auf dem Weg, um ins Land Juda zurückzukehren.'] Label: [['Und Noomi will nach Hause gehen.']] Sacrebleu: {'score': 0.9432284668356838, 'counts': [1, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [2.5641025641025643, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.02564102564102564, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.571428571428571, 'translation_length': 39, 'reference_length': 7} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 26.190476190476193} Flesh Reading Ease: 75.1 ---------------------------------------- Source: ['Da sagte Noomi zu ihren beiden Schwiegertöchtern: „Geht! Kehrt zurück, jede ins Haus ihrer Mutter!'] Prediction: ['Noomi und ihr Mutter haben sich bei ihren Schwiegertöchtern veröffentlicht.\nSie haben ihren Schwiegertöchtern zu ihren beiden Schwiegertöchtern gegeben.\nNoomi sagte, wie sie ihre Mutter ins Haus ihrer Mutter haben.'] Label: [['Noomi sagt darum zu Rut und Orpa:" Geht!\nGeht zu euren Müttern!\nGeht nach Hause!']] Sacrebleu: {'score': 1.432548017297354, 'counts': [3, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 34, 'reference_length': 20} Rouge: {'rouge1': 0.12, 'rouge2': 0.0, 'rougeL': 0.12, 'rougeLsum': 0.12} Sari: {'sari': 33.79329004329004} Flesh Reading Ease: 53.0 ---------------------------------------- Source: ['Dann küsste Orpa ihre Schwiegermutter und Rut hängte sich an sie.'] Prediction: ['Ein Schwiegermutter und ein Schwiegerfahrer haben sich in der Nacht auf Sonntag zu Gast geschickt.\nDas küsste der Orpa ihre Schwiegermutter und Rut hängte sich an sie.'] Label: [['Dann küsst Orpa Noomi zum Abschied.\nAber ° Rut° hängt an Noomi.']] Sacrebleu: {'score': 1.8196871111910016, 'counts': [4, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [13.793103448275861, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.13793103448275862, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0714285714285716, 'translation_length': 29, 'reference_length': 14} Rouge: {'rouge1': 0.23809523809523808, 'rouge2': 0.05, 'rougeL': 0.23809523809523808, 'rougeLsum': 0.23809523809523808} Sari: {'sari': 28.333333333333332} Flesh Reading Ease: 72.9 ---------------------------------------- Source: ['Da erhoben sie ihre Stimmen, weinten und sagten zu ihr: „Nein!'] Prediction: ['Die beiden Frauen sind in der Nacht auf Sonntag in der Nacht auf Sonntag in Deutschland gestorben.\nSie wollten ihre Stimmen ihre Stimmen auf ihre Frauen weinten und sagten zu ihr: Nein!'] Label: [['" Aber Rut und Orpa sagen:" Nein.']] Sacrebleu: {'score': 1.493369524819332, 'counts': [4, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 35, 'reference_length': 10} Rouge: {'rouge1': 0.10526315789473684, 'rouge2': 0.0, 'rougeL': 0.10526315789473684, 'rougeLsum': 0.10526315789473684} Sari: {'sari': 37.698412698412696} Flesh Reading Ease: 76.25 ---------------------------------------- Source: ['Sind mir etwa noch mehr Söhne im Leib, sodass sie eure Männer werden könnten?'] Prediction: ['Im Leib sind die Männer in der Schweiz eine Möglichkeit gekommen.\nSie werden eure Männer werden könnten könnten.\nIm Leib sind sie noch mehr Söhne im Leib.'] Label: [['Habe ich etwa einen Mann für euch?\nIch habe keine anderen Söhne.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 30, 'reference_length': 14} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.044444444444444446, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 32.17086834733894} Flesh Reading Ease: 83.25 ---------------------------------------- Source: ['“ Da sagte Noomi: „Kehrt zurück, meine Töchter! Warum wollt ihr mit mir gehen?'] Prediction: ['Noomi und ihr kann sich mit ihrem Töchter gehen.\nWir haben sie sich mit ihrem Töchter gegeben.\nUnd wollten sie mit ihrem Töchter mit ihrem Töchter gehen?\nUnd wir haben sie sich mit ihrem Töchter gehen.'] Label: [['" Da sagt Noomi:" Warum wollt ihr mit mir gehen?']] Sacrebleu: {'score': 2.310428454615111, 'counts': [5, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [12.5, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.125, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.076923076923077, 'translation_length': 40, 'reference_length': 13} Rouge: {'rouge1': 0.16, 'rouge2': 0.0, 'rougeL': 0.16, 'rougeLsum': 0.16} Sari: {'sari': 29.20138888888889} Flesh Reading Ease: 83.25 ---------------------------------------- Source: ['Ach, mir ist es um euretwillen sehr bitter, dass die Hand JHWHs gegen mich ging.'] Prediction: ['Der Zürcher JHWHs hat sich mit dem gemeinsamen Song "JHWHs" zu Gast gewonnen.\nDie Welt ist eine bittere Woche, dass die Hand JHWHs gegen mich ging.\nDie Welt ist eine bittere Woche, dass die Hand JHWHs gegen mich ging.'] Label: [['Gott hat mich bestraft.\nUnd darum kann ich euch nicht helfen.']] Sacrebleu: {'score': 1.1239503708631486, 'counts': [4, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [8.695652173913043, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.08695652173913043, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5384615384615383, 'translation_length': 46, 'reference_length': 13} Rouge: {'rouge1': 0.07843137254901962, 'rouge2': 0.0, 'rougeL': 0.07843137254901962, 'rougeLsum': 0.07843137254901962} Sari: {'sari': 36.75213675213675} Flesh Reading Ease: 85.1 ---------------------------------------- Source: ['JHWH erweise euch Güte, so wie ihr sie den Toten und mir erwiesen habt: JHWH vergelte es euch damit, dass ihr Ruhe findet - jede im Haus ihres Mannes! “ - und sie küsste sie.'] Prediction: ['JHWH hat einen Ruhe im Haus ihres Mannes geschützt.\nDer Ruhe küsste sie und ihr Ruhe.\nDer Mann hatte euch Güte und küsste sie.'] Label: [['Ich liebe euch als gute Frauen für meine Söhne.\nAber meine Söhne sind tot.\nIch muss euch darum jetzt verlassen.\nGott hilft euch jetzt.\nIhr findet dann Ruhe.\nIhr findet dann auch einen Mann.']] Sacrebleu: {'score': 2.345714606070903, 'counts': [7, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [25.925925925925927, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 0.6178673543839127, 'sys_len': 27, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.25925925925925924, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 0.6178673543839127, 'length_ratio': 0.675, 'translation_length': 27, 'reference_length': 40} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.0, 'rougeL': 0.0923076923076923, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 37.13479086667492} Flesh Reading Ease: 90.1 ---------------------------------------- Source: ['Und noch einmal erhoben sie ihre Stimme und weinten.'] Prediction: ['Eine Frau erhoben ihre Stimme und weinten.\nDie Frau erhoben ihre Stimme und weinten ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten sie ihre Stimme und weinten'] Label: [['" Rut und Orpa weinen.']] Sacrebleu: {'score': 0.2076319092002314, 'counts': [2, 0, 0, 0], 'totals': [204, 203, 202, 201], 'precisions': [0.9803921568627451, 0.24630541871921183, 0.12376237623762376, 0.06218905472636816], 'bp': 1.0, 'sys_len': 204, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.00980392156862745, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 34.0, 'translation_length': 204, 'reference_length': 6} Rouge: {'rouge1': 0.00966183574879227, 'rouge2': 0.0, 'rougeL': 0.00966183574879227, 'rougeLsum': 0.00966183574879227} Sari: {'sari': 36.27450980392157} Flesh Reading Ease: -15.11 ---------------------------------------- Source: ['Da sagte sie: „ Siehe, deine Schwägerin kehrt zu ihrem Volk und ihrem Gott zurück - kehre alsoauch du mit deiner Schwägerin zurück!'] Prediction: ['Eine Schwägerin hat ihren Volk und ihrem Gott zurückgegeben.\nSie sagt: "Ich kehrt zu ihrem Volk und ihrem Gott zurück".'] Label: [['Und Noomi sagt:" Orpa geht schon nach Hause.\nRut!\nGeh mit Orpa.\nGeh nach Hause!']] Sacrebleu: {'score': 6.370405230161802, 'counts': [5, 2, 1, 0], 'totals': [25, 24, 23, 22], 'precisions': [20.0, 8.333333333333334, 4.3478260869565215, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.08333333333333333, 0.043478260869565216, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1904761904761905, 'translation_length': 25, 'reference_length': 21} Rouge: {'rouge1': 0.10526315789473685, 'rouge2': 0.0, 'rougeL': 0.10526315789473685, 'rougeLsum': 0.052631578947368425} Sari: {'sari': 38.73505063907541} Flesh Reading Ease: 76.4 ---------------------------------------- Source: ['Und sie verließ den Ort, wo sie gewesen war, und ihre beiden Schwiegertöchter waren bei ihr.'] Prediction: ['Eine Schwiegertöchter wurde bei ihr bei ihr verliebt.\nSie verliebt den Ort, wo sie gewesen war, und ihre beiden Schwiegertöchter waren bei ihr.'] Label: [['°Noomi° geht los.\nAber Rut und Orpa sind bei Noomi.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 27, 'reference_length': 12} Rouge: {'rouge1': 0.11428571428571428, 'rouge2': 0.0, 'rougeL': 0.11428571428571428, 'rougeLsum': 0.11428571428571428} Sari: {'sari': 31.944444444444446} Flesh Reading Ease: 69.05 ---------------------------------------- Source: ['Noomi hatte einen Verwandten ihres Mannes; Sein Name war: Boas.'] Prediction: ['Noomi (19) hatte einen Verwandten ihres Mannes.\nSein Name war: Boas.'] Label: [['Noomi kennt Boas.\nNoomi und Boas sind verwandt.']] Sacrebleu: {'score': 5.816635421147515, 'counts': [4, 1, 0, 0], 'totals': [16, 15, 14, 13], 'precisions': [25.0, 6.666666666666667, 3.5714285714285716, 1.9230769230769231], 'bp': 1.0, 'sys_len': 16, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.25, 0.06666666666666667, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6, 'translation_length': 16, 'reference_length': 10} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.0, 'rougeL': 0.2105263157894737, 'rougeLsum': 0.2105263157894737} Sari: {'sari': 38.33333333333333} Flesh Reading Ease: 80.9 ---------------------------------------- Source: ['einen mächtigen, fähigen Mann aus der Sippe Elimelechs.'] Prediction: ['Ein mächtiger, fähiger Mann aus der Sippe Elimelechs.\nEr fählt mit seinem mächtigen Mann aus der Sippe Elimelechs.\nDie Polizei sucht Zeugen.'] Label: [['Boas ist klug.\nBoas ist mächtig.\nNoomi und Boas gehören zu einer Familie.\nDie Familie von Elimelech.']] Sacrebleu: {'score': 3.435812002459847, 'counts': [4, 1, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [15.384615384615385, 4.0, 2.0833333333333335, 1.0869565217391304], 'bp': 1.0, 'sys_len': 26, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.04, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2380952380952381, 'translation_length': 26, 'reference_length': 21} Rouge: {'rouge1': 0.08888888888888889, 'rouge2': 0.0, 'rougeL': 0.08888888888888889, 'rougeLsum': 0.08888888888888889} Sari: {'sari': 36.36982570806101} Flesh Reading Ease: 79.1 ---------------------------------------- Source: ['Rut, die Moabiterin, sagte zu Noomi: „Ich würde gerne auf das Feld gehen und an den Ähren mitlesen hinter dem, in dessen Augen ich Gefallen finde.'] Prediction: ['Noomi (30) und Rut (29) würde gerne auf das Feld gehen.\nDas Feld würde auf das Feld mitlesen hinter dem, in dessen Augen ich Gefallen finde.\nNoomi (30) würde gerne auf das Feld gehen, in dessen Augen ich Gefallen finde.'] Label: [['Rut gehört nicht zur Familie.\nAber Rut sagt: Ich möchte helfen.\nIch möchte auf das Feld gehen.\nAuf dem Feld wird geerntet.\nVielleicht mag Boas mich. Dann darf ich sammeln.\nVielleicht kann ich mit Boas ernten.']] Sacrebleu: {'score': 8.324415467017712, 'counts': [12, 4, 3, 2], 'totals': [51, 50, 49, 48], 'precisions': [23.529411764705884, 8.0, 6.122448979591836, 4.166666666666667], 'bp': 1.0, 'sys_len': 51, 'ref_len': 44} Bleu: {'bleu': 0.08324415467017712, 'precisions': [0.23529411764705882, 0.08, 0.061224489795918366, 0.041666666666666664], 'brevity_penalty': 1.0, 'length_ratio': 1.1590909090909092, 'translation_length': 51, 'reference_length': 44} Rouge: {'rouge1': 0.24390243902439024, 'rouge2': 0.075, 'rougeL': 0.21951219512195125, 'rougeLsum': 0.24390243902439024} Sari: {'sari': 44.312805436829365} Flesh Reading Ease: 73.1 ---------------------------------------- Source: ['“ Sie sagte zu ihr: „Geh, meine Tochter!'] Prediction: ['Eine Tochter (24) sagte zu ihr: Ihr Tochter ist eine Tochter, die meine Tochter ist eine Tochter.\nDie Frau war zuvor auf der Suche, die ihn nach ihrer Tochter verkündete.'] Label: [['Noomi sagt: Mach das.\nDu bist für mich wie eine Tochter!']] Sacrebleu: {'score': 2.369898273250278, 'counts': [4, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [10.81081081081081, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.10810810810810811, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.642857142857143, 'translation_length': 37, 'reference_length': 14} Rouge: {'rouge1': 0.09302325581395349, 'rouge2': 0.04878048780487805, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.09302325581395349} Sari: {'sari': 34.812271062271066} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Zufällig geriet sie auf das Feldstück des Boas, der aus der Sippe des Elimelech war.'] Prediction: ['Eine Frau aus der Sippe des Elimelech war auf dem Feldstück des Boas geriet auf das Feldstück des Boas.\nZufällig geriet sie aus der Sippe des Elimelech.'] Label: [['Denn sie geht auf ein gutes Feld.\nDenn das Feld gehört Boas.']] Sacrebleu: {'score': 3.3868193354396166, 'counts': [6, 1, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [20.689655172413794, 3.5714285714285716, 1.8518518518518519, 0.9615384615384616], 'bp': 1.0, 'sys_len': 29, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.20689655172413793, 0.03571428571428571, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0714285714285716, 'translation_length': 29, 'reference_length': 14} Rouge: {'rouge1': 0.18604651162790697, 'rouge2': 0.0, 'rougeL': 0.13953488372093023, 'rougeLsum': 0.18604651162790697} Sari: {'sari': 38.41374269005848} Flesh Reading Ease: 72.9 ---------------------------------------- Source: ['“Der Junge, der über die Schnitter gestellt war, antwortete: „Ein moabitisches Mädchen ist sie, das mit Noomi zurückgekehrt ist aus dem Gebiet Moab.'] Prediction: ['Ein moabitisches Mädchen ist aus dem Gebiet Moab.\nDer Junge, der über die Schnitter gestellt war, antwortete: Ein moabitisches Mädchen ist sie, das mit Noomi zurückgekehrt ist.'] Label: [['Der Chef antwortet: Ich berichte dir, wie sie zu uns gekommen ist.\nDas ist ein fremdes Mädchen.\nDas Mädchen ist mit Noomi gekommen.\nNoomi ist mit dem Mädchen aus der Fremde zurück gekommen.']] Sacrebleu: {'score': 4.1451329334682585, 'counts': [16, 3, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [48.484848484848484, 9.375, 1.6129032258064515, 0.8333333333333334], 'bp': 0.8337529180751805, 'sys_len': 33, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.48484848484848486, 0.09375, 0.0, 0.0], 'brevity_penalty': 0.8337529180751805, 'length_ratio': 0.8461538461538461, 'translation_length': 33, 'reference_length': 39} Rouge: {'rouge1': 0.5074626865671642, 'rouge2': 0.12307692307692307, 'rougeL': 0.26865671641791045, 'rougeLsum': 0.417910447761194} Sari: {'sari': 41.74607542006623} Flesh Reading Ease: 67.05 ---------------------------------------- Source: ['Und, siehe da: Da kam auch schon Boas von Betlehem her.'] Prediction: ['Eine Frau hat in der Nacht auf Sonntag einen grossen Schlagzeilen in der Nacht auf Sonntag auf Sonntag auf Sonntag aufgefunden.\nSie war auch schon schon in Betlehem her.\nDie Frau war auch schon schon in der Nacht auf Sonntag zu sehen.'] Label: [['Da kommt Boas aus Bethlehem.']] Sacrebleu: {'score': 0.8130350574508933, 'counts': [1, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [2.2222222222222223, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.022222222222222223, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.5, 'translation_length': 45, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 42.1875} Flesh Reading Ease: 84.1 ---------------------------------------- Source: ['Er sagte zu den Schnittern: „JHWH ist mit euch! “ Und sie sagten zu ihm: „Es segne dich JHWH! “ Und Boas sagte zu seinem Jungen, der über die Schnitter gestellt war: „Zu wem gehört dieses Mädchen?'] Prediction: ['Im Interview mit Boas (67) spricht der Comedian über seinen Mädchen, der über die Schnitter gestellt war.\nIm Interview spricht er über seinen Jungen, der über die Schnitter gestellt war.'] Label: [['Boas sagt zu den Arbeitern: Gott soll bei euch sein!\nUnd die Arbeiter antworten: Gott segne dich!\nBoas fragt den Chef: Wer ist dieses Mädchen?\nBoas hat Rut gesehen.']] Sacrebleu: {'score': 1.4500372328365223, 'counts': [4, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [11.11111111111111, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0, 'translation_length': 36, 'reference_length': 36} Rouge: {'rouge1': 0.13114754098360656, 'rouge2': 0.03389830508474576, 'rougeL': 0.09836065573770492, 'rougeLsum': 0.13114754098360656} Sari: {'sari': 31.089367608764164} Flesh Reading Ease: 77.25 ---------------------------------------- Source: ['‘ Und sie kam und blieb vom Morgen bis gerade eben;'] Prediction: ['Eine Frau (24) wurde am Freitagabend in der Nähe des Landes von ihrem Mann verhaftet.\nSie war dabei nicht mehr, sondern auch auf der Flucht.\nDie Frau war nach dem Morgen von ihrem Mann geschickt und blieb vom Morgen eben.'] Label: [['Das Mädchen hat den ganzen Tag gearbeitet.']] Sacrebleu: {'score': 0.7947529289544674, 'counts': [1, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [2.1739130434782608, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.021739130434782608, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.75, 'translation_length': 46, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.760683760683754} Flesh Reading Ease: 84.8 ---------------------------------------- Source: ['ihr Sitzen im Haus ist erst seit Kurzem.'] Prediction: ['Im Alter von 99 Jahren ist der frühere Mann im Alter von 99 Jahren gestorben.\nErst seit Kurzem ist erst seit Kurzem im Haus.'] Label: [['Das Mädchen macht erst jetzt Pause.']] Sacrebleu: {'score': 1.7179060012299232, 'counts': [2, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [7.6923076923076925, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.7142857142857144, 'translation_length': 26, 'reference_length': 7} Rouge: {'rouge1': 0.0625, 'rouge2': 0.0, 'rougeL': 0.0625, 'rougeLsum': 0.0625} Sari: {'sari': 37.03703703703704} Flesh Reading Ease: 80.25 ---------------------------------------- Source: ['“ Und Boas sagte zu Rut: „Höre, meine Tochter: Gehe nicht zum Sammeln auf ein anderes Feld und ziehe auch nicht fort von hier, sondern hänge dich hier an meine Mädchen.'] Prediction: ['Einige Tage später haben einen Sammeln auf ein anderes Feld gebracht.\nEinige Tage später hätten sich an den Mädchen gebracht.\nEinige Tage später hätten sich auf ein anderes Feld gebracht.'] Label: [['Und Boas sagt zu Rut: Hör zu.\nDu kannst gerne hier bleiben Bleib bei den Mädchen hier.\nDas ist mein Feld.\nBleib bei meinen Mädchen.']] Sacrebleu: {'score': 2.9561645124389617, 'counts': [6, 1, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [18.181818181818183, 3.125, 1.6129032258064515, 0.8333333333333334], 'bp': 1.0, 'sys_len': 33, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.03125, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1, 'translation_length': 33, 'reference_length': 30} Rouge: {'rouge1': 0.15625000000000003, 'rouge2': 0.06451612903225806, 'rougeL': 0.15625000000000003, 'rougeLsum': 0.15625000000000003} Sari: {'sari': 34.05801188059252} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['“ Also ging und kam und sammelte sie hinter den Schnittern an den Ähren mit.'] Prediction: ['Am 23.\nMai ist die erste Frau in der Schweiz (27) bei ihrem Mann (27) gekommen.\nDie beiden waren nach der Täterin (27) und ihnen (29) geschickt.\nDie Frau war mit ihrem Mann hinter den Schnittern mit ihrem Mann gekommen.'] Label: [['Rut sammelt Ähren.']] Sacrebleu: {'score': 0.7002773917100699, 'counts': [1, 0, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [1.9230769230769231, 0.9803921568627451, 0.5, 0.25510204081632654], 'bp': 1.0, 'sys_len': 52, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.019230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 13.0, 'translation_length': 52, 'reference_length': 4} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 42.91666666666667} Flesh Reading Ease: 84.8 ---------------------------------------- Source: ['Sie hat gesagt: ‚ Ich würde gerne lesen und bei den Garben hinter den Schnittern her sammeln.'] Prediction: ['Am Freitagabend gab es in der Nacht auf Sonntag einen Sieg mit der Schweizerin Andrea.\nDie 20-Minuten-Radio-Host Andrea äusserte sich über ihre Welt und ihre Welt.\nSie war zuvor mit ihrem Mann auf der Weg gesagt.'] Label: [['Das Mädchen hat gefragt: Darf ich hier arbeiten?\nDarf ich die Reste nehmen?\nWas ihr nicht braucht?']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 41, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9523809523809523, 'translation_length': 41, 'reference_length': 21} Rouge: {'rouge1': 0.03508771929824561, 'rouge2': 0.0, 'rougeL': 0.03508771929824561, 'rougeLsum': 0.03508771929824561} Sari: {'sari': 56.94444444444444} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['Gehe hinter ihnen.'] Prediction: ['Einige Jahre nach dem Coronavirus hat sich in der Schweiz zu einem schweren Verletzungen geschlossen.\nNun hat sich der Mann aufgefunden, dass er sich in der Schweiz nicht mehr geschickt hatte.'] Label: [['Geh mit den anderen.']] Sacrebleu: {'score': 1.0885011049519644, 'counts': [1, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [2.9411764705882355, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.029411764705882353, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.8, 'translation_length': 34, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 70.9 ---------------------------------------- Source: ['Hiermit befehle ich meinen Jungen, dich nicht anzurühren?'] Prediction: ['Eine Frau aus der Nähe der Schweiz wurde im Alter von 99 Jahren nicht mehr verkündet.\nNun befehlt sie meinen Jungen, die nicht anzurühren.\nDie Frau befehlt sich meinen Jungen, dich nicht anzurühren.'] Label: [['Sie werden dir nichts tun.']] Sacrebleu: {'score': 0.969094302009921, 'counts': [1, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [2.6315789473684212, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.02631578947368421, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.333333333333333, 'translation_length': 38, 'reference_length': 6} Rouge: {'rouge1': 0.047619047619047616, 'rouge2': 0.0, 'rougeL': 0.047619047619047616, 'rougeLsum': 0.047619047619047616} Sari: {'sari': 34.61538461538462} Flesh Reading Ease: 75.4 ---------------------------------------- Source: ['Deine Augen seien auf das Feld gerichtet, das sie abernten.'] Prediction: ['Eine junge Frau wurde auf das Feld gerichtet.\nSie wurde dabei verletzt, das sie abernten.'] Label: [['Boas sagt: Konzentriere dich.']] Sacrebleu: {'score': 2.1476912089159055, 'counts': [1, 0, 0, 0], 'totals': [18, 17, 16, 15], 'precisions': [5.555555555555555, 2.9411764705882355, 1.5625, 0.8333333333333334], 'bp': 1.0, 'sys_len': 18, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.0, 'translation_length': 18, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 35.18518518518518} Flesh Reading Ease: 73.05 ---------------------------------------- Source: ['Und wenn du Durst hast, gehe zu den Gefäßen und trinke vom, was auch die Jungen schöpfen!'] Prediction: ['Du Durst hat einen Gefäßen und trinke vom, was auch die Jungen schöpfen?\nAber wenn du Durst hast, gehe zu den Gefäßen und trinke vom, was auch die Jungen schöpfen?\nUnd du Durst hast, was auch die Jungen schöpfen?'] Label: [['Du kannst trinken.\nWie die anderen.']] Sacrebleu: {'score': 0.9451258377819046, 'counts': [2, 0, 0, 0], 'totals': [46, 45, 44, 43], 'precisions': [4.3478260869565215, 1.1111111111111112, 0.5681818181818182, 0.29069767441860467], 'bp': 1.0, 'sys_len': 46, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.043478260869565216, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.75, 'translation_length': 46, 'reference_length': 8} Rouge: {'rouge1': 0.08, 'rouge2': 0.0, 'rougeL': 0.08, 'rougeLsum': 0.08} Sari: {'sari': 35.08771929824561} Flesh Reading Ease: 90.95 ---------------------------------------- Source: ['Dann stand sie auf, um zu sammeln.'] Prediction: ['Eine Frau wurde in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich gestorben.\nSie war auf der Strasse zu sammeln, um zu sammeln.\nDie Frau stand auf, um zu sammeln.'] Label: [['Dann steht Rut auf.\nRut sammelt Korn.']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.222222222222222, 'translation_length': 38, 'reference_length': 9} Rouge: {'rouge1': 0.04878048780487805, 'rouge2': 0.0, 'rougeL': 0.04878048780487805, 'rougeLsum': 0.04878048780487805} Sari: {'sari': 28.030303030303035} Flesh Reading Ease: 92.95 ---------------------------------------- Source: ['Sie hob es auf, kam in die Stadt und zeigte ihrer Schwiegermutter, was sie gelesen hat und zog heraus und gab ihr, was sie übrig gelassen hatte nach ihrer Sättigung.'] Prediction: ['Eine Schwiegermutter hatte in der Stadt Zürich eine Schwiegermutter gelesen.\nSie hatte ihre Schwiegermutter übrig gelassen und gab ihr.\nSie hatte in Zürich eine Schwiegermutter, die übrig gelassen hatte.'] Label: [['Rut hebt das ganze Korn auf.\nRut trägt es nach Hause.\nRut zeigt Noomi das Korn.\nUnd Rut zeigt Noomi den Rest vom Mittagessen.']] Sacrebleu: {'score': 1.4780822562194806, 'counts': [3, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [9.090909090909092, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1785714285714286, 'translation_length': 33, 'reference_length': 28} Rouge: {'rouge1': 0.03571428571428571, 'rouge2': 0.0, 'rougeL': 0.03571428571428571, 'rougeLsum': 0.03571428571428571} Sari: {'sari': 41.4766081871345} Flesh Reading Ease: 53.3 ---------------------------------------- Source: ['JHWH vergelte dein Tun und dein Lohn sei voll von JHWH, dem Gott Israels, zum du gekommen bist, um unter seinen Flügeln Schutz zu suchen! “ Sie antwortete: „Möge ich in deinen Augen Gefallen finden, mein Herr, weil du mich getröstet und weil du zum Herzen deiner Magd gesprochen hast.'] Prediction: ['JHWH vergelte einen Tun und ein Lohn, der Gott Israels, zum Schutz zu suchen.\nDer Tübel war unter seinen Flügeln Schutz gekommen.\nJHWH antwortete, weil du mich getröstet hat und weil du zum Herzen deiner Magd gesprochen hast.'] Label: [['Gott wird dich beschenken.\nDenn du bist gut.\nGott wird dich beschützen.\nRut sagt: Danke.\nDu sprichst freundlich.\nGefalle ich dir?']] Sacrebleu: {'score': 1.2443969494386207, 'counts': [5, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [11.363636363636363, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.11363636363636363, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5714285714285714, 'translation_length': 44, 'reference_length': 28} Rouge: {'rouge1': 0.09523809523809522, 'rouge2': 0.0, 'rougeL': 0.09523809523809522, 'rougeLsum': 0.09523809523809522} Sari: {'sari': 33.36856941508105} Flesh Reading Ease: 79.55 ---------------------------------------- Source: ['Und Boas befahl seinen Jungen indem er sagte: „Auch zwischen den Garben darf sie sammeln, und ihr dürft sie nicht beschimpfen!'] Prediction: ['Einige Jahre lang spielten in der Schweiz in einem Interview mit dem 20-Minuten-Radio-Host Andrea über ihre Welt und ihr Leben.\nIn der Interview spricht der Moderator über seinen Jungen und dürft sie nicht beschimpfen.'] Label: [['Boas sagt zu den Arbeitern: Lasst sie mit euch sammeln.\nSchimpft sie nicht aus.\nDenn Rut darf eigentlich nur die Reste sammeln.']] Sacrebleu: {'score': 2.4371431437250504, 'counts': [5, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [13.157894736842104, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.13157894736842105, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4615384615384615, 'translation_length': 38, 'reference_length': 26} Rouge: {'rouge1': 0.09999999999999999, 'rouge2': 0.034482758620689655, 'rougeL': 0.09999999999999999, 'rougeLsum': 0.09999999999999999} Sari: {'sari': 35.762012012012015} Flesh Reading Ease: 63.55 ---------------------------------------- Source: ['Ja, mehr noch: Ihr sollt ihr durchaus herausziehen herausziehen aus den Handbündeln, es liegen lassen und sie soll das Liegengelassene sammeln.'] Prediction: ['Eine Frau soll durchaus herausziehen herausziehen aus den Handbündeln, es liegen lassen und sie soll das Liegengelassene sammeln.\nIhr soll durchaus herausziehen herausziehen aus den Handbündeln, es liegen lassen und sie soll das Liegengelassene sammeln.'] Label: [['Boas sagt auch: Lasst Korn für sie liegen.\nDas Mädchen soll viel sammeln.']] Sacrebleu: {'score': 2.482716946958931, 'counts': [6, 1, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [15.384615384615385, 2.6315789473684212, 1.3513513513513513, 0.6944444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.15384615384615385, 0.02631578947368421, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4375, 'translation_length': 39, 'reference_length': 16} Rouge: {'rouge1': 0.1923076923076923, 'rouge2': 0.0, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.11538461538461539} Sari: {'sari': 37.091503267973856} Flesh Reading Ease: 45.5 ---------------------------------------- Source: ['“ Boas sagte zu ihr zur Essenszeit: „Komm hierher!'] Prediction: ['Im Interview mit der 20-Minuten-App spricht Comedian Boas über die Frage, die sich mit der Frage zu Gast und ihren Fragen über die Frage zu Gast und Fragen über die Frage zum Podcast-Interview mit 20 Minuten Radio.\nIm Interview spricht der Comedian über die Frage, die sich zu Gast und Fragen über die Frage zu Gast und Fragen über die Frage zum Podcast-Interview und die Frage-App (ganz unten in der Leiste), in der Radio-Section deiner 20-Minuten-App (ganz unten in der Leiste), bei Spotify und Apple Podcasts und auf iTunes und Google Play mit der Frage und den Direktstream.'] Label: [['Es ist Zeit zum Mittagessen.\nBoas sagt zu Rut: Komm!']] Sacrebleu: {'score': 0.45251185163386054, 'counts': [4, 0, 0, 0], 'totals': [112, 111, 110, 109], 'precisions': [3.5714285714285716, 0.45045045045045046, 0.22727272727272727, 0.11467889908256881], 'bp': 1.0, 'sys_len': 112, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.03571428571428571, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.615384615384615, 'translation_length': 112, 'reference_length': 13} Rouge: {'rouge1': 0.05172413793103448, 'rouge2': 0.0, 'rougeL': 0.034482758620689655, 'rougeLsum': 0.05172413793103448} Sari: {'sari': 62.690631808278866} Flesh Reading Ease: 31.55 ---------------------------------------- Source: ['Bin ich nicht nur wie eine deiner Mägde!?'] Prediction: ['Eine Mägde wurde in der Nacht auf Sonntag erschienen.\nSie wurde von der Nacht auf Sonntag erschienen.\nDie Frau hatte sich nicht nur wie eine deine Mägde.'] Label: [['Ich bin nur wie eine Arbeiterin von dir.']] Sacrebleu: {'score': 5.250881761853935, 'counts': [5, 2, 1, 0], 'totals': [30, 29, 28, 27], 'precisions': [16.666666666666668, 6.896551724137931, 3.5714285714285716, 1.8518518518518519], 'bp': 1.0, 'sys_len': 30, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.16666666666666666, 0.06896551724137931, 0.03571428571428571, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3333333333333335, 'translation_length': 30, 'reference_length': 9} Rouge: {'rouge1': 0.2162162162162162, 'rouge2': 0.1142857142857143, 'rougeL': 0.16216216216216217, 'rougeLsum': 0.2162162162162162} Sari: {'sari': 48.976608187134495} Flesh Reading Ease: 83.25 ---------------------------------------- Source: ['Und ihr sollt sie nicht schelten! “ Und so sammelte sie auf dem Feld bis zum Abend;'] Prediction: ['Eine Frau war auf dem Feld in der Nähe des Jahres 2020 gestorben.\nDie beiden waren nicht mehr, sondern auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch auch a'] Label: [['Und schimpft sie nicht aus.\nDarum sammelt Rut viel Korn.\nBis zum Abend.']] Sacrebleu: {'score': 0.18481463077880314, 'counts': [2, 0, 0, 0], 'totals': [229, 228, 227, 226], 'precisions': [0.8733624454148472, 0.21929824561403508, 0.11013215859030837, 0.05530973451327434], 'bp': 1.0, 'sys_len': 229, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.008733624454148471, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 14.3125, 'translation_length': 229, 'reference_length': 16} Rouge: {'rouge1': 0.008298755186721992, 'rouge2': 0.0, 'rougeL': 0.008298755186721992, 'rougeLsum': 0.008298755186721992} Sari: {'sari': 39.30318138651472} Flesh Reading Ease: 8.0 ---------------------------------------- Source: ['dann kopfte sie das, was sie gesammelt hatte, aus - und es ergab ungefähr ein Efa Gerste.'] Prediction: ['Eine Frau hat ein Efa Gerste ergab ungefähr ein Efa Gerste.\nDie Frau war dann gesammelt und ergab ungefähr ein Efa Gerste.'] Label: [['Rut sammelt mehr als 10 Kilo.']] Sacrebleu: {'score': 1.5732934811145336, 'counts': [1, 0, 0, 0], 'totals': [24, 23, 22, 21], 'precisions': [4.166666666666667, 2.1739130434782608, 1.1363636363636365, 0.5952380952380952], 'bp': 1.0, 'sys_len': 24, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.041666666666666664, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.4285714285714284, 'translation_length': 24, 'reference_length': 7} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 35.0} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['“Da warf sie sich auf ihr Gesicht und neigte sich erdenwärts und sagte zu ihm: „Warum nur habe ich Gefallen in deinen Augen gefunden, so dass du mich wohlgefällig ansiehst, obwohl ich Ausländerin bin? “ Boas anwortete und sagte zu ihr: „Berichtet berichtet wurde mir alles, was du für deine Schwiegermutter nach dem Tod deines Mannes getan hast: dass du deinen Vater und deine Mutter und das Land deiner Geburt verlassen hast und zu einem Volk gegangen bist, das du vorher nicht kanntest.'] Prediction: ['Ein Mann hat in einem Augen in der Nähe des Landes eine Schwiegermutter getan hast.\nDas Land warf sie sich auf ihr Gesicht und neigte sich erdenwärts.\nBoas warf sie sich auf ihr Gesicht und sagte: "Du hast einen Vater und deine Mutter und das Land deiner Geburt verlassen hast und zu einem Volk gegangen bist, das du vorher nicht kanntest".'] Label: [['Rut wirft sich zu Boden.\nRut sagt zu Boas: Warum bist du gut zu mir?\nIch bin Ausländerin.\nBoas antwortet: Du bist gut zu Noomi.\nDer Mann von Noomi ist gestorben.\nDer Sohn von Noomi ist gestorben.\nDer Sohn war dein Mann.\nDu bist bei Noomi geblieben.\nDu hast deine Heimat verlassen.\nDu bist mit Noomi zu uns gekommen.']] Sacrebleu: {'score': 1.9683245466137609, 'counts': [14, 2, 0, 0], 'totals': [68, 67, 66, 65], 'precisions': [20.58823529411765, 2.985074626865672, 0.7575757575757576, 0.38461538461538464], 'bp': 0.9568413812767794, 'sys_len': 68, 'ref_len': 71} Bleu: {'bleu': 0.0, 'precisions': [0.20588235294117646, 0.029850746268656716, 0.0, 0.0], 'brevity_penalty': 0.9568413812767794, 'length_ratio': 0.9577464788732394, 'translation_length': 68, 'reference_length': 71} Rouge: {'rouge1': 0.17886178861788615, 'rouge2': 0.01652892561983471, 'rougeL': 0.11382113821138211, 'rougeLsum': 0.1626016260162602} Sari: {'sari': 35.771430367018596} Flesh Reading Ease: 71.95 ---------------------------------------- Source: ['Iss vom Brot und tunke deinen Brocken in den Essig! “ - Also setzte sich sich an die Seite der Schnitter, er reichte ihr Röstkorn, sie aß, wurde satt und lies übrig.'] Prediction: ['Einige Tage sprechen in der Nacht auf Sonntag, 6.\nMai, auf Sonntag, 6.\nMai, bis Sonntag, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 6.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 12.\nMai, 14.\nMai, 12.\nMai, 12.\nMai, 14.\nMai, 12.\nMai, 14.\nMai, 12.\nMai, 14.\nMai, 14.\nMai, 12.\nMai, 14.\nMai, 14.\nMai, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00 Uhr, 12.00'] Label: [['Du kannst mit mir essen.\nRut setzte sich zu den Arbeitern.\nBoas gibt ihr geröstete Körner.\nRut isst.\nRut wird satt.\nEs bleibt noch was übrig.']] Sacrebleu: {'score': 0.1898267684138914, 'counts': [6, 0, 0, 0], 'totals': [293, 292, 291, 290], 'precisions': [2.04778156996587, 0.17123287671232876, 0.0859106529209622, 0.04310344827586207], 'bp': 1.0, 'sys_len': 293, 'ref_len': 32} Bleu: {'bleu': 0.0, 'precisions': [0.020477815699658702, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 9.15625, 'translation_length': 293, 'reference_length': 32} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 49.471728782073605} Flesh Reading Ease: 118.0 ---------------------------------------- Source: ['Daher wasche dich, salbe dich, wirf deine Kleider um dich und geh zur Tenne hinab!'] Prediction: ['Das Paar hat eine Kleider-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-Kollegen-'] Label: [['Ich habe eine Idee: Wasch dich.\nMach dich schön.\nZieh was Schönes an.\nGeh zum Hof.\nWarte dort.']] Sacrebleu: {'score': 0.238968503429853, 'counts': [1, 0, 0, 0], 'totals': [5, 4, 3, 2], 'precisions': [20.0, 12.5, 8.333333333333334, 6.25], 'bp': 0.0223707718561656, 'sys_len': 5, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.0, 0.0, 0.0], 'brevity_penalty': 0.0223707718561656, 'length_ratio': 0.20833333333333334, 'translation_length': 5, 'reference_length': 24} Rouge: {'rouge1': 0.017699115044247787, 'rouge2': 0.0, 'rougeL': 0.017699115044247787, 'rougeLsum': 0.017699115044247787} Sari: {'sari': 58.16498316498316} Flesh Reading Ease: -2995.71 ---------------------------------------- Source: ['“ Da antwortete sie ihr: „Alles, was du sagst, will ich tun.'] Prediction: ['Eine Frau wurde von ihrem Mann aufgefunden, dass sie ihr sagst, will ich tun.\nDie Frau war dabei, dass sie ihr sagst, will ich tun.\nDie Frau war dabei, dass sie ihr sagst, will ich tun.'] Label: [['Rut sagt: Du möchtest es?\nGut.\nIch werde es machen.']] Sacrebleu: {'score': 0.9668670750672484, 'counts': [2, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [4.444444444444445, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.044444444444444446, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.2142857142857144, 'translation_length': 45, 'reference_length': 14} Rouge: {'rouge1': 0.0425531914893617, 'rouge2': 0.0, 'rougeL': 0.0425531914893617, 'rougeLsum': 0.0425531914893617} Sari: {'sari': 33.73015873015873} Flesh Reading Ease: 97.8 ---------------------------------------- Source: ['Lass dich aber nicht vom Mann erkennen, bis er mit Essen und Trinken fertig ist!'] Prediction: ['Ein Mann hat sich mit Essen und Trinken fertig gewesen.\nDas ist der erste Mann, der mit Essen und Trinken fertig ist.\nDer Mann hat sich mit Essen und Trinken fertig gewesen.'] Label: [['Warte bis Boas mit Essen und Trinken fertig ist.']] Sacrebleu: {'score': 15.612734376432712, 'counts': [7, 6, 5, 4], 'totals': [36, 35, 34, 33], 'precisions': [19.444444444444443, 17.142857142857142, 14.705882352941176, 12.121212121212121], 'bp': 1.0, 'sys_len': 36, 'ref_len': 10} Bleu: {'bleu': 0.15612734376432705, 'precisions': [0.19444444444444445, 0.17142857142857143, 0.14705882352941177, 0.12121212121212122], 'brevity_penalty': 1.0, 'length_ratio': 3.6, 'translation_length': 36, 'reference_length': 10} Rouge: {'rouge1': 0.29268292682926833, 'rouge2': 0.2564102564102564, 'rougeL': 0.29268292682926833, 'rougeLsum': 0.29268292682926833} Sari: {'sari': 67.77418073070245} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['Und es soll sein, wenn er sich legt: merke dir den Ort, wo er liegt, gehe, entblöße seine Beine und lege dich.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Bern entblößt, entblöße seine Beine und lege dich.\nEr merke dir den Ort, wo er liegt, gehe, entblöße seine Beine und lege dich dich.'] Label: [['Boas legt sich hin.\nMerke dir den Ort.\nNimm seine Decke von seinen Beinen.\nNimm seine Decke von seinen Füßen.\nLege dich zu ihm.']] Sacrebleu: {'score': 3.9830420674981895, 'counts': [9, 2, 1, 0], 'totals': [45, 44, 43, 42], 'precisions': [20.0, 4.545454545454546, 2.3255813953488373, 1.1904761904761905], 'bp': 1.0, 'sys_len': 45, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.2, 0.045454545454545456, 0.023255813953488372, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5517241379310345, 'translation_length': 45, 'reference_length': 29} Rouge: {'rouge1': 0.26865671641791045, 'rouge2': 0.12307692307692307, 'rougeL': 0.2388059701492537, 'rougeLsum': 0.26865671641791045} Sari: {'sari': 43.56812169312169} Flesh Reading Ease: 78.6 ---------------------------------------- Source: ['Er wird dir dann erzählen, was du tun sollst.'] Prediction: ['Der Mann wird dir dann erzählen, was du tun sollst.\nEr wird dir dann erzählen, was du tun sollst.'] Label: [['Er wird zu dir sprechen.\nEr sagt dann zu dir: Mach dies!\nOder mach das!']] Sacrebleu: {'score': 5.154337627145953, 'counts': [6, 2, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [26.08695652173913, 9.090909090909092, 2.380952380952381, 1.25], 'bp': 1.0, 'sys_len': 23, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.2608695652173913, 0.09090909090909091, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2105263157894737, 'translation_length': 23, 'reference_length': 19} Rouge: {'rouge1': 0.2777777777777778, 'rouge2': 0.058823529411764705, 'rougeL': 0.2222222222222222, 'rougeLsum': 0.2222222222222222} Sari: {'sari': 40.934011164274324} Flesh Reading Ease: 100.3 ---------------------------------------- Source: ['Und es war um Mitternacht zitterte der Mann, tastete um sich und, siehe da! - eine Frau lag an seinen Beinen!'] Prediction: ['Ein Mann hat in der Nacht auf Sonntag eine Frau geschickt und siehe da.\nDie Frau lag an seinen Beinen.\nDie Mannschaft hatte sich um einen Beinen zittert und siehe da.'] Label: [['Es wird Mitternacht.\nBoas wird es kalt.\nBoas zittert.\nBoas tastet um sich.\nSiehe da!\nEine Frau liegt an seinen Beinen!']] Sacrebleu: {'score': 5.60689004054307, 'counts': [11, 2, 1, 0], 'totals': [34, 33, 32, 31], 'precisions': [32.35294117647059, 6.0606060606060606, 3.125, 1.6129032258064515], 'bp': 1.0, 'sys_len': 34, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.3235294117647059, 0.06060606060606061, 0.03125, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2592592592592593, 'translation_length': 34, 'reference_length': 27} Rouge: {'rouge1': 0.3846153846153846, 'rouge2': 0.16, 'rougeL': 0.23076923076923075, 'rougeLsum': 0.34615384615384615} Sari: {'sari': 42.33262108262108} Flesh Reading Ease: 87.8 ---------------------------------------- Source: ['sie kam im Geheimen, entblößte seine Beine und legte sich.'] Prediction: ['Eine Beine entblößte sich in der Nacht auf Sonntag in der Nacht auf Sonntag, 20.\nJuli, während der Polizei eine Beine entblößte sich.\nDie Polizei hatte sich nun auf den Strassen entblöckt.'] Label: [['Rut schleicht zu Boas.\nRut nimmt die Decke von Boas weg.\nRut legt sich hin.']] Sacrebleu: {'score': 1.4091499441909465, 'counts': [4, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [10.81081081081081, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.10810810810810811, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0555555555555554, 'translation_length': 37, 'reference_length': 18} Rouge: {'rouge1': 0.0784313725490196, 'rouge2': 0.0, 'rougeL': 0.0784313725490196, 'rougeLsum': 0.0784313725490196} Sari: {'sari': 55.379188712522044} Flesh Reading Ease: 81.55 ---------------------------------------- Source: ['Siehe, dieser wird heute Nacht Gerste auf der Gerstentenne worfeln.'] Prediction: ['Nach der Nacht auf Sonntag wird heute Nacht Gerste auf der Stentenne worfeln.\nSiehe, dieser wird heute Nacht Gerste auf der Gerstentenne worfeln.'] Label: [['Boas wird heute Nacht arbeiten.\nBoas wird die Gerste bearbeiten.']] Sacrebleu: {'score': 6.64601628955087, 'counts': [7, 2, 1, 0], 'totals': [26, 25, 24, 23], 'precisions': [26.923076923076923, 8.0, 4.166666666666667, 2.1739130434782608], 'bp': 1.0, 'sys_len': 26, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.2692307692307692, 0.08, 0.041666666666666664, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 26, 'reference_length': 12} Rouge: {'rouge1': 0.30303030303030304, 'rouge2': 0.1290322580645161, 'rougeL': 0.30303030303030304, 'rougeLsum': 0.30303030303030304} Sari: {'sari': 42.31454819690114} Flesh Reading Ease: 74.9 ---------------------------------------- Source: ['Und weiter: Ist nicht Boas, bei dessen Mägden du warst, unser Verwandter?'] Prediction: ['Einige Mägner haben sich in den vergangenen Tagen verwandt.\nSie wollten sich nicht mehr verlassen, sondern auch nicht mehr, dass sie sich auf dem Mägden war.\nUnd auch nicht mehr, dass sie sich nicht mehr verwandst haben.'] Label: [['Und weiter: Boas war bei den Mägden.\nUnd ich habe keine Söhne mehr.\nAber Boas ist auch unser Verwandter.']] Sacrebleu: {'score': 2.4825484446385278, 'counts': [9, 1, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [20.930232558139537, 2.380952380952381, 1.2195121951219512, 0.625], 'bp': 1.0, 'sys_len': 43, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.20930232558139536, 0.023809523809523808, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8695652173913044, 'translation_length': 43, 'reference_length': 23} Rouge: {'rouge1': 0.23333333333333334, 'rouge2': 0.034482758620689655, 'rougeL': 0.16666666666666666, 'rougeLsum': 0.2} Sari: {'sari': 39.67451902935773} Flesh Reading Ease: 85.8 ---------------------------------------- Source: ['Eines Tages sprach Noomi, ihre Schwiegermutter, zu ihr: „Meine Tochter, will ich nicht für dich Ruhe suchen, damit es dir gut geht?'] Prediction: ['Noomi (30) und ihr Schwiegermutter (29) haben sich bei der Schwiegermutter eine Tochter geschickt.\nNoomi spricht von ihrer Tochter, dass sie nicht für dich Ruhe suchen will.\nNoomi hatte ihre Tochter auf ihre Ruhe geschickt.'] Label: [['Noomi sagt zu Rut: Ich habe nachgedacht.\nDu bist meine Tochter.\nIch möchte dich glücklich machen.\nDu brauchst ein Zuhause.']] Sacrebleu: {'score': 1.3338359564519315, 'counts': [6, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [13.953488372093023, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.13953488372093023, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.72, 'translation_length': 43, 'reference_length': 25} Rouge: {'rouge1': 0.10344827586206896, 'rouge2': 0.0, 'rougeL': 0.10344827586206896, 'rougeLsum': 0.10344827586206896} Sari: {'sari': 34.83044733044733} Flesh Reading Ease: 68.85 ---------------------------------------- Source: ['“ Sie ging also hinab zur Tenne und befolgte alles, was ihr die Schwiegermutter geboten hatte: Boas aß, trank, sein Herz wurde fröhlich, er kam, um sich am Fuß des Getreidehaufens zu legen;'] Prediction: ['Immer mehr als eine Woche hatte sich eine Schwiegermutter in der Nähe des Getreidehaufens in Zürich geboten.\nEine Frau hatte sich dabei geboten und befolgte alles, was ihr die Schwiegermutter geboten hatte.'] Label: [['Rut geht zum Hof.\nSie macht es so.\nDenn Noomi wünscht es.\nBoas isst.\nBoas trinkt.\nBoas wird fröhlich.\nBoas legt sich hin.\nBoas liegt neben dem Getreidehaufen.']] Sacrebleu: {'score': 1.350592042277739, 'counts': [3, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 0.9718328750329812, 'sys_len': 35, 'ref_len': 36} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.0, 0.0, 0.0], 'brevity_penalty': 0.971832875032981, 'length_ratio': 0.9722222222222222, 'translation_length': 35, 'reference_length': 36} Rouge: {'rouge1': 0.03125, 'rouge2': 0.0, 'rougeL': 0.03125, 'rougeLsum': 0.03125} Sari: {'sari': 33.79289215686274} Flesh Reading Ease: 52.85 ---------------------------------------- Source: ['Setz dich hier irgendwo hin! “ Und dieser bog ab und setzte sich hin.'] Prediction: ['Die Serien sind in der Nacht auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag geschickt.\nIm Interview spricht der Serien-Kollegin über die Geschichte und die Serien, die sich im Interview mit ihrem ersten Mal über die Geschichte verkündet haben.'] Label: [['Setz dich.\nDer Verwandte setzt sich zu ihm.']] Sacrebleu: {'score': 0.6998018210509476, 'counts': [3, 0, 0, 0], 'totals': [68, 67, 66, 65], 'precisions': [4.411764705882353, 0.746268656716418, 0.3787878787878788, 0.19230769230769232], 'bp': 1.0, 'sys_len': 68, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.04411764705882353, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.8, 'translation_length': 68, 'reference_length': 10} Rouge: {'rouge1': 0.05333333333333334, 'rouge2': 0.0, 'rougeL': 0.05333333333333334, 'rougeLsum': 0.05333333333333334} Sari: {'sari': 53.43474426807761} Flesh Reading Ease: 53.9 ---------------------------------------- Source: ['Dann nahm Boas sich zehn Männer von den Ältesten der Stadt und sagte: „Setzt euch hier hin! “ Und sie setzten sich.'] Prediction: ['Die Stadt Zürich hatte einen neuen Chef in der Stadt Zürich einen Chef ausgebaut.\nDieser nahm zehn Männer von den Ältesten der Stadt und sagte: "Setzt euch hier hin!\n“ Und sie setzten sich.'] Label: [['Boas organisiert 10 Zeugen.\nAuch die Zeugen setzten sich.']] Sacrebleu: {'score': 3.7729138673427363, 'counts': [4, 2, 1, 0], 'totals': [39, 38, 37, 36], 'precisions': [10.256410256410257, 5.2631578947368425, 2.7027027027027026, 1.3888888888888888], 'bp': 1.0, 'sys_len': 39, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.10256410256410256, 0.05263157894736842, 0.02702702702702703, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5454545454545454, 'translation_length': 39, 'reference_length': 11} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.04651162790697674, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 34.93872549019608} Flesh Reading Ease: 87.1 ---------------------------------------- Source: ['Und, siehe da! der Löser kam vorüber , von dem Boas gesprochen hatte .'] Prediction: ['Der Löser hatte vorübergehend einen Boas gesprochen.\nDer Löser kam vorüber und wurde von dem Boas gesprochen.\nDer Löser kam vorüber, von dem Boas gesprochen hatte.'] Label: [['Dann kommt der nähere Verwandte von Rut.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.1, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.1} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 71.85 ---------------------------------------- Source: ['Da sagte er: „Bieg ab!'] Prediction: ['Der frühere Mann hat sich in der Nacht auf Sonntag zu Gast geschickt.\nEr warnt, dass er sich nicht mehr zu tun hatte.\nEr sagte: "Bieg ab!'] Label: [['Boas sagtKomm.']] Sacrebleu: {'score': 1.123099644603982, 'counts': [1, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [3.0303030303030303, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 3} Bleu: {'bleu': 0.0, 'precisions': [0.030303030303030304, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 11.0, 'translation_length': 33, 'reference_length': 3} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 50.66666666666667} Flesh Reading Ease: 100.8 ---------------------------------------- Source: ['Dann sagte er zum Löser: „Das Feldstück, das unserem Bruder, dem Elimelech, war, verkauft Noomi, die zurückgekehrt ist aus dem Gebiet von Moab.'] Prediction: ['Ein Bruder, dem Elimelech, war zurückgekehrt.\nNoomi, die zurückgekehrt ist aus dem Gebiet von Moab, verkauft das Feldstück.\nDas Feldstück, das unserem Bruder, dem Elimelech, war, verkauft Noomi.'] Label: [['Dann sagt Boas zum Verwandten: Es gibt ein Feld.\nDas Feld gehört unserem Verwandten Elimelech.\nElimelech ist tot.\nNoomi ist zurück aus dem Ausland.\nNoomi will das Feld verkaufen.\nDu bist der nächste Verwandte.']] Sacrebleu: {'score': 3.766032260991342, 'counts': [13, 3, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [33.333333333333336, 7.894736842105263, 1.3513513513513513, 0.6944444444444444], 'bp': 0.950010681010268, 'sys_len': 39, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.3333333333333333, 0.07894736842105263, 0.0, 0.0], 'brevity_penalty': 0.950010681010268, 'length_ratio': 0.9512195121951219, 'translation_length': 39, 'reference_length': 41} Rouge: {'rouge1': 0.37681159420289856, 'rouge2': 0.029850746268656712, 'rougeL': 0.20289855072463767, 'rougeLsum': 0.37681159420289856} Sari: {'sari': 36.52090439762028} Flesh Reading Ease: 65.4 ---------------------------------------- Source: ['Denn es ist niemanden außer dir, der lösen könnte. Und ich bin nach dir.'] Prediction: ['Einige Tage lang ist nicht mehr über die Schweizerin, sondern auch der Schweizerin.\nDas ist niemanden außer dir, der lösen könnte.\nAber auch die Schweizerin, die Schweizerin, hatte sich nicht mehr über ihre Leistungen geschlossen.'] Label: [['Dann kann ich das Feld kaufen.']] Sacrebleu: {'score': 0.8733042428534794, 'counts': [1, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [2.380952380952381, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.023809523809523808, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.0, 'translation_length': 42, 'reference_length': 7} Rouge: {'rouge1': 0.045454545454545456, 'rouge2': 0.0, 'rougeL': 0.045454545454545456, 'rougeLsum': 0.045454545454545456} Sari: {'sari': 33.73376623376623} Flesh Reading Ease: 68.85 ---------------------------------------- Source: ['Und ich habe gesagt, ich will dir folgendes zu Gehör bringen: Kaufe es in Gegenwart der Sitzenden und in Gegenwart der Ältesten meines Volkes - wenn du lösen willst, dann löse.'] Prediction: ['Der Schweizer Konkurrent will mit seiner Kultur meines Volkes aufgefordert werden.\nEr will, dass er sich in Gegenwart der Sitzenden und in Gegenwart der Ältesten meines Volkes aufgefordert werden will.'] Label: [['Du darfst das Feld als Erster kaufen.\nDu hast das Recht dazu.\nHier sind 10 Zeugen.']] Sacrebleu: {'score': 1.3355980882200826, 'counts': [2, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [6.0606060606060606, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.06060606060606061, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.736842105263158, 'translation_length': 33, 'reference_length': 19} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.198717948717956} Flesh Reading Ease: 59.7 ---------------------------------------- Source: ['Wenn aber niemand lösen will, dann verrate es mir, damit ich es weiß!'] Prediction: ['Im Interview mit 20 Minuten spricht über die 20-Minuten-App mit über 20-Minuten-Radio-Host Andrea über ihre Leistung, die ihre Leistungen zu Gast und ihre Leistungen zu Gast.\nWir haben dir jeden Tag die besten Folgen der Radio-App, welche sich die besten Folgen der 20-Minuten-App bewegen.'] Label: [['Wenn du auf dein Recht verzichtest, machen wir einen Vertrag.']] Sacrebleu: {'score': 0.8010354164744189, 'counts': [2, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [3.7037037037037037, 0.9433962264150944, 0.4807692307692308, 0.24509803921568626], 'bp': 1.0, 'sys_len': 54, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.037037037037037035, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.5, 'translation_length': 54, 'reference_length': 12} Rouge: {'rouge1': 0.03225806451612903, 'rouge2': 0.0, 'rougeL': 0.03225806451612903, 'rougeLsum': 0.03225806451612903} Sari: {'sari': 62.671982489055665} Flesh Reading Ease: 46.85 ---------------------------------------- Source: ['“ Da sagte der Löser: „Ich vermag es nicht, für mich zu lösen, sonst verdürbe ich ja meinen eigenen Erbbesitz.'] Prediction: ['Ein eigenes Erbbesitz verdürbe ihn ja meinen eigenen Erbbesitz.\nDer Löser vermag es nicht, für mich zu lösen, sonst verdürbe ich ja meinen eigenen Erbbesitz.'] Label: [['Der Verwandte sagt.\nDas kann ich nicht.\nDann geht mein Erbe kaputt.']] Sacrebleu: {'score': 1.9240848598265397, 'counts': [5, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9333333333333333, 'translation_length': 29, 'reference_length': 15} Rouge: {'rouge1': 0.14285714285714288, 'rouge2': 0.0, 'rougeL': 0.09523809523809522, 'rougeLsum': 0.09523809523809522} Sari: {'sari': 36.36363636363636} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['“ Da sagte er: „Ich will lösen “.'] Prediction: ['Der Mann überrascht mit seinem ähnlichen Freund über seinen ähnlichen Freund.\nEr wollte sich über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund über seinen Freund �'] Label: [['Der Verwandte sagt: Ich bin einverstanden.']] Sacrebleu: {'score': 0.2195589417900223, 'counts': [2, 0, 0, 0], 'totals': [193, 192, 191, 190], 'precisions': [1.0362694300518134, 0.2604166666666667, 0.13089005235602094, 0.06578947368421052], 'bp': 1.0, 'sys_len': 193, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.010362694300518135, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 24.125, 'translation_length': 193, 'reference_length': 8} Rouge: {'rouge1': 0.010152284263959392, 'rouge2': 0.0, 'rougeL': 0.010152284263959392, 'rougeLsum': 0.010152284263959392} Sari: {'sari': 62.235449735449734} Flesh Reading Ease: 2.6 ---------------------------------------- Source: ['Da sprach Boas zu den Ältesten und zum ganzen Volk: „Ihr seid heute Zeugen, dass ich von Noomi alles gekauft habe, was dem Elimelech war und alles, was dem Kiljon und Machlon war.'] Prediction: ['Noomi und Boas sind seit einigen Tagen bekannt, wie sie sich von der Nacht auf Sonntag auf Sonntag gegen den Sieg geht.\nAuf den Ältesten sprach Boas zu den Ältesten und zum ganzen Volk: "Ihr seid heute Zeugen, dass ich von Noomi alles gekauft habe, was dem Elimelech war und alles, was dem Kiljon und Machlon war".'] Label: [['Dann sagt Boas zu den 10 Zeugen und zu allen anderen: Ihr seid heute Zeugen.\nVon Noomi kaufe ich alles was Elimelech gehört hat.\nAlles was seiner Familie gehört kaufe ich.']] Sacrebleu: {'score': 6.1964163499003, 'counts': [17, 5, 3, 1], 'totals': [66, 65, 64, 63], 'precisions': [25.757575757575758, 7.6923076923076925, 4.6875, 1.5873015873015872], 'bp': 1.0, 'sys_len': 66, 'ref_len': 35} Bleu: {'bleu': 0.061964163499003, 'precisions': [0.25757575757575757, 0.07692307692307693, 0.046875, 0.015873015873015872], 'brevity_penalty': 1.0, 'length_ratio': 1.8857142857142857, 'translation_length': 66, 'reference_length': 35} Rouge: {'rouge1': 0.3555555555555555, 'rouge2': 0.1590909090909091, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 43.73343710948611} Flesh Reading Ease: 69.6 ---------------------------------------- Source: ['Da sagte Boas: „Am Tag, am du das Feld von Noomi kaufst, kaufst du auch die Moabiterin Rut, die Frau des Toten, um den Namen des Toten auf seinem Erbbesitz wieder aufzurichten.'] Prediction: ['Am Tag kaufte es das Feld von Noomi in der Moabiterin Rut.\nAuch die Moabiterin Rut war dabei um den Namen des Toten auf seinem Erbbesitz wieder aufzurichten.'] Label: [['Boas sagt: Du hast das Recht auf das Feld.\nUnd du kannst Rut heiraten.\nSie war die Frau vom Sohn von Noomi.\nWenn du das Feld kaufst.\nDann bleibt das Feld in der Familie.']] Sacrebleu: {'score': 3.664612335166414, 'counts': [12, 3, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [40.0, 10.344827586206897, 1.7857142857142858, 0.9259259259259259], 'bp': 0.7165313105737893, 'sys_len': 30, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.4, 0.10344827586206896, 0.0, 0.0], 'brevity_penalty': 0.7165313105737893, 'length_ratio': 0.75, 'translation_length': 30, 'reference_length': 40} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.09999999999999999, 'rougeL': 0.1935483870967742, 'rougeLsum': 0.2903225806451613} Sari: {'sari': 36.4772073739465} Flesh Reading Ease: 72.4 ---------------------------------------- Source: ['Löse du für dich das eigentlich von mir zu Lösende, denn ich vermag es nicht, zu lösen.'] Prediction: ['Der 20-Minuten-Radio-Host Andrea überrascht mit ihrem Podcast "Unchained", in dem sich über 20 Minuten Radio-Host Andrea über ihre Leistung zu Gast und ihre Leistungen zu Gast.\nWir haben dir jeden zweiten Mal die besten Folgen der 20-Minuten-App, bei Spotify und Tune In.'] Label: [['Wir machen es so: Du kaufst das Feld von Noomi und du heiratest Rut.']] Sacrebleu: {'score': 0.9216168770877762, 'counts': [3, 0, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [5.769230769230769, 0.9803921568627451, 0.5, 0.25510204081632654], 'bp': 1.0, 'sys_len': 52, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.057692307692307696, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.25, 'translation_length': 52, 'reference_length': 16} Rouge: {'rouge1': 0.06451612903225806, 'rouge2': 0.0, 'rougeL': 0.06451612903225806, 'rougeLsum': 0.06451612903225806} Sari: {'sari': 58.935185185185176} Flesh Reading Ease: 53.7 ---------------------------------------- Source: ['“ In Israel war früher dies bezüglich Lösung und Tauschgeschäft, um irgendetwas Gültigkeit zu verleihen: Man zog seinen Schuh aus und gab ihn dem anderen.'] Prediction: ['In Israel wurde ein Schuh ausgebrochen, der in Israel gab.\nDer Schuh war früher in Tauschgeschäft.\nDer Schuh war in Israel zu verleihen.'] Label: [['Früher machte man es so in Israel : Man macht ein Geschäft.\nDann zieht man einen Schuh aus, wenn man einig ist.\nDer eine Partner gab seinen Schuh dem anderen Partner.\nDie Geschäfts·partner tauschten einen Schuh.']] Sacrebleu: {'score': 3.0758736503050654, 'counts': [12, 2, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [44.44444444444444, 7.6923076923076925, 2.0, 1.0416666666666667], 'bp': 0.5954019718977739, 'sys_len': 27, 'ref_len': 41} Bleu: {'bleu': 0.0, 'precisions': [0.4444444444444444, 0.07692307692307693, 0.0, 0.0], 'brevity_penalty': 0.595401971897774, 'length_ratio': 0.6585365853658537, 'translation_length': 27, 'reference_length': 41} Rouge: {'rouge1': 0.34375, 'rouge2': 0.06451612903225808, 'rougeL': 0.25, 'rougeLsum': 0.34375} Sari: {'sari': 54.26621989121989} Flesh Reading Ease: 72.85 ---------------------------------------- Source: ['Und dies war dann in Israel als Bezeugung.'] Prediction: ['Am 23.\nJuni 2020 wurde in Israel eine Frau verletzt.\nSie war dann in Israel als Bezeugung.\nDie Frau war dann als Bezeugung.'] Label: [['In Israel war das wie ein Vertrag.']] Sacrebleu: {'score': 1.826472886268134, 'counts': [3, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [11.11111111111111, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.375, 'translation_length': 27, 'reference_length': 8} Rouge: {'rouge1': 0.2, 'rouge2': 0.07142857142857144, 'rougeL': 0.2, 'rougeLsum': 0.2} Sari: {'sari': 41.77489177489178} Flesh Reading Ease: 84.55 ---------------------------------------- Source: ['Der Löser sprach also zu Boas: „Kaufe für dich! “ und zog seinen Schuh aus.'] Prediction: ['Der Löser hat seinen Schuh ausgegeben.\nDer Löser sprach also zu Boas: „Kaufe für dich!\n“ und zog seinen Schuh aus.'] Label: [['Der Verwandte sagt zu Boas: Kauf!\nDann zieht er einen Schuh aus.']] Sacrebleu: {'score': 10.132393619864414, 'counts': [8, 4, 2, 0], 'totals': [25, 24, 23, 22], 'precisions': [32.0, 16.666666666666668, 8.695652173913043, 2.272727272727273], 'bp': 1.0, 'sys_len': 25, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.32, 0.16666666666666666, 0.08695652173913043, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 25, 'reference_length': 15} Rouge: {'rouge1': 0.2857142857142857, 'rouge2': 0.12121212121212123, 'rougeL': 0.2857142857142857, 'rougeLsum': 0.2857142857142857} Sari: {'sari': 43.487993487993485} Flesh Reading Ease: 85.55 ---------------------------------------- Source: ['Boas aber ging ins Tor hinauf und setzte sich dort hin.'] Prediction: ['Die Schweizer stehen im Tor.\nBei den Mannschaften ging es zu einem Sieg.\nDas ging aber hinauf und setzte sich dort hin.'] Label: [['Boas setzt sich an den Gerichts·platz.']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5714285714285716, 'translation_length': 25, 'reference_length': 7} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.0, 'rougeL': 0.06896551724137931, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 32.7724358974359} Flesh Reading Ease: 96.65 ---------------------------------------- Source: ['“ Noomi nahm den Säugling, hob ihn an ihre Brust, wurde seine Kinderfrau und die Bürgerinnen gaben ihm einen Namen, indem sie sagten: „Ein Sohn ist der Noomi geboren! “, und sie nannten seinen Namen „Obed “.'] Prediction: ['Noomi (3) ist eine Säugling, der noch nicht nur noch nach der Brust geboren wurde.\nNoomi nahm den Säugling, hob ihn an ihre Brust, wurde seine Kinderfrau und die Bürgerinnen gaben ihm einen Namen.\nNoomi wurde seine Kinderfrau und die Bürgerinnen gaben ihm einen Namen, indem sie sagten: "Ein Sohn ist der Noomi geboren!\n“.'] Label: [['Die Nachbarinnen geben dem Kind einen Namen.\nSie rufen: Noomi hat einen Sohn bekommen!\nWir nennen das Kind Obed.\nObed heißt Diener.']] Sacrebleu: {'score': 2.7153260291245034, 'counts': [10, 2, 1, 0], 'totals': [67, 66, 65, 64], 'precisions': [14.925373134328359, 3.0303030303030303, 1.5384615384615385, 0.78125], 'bp': 1.0, 'sys_len': 67, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.14925373134328357, 0.030303030303030304, 0.015384615384615385, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4814814814814814, 'translation_length': 67, 'reference_length': 27} Rouge: {'rouge1': 0.1728395061728395, 'rouge2': 0.02531645569620253, 'rougeL': 0.14814814814814814, 'rougeLsum': 0.14814814814814814} Sari: {'sari': 36.52998599932562} Flesh Reading Ease: 68.4 ---------------------------------------- Source: ['Dieser war der Vater von Isai, dem Vater Davids.'] Prediction: ['Im Alter von 99 Jahren ist der Vater von Isai, dem Vater Davids, gestorben.\nIm Alter von 99 Jahren ist Isai im Alter von 99 Jahren gestorben.\nDas Vater war der Vater von Isai, dem Vater Davids.'] Label: [['Wenn Obed groß ist, wird er Vater von Isai.\nWenn Isai groß ist, wird er Vater von David.']] Sacrebleu: {'score': 4.965096889277056, 'counts': [12, 3, 1, 0], 'totals': [43, 42, 41, 40], 'precisions': [27.906976744186046, 7.142857142857143, 2.4390243902439024, 1.25], 'bp': 1.0, 'sys_len': 43, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.27906976744186046, 0.07142857142857142, 0.024390243902439025, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9545454545454546, 'translation_length': 43, 'reference_length': 22} Rouge: {'rouge1': 0.2909090909090909, 'rouge2': 0.11320754716981131, 'rougeL': 0.2545454545454546, 'rougeLsum': 0.2909090909090909} Sari: {'sari': 45.35834535834536} Flesh Reading Ease: 79.95 ---------------------------------------- Source: ['Dies also sind die Zeugungen von Perez: Perez zeugte den Hezron, Hezron zeugte Ram, Ram zeugte Amminadab, Amminadab zeugte Nachschon, Nachschon zeugte Salmon, Salmon zeugte Boas, Boas zeugte Obed, Obed zeugte Isai, Isai zeugte David.'] Prediction: ['Die Zeugungen von Perez sind gemacht.\nPerez zeugte den Hezron, Hezron zeugte Ram, Ram zeugte Amminadab, Amminadab zeugte Nachschon, Nachschon zeugte Salmon, Salmon zeugte Boas, Boas zeugte Obed, Obed zeugte Isai, Isai zeugte David.'] Label: [['Das ist die Familie von David: Perez ist der Vater von Hezron.\nHezron ist der Vater von Ram.\nRam ist der Vater von Amminadab.\nAmminadab ist der Vater von Nachschon.\nNachschon ist der Vater von Salmon.\nSalmon ist der Vater von Boas.\nBoas ist der Vater von Obed.\nObed ist der Vater von Isai.\nIsai ist der Vater von David.']] Sacrebleu: {'score': 1.6592628881020741, 'counts': [21, 1, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [47.72727272727273, 2.3255813953488373, 1.1904761904761905, 0.6097560975609756], 'bp': 0.5538235798307587, 'sys_len': 44, 'ref_len': 70} Bleu: {'bleu': 0.0, 'precisions': [0.4772727272727273, 0.023255813953488372, 0.0, 0.0], 'brevity_penalty': 0.5538235798307586, 'length_ratio': 0.6285714285714286, 'translation_length': 44, 'reference_length': 70} Rouge: {'rouge1': 0.42553191489361697, 'rouge2': 0.1739130434782609, 'rougeL': 0.42553191489361697, 'rougeLsum': 0.42553191489361697} Sari: {'sari': 35.99523981457273} Flesh Reading Ease: 63.55 ---------------------------------------- Source: ['Und auch die Moabiterin Rut, die Frau Machlons, habe ich mir zur Frau gekauft, um wieder aufzurichten den Namen des Toten auf seinem Erbbesitz, so dass nicht ausgerottet werde der Name des Toten aus dem Volk seiner Brüder und aus dem Tor seines Ortes.'] Prediction: ['Ein Toten aus dem Volk seiner Brüder wird aus dem Tor seines Ortes ausgerottet.\nDer Name des Toten wird aus dem Erbbesitz ausgerottet.\nDie Moabiterin Rut, die Frau Machlons, hatte ihn zur Frau gekauft, um wieder aufzurichten den Namen des Toten auf seinem Erbbesitz.'] Label: [['Auch Rut gehört zu mir.\nSie ist fremd.\nAber sie gehört jetzt zu mir.\nDie Familie stirbt nicht aus.']] Sacrebleu: {'score': 1.9192830192723322, 'counts': [6, 1, 0, 0], 'totals': [50, 49, 48, 47], 'precisions': [12.0, 2.0408163265306123, 1.0416666666666667, 0.5319148936170213], 'bp': 1.0, 'sys_len': 50, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.02040816326530612, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1739130434782608, 'translation_length': 50, 'reference_length': 23} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 32.74196912807676} Flesh Reading Ease: 65.85 ---------------------------------------- Source: ['Vollbringe Tüchtiges in Ephratah Und rufe einen Namen in Bethlehem!'] Prediction: ['In Bethlehem wurde ein Namen von Tüchtigern verbracht.\nDie Tüchtigten in Ephratah und in Bethlehem sind verbracht.\nDie Tüchtigten rufen einen Namen in Bethlehem.'] Label: [['Sie sagten zu Rut: Sei tüchtig.\nHerzlich willkommen!\nDu sollst Kinder haben in Bethlehem.']] Sacrebleu: {'score': 5.551277111446363, 'counts': [4, 2, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 7.6923076923076925, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.07692307692307693, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5, 'translation_length': 27, 'reference_length': 18} Rouge: {'rouge1': 0.14285714285714285, 'rouge2': 0.05, 'rougeL': 0.14285714285714285, 'rougeLsum': 0.14285714285714285} Sari: {'sari': 38.73632154882156} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['JHWH gebe, dass diese Frau, Die in dein Haus kommt, Wie Rahel und wie Leawerde, Die beide das Haus Israel erbauten!'] Prediction: ['Im Alter von 99 Jahren ist eine Frau in Israel erbaut worden.\nSie gebe, Wie Rahel und wie Leawerde, die beide das Haus Israel erbauten.\nDie Frau gebe, dass sie in dein Haus kommt, Wie Rahel und wie Leawerde, Die beide das Haus Israel erbauten.'] Label: [['Gott segnet die Frau.\nDie Frau kommt in dein Haus.\nDie Frau soll wie Rahel und Lea sein.\nDie Beiden sind der Anfang von unserem Volk Israel.']] Sacrebleu: {'score': 5.897254670515147, 'counts': [17, 5, 2, 0], 'totals': [53, 52, 51, 50], 'precisions': [32.075471698113205, 9.615384615384615, 3.9215686274509802, 1.0], 'bp': 1.0, 'sys_len': 53, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.32075471698113206, 0.09615384615384616, 0.0392156862745098, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7096774193548387, 'translation_length': 53, 'reference_length': 31} Rouge: {'rouge1': 0.3888888888888889, 'rouge2': 0.14285714285714285, 'rougeL': 0.3055555555555555, 'rougeLsum': 0.36111111111111105} Sari: {'sari': 46.50739472168044} Flesh Reading Ease: 71.4 ---------------------------------------- Source: ['Es sei dein Haus wie das Haus des Perez, Den Tamar dem Juda gebar Durch den Nachwuchs, Den JHWH dir gebe durch diese junge Frau!'] Prediction: ['Den Tamar dem Juda gebar Durch den Nachwuchs, Den JHWH dir gebe durch diese junge Frau.\nDas Haus des Perez, Den Tamar dem Juda gebar Durch den Nachwuchs, Den JHWH dir gebe durch diese junge Frau.'] Label: [['Hier ist dein Zuhause.\nSo wie wir alle hier Zuhause sind.\nWie das Haus Perez.\nSeine Mutter war Tamar.\nSein Vater war Juda.\nAuch du wirst Kinder haben.']] Sacrebleu: {'score': 1.4014248243844825, 'counts': [6, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [14.634146341463415, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.14634146341463414, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2058823529411764, 'translation_length': 41, 'reference_length': 34} Rouge: {'rouge1': 0.15625000000000003, 'rouge2': 0.03225806451612903, 'rougeL': 0.15625000000000003, 'rougeLsum': 0.15625000000000003} Sari: {'sari': 31.356990962254123} Flesh Reading Ease: 80.1 ---------------------------------------- Source: ['“ Boas nahm Rut, sie wurde seine Frau, er ging zu ihr, JHWH gab ihr Schwangerschaft, sie gebar einen Sohn und die Frauen sagten zu Noomi: „Gepriesen sei JHWH, Der dir heute einen Löser nicht hat fehlen lassen, Sein Name werde gerufen in Israel!'] Prediction: ['Noomi (24) und Boas (29) waren seit einigen Tagen in Israel gepriesen.\nDer Name wird gerufen in Israel.\nNoomi (30) wurde seine Frau, der ging zu ihr, JHWH (31) gab ihr Schwangerschaft.'] Label: [['Boas heiratet Rut.\nSie lieben sich.\nGott schenkt Rut Schwangerschaft.\nSie bekommt einen Sohn.\nDie Frauen sagen zu Noomi: Lob sei Gott!\nGott hat alles gut gemacht für dich.\nWir loben Gott!']] Sacrebleu: {'score': 2.2241100841129926, 'counts': [7, 1, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [15.555555555555555, 2.272727272727273, 1.1627906976744187, 0.5952380952380952], 'bp': 1.0, 'sys_len': 45, 'ref_len': 40} Bleu: {'bleu': 0.0, 'precisions': [0.15555555555555556, 0.022727272727272728, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.125, 'translation_length': 45, 'reference_length': 40} Rouge: {'rouge1': 0.12307692307692308, 'rouge2': 0.0, 'rougeL': 0.06153846153846154, 'rougeLsum': 0.12307692307692308} Sari: {'sari': 31.881066088954498} Flesh Reading Ease: 75.7 ---------------------------------------- Source: ['Möge er dir der sein, der Lebenskraft zurückkehren lässt Und der dein Alter erhält!'] Prediction: ['Der Lebenskraft ist derzeit in den USA zurückgezogen.\nDer Alter erhält und selbst zurückkehren.\nDer Alter erhält und selbst erhält.'] Label: [['Gott gibt dir neue Lebens - Kraft.\nGott schützt dein Alter.']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7692307692307692, 'translation_length': 23, 'reference_length': 13} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 50.16915954415955} Flesh Reading Ease: 68.0 ---------------------------------------- Source: ['Ja!, deine Schwiegertochter, die dich liebt, hat ihn geboren, Sie, die besser für dich ist als sieben Söhne!'] Prediction: ['Die Schwiegertochter, die dich liebt, hat ihn geboren.\nSie hat ihn geboren, dass sie besser für dich ist als sieben Söhne!\nDie Schwiegertochter, die dich liebt, hat ihn geboren.'] Label: [['Ja!\nDenn deine Schwiegertochter hat dich lieb.\nDeine Schwiegertochter hat einen Sohn geboren.\nSie ist besser als 7 Söhne!']] Sacrebleu: {'score': 6.033120882373849, 'counts': [14, 3, 1, 0], 'totals': [37, 36, 35, 34], 'precisions': [37.83783783783784, 8.333333333333334, 2.857142857142857, 1.4705882352941178], 'bp': 1.0, 'sys_len': 37, 'ref_len': 23} Bleu: {'bleu': 0.0, 'precisions': [0.3783783783783784, 0.08333333333333333, 0.02857142857142857, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.608695652173913, 'translation_length': 37, 'reference_length': 23} Rouge: {'rouge1': 0.47058823529411764, 'rouge2': 0.0816326530612245, 'rougeL': 0.3529411764705882, 'rougeLsum': 0.43137254901960786} Sari: {'sari': 33.03549170616705} Flesh Reading Ease: 82.55 ---------------------------------------- Source: ['Ihr seid heute Zeugen! “ Und das ganze Volk, das im Tor war, antwortete, und die Ältesten: „Wir sind Zeugen!'] Prediction: ['Ein ganzes Volk, das im Tor war, antwortete, und die Ältesten seien Zeugen.\nDer ganze Volk antwortete, und die Ältesten seien Zeugen.'] Label: [['Ihr seid meine Zeugen!\nAlle rufen: Wir sind Zeugen!']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3333333333333335, 'translation_length': 28, 'reference_length': 12} Rouge: {'rouge1': 0.1290322580645161, 'rouge2': 0.0, 'rougeL': 0.1290322580645161, 'rougeLsum': 0.1290322580645161} Sari: {'sari': 27.066798941798943} Flesh Reading Ease: 69.55 ---------------------------------------- Source: ['Es war kein Traum.'] Prediction: ['Der Schweizer war mit einem Traum auf die Suche nach dem Coronavirus.\nDer Schweizer war mit einem Traum auf der Suche nach dem Virus.\nDer Schweizer war mit einem Traum auf der Suche nach dem Virus.'] Label: [['Denn er weiß: Dies hier ist kein Traum.']] Sacrebleu: {'score': 1.1216940038341034, 'counts': [2, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [5.128205128205129, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.05128205128205128, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.9, 'translation_length': 39, 'reference_length': 10} Rouge: {'rouge1': 0.04545454545454545, 'rouge2': 0.0, 'rougeL': 0.04545454545454545, 'rougeLsum': 0.04545454545454545} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ['Er lag auf seinem panzerartig harten Rücken und sah, wenn er den Kopf ein wenig hob, seinen gewölbten, braunen, von bogenförmigen Versteifungen geteilten Bauch, auf dessen Höhe sich die Bettdecke, zum gänzlichen Niedergleiten bereit, kaum noch erhalten konnte.'] Prediction: ['Ein Bauch wurde auf seinem panzerartig harten Rücken gefunden.\nEr sah, wenn er den Kopf ein wenig hob, seinen gewölbten, braunen, von bogenförmigen Versteifungen geteilten Bauch.\nDer Kopf war ein wenig, seinen gewölbten, braunen, von bogenförmigen Versteifungen geteilten Bauch, auf dessen Höhe sich die Bettdecke, zum gänzlichen Niedergleiten bereit, kaum noch erhalten konnte.'] Label: [['Gregor liegt auf dem Rücken im Bett.\nSein Rücken ist wie ein Panzer.\nHart und dick.\nWenn Gregor seinen Kopf hebt, sieht er einen braunen, steifen Bauch.\nEs ist sein Käfer -Bauch.']] Sacrebleu: {'score': 2.081979199804638, 'counts': [13, 2, 0, 0], 'totals': [66, 65, 64, 63], 'precisions': [19.696969696969695, 3.076923076923077, 0.78125, 0.3968253968253968], 'bp': 1.0, 'sys_len': 66, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.19696969696969696, 0.03076923076923077, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6923076923076923, 'translation_length': 66, 'reference_length': 39} Rouge: {'rouge1': 0.23157894736842102, 'rouge2': 0.02150537634408602, 'rougeL': 0.16842105263157894, 'rougeLsum': 0.1894736842105263} Sari: {'sari': 33.25686675118053} Flesh Reading Ease: 51.15 ---------------------------------------- Source: ['Seine vielen, im Vergleich zu seinem sonstigen Umfang kläglich dünnen Beine flimmerten ihm hilflos vor den Augen.'] Prediction: ['Ein Mann flog vor den Augen.\nSeine vielen, im Vergleich zu seinem sonstigen Umfang kläglich dünnen Beine flimmerten ihm hilflos vor den Augen.'] Label: [['Seine Beine sehen jämmerlich aus.\nViele dünne Beinchen.\nSie sind viel zu dünn im Vergleich zu seinem Körper.\nHilflos zappeln sie in der Luft.']] Sacrebleu: {'score': 9.95840839870367, 'counts': [8, 3, 2, 1], 'totals': [26, 25, 24, 23], 'precisions': [30.76923076923077, 12.0, 8.333333333333334, 4.3478260869565215], 'bp': 0.925961078642316, 'sys_len': 26, 'ref_len': 28} Bleu: {'bleu': 0.09958408398703665, 'precisions': [0.3076923076923077, 0.12, 0.08333333333333333, 0.043478260869565216], 'brevity_penalty': 0.925961078642316, 'length_ratio': 0.9285714285714286, 'translation_length': 26, 'reference_length': 28} Rouge: {'rouge1': 0.30188679245283023, 'rouge2': 0.11764705882352941, 'rougeL': 0.2264150943396226, 'rougeLsum': 0.30188679245283023} Sari: {'sari': 43.38733544099902} Flesh Reading Ease: 69.05 ---------------------------------------- Source: ['»Was ist mit mir geschehen?«, dachte er.'] Prediction: ['Der Schweizer Stürmer ist mit seinem Partner auf die Suche gegangen.\nEr war mit seinem Partner geschehen und war mit seinem Partner geschehen.\nEr hatte sich mit seinem Partner geschehen und war mit seinem Partner geschehen.'] Label: [['Was ist mit mir geschehen?, denkt Gregor.']] Sacrebleu: {'score': 2.243388007668207, 'counts': [4, 1, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [10.256410256410257, 2.6315789473684212, 1.3513513513513513, 0.6944444444444444], 'bp': 1.0, 'sys_len': 39, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.10256410256410256, 0.02631578947368421, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.9, 'translation_length': 39, 'reference_length': 10} Rouge: {'rouge1': 0.13636363636363638, 'rouge2': 0.04761904761904762, 'rougeL': 0.13636363636363638, 'rougeLsum': 0.13636363636363638} Sari: {'sari': 30.416666666666664} Flesh Reading Ease: 68.55 ---------------------------------------- Source: ['Als Gregor Samsa eines Morgens aus unruhigen Träumen erwachte, fand er sich in seinem Bett zu einem ungeheueren Ungeziefer verwandelt.'] Prediction: ['Ein Ungeziefer verwandelt in einem Unruhgefällen in der Nähe des Unruhgefällen.\nDer Mann wurde von einem Ungeziefer verletzt.\nDer Ungeziefer fand sich in seinem Bett zu einem ungeheueren Ungeziefer verwandelt.'] Label: [['Eines Morgens wird Gregor Samsa wach.\nIn der Nacht hat er schon unruhig geträumt.\nUnd als er aufwacht, ist alles anders als sonst.\nGregor Samsa ist ein riesiger Käfer geworden.\nEin unheimliches Ungeziefer.']] Sacrebleu: {'score': 1.465525803087546, 'counts': [6, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [18.181818181818183, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.8337529180751805, 'sys_len': 33, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8337529180751805, 'length_ratio': 0.8461538461538461, 'translation_length': 33, 'reference_length': 39} Rouge: {'rouge1': 0.11764705882352942, 'rouge2': 0.030303030303030304, 'rougeL': 0.08823529411764705, 'rougeLsum': 0.11764705882352942} Sari: {'sari': 30.51046176046176} Flesh Reading Ease: 41.3 ---------------------------------------- Source: ['Sein Zimmer, ein richtiges, nur etwas zu kleines Menschenzimmer, lag ruhig zwischen den vier wohlbekannten Wänden.'] Prediction: ['Ein Zimmer, ein richtiges, nur etwas zu kleines Menschenzimmer, lag ruhig zwischen den vier wohlbekannten Wänden.\nDas ist ein richtiges, nur etwas zu kleines Menschenzimmer, lag ruhig zwischen den vier wohlbekannten Wänden.'] Label: [['Gregor sieht sich um.\nEs ist sein Zimmer.\nEr ist in seinem kleinen Menschen - Zimmer.']] Sacrebleu: {'score': 1.3339264902154053, 'counts': [4, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [10.256410256410257, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.10256410256410256, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.0526315789473686, 'translation_length': 39, 'reference_length': 19} Rouge: {'rouge1': 0.0816326530612245, 'rouge2': 0.0, 'rougeL': 0.0816326530612245, 'rougeLsum': 0.0816326530612245} Sari: {'sari': 19.523809523809526} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['Es stellte eine Dame dar, die mit einem Pelzhut und einer Pelzboa versehen, aufrecht dasaß und einen schweren Pelzmuff, im ihr ganzer Unterarm verschwunden war, dem Beschauer entgegenhob.'] Prediction: ['Eine Dame, die mit einem Pelzhut und einer Pelzboa versehen, aufrecht dasselbe Beschauer entgegenhob war, wurde im Unterarm verschwunden.\nSie wurde dabei von einem Beschauer entgegenhob.'] Label: [['Es ist das Bild von einer vornehmen Dame.\nDie Dame trägt einen Pelz -Hut.\nUnd einen kostbaren Schal aus Pelz.\nIhre Arme wärmt sie in einer Rolle aus Pelz.']] Sacrebleu: {'score': 1.6813911775965145, 'counts': [5, 0, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [16.129032258064516, 1.6666666666666667, 0.8620689655172413, 0.44642857142857145], 'bp': 0.9375209928337671, 'sys_len': 31, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.16129032258064516, 0.0, 0.0, 0.0], 'brevity_penalty': 0.9375209928337671, 'length_ratio': 0.9393939393939394, 'translation_length': 31, 'reference_length': 33} Rouge: {'rouge1': 0.21052631578947367, 'rouge2': 0.03636363636363636, 'rougeL': 0.14035087719298245, 'rougeLsum': 0.17543859649122806} Sari: {'sari': 35.48008364184835} Flesh Reading Ease: 44.15 ---------------------------------------- Source: ['»Dies frühzeitige Aufstehen«, dachte er, »macht einen ganz blödsinnig.'] Prediction: ['Ein frühzeitiges Aufstehen in der Nacht auf Sonntag ist in der Nacht auf Sonntag gestorben.\nDer frühere Mann war mit einem blödsinnigen Aufstehen geschickt.\nEr wollte sich mit seinem ganz blödsinnigen Aufstehen verantworten.'] Label: [['Gregor hasst auch das frühe Aufstehen.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.142857142857143, 'translation_length': 36, 'reference_length': 7} Rouge: {'rouge1': 0.09090909090909091, 'rouge2': 0.0, 'rougeL': 0.09090909090909091, 'rougeLsum': 0.09090909090909091} Sari: {'sari': 63.117283950617285} Flesh Reading Ease: 63.7 ---------------------------------------- Source: ['»Wie wäre es, wenn ich noch ein wenig weiterschliefe und alle Narrheiten vergäße«, dachte er, aber das war gänzlich undurchführbar, denn er war gewöhnt, auf der rechten Seite zu schlafen, konnte sich aber in seinem gegenwärtigen Zustand nicht in diese Lage bringen.'] Prediction: ['Ein Mann hatte sich in seinem gegenwärtigen Zustand nicht in diese Lage bringen.\nEr war gänzlich undurchführbar, denn er war gewöhnt, auf der rechten Seite zu schlafen.\nDie Narrheiten sind nicht in diese Lage bringen.'] Label: [['Ich könnte einfach noch ein wenig weiterschlafen, denkt er.\nVielleicht ist das ja alles nicht wahr.\nAber Gregor kann nicht weiterschlafen.\nEr schläft nämlich immer auf der rechten Seite.\nAber jetzt, als Käfer, kann er sich gar nicht auf die Seite drehen.']] Sacrebleu: {'score': 6.5834479368612, 'counts': [14, 4, 2, 1], 'totals': [40, 39, 38, 37], 'precisions': [35.0, 10.256410256410257, 5.2631578947368425, 2.7027027027027026], 'bp': 0.7788007830714049, 'sys_len': 40, 'ref_len': 50} Bleu: {'bleu': 0.065834479368612, 'precisions': [0.35, 0.10256410256410256, 0.05263157894736842, 0.02702702702702703], 'brevity_penalty': 0.7788007830714049, 'length_ratio': 0.8, 'translation_length': 40, 'reference_length': 50} Rouge: {'rouge1': 0.2588235294117647, 'rouge2': 0.07228915662650602, 'rougeL': 0.18823529411764706, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 38.449841193734386} Flesh Reading Ease: 68.85 ---------------------------------------- Source: ['Gregors Blick richtete sich dann zum Fenster, und das trübe Wetter – man hörte Regentropfen auf das Fensterblech aufschlagen – machte ihn ganz melancholisch.'] Prediction: ['Gregors Blick machte sich melancholisch.\nEr war ein Mann, der auf das Fensterblech aufschlagen hatte, ganz melancholisch.\nDer Stürmer war ein wichtiges Jahr, der sich dann auf das trübe Wetter aufschlagen hatte.'] Label: [['Gregor sieht zum Fenster.\nTrübes Wetter ist da draußen.\nRegen tropft auf das Fenster -Blech.\nDas Wetter macht Gregor ein wenig traurig.']] Sacrebleu: {'score': 2.6510202602018675, 'counts': [7, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [18.42105263157895, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.18421052631578946, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4615384615384615, 'translation_length': 38, 'reference_length': 26} Rouge: {'rouge1': 0.20689655172413793, 'rouge2': 0.03571428571428572, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.1724137931034483} Sari: {'sari': 36.469621375567975} Flesh Reading Ease: 69.85 ---------------------------------------- Source: ['Er versuchte es wohl hundertmal, schloß die Augen, um die zappelnden Beine nicht sehen zu müssen, und ließ erst ab, als er in der Seite einen noch nie gefühlten, leichten, dumpfen Schmerz zu fühlen begann.'] Prediction: ['Ein Mann versuchte sich in der Seite einen noch nie gefühlten, dumpfen Schmerz zu fühlen.\nEr versuchte es wohl hundertmal, schloß die Augen, um die zappelnden Beine nicht sehen zu müssen, und ließ erst ab, als er in der Seite einen noch nie gefühlten, leichten, dumpfen Schmerz zu fühlen begann.'] Label: [['Immer wieder versucht er es.\n100 Mal bestimmt.\nJedes Mal rollt er wieder auf den Rücken zurück.\nGregor hält die Augen geschlossen.\nWeil er seine zappelnden Beinchen nicht sehen mag.\nEr gibt erst auf, als seine rechte Seite wehtut.\nSo einen dumpfen Schmerz kennt er gar nicht.']] Sacrebleu: {'score': 3.140483476374805, 'counts': [17, 5, 0, 0], 'totals': [59, 58, 57, 56], 'precisions': [28.8135593220339, 8.620689655172415, 0.8771929824561403, 0.44642857142857145], 'bp': 1.0, 'sys_len': 59, 'ref_len': 55} Bleu: {'bleu': 0.0, 'precisions': [0.288135593220339, 0.08620689655172414, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0727272727272728, 'translation_length': 59, 'reference_length': 55} Rouge: {'rouge1': 0.26666666666666666, 'rouge2': 0.05825242718446602, 'rougeL': 0.24761904761904763, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 39.89098864098864} Flesh Reading Ease: 67.25 ---------------------------------------- Source: ['Tag aus, Tag ein auf der Reise.'] Prediction: ['Der Tag aus, Tag ein auf der Reise, ist nicht mehr bekannt.\nDas Team hat sich mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch mit dem Gespräch) gegeben.'] Label: [['Jeden Tag muss ich auf Reisen sein.']] Sacrebleu: {'score': 0.3994196212595157, 'counts': [3, 0, 0, 0], 'totals': [118, 117, 116, 115], 'precisions': [2.542372881355932, 0.42735042735042733, 0.21551724137931033, 0.10869565217391304], 'bp': 1.0, 'sys_len': 118, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.025423728813559324, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 14.75, 'translation_length': 118, 'reference_length': 8} Rouge: {'rouge1': 0.02631578947368421, 'rouge2': 0.0, 'rougeL': 0.02631578947368421, 'rougeLsum': 0.02631578947368421} Sari: {'sari': 37.301587301587304} Flesh Reading Ease: 47.45 ---------------------------------------- Source: ['Mit welcher Kraft er sich auch auf die rechte Seite warf, immer wieder schaukelte er in die Rückenlage zurück.'] Prediction: ['Der Schweizer Nati hat sich auf die rechte Seite geschauft.\nMit seinem Kraft schaukelte er sich auch auf die rechte Seite.\nDer Schweizer war mit seiner rechten Seite auch auf die rechte Seite warf.'] Label: [['Auch wenn er sich noch so anstrengt.']] Sacrebleu: {'score': 2.205438848664384, 'counts': [3, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [8.108108108108109, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.08108108108108109, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.625, 'translation_length': 37, 'reference_length': 8} Rouge: {'rouge1': 0.14634146341463417, 'rouge2': 0.05128205128205128, 'rougeL': 0.0975609756097561, 'rougeLsum': 0.14634146341463417} Sari: {'sari': 38.31018518518518} Flesh Reading Ease: 80.95 ---------------------------------------- Source: ['Die geschäftlichen Aufregungen sind viel größer, als im eigentlichen Geschäft zu Hause, und außerdem ist mir noch diese Plage des Reisens auferlegt, die Sorgen um die Zuganschlüsse, das unregelmäßige, schlechte Essen, ein immer wechselnder, nie andauernder, nie herzlich werdender menschlicher Verkehr.'] Prediction: ['Immer mehr Menschen sind sich in einem Reisenschlüsse geschäftlicher.\nDas ist der grösste Reisenschlüsse, das unregelmäßige, schlechte Essen, ein immer wechselnder, nie andauernder, nie herzlich werdender menschlicher Verkehr.'] Label: [['Das ist viel anstrengender, als in einem Geschäft Stoffe zu verkaufen.\nIch muss alle Zug - Pläne kennen.\nIch kann immer nur schnell essen.\nZwischendurch.\nImmer in Eile.\nDie Kunden sehe ich nur kurz.\nDann geht es schon zum nächsten Kunden.\nAlles ist oberflächlich.\nMan sieht sich und trennt sich.']] Sacrebleu: {'score': 1.838535153042146, 'counts': [10, 2, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [28.571428571428573, 5.882352941176471, 1.5151515151515151, 0.78125], 'bp': 0.48954165955695317, 'sys_len': 35, 'ref_len': 60} Bleu: {'bleu': 0.0, 'precisions': [0.2857142857142857, 0.058823529411764705, 0.0, 0.0], 'brevity_penalty': 0.48954165955695317, 'length_ratio': 0.5833333333333334, 'translation_length': 35, 'reference_length': 60} Rouge: {'rouge1': 0.20930232558139536, 'rouge2': 0.04761904761904762, 'rougeL': 0.11627906976744186, 'rougeLsum': 0.18604651162790697} Sari: {'sari': 35.93345515267805} Flesh Reading Ease: 37.3 ---------------------------------------- Source: ['Andere Reisende leben wie Haremsfrauen.'] Prediction: ['Seit Jahren leben in der Schweiz die Reisende wie Haremsfrauen.\nNun leben die Reisende wie eine Frau, die sich auf ihre Reisende leben.'] Label: [['Gregor denkt an andere Vertreter.']] Sacrebleu: {'score': 1.4445809981770859, 'counts': [1, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [3.8461538461538463, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.038461538461538464, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.333333333333333, 'translation_length': 26, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 35.714285714285715} Flesh Reading Ease: 69.05 ---------------------------------------- Source: ['Der Mensch muß seinen Schlaf haben.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Bern verletzt.\nEr wurde dabei verletzt.\nDie Polizei vermutet, dass er sich mit einem Schlaf gebeten haben.'] Label: [['Der Mensch muss doch seinen Schlaf haben!']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.5, 'translation_length': 36, 'reference_length': 8} Rouge: {'rouge1': 0.15384615384615383, 'rouge2': 0.0, 'rougeL': 0.15384615384615383, 'rougeLsum': 0.15384615384615383} Sari: {'sari': 34.99999999999999} Flesh Reading Ease: 87.4 ---------------------------------------- Source: ['Wenn ich zum Beispiel im Laufe des Vormittags ins Gasthaus zurückgehe, um die erlangten Aufträge zu überschreiben, sitzen diese Herren erst beim Frühstück.'] Prediction: ['Im Gasthaus sitzen die erlangten Aufträge erst beim Frühstück.\nWenn ich zum Beispiel im Laufe des Vormittags ins Gasthaus zurückgehe, um die erlangten Aufträge zu überschreiben, sitzen diese Herren erst beim Frühstück.'] Label: [['Die sitzen noch gemütlich beim Frühstück im Hotel.\nDa kommt er selbst schon mit den ersten Aufträgen zurück.\nDie Aufträge hat er schon ganz früh am Morgen abgeschlossen.\nWährend die anderen noch beim Frühstück sitzen.']] Sacrebleu: {'score': 3.435983867830017, 'counts': [11, 2, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [30.555555555555557, 5.714285714285714, 1.4705882352941178, 0.7575757575757576], 'bp': 0.9200444146293233, 'sys_len': 36, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.3055555555555556, 0.05714285714285714, 0.0, 0.0], 'brevity_penalty': 0.9200444146293233, 'length_ratio': 0.9230769230769231, 'translation_length': 36, 'reference_length': 39} Rouge: {'rouge1': 0.40476190476190477, 'rouge2': 0.17073170731707316, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 37.62019230769231} Flesh Reading Ease: 58.7 ---------------------------------------- Source: ['»Ach Gott«, dachte er, »was für einen anstrengenden Beruf habe ich gewählt!'] Prediction: ['Ein Mann hat sich in einem anstrengenden Beruf gewählt.\nDer Mann hatte sich für einen anstrengenden Beruf gewählt.\nDer Mann war ein ausgewählter Berufsänger, der sich gewählt habe.'] Label: [['Gregor denkt über seinen Beruf nach: Wie anstrengend das alles ist.']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4615384615384617, 'translation_length': 32, 'reference_length': 13} Rouge: {'rouge1': 0.04444444444444444, 'rouge2': 0.0, 'rougeL': 0.04444444444444444, 'rougeLsum': 0.04444444444444444} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 71.25 ---------------------------------------- Source: ['Das sollte ich bei meinem Chef versuchen; ich würde auf der Stelle hinausfliegen.'] Prediction: ['Der Chef des Schweizerischen National-Riesens hatte sich bei meinem Chef versuchen.\nEr würde auf der Stelle hinausfliegen.'] Label: [['Wenn ich das bei meinem Chef so machen würde, dann würde ich auf der Stelle rausfliegen.']] Sacrebleu: {'score': 13.618796864073044, 'counts': [8, 4, 2, 0], 'totals': [19, 18, 17, 16], 'precisions': [42.10526315789474, 22.22222222222222, 11.764705882352942, 3.125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.42105263157894735, 0.2222222222222222, 0.11764705882352941, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0555555555555556, 'translation_length': 19, 'reference_length': 18} Rouge: {'rouge1': 0.43243243243243246, 'rouge2': 0.28571428571428575, 'rougeL': 0.43243243243243246, 'rougeLsum': 0.43243243243243246} Sari: {'sari': 45.23809523809524} Flesh Reading Ease: 54.5 ---------------------------------------- Source: ['Wer weiß übrigens, ob das nicht sehr gut für mich wäre.'] Prediction: ['Der Schweizer Gast mit Gast über die Schweizer Gast-Woche wird der Gast übrigens, ob das nicht sehr gut für mich wäre.\nWir weisen dir auf, ob das nicht sehr gut für mich wäre.'] Label: [['Vielleicht wäre das aber gar nicht mal so schlecht, denkt Gregor.\nVielleicht wäre das sogar sehr gut für mich.']] Sacrebleu: {'score': 8.209568436078463, 'counts': [12, 3, 2, 1], 'totals': [37, 36, 35, 34], 'precisions': [32.432432432432435, 8.333333333333334, 5.714285714285714, 2.9411764705882355], 'bp': 1.0, 'sys_len': 37, 'ref_len': 22} Bleu: {'bleu': 0.0820956843607846, 'precisions': [0.32432432432432434, 0.08333333333333333, 0.05714285714285714, 0.029411764705882353], 'brevity_penalty': 1.0, 'length_ratio': 1.6818181818181819, 'translation_length': 37, 'reference_length': 22} Rouge: {'rouge1': 0.39999999999999997, 'rouge2': 0.20689655172413793, 'rougeL': 0.3333333333333333, 'rougeLsum': 0.26666666666666666} Sari: {'sari': 49.56164206164206} Flesh Reading Ease: 87.45 ---------------------------------------- Source: ['Wenn ich mich nicht wegen meiner Eltern zurückhielte, ich hätte längst gekündigt, ich wäre vor den Chef hin getreten und hätte ihm meine Meinung von Grund des Herzens aus gesagt.'] Prediction: ['Der Chef des Herzens hatte sich nicht wegen meiner Eltern zurückhielte, sondern auch meine Meinung von Grund des Herzens aus gesagt.\nEr wäre vor den Chef hin getreten und hätte ihm meine Meinung von Grund des Herzens aus gesagt.'] Label: [['Aber ich muss an meine Eltern denken.\nNur deshalb halte ich mich zurück.\nSonst hätte ich schon längst gekündigt.\nWenn es meine Eltern nicht geben würde.\nDann würde ich zu meinem Chef gehen und ihm so richtig meine Meinung sagen.']] Sacrebleu: {'score': 2.4903776136113045, 'counts': [11, 1, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [26.19047619047619, 2.4390243902439024, 1.25, 0.6410256410256411], 'bp': 0.9310627797040228, 'sys_len': 42, 'ref_len': 45} Bleu: {'bleu': 0.0, 'precisions': [0.2619047619047619, 0.024390243902439025, 0.0, 0.0], 'brevity_penalty': 0.9310627797040228, 'length_ratio': 0.9333333333333333, 'translation_length': 42, 'reference_length': 45} Rouge: {'rouge1': 0.2727272727272727, 'rouge2': 0.046511627906976744, 'rougeL': 0.20454545454545456, 'rougeLsum': 0.22727272727272724} Sari: {'sari': 28.75529100529101} Flesh Reading Ease: 72.75 ---------------------------------------- Source: ['Vom Pult hätte er fallen müssen!'] Prediction: ['Vom Pult hätte er fallen müssen.\nDer Mann hatte einen jungen Mal geschickt und hätte er fallen müssen.\nNun hat er seinen Job gekommen und erfährst vor dem Tod des jungen Malers.'] Label: [['Der Chef würde von seinem Schreib - Tisch fallen.']] Sacrebleu: {'score': 1.389736936231864, 'counts': [3, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [8.571428571428571, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.08571428571428572, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 35, 'reference_length': 10} Rouge: {'rouge1': 0.08695652173913043, 'rouge2': 0.0, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 36.86371100164204} Flesh Reading Ease: 81.55 ---------------------------------------- Source: ['Es ist auch eine sonderbare Art, sich auf das Pult zu setzen und von der Höhe herab mit dem Angestellten zu reden, der überdies wegen der Schwerhörigkeit des Chefs ganz nahe herantreten muß.'] Prediction: ['Eine sonderbare Art, sich auf das Pult zu setzen und von der Höhe herab mit dem Angestellten zu reden, ist überdies wegen der Schwerhörigkeit des Chefs ganz nahe herantreten muß.\nDas Pult hatte sich auf das Pult zu setzen und von der Höhe herab mit dem Angestellten zu reden.'] Label: [['Auf den setzt er sich immer.\nWenn er mit uns Angestellten spricht.\nVon oben herab redet er auf uns ein.\nUnd weil er schwerhörig ist, müssen wir uns dabei ganz nah um ihn stellen.']] Sacrebleu: {'score': 1.2210969826269686, 'counts': [10, 0, 0, 0], 'totals': [53, 52, 51, 50], 'precisions': [18.867924528301888, 0.9615384615384616, 0.49019607843137253, 0.25], 'bp': 1.0, 'sys_len': 53, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.18867924528301888, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.358974358974359, 'translation_length': 53, 'reference_length': 39} Rouge: {'rouge1': 0.25, 'rouge2': 0.0, 'rougeL': 0.11363636363636365, 'rougeLsum': 0.18181818181818185} Sari: {'sari': 37.654320987654316} Flesh Reading Ease: 61.9 ---------------------------------------- Source: ['Nun, die Hoffnung ist noch nicht gänzlich aufgegeben; habe ich einmal das Geld beisammen, um die Schuld der Eltern an ihn abzuzahlen – es dürfte noch fünf bis sechs Jahre dauern –, mache ich die Sache unbedingt.'] Prediction: ['Nun, die Hoffnung ist noch nicht gänzlich aufgegeben.\nDer Grund: Die Schuld der Eltern an ihn abzuzahlen.\nDer Grund: Die Hoffnung ist noch nicht gänzlich aufgegeben.'] Label: [['Eines Tages werde ich ihm meine Meinung sagen.\nDem Chef.\nEines Tages, wenn ich die Schulden meiner Eltern bei ihm abbezahlt habe.\nFünf bis sechs Jahre wird das noch dauern.\nBis ich das ganze Geld zusammenhabe.']] Sacrebleu: {'score': 1.3803993932272507, 'counts': [7, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [21.875, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 0.7316156289466418, 'sys_len': 32, 'ref_len': 42} Bleu: {'bleu': 0.0, 'precisions': [0.21875, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7316156289466418, 'length_ratio': 0.7619047619047619, 'translation_length': 32, 'reference_length': 42} Rouge: {'rouge1': 0.0923076923076923, 'rouge2': 0.0, 'rougeL': 0.0923076923076923, 'rougeLsum': 0.0923076923076923} Sari: {'sari': 29.58107000492058} Flesh Reading Ease: 83.55 ---------------------------------------- Source: ['Über dem Tisch, auf dem eine auseinandergepackte Musterkollektion von Tuchwaren ausgebreitet war – Samsa war Reisender – hing das Bild, das er vor kurzem aus einer illustrierten Zeitschrift ausgeschnitten und in einem hübschen, vergoldeten Rahmen untergebracht hatte.'] Prediction: ['Ein auseinandergepackter Musterkollektion von Tuchwaren hat ein Bild aus einer Zeitschrift ausgeschnitten und in einem hübschen, vergoldeten Rahmen untergebracht.\nDer Tisch war Reisender.'] Label: [['Auf dem Tisch sind noch immer die Stoffe ausgebreitet.\nGregor ist von Beruf Vertreter.\nSeine Aufgabe ist es, Stoffe zu verkaufen.\nDafür reist er umher.\nGregor sieht sich weiter in seinem Zimmer um.\nÜber dem Tisch hängt immer noch das Bild.\nDas Bild, das er vor ein paar Tagen aus einer Zeitschrift ausgeschnitten hat.\nGregor hat es in einem schönen Rahmen aufgehängt.\nIn einem goldenen Bilder -Rahmen.']] Sacrebleu: {'score': 1.8301776147644415, 'counts': [15, 4, 2, 1], 'totals': [26, 25, 24, 23], 'precisions': [57.69230769230769, 16.0, 8.333333333333334, 4.3478260869565215], 'bp': 0.1353352832366127, 'sys_len': 26, 'ref_len': 78} Bleu: {'bleu': 0.018301776147644413, 'precisions': [0.5769230769230769, 0.16, 0.08333333333333333, 0.043478260869565216], 'brevity_penalty': 0.1353352832366127, 'length_ratio': 0.3333333333333333, 'translation_length': 26, 'reference_length': 78} Rouge: {'rouge1': 0.2736842105263158, 'rouge2': 0.08602150537634408, 'rougeL': 0.1894736842105263, 'rougeLsum': 0.25263157894736843} Sari: {'sari': 33.29872873866195} Flesh Reading Ease: 33.95 ---------------------------------------- Source: ['Dann wird der große Schnitt gemacht.'] Prediction: ['Ein großes Schnitt wird in der Nacht auf Sonntag in der Nacht auf Sonntag in der Nacht auf Sonntag auf Sonntag in der Nacht auf Sonntag wird der große Schnitt gemacht.\nDer Schnitt wird nur noch nicht geborgen.'] Label: [['Aber dann mache ich Schluss.\nDann kündige ich.']] Sacrebleu: {'score': 1.092534162077208, 'counts': [2, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [5.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 40, 'reference_length': 10} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 27.083333333333332} Flesh Reading Ease: 84.95 ---------------------------------------- Source: ['Tom Sawyer aber, mein alter Freund Tom, spürte mich wieder auf, versprach, er wolle eine Räuberbande gründen und ich solle Mitglied werden, wenn ich noch einmal zur Witwe zurückkehre und mich weiter ›sievilisieren‹ lasse.'] Prediction: ['Tom Sawyer (34) wird seit einigen Tagen wieder aufgefunden, wenn er eine Räuberbande gründet und ich solle Mitglied werden.\nTom wolle eine Räuberbande gründen und ich solle Mitglied werden, wenn ich noch einmal zur Witwe zurückkehre und mich weiter ›sievilisieren‹ lasse.'] Label: [['Doch Tom Sawyer spürt mich auf.\nEr will eine Räuber - Bande gründen und ich darf dabei sein.\nAber dafür muss ich zu Miss Douglas zurück.\nTom sagt nämlich, dass Räuber ordentliche Menschen sind.']] Sacrebleu: {'score': 4.866005443800708, 'counts': [12, 4, 1, 0], 'totals': [47, 46, 45, 44], 'precisions': [25.53191489361702, 8.695652173913043, 2.2222222222222223, 1.1363636363636365], 'bp': 1.0, 'sys_len': 47, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.2553191489361702, 0.08695652173913043, 0.022222222222222223, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.205128205128205, 'translation_length': 47, 'reference_length': 39} Rouge: {'rouge1': 0.3255813953488372, 'rouge2': 0.11904761904761904, 'rougeL': 0.2558139534883721, 'rougeLsum': 0.3255813953488372} Sari: {'sari': 37.47343119408848} Flesh Reading Ease: 48.35 ---------------------------------------- Source: ['Da ihr gewiß schon die Abenteuer von Tom Sawyer gelesen habt, so brauche ich mich euch nicht vorzustellen.'] Prediction: ['Tom Sawyer wurde am Sonntagabend von Tom Sawyer in Texas verhaftet.\nEr wurde von einem Abenteuer gelesen.\nNun brauche ich mich euch nicht vorzustellen.'] Label: [['Liebe Leser, soweit ich weiß, kennt ihr mich nicht.\nDenn ihr habt bestimmt das Buch Die Abenteuer von Tom Sawyer nicht gelesen.']] Sacrebleu: {'score': 7.7250397735730845, 'counts': [10, 3, 1, 0], 'totals': [27, 26, 25, 24], 'precisions': [37.03703703703704, 11.538461538461538, 4.0, 2.0833333333333335], 'bp': 1.0, 'sys_len': 27, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.37037037037037035, 0.11538461538461539, 0.04, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0384615384615385, 'translation_length': 27, 'reference_length': 26} Rouge: {'rouge1': 0.34782608695652173, 'rouge2': 0.0909090909090909, 'rougeL': 0.17391304347826086, 'rougeLsum': 0.34782608695652173} Sari: {'sari': 36.04880110143267} Flesh Reading Ease: 66.7 ---------------------------------------- Source: ['Jenes Buch hat ein gewisser Mark Twain geschrieben und was drinsteht ist wahr – wenigstens meistenteils.'] Prediction: ['Im Buch von Mark Twain ist ein gewisser Mark Twain geschrieben und was drinsteht ist wahr.\nDas Buch hat ein gewisser Mark Twain geschrieben und was drinsteht ist wahr wenigstens meistenteils.'] Label: [['Dieses Buch hat Mark Twain geschrieben und darin die wahre Geschichte von Tom und mir erzählt.']] Sacrebleu: {'score': 9.25329498915617, 'counts': [9, 4, 2, 1], 'totals': [33, 32, 31, 30], 'precisions': [27.272727272727273, 12.5, 6.451612903225806, 3.3333333333333335], 'bp': 1.0, 'sys_len': 33, 'ref_len': 17} Bleu: {'bleu': 0.0925329498915617, 'precisions': [0.2727272727272727, 0.125, 0.06451612903225806, 0.03333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.9411764705882353, 'translation_length': 33, 'reference_length': 17} Rouge: {'rouge1': 0.3333333333333333, 'rouge2': 0.1739130434782609, 'rougeL': 0.25, 'rougeLsum': 0.25} Sari: {'sari': 48.17759038347274} Flesh Reading Ease: 76.75 ---------------------------------------- Source: ['Hie und da hat er etwas dazugedichtet, aber das tut nichts.'] Prediction: ['Ein Mann hat sich in der Nacht auf Sonntag in der Nacht auf Sonntag in Zürich geschickt.\nEr hatte sich dazugedichtet und das tut nichts.'] Label: [['Na gut, manchmal hat Mark Twain ein bisschen geschwindelt, aber das macht nichts.']] Sacrebleu: {'score': 3.300809119141885, 'counts': [4, 1, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 3.8461538461538463, 2.0, 1.0416666666666667], 'bp': 1.0, 'sys_len': 27, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.038461538461538464, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6875, 'translation_length': 27, 'reference_length': 16} Rouge: {'rouge1': 0.20512820512820515, 'rouge2': 0.0, 'rougeL': 0.15384615384615388, 'rougeLsum': 0.15384615384615388} Sari: {'sari': 35.595238095238095} Flesh Reading Ease: 85.6 ---------------------------------------- Source: ['Toms Tante Polly und seine Schwester Mary und die Witwe Douglas kommen alle im Buche vom Tom Sawyer vor, das wie gesagt, mit wenigen Ausnahmen eine wahre Geschichte ist.'] Prediction: ['Tom Sawyer (34) und Tante Polly (30) sind im Buche vom Tom Sawyer (45) geworden.\nDie beiden waren wohl weniger Ausnahmen eine wahre Geschichte.\nTante Polly und seine Schwester Mary (30) sind wohl wie gesagt, mit wenigen Ausnahmen eine wahre Geschichte.'] Label: [['Um die beiden Damen geht es auch im Buch.']] Sacrebleu: {'score': 0.9037128794596342, 'counts': [3, 0, 0, 0], 'totals': [53, 52, 51, 50], 'precisions': [5.660377358490566, 0.9615384615384616, 0.49019607843137253, 0.25], 'bp': 1.0, 'sys_len': 53, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.05660377358490566, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.3, 'translation_length': 53, 'reference_length': 10} Rouge: {'rouge1': 0.12, 'rouge2': 0.04166666666666667, 'rougeL': 0.08, 'rougeLsum': 0.12} Sari: {'sari': 36.749455337690634} Flesh Reading Ease: 61.0 ---------------------------------------- Source: ['Jeder von uns bekam sechstausend Dollars, lauter Gold.'] Prediction: ['Der US-Präsident Donald Trump bekam sechstausende Dollar.\nDer US-Präsident bekam sechstausend Dollar.\nDer US-Präsident bekam sechstausend Dollar.'] Label: [['Wir haben beide 6000 Dollar.']] Sacrebleu: {'score': 3.8292061380205022, 'counts': [2, 1, 0, 0], 'totals': [20, 19, 18, 17], 'precisions': [10.0, 5.2631578947368425, 2.7777777777777777, 1.4705882352941178], 'bp': 1.0, 'sys_len': 20, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.1, 0.05263157894736842, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3333333333333335, 'translation_length': 20, 'reference_length': 6} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.07142857142857142, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 56.792929292929294} Flesh Reading Ease: 33.9 ---------------------------------------- Source: ['Ich kenne niemand, der nicht gelegentlich einmal ein bißchen lügen täte, ausgenommen etwa Tante Polly oder die Witwe Douglas oder Mary.'] Prediction: ['Im Interview mit Mary Kommentaren spricht ein bißchen, der nicht gelegentlich einmal einmal ein bißchen lügen tätte.\nIm Interview spricht Kommentaren über die bißchen-Täter, die sich nicht nur einmal einmal einmal einmal lügen tätte.'] Label: [['Jeder schwindelt doch mal, oder?\nMoment, nein, Miss Douglas und Tante Polly schwindeln natürlich nie.']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9, 'translation_length': 38, 'reference_length': 20} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 32.288644422952935} Flesh Reading Ease: 51.85 ---------------------------------------- Source: ['Es war ein großartiger Anblick, als wir das Geld auf einem Haufen liegen sahen.'] Prediction: ['Ein Mann aus dem Nähe des Bundesstaats Bern hatte sich einen Geld auf einem Haufen geschickt.\nDer Mann war ein großartiger Anblick, als er das Geld auf einem Haufen liegen sahen.'] Label: [['Das ist ganz schön viel Geld.']] Sacrebleu: {'score': 1.2944532586971997, 'counts': [2, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [5.882352941176471, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.058823529411764705, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.857142857142857, 'translation_length': 34, 'reference_length': 7} Rouge: {'rouge1': 0.15000000000000002, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.15000000000000002} Sari: {'sari': 36.27450980392157} Flesh Reading Ease: 76.75 ---------------------------------------- Source: ['Am Ende von dieser Geschichte wird erzählt, wie Tom und ich das Geld fanden, das die Räuber in der Höhle verborgen hatten, wodurch wir nachher sehr reich wurden.'] Prediction: ['Am Ende der Geschichte wird der neue Episode "Räuber" bekanntgegeben.\nIn der Folge wurde die Räuber in der Höhle von Tom und ich aufgefunden.\nDie beiden wurden nachher sehr reich gewesen.'] Label: [['Das Buch über Tom und mich endet übrigens so: Tom und ich finden einen Schatz in einer Höhle.\nDen hatten Räuber dort versteckt.\nUnd dadurch sind wir plötzlich reich.']] Sacrebleu: {'score': 5.157142709886006, 'counts': [10, 2, 1, 0], 'totals': [36, 35, 34, 33], 'precisions': [27.77777777777778, 5.714285714285714, 2.9411764705882355, 1.5151515151515151], 'bp': 1.0, 'sys_len': 36, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.2777777777777778, 0.05714285714285714, 0.029411764705882353, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0909090909090908, 'translation_length': 36, 'reference_length': 33} Rouge: {'rouge1': 0.27272727272727276, 'rouge2': 0.125, 'rougeL': 0.15151515151515152, 'rougeLsum': 0.1818181818181818} Sari: {'sari': 41.59265064437478} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['Kreisrichter Thatcher bewahrte meinen Teil auf und legte ihn auf Zinsen an, die jeden Tag einen Dollar für mich ausmachen.'] Prediction: ['Die neue Regelung der Schweiz hat einen Dollar für mich ausmachen.\nThatcher bewahrte meinen Teil auf und legte ihn auf Zinsen an, die jeden Tag einen Dollar für mich ausmachen.'] Label: [['Richter Thatcher hat es für uns bei einer Bank angelegt.\nUnd seitdem kriegen Tom und ich jeden Tag einen Dollar Zinsen.']] Sacrebleu: {'score': 9.05418298208039, 'counts': [11, 3, 2, 1], 'totals': [33, 32, 31, 30], 'precisions': [33.333333333333336, 9.375, 6.451612903225806, 3.3333333333333335], 'bp': 1.0, 'sys_len': 33, 'ref_len': 23} Bleu: {'bleu': 0.09054182982080389, 'precisions': [0.3333333333333333, 0.09375, 0.06451612903225806, 0.03333333333333333], 'brevity_penalty': 1.0, 'length_ratio': 1.434782608695652, 'translation_length': 33, 'reference_length': 23} Rouge: {'rouge1': 0.3703703703703703, 'rouge2': 0.15384615384615383, 'rougeL': 0.2962962962962963, 'rougeLsum': 0.3333333333333333} Sari: {'sari': 44.12454689653551} Flesh Reading Ease: 77.25 ---------------------------------------- Source: ['Ich weiß wahrhaftig nicht, was ich mit dem vielen Geld anfangen soll.'] Prediction: ['Der Schweizer Stürmer hat sich mit dem vielen Geld anfangen.\nEr weiß wahrhaftig nicht, was ich mit dem vielen Geld anfangen soll.'] Label: [['Das ist mehr Geld, als ich jemals ausgeben kann!']] Sacrebleu: {'score': 1.9822566267103439, 'counts': [3, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [12.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.12, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.272727272727273, 'translation_length': 25, 'reference_length': 11} Rouge: {'rouge1': 0.125, 'rouge2': 0.0, 'rougeL': 0.125, 'rougeLsum': 0.0625} Sari: {'sari': 28.125} Flesh Reading Ease: 81.25 ---------------------------------------- Source: ['Die Witwe Douglas nahm mich als Sohn an und will versuchen, mich zu sievilisieren wie sie sagt.'] Prediction: ['Die Witwe Douglas nahm als Sohn an und will versuchen, mich zu sievilisieren wie sie sagt.\nDie Witwe Douglas nahm mich als Sohn an und will versuchen, mich zu sievilisieren wie sie sagt.'] Label: [['Und dann nimmt mich Miss Douglas auch noch als ihren Pflege - Sohn auf.\n10 Sie will einen ordentlichen Jungen aus mir machen.']] Sacrebleu: {'score': 1.6207525738139132, 'counts': [7, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [18.91891891891892, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 25} Bleu: {'bleu': 0.0, 'precisions': [0.1891891891891892, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.48, 'translation_length': 37, 'reference_length': 25} Rouge: {'rouge1': 0.2545454545454546, 'rouge2': 0.0, 'rougeL': 0.21818181818181817, 'rougeLsum': 0.18181818181818182} Sari: {'sari': 38.23529411764706} Flesh Reading Ease: 75.75 ---------------------------------------- Source: ['Das schmeckt mir aber schlecht, kann ich euch sagen, das Leben wird mir furchtbar sauer im Hause mit der abscheulichen Regelmäßigkeit, wo immer um dieselbe Zeit gegessen und geschlafen werden soll, einen Tag wie den andern.'] Prediction: ['Der Leben von St. Gallen wird für den anderen Regelmäßigkeit geschlafen.\nDas schmeckt mir aber schlecht, kann ich euch sagen, das Leben wird furchtbar sauer im Hause mit der abscheulichen Regelmäßigkeit, wo immer um dieselbe Zeit gegessen und geschlafen werden soll, einen Tag wie den andern.'] Label: [['Doch darauf habe ich natürlich keine Lust.\nAlles in ihrem Haus ist ordentlich und sauber.\nGenau wie Miss Douglas selbst.\nMir gefällt das allerdings überhaupt nicht.']] Sacrebleu: {'score': 1.1169266878355417, 'counts': [7, 0, 0, 0], 'totals': [53, 52, 51, 50], 'precisions': [13.20754716981132, 0.9615384615384616, 0.49019607843137253, 0.25], 'bp': 1.0, 'sys_len': 53, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.1320754716981132, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7666666666666666, 'translation_length': 53, 'reference_length': 30} Rouge: {'rouge1': 0.12987012987012986, 'rouge2': 0.0, 'rougeL': 0.07792207792207792, 'rougeLsum': 0.12987012987012986} Sari: {'sari': 27.20883534136546} Flesh Reading Ease: 65.25 ---------------------------------------- Source: ['Einmal bin ich auch schon durchgebrannt, bin in meine alten Lumpen gekrochen, und – hast du nicht gesehen, war ich draußen im Wald und in der Freiheit.'] Prediction: ['Einmal bin ich auch schon durchgebrannt, bin in meine alten Lumpen gekrochen, und war ich draußen im Wald und in der Freiheit.\nDerzeit war er auch schon durchgebrannt, war er nicht gesehen, war er draußen im Wald und in der Freiheit.'] Label: [['Also laufe ich davon.']] Sacrebleu: {'score': 0.9243411456936733, 'counts': [2, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [4.25531914893617, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.0425531914893617, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 9.4, 'translation_length': 47, 'reference_length': 5} Rouge: {'rouge1': 0.0425531914893617, 'rouge2': 0.0, 'rougeL': 0.0425531914893617, 'rougeLsum': 0.0425531914893617} Sari: {'sari': 34.39716312056738} Flesh Reading Ease: 77.6 ---------------------------------------- Source: ["Da tat ich's denn."] Prediction: ['Der frühere Mann ist nicht mehr zu sehen, sondern auch der frühere Mann.\nEr war das erste Mal, dass er sich nicht mehr zu sehen verstärkt hat.\nDas hatte sich nun zu sehen, dass er sich nicht mehr zu sehen ist.'] Label: [['Also gehe ich wieder zurück.']] Sacrebleu: {'score': 0.7772751558853214, 'counts': [1, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [2.127659574468085, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.02127659574468085, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.833333333333333, 'translation_length': 47, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 90.25 ---------------------------------------- Source: ['Die Witwe vergoß Tränen, als ich mich wieder einstellte, nannte mich ein armes, verirrtes Schaf und sonst noch allerlei, womit sie aber nichts Schlimmes meinte.'] Prediction: ['Eine Witwe vergoß Tränen, als ich mich wieder einstellte, nannte mich ein armes, verirrtes Schaf und sonst noch allerlei.\nDie Witwe vergoß Tränen, als sie wieder einstellte, nannte mich ein armes, verirrtes Schaf und sonst noch allerlei.'] Label: [['Miss Douglas weint vor Freude.']] Sacrebleu: {'score': 0.8130350574508933, 'counts': [1, 0, 0, 0], 'totals': [45, 44, 43, 42], 'precisions': [2.2222222222222223, 1.1363636363636365, 0.5813953488372093, 0.2976190476190476], 'bp': 1.0, 'sys_len': 45, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.022222222222222223, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.5, 'translation_length': 45, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 34.090909090909086} Flesh Reading Ease: 62.05 ---------------------------------------- Source: ['Sie steckte mich wieder in die neuen Kleider, in denen es mir immer ganz eng und schwül wird.'] Prediction: ['Am 19.\nApril startete die neue Woche mit 20 Minuten mit 20 Drinks und 20 Drinks.\nIn den neuen Tagen wird die 20-Minuten-Radio-Host Andrea über die 20-Minuten-App sowie ihre 20-Minuten-App sowie ihre 20-Minuten-App sowie ihre 20-Minuten-App.'] Label: [['Sie zieht mich direkt wieder ordentlich an.']] Sacrebleu: {'score': 0.7445292335166879, 'counts': [1, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [2.0408163265306123, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.02040816326530612, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.125, 'translation_length': 49, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 58.214285714285715} Flesh Reading Ease: 39.15 ---------------------------------------- Source: ['Wenn die Witwe die Glocke läutete, mußte man zum Essen kommen.'] Prediction: ['Die Witwe der Witwe läutete, mußte man zum Essen kommen.\nDie Witwe wurde dabei aufgefunden.\nDie Witwe wurde dabei zum Essen gefunden.'] Label: [['Und wir müssen ganz pünktlich essen.']] Sacrebleu: {'score': 1.4445809981770859, 'counts': [1, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [3.8461538461538463, 2.0, 1.0416666666666667, 0.5434782608695652], 'bp': 1.0, 'sys_len': 26, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.038461538461538464, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.7142857142857144, 'translation_length': 26, 'reference_length': 7} Rouge: {'rouge1': 0.0625, 'rouge2': 0.0, 'rougeL': 0.0625, 'rougeLsum': 0.0625} Sari: {'sari': 36.11111111111111} Flesh Reading Ease: 61.55 ---------------------------------------- Source: ['Quält mich die Frau mit dem Moses, der sie weiter gar nichts angeht, der nicht einmal verwandt mit ihr war und mit dem jetzt nichts mehr anzufangen ist, und verbietet mir das Rauchen, das doch gewiß gar nicht so übel ist.'] Prediction: ['Eine Frau verwandt mit ihrem Moses nicht einmal, der nicht einmal verwandt mit ihr war und mit dem jetzt nichts mehr anzufangen ist.\nIm Interview mit dem 20-Minuten-Radio-Host Andrea spricht sie über ihre Frau, die sie nicht nichts mehr anzufangen ist.'] Label: [['Pfeife rauchen darf ich auch nicht mehr, denn das mag Miss Douglas nicht.']] Sacrebleu: {'score': 1.1622974570266493, 'counts': [5, 0, 0, 0], 'totals': [47, 46, 45, 44], 'precisions': [10.638297872340425, 1.0869565217391304, 0.5555555555555556, 0.2840909090909091], 'bp': 1.0, 'sys_len': 47, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.10638297872340426, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1333333333333333, 'translation_length': 47, 'reference_length': 15} Rouge: {'rouge1': 0.10526315789473682, 'rouge2': 0.0, 'rougeL': 0.10526315789473682, 'rougeLsum': 0.07017543859649122} Sari: {'sari': 34.63437081659973} Flesh Reading Ease: 65.9 ---------------------------------------- Source: ['Ihre Schwester, Miss Watson, eine ziemlich dürre, alte Jungfer, die gerade zu ihr gezogen war, machte nun einen Angriff auf mich, mit einem Lesebuch bewaffnet.'] Prediction: ['Eine Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-Lesebuch-'] Label: [['Miss Watson ist Lehrerin.\nUnd sie ist die Schwester von Miss Douglas.\nSie versucht, mir das Lesen beizubringen.']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [2, 1, 0, 0], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 4.5399929762484854e-05, 'sys_len': 2, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 4.5399929762484854e-05, 'length_ratio': 0.09090909090909091, 'translation_length': 2, 'reference_length': 22} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 48.07519988971602} Flesh Reading Ease: -9708.51 ---------------------------------------- Source: ['Alsbald begann Miss Watson: »Halt doch die Füße ruhig, Huckleberry«, oder »willst du keinen solchen Buckel machen, Huckleberry, sitz doch gerade!« und dann wieder »so recke dich doch nicht so, Huckleberry, und gähne nicht, als wolltest du die Welt verschlingen, wirst du denn nie Manieren lernen?«, und so schalt sie weiter bis ich ganz wild wurde.'] Prediction: ['In der Nacht auf Sonntag wurde eine Frau von Alsbald (18) von der Welt verschlingen.\nAlsbald wurde von Miss Watson (27) gefunden.\nSie schalt sie bis ich ganz wild wurde.'] Label: [['Wenn ich im Unterricht gähnen muss, wird Miss Watson sofort wütend.']] Sacrebleu: {'score': 2.369898273250278, 'counts': [4, 1, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [10.81081081081081, 2.7777777777777777, 1.4285714285714286, 0.7352941176470589], 'bp': 1.0, 'sys_len': 37, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.10810810810810811, 0.027777777777777776, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.8461538461538463, 'translation_length': 37, 'reference_length': 13} Rouge: {'rouge1': 0.13953488372093023, 'rouge2': 0.04878048780487805, 'rougeL': 0.09302325581395349, 'rougeLsum': 0.13953488372093023} Sari: {'sari': 38.86514719848053} Flesh Reading Ease: 88.1 ---------------------------------------- Source: ['Dann fing sie an, mir vom Ort zu erzählen, an den die bösen Menschen kommen, worauf ich sagte, ich wünschte mich auch dahin.'] Prediction: ['Eine Frau wollte sich auf den Ort, an den Menschen zu erzählen, an den die bösen Menschen kommen.\nDie Frau wünschte mich auch dahin.'] Label: [['Sie erzählt von einem Ort, der „Hölle “ heißt.\n11 Miss Watson sagt, dass diese Hölle etwas Schreckliches ist.\nIch finde diesen Ort eher spannend.']] Sacrebleu: {'score': 3.126728569434949, 'counts': [5, 1, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [17.857142857142858, 3.7037037037037037, 1.9230769230769231, 1.0], 'bp': 0.9310627797040228, 'sys_len': 28, 'ref_len': 30} Bleu: {'bleu': 0.0, 'precisions': [0.17857142857142858, 0.037037037037037035, 0.0, 0.0], 'brevity_penalty': 0.9310627797040228, 'length_ratio': 0.9333333333333333, 'translation_length': 28, 'reference_length': 30} Rouge: {'rouge1': 0.07272727272727272, 'rouge2': 0.0, 'rougeL': 0.03636363636363636, 'rougeLsum': 0.07272727272727272} Sari: {'sari': 33.97944647944648} Flesh Reading Ease: 86.1 ---------------------------------------- Source: ["Da wurde sie böse und zeterte gewaltig, so schlimm hatte ich's aber gar nicht gemeint, ich wäre nur gern fortgewesen von ihr, irgendwo, der Ort war mir ganz einerlei, ich bin überhaupt nie sehr wählerisch."] Prediction: ['Eine Frau wurde böse und zeterte gewaltig, wie sie ihr wählerisch war.\nDie Frau war nicht mehr gewaltig, sondern auch nur ganz wählerisch.\nDie Frau war nicht mehr gewaltig, sondern auch nicht mehr wählerisch.'] Label: [['Da wird sie aber schon wieder wütend.']] Sacrebleu: {'score': 1.092534162077208, 'counts': [2, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [5.0, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 40, 'reference_length': 8} Rouge: {'rouge1': 0.08695652173913043, 'rouge2': 0.0, 'rougeL': 0.08695652173913043, 'rougeLsum': 0.08695652173913043} Sari: {'sari': 34.46054750402576} Flesh Reading Ease: 75.1 ---------------------------------------- Source: ['Dann kamen die Nigger herein, es wurde gebetet, und jedermann ging zu Bett.'] Prediction: ['Die Nigger wurde in der Nacht auf Sonntag in der Nacht auf Sonntag gebetet.\nDie Nigger wurde gebetet, und jedermann ging zu Bett.\nDas hatte sich nun einen Tag auf dem Platz zu Gast.'] Label: [['Sie sagt den Sklaven, dass sie hereinkommen sollen.\nUnd dann gehen alle schlafen.']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.375, 'translation_length': 38, 'reference_length': 16} Rouge: {'rouge1': 0.0425531914893617, 'rouge2': 0.0, 'rougeL': 0.0425531914893617, 'rougeLsum': 0.0425531914893617} Sari: {'sari': 33.33333333333333} Flesh Reading Ease: 86.8 ---------------------------------------- Source: ['Ich fühlte mich so allein, daß ich wünschte, ich wäre tot.'] Prediction: ['Eine Frau fühlte so allein, da sie wünschte, ich wäre tot.\nIch fühlte mich so allein, da sie wünschte, ich wäre tot.\nIch wäre tot.'] Label: [['Denn ich fühle mich einsam.']] Sacrebleu: {'score': 1.526608193588886, 'counts': [3, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [9.375, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.09375, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.333333333333333, 'translation_length': 32, 'reference_length': 6} Rouge: {'rouge1': 0.15789473684210525, 'rouge2': 0.05555555555555555, 'rougeL': 0.15789473684210525, 'rougeLsum': 0.15789473684210525} Sari: {'sari': 36.486486486486484} Flesh Reading Ease: 89.8 ---------------------------------------- Source: ['Ich hörte aus der Ferne eine Eule, deren Schrei jemandes Tod bedeutete, und dann einen Hund, dessen klägliches Geheul verkündete, daß einer im Sterben liege, und der Wind schien mir etwas klagen zu wollen, was ich nicht verstand, so daß ich bald am ganzen Leibe zitterte und mir der kalte Schweiß auf die Stirne trat.'] Prediction: ['Eine Frau hatte aus der Ferne eine Eule, deren Schrei jemandes Tod bedeutete, und dann einen Hund, dessen klägliches Geheul verkündete, verkündete.\nDer Wind schien mir etwas klagen zu wollen, was ich nicht verstand, so der Schweiß auf die Stirne trat.'] Label: [['Von draußen kommen ein paar merkwürdige Geräusche.']] Sacrebleu: {'score': 0.7445292335166879, 'counts': [1, 0, 0, 0], 'totals': [49, 48, 47, 46], 'precisions': [2.0408163265306123, 1.0416666666666667, 0.5319148936170213, 0.2717391304347826], 'bp': 1.0, 'sys_len': 49, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.02040816326530612, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.125, 'translation_length': 49, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.771929824561404} Flesh Reading Ease: 65.9 ---------------------------------------- Source: ['Die ganze Nacht schien von lauter armen, unglücklichen Geistern belebt, die keine Ruhe in ihren Gräbern fanden und nun da draußen herumheulten, jammerten und zähneklapperten.'] Prediction: ['In der Nacht auf Sonntag wurden in der Nacht auf Sonntag unglückliche Geistern belebt.\nDie Ruhe fanden sich in ihren Gräbern und sind da draußen herumheulten, jammerten und zähneklapperten.\nDie ganze Nacht schien von lauter armen, unglücklichen Geistern belebt, die keine Ruhe in ihren Gräbern fanden und nun da draußen herumheulten, jammerten und zähneklapperten.'] Label: [['Das sind bestimmt Geister!']] Sacrebleu: {'score': 0.5943123208853887, 'counts': [1, 0, 0, 0], 'totals': [61, 60, 59, 58], 'precisions': [1.639344262295082, 0.8333333333333334, 0.423728813559322, 0.21551724137931033], 'bp': 1.0, 'sys_len': 61, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.01639344262295082, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 12.2, 'translation_length': 61, 'reference_length': 5} Rouge: {'rouge1': 0.030303030303030304, 'rouge2': 0.0, 'rougeL': 0.030303030303030304, 'rougeLsum': 0.030303030303030304} Sari: {'sari': 34.72222222222223} Flesh Reading Ease: 50.85 ---------------------------------------- Source: ['Mir wurde heiß und kalt, und ich hätte alles drum gegeben, wenn jemand bei mir gewesen wäre.'] Prediction: ['Im Alter von 99 Jahren wurde auf dem Alter von 99 Jahren ein Drum gegeben.\nDer Drumbegebegebe hätte alles drum gegeben wenn jemand bei mir gewesen wäre.\nNun wurde der Drumbegebe gefunden, wenn jemand bei mir gewesen wäre.'] Label: [['Vor Geistern habe ich große Angst.']] Sacrebleu: {'score': 0.8733042428534794, 'counts': [1, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [2.380952380952381, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.023809523809523808, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.0, 'translation_length': 42, 'reference_length': 7} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 32.77777777777778} Flesh Reading Ease: 62.0 ---------------------------------------- Source: ['Das Haus war so still und die Witwe nicht in meiner Nähe.'] Prediction: ['Immer mehr Menschen wurden in einem Haus in der Nähe von mehreren Frauen verletzt.\nDas Haus war so still und die Witwe nicht in meiner Nähe.'] Label: [['Das beruhigt mich, und Miss Douglas merkt es zum Glück nicht.']] Sacrebleu: {'score': 1.8884748972625875, 'counts': [4, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [14.285714285714286, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.14285714285714285, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1538461538461537, 'translation_length': 28, 'reference_length': 13} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.15, 'rougeLsum': 0.15} Sari: {'sari': 37.254901960784316} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Da schlug die Uhr von der Ferne – bum – bum – bum – bum, zwölfmal, und wieder war alles still, stiller als vorher.'] Prediction: ['Am Mittwoch war ein Ferne in der Nähe von der Ferne von der Nähe von der Ferne von der Ferne zwölfmal.\nDas gab es zu einem grossen Schutz.\nDas gab es auch um einen früheren Schutz.'] Label: [['Nach einer Weile höre ich die Glocken im Dorf zwölf Uhr schlagen.\nDann wird es still, ganz still.']] Sacrebleu: {'score': 1.2413584734794654, 'counts': [3, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [7.6923076923076925, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8571428571428572, 'translation_length': 39, 'reference_length': 21} Rouge: {'rouge1': 0.06666666666666667, 'rouge2': 0.0, 'rougeL': 0.06666666666666667, 'rougeLsum': 0.06666666666666667} Sari: {'sari': 41.336580086580085} Flesh Reading Ease: 91.95 ---------------------------------------- Source: ['Plötzlich höre ich etwas unten im Garten unter den Bäumen, ein Rascheln und Knacken, ich halte den Atem an und lausche.'] Prediction: ['Ein Rascheln und Knacken hören in den Bäumen unter den Bäumen, ein Rascheln und Knacken.\nDas hatte sich der Atem ausgebrochen.\nDas hatte sich der Atem ausgebrochen.'] Label: [['Aber dann höre ich, wie draußen ein Ast bricht.\nUnten im Dunkeln bewegt sich etwas zwischen den Bäumen.']] Sacrebleu: {'score': 3.2808945250121395, 'counts': [7, 1, 0, 0], 'totals': [31, 30, 29, 28], 'precisions': [22.580645161290324, 3.3333333333333335, 1.7241379310344827, 0.8928571428571429], 'bp': 1.0, 'sys_len': 31, 'ref_len': 21} Bleu: {'bleu': 0.0, 'precisions': [0.22580645161290322, 0.03333333333333333, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4761904761904763, 'translation_length': 31, 'reference_length': 21} Rouge: {'rouge1': 0.23529411764705882, 'rouge2': 0.08163265306122448, 'rougeL': 0.1568627450980392, 'rougeLsum': 0.23529411764705882} Sari: {'sari': 34.71942724458204} Flesh Reading Ease: 83.25 ---------------------------------------- Source: ["Wieder hör' ich's, und dabei, leise wie ein Hauch, das schwächste ›Miau‹ einer Katze."] Prediction: ['Miau"s Katze ist wieder hör\' ich\'s, und dabei leise wie ein Hauch, das schwächste.\nDas schwächste, das schwächste, wie ein Hauch, das schwächste, leise einer Katze.'] Label: [['„Miau!\n“, höre ich auf einmal.']] Sacrebleu: {'score': 1.2193311110766474, 'counts': [2, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [5.555555555555555, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.05555555555555555, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.0, 'translation_length': 36, 'reference_length': 9} Rouge: {'rouge1': 0.15384615384615385, 'rouge2': 0.0, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.15384615384615385} Sari: {'sari': 34.69387755102041} Flesh Reading Ease: 79.25 ---------------------------------------- Source: ['Und »miau, miau« antworte ich ebenso kläglich, ebenso leise, schlüpfe rasch in meine Kleider, lösche das Licht aus und steige durch das Fenster auf das Schuppendach.'] Prediction: ['Eine Frau, die sich in einem Fenster aus dem Schuppendach leidet, kläglich und leidet.\nDie Frau war dabei, dass sie ihn das Licht auslöste.\nDie Frau war dabei, dass sie ihn das Licht auslöste.'] Label: [['Ich miaue leise zurück und klettere durch das Fenster auf das Dach von der Scheune.']] Sacrebleu: {'score': 1.3389812472744242, 'counts': [5, 0, 0, 0], 'totals': [41, 40, 39, 38], 'precisions': [12.195121951219512, 1.25, 0.6410256410256411, 0.32894736842105265], 'bp': 1.0, 'sys_len': 41, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.12195121951219512, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5625, 'translation_length': 41, 'reference_length': 16} Rouge: {'rouge1': 0.1509433962264151, 'rouge2': 0.0, 'rougeL': 0.11320754716981132, 'rougeLsum': 0.07547169811320754} Sari: {'sari': 31.477569977469738} Flesh Reading Ease: 86.8 ---------------------------------------- Source: ['Dann lasse ich mich zu Boden gleiten, krieche auf allen vieren nach den Schatten der Bäume, und da war richtig und leibhaftig Tom Sawyer, mein alter Tom, und wartete auf mich.'] Prediction: ['Tom Sawyer (34) wurde leibhaftig leibhaftig und wartete auf mich. Das war ein leibhaftiger Tom Sawyer, der seine alter Tom war.\nTom war leibhaftig und wartete auf mich.'] Label: [['Dann laufe ich in den Garten.\nUnd da steht Tom Sawyer zwischen den Bäumen und wartet auf mich!']] Sacrebleu: {'score': 3.407192589506109, 'counts': [6, 2, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [17.647058823529413, 6.0606060606060606, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 20} Bleu: {'bleu': 0.0, 'precisions': [0.17647058823529413, 0.06060606060606061, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7, 'translation_length': 34, 'reference_length': 20} Rouge: {'rouge1': 0.2553191489361702, 'rouge2': 0.08888888888888888, 'rougeL': 0.2553191489361702, 'rougeLsum': 0.2127659574468085} Sari: {'sari': 37.975794146206134} Flesh Reading Ease: 77.1 ---------------------------------------- Source: ['Nun langweilte ich mich aber schrecklich und wurde ganz unruhig.'] Prediction: ['Ein langweilter Mann hatte sich in der Nacht auf Sonntag schwer verletzt.\nEr wurde ganz unruhig.\nNun wurde er von der Nacht geschickt.'] Label: [['Puh, das ist ziemlich schwierig und sehr, sehr langweilig!']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [26, 25, 24, 23], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 26, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 26, 'reference_length': 12} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 31.944444444444446} Flesh Reading Ease: 90.4 ---------------------------------------- Source: ['So setzte ich mich zitternd auf den Bettrand und zündete mir zur Beruhigung mein Pfeifchen an.'] Prediction: ['Der Beruhigungs-Chef von St. Gallen hatte mein Pfeifchen angekündigt.\nEr setzte sich zuvor zu den Betten und zündete mein Pfeifchen an.\nNun hatte er sich zur Beruhigung mein Pfeifchen angekündigt.'] Label: [['Ich zittere sogar vor Angst.\nDarum zünde ich eine Pfeife an.']] Sacrebleu: {'score': 2.4092489848483223, 'counts': [3, 1, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 3.0303030303030303, 1.5625, 0.8064516129032258], 'bp': 1.0, 'sys_len': 34, 'ref_len': 13} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.030303030303030304, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6153846153846154, 'translation_length': 34, 'reference_length': 13} Rouge: {'rouge1': 0.08695652173913045, 'rouge2': 0.0, 'rougeL': 0.08695652173913045, 'rougeLsum': 0.08695652173913045} Sari: {'sari': 37.08791208791209} Flesh Reading Ease: 67.2 ---------------------------------------- Source: ['Keine Antwort.'] Prediction: ['Der US-Präsidenten von St. Gallen hatte sich am Freitagabend mit einem Interview mit dem 20-Minuten-Radio-Host Andrea über ihre Lebenskollegen veröffentlicht.\nDie Antworten sind noch nicht bekannt, sondern auch bekannt.'] Label: [['Es kommt keine Antwort.']] Sacrebleu: {'score': 1.0559717178170818, 'counts': [1, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [2.857142857142857, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.02857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.0, 'translation_length': 35, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 20.833333333333336} Flesh Reading Ease: 47.45 ---------------------------------------- Source: ['»Tom!«'] Prediction: ['Tom und Tom (34) sind bei der Welt im Alter von 1,5 Jahren gestorben.\nWir haben dir jeden Tag, wie sie ihnen im Alter von 1,5 Jahren geschickt haben.\nWir haben dir jeden Tag, wie sie ihnen ihnen ihnen nicht mehr geschickt haben?\nWir haben dir jeden dir jeden Tag, wie sie ihnen ihnen ihnen nicht mehr kommen konnten?\nWir haben dir jeden dir jeden Tag, wie sie ihnen ihnen ihnen ihnen kommen kommen kommen kommen kommen kommen, wie sie ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen i'] Label: [['Darum ruft die alte Dame noch einmal.']] Sacrebleu: {'score': 0.19587821231478258, 'counts': [1, 0, 0, 0], 'totals': [182, 181, 180, 179], 'precisions': [0.5494505494505495, 0.27624309392265195, 0.1388888888888889, 0.06983240223463687], 'bp': 1.0, 'sys_len': 182, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.005494505494505495, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 22.75, 'translation_length': 182, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 67.08333333333334} Flesh Reading Ease: 40.5 ---------------------------------------- Source: ['Keine Antwort.'] Prediction: ['Der US-Präsidenten von St. Gallen hatte sich am Freitagabend mit einem Interview mit dem 20-Minuten-Radio-Host Andrea über ihre Lebenskollegen veröffentlicht.\nDie Antworten sind noch nicht bekannt, sondern auch bekannt.'] Label: [['Doch wieder bleibt es still im Haus.']] Sacrebleu: {'score': 1.0559717178170818, 'counts': [1, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [2.857142857142857, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.02857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.375, 'translation_length': 35, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: 47.45 ---------------------------------------- Source: ['Sie sprach die Drohung nicht ganz aus, denn Sie hatte sich gebückt, um mit dem Besen unter das Bett zu stoßen und bedurfte ihres Atems, um jedem Stoß den gehörigen Nachdruck zu verleihen.'] Prediction: ['Eine Frau hatte sich mit dem Besen unter das Bett zu stoßen und bedurfte ihres Atems, um den gehörigen Nachdruck zu verleihen.\nDie Frau sprach nicht ganz aus, denn Sie hatte sich gebückt, um mit dem Besen unter das Bett zu stoßen und bedurfte ihres Atems, um jedem Stoß den gehörigen Nachdruck zu verleihen.'] Label: [['Tante Polly sieht unter dem Bett im Schlafzimmer nach.']] Sacrebleu: {'score': 0.8548570083745205, 'counts': [4, 0, 0, 0], 'totals': [60, 59, 58, 57], 'precisions': [6.666666666666667, 0.847457627118644, 0.43103448275862066, 0.21929824561403508], 'bp': 1.0, 'sys_len': 60, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 6.0, 'translation_length': 60, 'reference_length': 10} Rouge: {'rouge1': 0.08823529411764705, 'rouge2': 0.0, 'rougeL': 0.08823529411764705, 'rougeLsum': 0.0588235294117647} Sari: {'sari': 35.23809523809524} Flesh Reading Ease: 65.25 ---------------------------------------- Source: ['Sie ging zur offnen Thür und suchte unter den Liebesapfelranken und dem Stechapfelkraut, die den Garten bildeten.'] Prediction: ['Eine Frau suchte unter den Liebesapfelranken und dem Stechapfelkraut, die den Garten bildeten.\nSie ging zur offnen Thür und suchte unter den Liebesapfelranken und dem Stechapfelkraut, die den Garten bildeten.'] Label: [['Vielleicht im Garten?']] Sacrebleu: {'score': 1.0885011049519644, 'counts': [1, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [2.9411764705882355, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.029411764705882353, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.5, 'translation_length': 34, 'reference_length': 4} Rouge: {'rouge1': 0.0588235294117647, 'rouge2': 0.0, 'rougeL': 0.0588235294117647, 'rougeLsum': 0.0588235294117647} Sari: {'sari': 34.25925925925925} Flesh Reading Ease: 53.85 ---------------------------------------- Source: ['Sie erhob die Stimme und schrie: »Ohe–e–e Tom!«'] Prediction: ['Im Alter von 99 Jahren ist es am Sonntag zu Gast gekommen.\nEinige Tage später wurden von der Stimme geschickt.\nDie beiden waren nach der Stimme gekommen.'] Label: [['„Tom!\n“, ruft Tante Polly, während sie zwischen den Bäumen und Sträuchern sucht.']] Sacrebleu: {'score': 1.2414943415352928, 'counts': [1, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [3.3333333333333335, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.03333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7647058823529411, 'translation_length': 30, 'reference_length': 17} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 56.031746031746025} Flesh Reading Ease: 77.4 ---------------------------------------- Source: ['Wie viel hundertmal habe ich dir gesagt, wenn du das Eingemachte nicht stehen ließest, würde ich dir die Haut abziehen!'] Prediction: ['Der Schweizer Gastronomiker hat seine Haut abgezogen.\nEr hatte sich hundertmal gesagt, wenn du das Eingemachte nicht stehen ließest, würde ich dir die Haut abziehen.'] Label: [['„Das darfst du doch nicht!\n“']] Sacrebleu: {'score': 1.5301683686839007, 'counts': [2, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [6.896551724137931, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.06896551724137931, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.142857142857143, 'translation_length': 29, 'reference_length': 7} Rouge: {'rouge1': 0.18750000000000003, 'rouge2': 0.0, 'rougeL': 0.125, 'rougeLsum': 0.125} Sari: {'sari': 33.69883040935673} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ['Ein leises Geräusch erfolgte, sie wandte sich rasch um, eben zeitig genug, um einen kleinen Jungen bei der Jacke zu erwischen und seiner Flucht ein Ziel zu setzen.'] Prediction: ['Ein leises Geräusch erfolgte, sie wandte sich rasch um, einen kleinen Jungen bei der Jacke zu erwischen und seiner Flucht ein Ziel zu setzen.\nDie Flucht wurde von einem leises Geräusch erfolgt.'] Label: [['“ Plötzlich hört Tante Polly ein Geräusch hinter sich.\nSchnell dreht sie sich um.']] Sacrebleu: {'score': 1.6677796333413761, 'counts': [7, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [19.444444444444443, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.19444444444444445, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.25, 'translation_length': 36, 'reference_length': 16} Rouge: {'rouge1': 0.24, 'rouge2': 0.041666666666666664, 'rougeL': 0.24, 'rougeLsum': 0.24} Sari: {'sari': 34.774011299435024} Flesh Reading Ease: 76.25 ---------------------------------------- Source: ['»Ja so! ich hätte an jenes Kabinett denken sollen.'] Prediction: ['Der Kabinett hatte den Kabinett für den Schweizer Präsidenten einen Kabinett geschrieben.\nNun hatte er sich über die Vergangenheit geschrieben.'] Label: [['Die Tür vom Vorrats - Schrank geht auf und ein Junge kommt hervor.']] Sacrebleu: {'score': 1.727223799216787, 'counts': [1, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [4.545454545454546, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.045454545454545456, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5714285714285714, 'translation_length': 22, 'reference_length': 14} Rouge: {'rouge1': 0.1142857142857143, 'rouge2': 0.0, 'rougeL': 0.05714285714285715, 'rougeLsum': 0.1142857142857143} Sari: {'sari': 64.50617283950618} Flesh Reading Ease: 53.0 ---------------------------------------- Source: ['»Tom!«'] Prediction: ['Tom und Tom (34) sind bei der Welt im Alter von 1,5 Jahren gestorben.\nWir haben dir jeden Tag, wie sie ihnen im Alter von 1,5 Jahren geschickt haben.\nWir haben dir jeden Tag, wie sie ihnen ihnen ihnen nicht mehr geschickt haben?\nWir haben dir jeden dir jeden Tag, wie sie ihnen ihnen ihnen nicht mehr kommen konnten?\nWir haben dir jeden dir jeden Tag, wie sie ihnen ihnen ihnen ihnen kommen kommen kommen kommen kommen kommen, wie sie ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen ihnen i'] Label: [['„Tom, du musst zur Schule“, ruft Tante Polly.\n„Hey, Tom, wo steckst du schon wieder?\n“']] Sacrebleu: {'score': 0.31861090909848794, 'counts': [7, 0, 0, 0], 'totals': [182, 181, 180, 179], 'precisions': [3.8461538461538463, 0.27624309392265195, 0.1388888888888889, 0.06983240223463687], 'bp': 1.0, 'sys_len': 182, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.038461538461538464, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.272727272727273, 'translation_length': 182, 'reference_length': 22} Rouge: {'rouge1': 0.02127659574468085, 'rouge2': 0.0, 'rougeL': 0.02127659574468085, 'rougeLsum': 0.02127659574468085} Sari: {'sari': 68.0} Flesh Reading Ease: 40.5 ---------------------------------------- Source: ["In keinem Comité der Verwaltung hatte dieser Gentleman einen Platz; nie hörte man seinen Namen in einem Advocaten -Colleg, oder im Temple, in Lincoln's -Inn oder Gray's -Inn. Er plaidirte niemals, weder beim Obergerichtshof noch bei der Kingsbench, beim Schatzkammergericht oder einem geistlichen Hof. Er war weder ein Industrieller, noch ein Großhändler, noch Kaufmann oder Landbauer. Er gehörte weder dem Königlichen Institut, noch dem Institut von London, noch sonst irgend einer Anstalt der Kunst, Wissenschaft oder Gewerbe an; noch endlich einer der zahlreichen Gesellschaften, wovon die Hauptstadt Englands wimmelt, von der Harmonie bis zur entomologischen Gesellschaft, welche hauptsächlich den Zweck verfolgt, die schädlichen Insecten zu vertilgen."] Prediction: ['Der Gentleman Gentleman, der in Englands einen Platz plaidirte, plaidirte niemals, weder beim Obergerichtshof noch bei der Kingsbench, beim Schatzkammergericht oder einem geistlichen Hof.\nDer Gentleman wurde von der Harmonie bis zur entomologischen Gesellschaft, welche hauptsächlich den Zweck verfolgt, die schädlichen Insecten zu vertilgen.'] Label: [['Er hat nämlich keine Arbeit.']] Sacrebleu: {'score': 0.7002773917100699, 'counts': [1, 0, 0, 0], 'totals': [52, 51, 50, 49], 'precisions': [1.9230769230769231, 0.9803921568627451, 0.5, 0.25510204081632654], 'bp': 1.0, 'sys_len': 52, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.019230769230769232, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 8.666666666666666, 'translation_length': 52, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.42160432527861} Flesh Reading Ease: 41.0 ---------------------------------------- Source: ['Im Jahre 1872 wohnte im Hause Nummer 7, Saville -Row, Burlington Gardens, – worin Sheridan im Jahre 1814 starb, – Phileas Fogg, Sq., eines der ausgezeichnetsten und hervorragendsten Mitglieder des Reformclubs zu London, der jedoch dem Anschein nach beflissen war nichts zu thun, was Aufsehen erregen konnte.'] Prediction: ['Im Jahre 1872 wohnte in London ein Reform-Mitglieder, der im Jahre 1814 starb, im Hause Nummer 7, Saville -Row, Burlington Gardens, wohnte.\nIm Jahr 1872 wohnte er im Hause Nummer 7, Saville -Row, Burlington Gardens, worin sie im Jahre 1814 starb, wohnte.'] Label: [['Trotzdem wohnt er in einem großen Haus.\nMitten in London.']] Sacrebleu: {'score': 1.7268919138039225, 'counts': [5, 1, 0, 0], 'totals': [53, 52, 51, 50], 'precisions': [9.433962264150944, 1.9230769230769231, 0.9803921568627451, 0.5], 'bp': 1.0, 'sys_len': 53, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.09433962264150944, 0.019230769230769232, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.416666666666667, 'translation_length': 53, 'reference_length': 12} Rouge: {'rouge1': 0.11111111111111109, 'rouge2': 0.038461538461538464, 'rougeL': 0.07407407407407407, 'rougeLsum': 0.11111111111111109} Sari: {'sari': 37.976190476190474} Flesh Reading Ease: 65.4 ---------------------------------------- Source: ['Phileas Fogg war Mitglied des Reformclubs, nichts weiter.'] Prediction: ['Der US-Präsidenten Phileas Fogg war Mitglied des Reformclubs.\nEr war Mitglied des Reformclubs, nichts weiterhin weiterhin.\nFogg war Mitglied des Reformclubs, nichts weiterhin weiterhin.'] Label: [['Fogg ist Mitglied in einem vornehmen Club.\nIhm gehören nur reiche Männer an.\nDieser Club hat ein schönes Gebäude in London.\nDort treffen sich die Herren jeden Tag.\nSie reden über alles Mögliche oder sie spielen Karten.\nUnd sie trinken was.']] Sacrebleu: {'score': 1.034337165792928, 'counts': [5, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 0.5375735693311238, 'sys_len': 29, 'ref_len': 47} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.0, 0.0, 0.0], 'brevity_penalty': 0.5375735693311238, 'length_ratio': 0.6170212765957447, 'translation_length': 29, 'reference_length': 47} Rouge: {'rouge1': 0.05555555555555555, 'rouge2': 0.0, 'rougeL': 0.05555555555555555, 'rougeLsum': 0.05555555555555555} Sari: {'sari': 37.5} Flesh Reading Ease: 55.0 ---------------------------------------- Source: ['Sein einziger Zeitvertreib bestand im Lesen der Journale und im Whistspiel.'] Prediction: ['Im Whistpiel wurde ein einziger Zeitvertreib geschickt.\nDer Leser der Journale und der Whistspiel bestand im Interview.'] Label: [['Er liebt Kartenspiele.']] Sacrebleu: {'score': 2.0244462660665508, 'counts': [1, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [5.2631578947368425, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.05263157894736842, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.75, 'translation_length': 19, 'reference_length': 4} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 43.333333333333336} Flesh Reading Ease: 66.2 ---------------------------------------- Source: ['Bei diesem schweigsamen Spiel, welches so sehr seiner Natur angemessen war, gewann er oft, aber seine Gewinnste flossen nie in seine eigene Börse, sondern bildeten einen erheblichen Posten auf seinem Barmherzigkeits -Conto.'] Prediction: ['Bei einem schweigsamen Spiel gewann der Schweizer Natur oft, aber seine Gewinnste flossen nie in seine eigene Börse.\nDer erhebliche Posten auf seinem Barmherzigkeits-Conto bildeten einen erheblichen Posten auf seinem Barmherzigkeits-Conto.'] Label: [['Dabei wird immer um etwas Geld gespielt.\nWenn Fogg gewinnt, verschenkt er das Geld an Bettler.']] Sacrebleu: {'score': 1.432548017297354, 'counts': [3, 0, 0, 0], 'totals': [34, 33, 32, 31], 'precisions': [8.823529411764707, 1.5151515151515151, 0.78125, 0.4032258064516129], 'bp': 1.0, 'sys_len': 34, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.08823529411764706, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7894736842105263, 'translation_length': 34, 'reference_length': 19} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.74074074074074} Flesh Reading Ease: 35.8 ---------------------------------------- Source: ['Doch verlangte Phileas Fogg von seinem einzigen Diener eine außerordentliche Pünktlichkeit und Regelmäßigkeit.'] Prediction: ['Phileas Fogg verlangte in einem Diener eine außerordentliche Pünktlichkeit und Regelmäßigkeit.\nDoch eine außerordentliche Pünktlichkeit verlangte eine außerordentliche Regelmäßigkeit.'] Label: [['Bei Fogg muss immer alles pünktlich geschehen.']] Sacrebleu: {'score': 2.159701133933343, 'counts': [2, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [9.523809523809524, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.625, 'translation_length': 21, 'reference_length': 8} Rouge: {'rouge1': 0.11764705882352941, 'rouge2': 0.0, 'rougeL': 0.11764705882352941, 'rougeLsum': 0.11764705882352941} Sari: {'sari': 35.8974358974359} Flesh Reading Ease: -5.01 ---------------------------------------- Source: ['Ein Bursche von etwa dreißig Jahren trat ein und grüßte.'] Prediction: ['Ein Bursche ist in den vergangenen Tagen gestorben.\nEr trat ein und grüßte ein und grüßte ein.'] Label: [['Der Mann ist 30 Jahre alt und kommt aus Frankreich.']] Sacrebleu: {'score': 2.6643211213888947, 'counts': [3, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [15.789473684210526, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.15789473684210525, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.7272727272727273, 'translation_length': 19, 'reference_length': 11} Rouge: {'rouge1': 0.13793103448275862, 'rouge2': 0.0, 'rougeL': 0.13793103448275862, 'rougeLsum': 0.13793103448275862} Sari: {'sari': 38.54166666666667} Flesh Reading Ease: 83.75 ---------------------------------------- Source: ['»Sie sind Franzose und heißen John?« fragte Phileas Fogg. – Jean, belieben mein Herr, erwiderte der neue Diener, Jean Passepartout, ein Beiname, der mein natürliches Geschick, mich aus Verlegenheiten zu ziehen, bezeichnet.'] Prediction: ['Jean Passepartout ist neu ein neues Diener, der seine neue Diener, erwiderte.\nDer neue Diener, Jean Passepartout, wurde aus Verlegenheiten zu ziehen, bezeichnet.\nDie neue Diener, Jean Passepartout, erwiderte sein Beiname, der mein natürliches Geschick, mich aus Verlegenheiten zu ziehen, bezeichnet.'] Label: [['„Ich heiße Jean Passepartout“, sagt er.\n„Merkwürdiger Nachname “, meint Fogg.\n„Das ist ein Spitzname“, sagt der Mann.\n„Nicht mein echter Name.\nMeine Freunde nennen mich so.“ „Aha “, sagt Fogg.\n„Was bedeutet Passepartout?\n“ „Das ist Französisch “, sagt der Mann.\n„Frei übersetzt bedeutet es: Alle Probleme lösen.\nDas kann ich nämlich sehr gut.“ Fogg nickt.']] Sacrebleu: {'score': 0.8963743610861535, 'counts': [16, 0, 0, 0], 'totals': [54, 53, 52, 51], 'precisions': [29.62962962962963, 0.9433962264150944, 0.4807692307692308, 0.24509803921568626], 'bp': 0.6653730571622696, 'sys_len': 54, 'ref_len': 76} Bleu: {'bleu': 0.0, 'precisions': [0.2962962962962963, 0.0, 0.0, 0.0], 'brevity_penalty': 0.6653730571622696, 'length_ratio': 0.7105263157894737, 'translation_length': 54, 'reference_length': 76} Rouge: {'rouge1': 0.18000000000000002, 'rouge2': 0.020408163265306124, 'rougeL': 0.14, 'rougeLsum': 0.18000000000000002} Sari: {'sari': 36.05344509838892} Flesh Reading Ease: 55.15 ---------------------------------------- Source: ['Wieviel Uhr haben Sie? – Elf Uhr zweiundzwanzig Minuten, erwiderte Passepartout, indem er eine große silberne Uhr aus seiner Hosentasche hervorzog.'] Prediction: ['Der Passepartout wurde am Sonntag in der Nähe des Kantons Bern aufgefunden.\nEr war eine große silberne Uhr aus seiner Hosentasche hervorzog.\nDie Wachstumme ist noch unklar.'] Label: [['Nun möchte Fogg von Pas wissen, wie spät es ist.\nPas guckt auf seine Taschenuhr.\n„Es ist fünf Minuten vor zwölf“, antwortet er.']] Sacrebleu: {'score': 1.7557381354086663, 'counts': [4, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 28} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.0714285714285714, 'translation_length': 30, 'reference_length': 28} Rouge: {'rouge1': 0.07142857142857142, 'rouge2': 0.0, 'rougeL': 0.03571428571428571, 'rougeLsum': 0.07142857142857142} Sari: {'sari': 34.50396825396826} Flesh Reading Ease: 65.7 ---------------------------------------- Source: ['– Sie sind in der Zeit zurück, sagte Herr Fogg. – Verzeihen Sie, mein Herr, aber es ist nicht möglich.'] Prediction: ['Der Schweizer Herr Fogg hat sich am Sonntag zurückgezogen.\nEr war seit einigen Tagen nicht mehr geworden.\nDie Schweizerin hat sich in der Zeit zurückgezogen.'] Label: [['„Deine Uhr geht nach“, sagt Fogg.']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.5, 'translation_length': 28, 'reference_length': 8} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 43.758868758868765} Flesh Reading Ease: 72.25 ---------------------------------------- Source: ['Also, von diesem Augenblicke an, elf Uhr neunundzwanzig Minuten Vormittags, Mittwochs, 2. October 1872, sind Sie in meinem Dienst.«'] Prediction: ['Im September 1872 wurde eine neunundzwanzig Minuten-Vormittags-Zeitung aufgefunden.\nSie wurde dabei von diesem Augenblicke angezeigt.\nDie Nachfrage ist noch unklar.'] Label: [['Dann sagt Fogg: „Du bist mein neuer Diener.\nAb sofort.\nEs ist jetzt eine Minute vor zwölf.\nAm Mittwoch, den 2.\nOktober 1872.“']] Sacrebleu: {'score': 1.8200525064264919, 'counts': [6, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [26.08695652173913, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 0.7062216866978064, 'sys_len': 23, 'ref_len': 31} Bleu: {'bleu': 0.0, 'precisions': [0.2608695652173913, 0.0, 0.0, 0.0], 'brevity_penalty': 0.7062216866978064, 'length_ratio': 0.7419354838709677, 'translation_length': 23, 'reference_length': 31} Rouge: {'rouge1': 0.13043478260869565, 'rouge2': 0.0, 'rougeL': 0.043478260869565216, 'rougeLsum': 0.13043478260869565} Sari: {'sari': 44.804510155316606} Flesh Reading Ease: 32.9 ---------------------------------------- Source: ['Passepartout befand sich also, nachdem halb zwölf vorüber war, allein im Hause der Saville -Row. Sogleich machte er sich daran, es vom Keller bis zum Speicher zu besichtigen.'] Prediction: ['Im Keller der Saville -Row wurde ein Passepartout aufgefunden.\nDer Keller war bis zum Speicher zu besichtigen.\nDas gab es auch nach dem Keller, dass der Passepartout sich daran besichtigen war.'] Label: [['Pas spaziert durchs Haus.']] Sacrebleu: {'score': 1.0559717178170818, 'counts': [1, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [2.857142857142857, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 5} Bleu: {'bleu': 0.0, 'precisions': [0.02857142857142857, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 7.0, 'translation_length': 35, 'reference_length': 5} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 33.8095238095238} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['Er bemerkte auch in seinem Zimmer über der Standuhr ein Merkblatt angeheftet, mit der Vorschrift des täglichen Dienstes. Dasselbe enthielt – von acht Uhr Vormittags, der regelmäßigen Zeit, wo Phileas Fogg aufstand, bis zu halb zwölf, da er zum Frühstücken sich auf den Reformclub begab – alle Einzelheiten des Dienstes: Thee und geröstete Brodschnitten um acht Uhr dreiundzwanzig Minuten; Wasser zum Rasiren, um neun Uhr siebenunddreißig; Frisiren um neun Uhr vierzig, u.s.w. Nachher von halb zwölf Vormittags bis zu zwölf Uhr Nachts, wo der methodische Gentleman zu Bette ging, war alles aufgezeichnet, vorgesehen, geregelt.'] Prediction: ['Phileas Fogg hat in seinem Zimmer über der Standuhr ein Merkblatt angeheftet.\nDasselbe enthielt von acht Uhr Vormittags, der regelmäßigen Zeit, wo Phileas Fogg aufstand, bis zu halb zwölf, da er zum Frühstücken sich auf den Reformclub begab.'] Label: [['In der Küche hängt ein Zettel an der Wand.\n„Aha!\n“, sagt Pas.\n„Hier steht die Zeit fürs Frühstück.\nUnd wann mein Herr zu Bett geht.“']] Sacrebleu: {'score': 1.3995516592202837, 'counts': [8, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [18.181818181818183, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 33} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3333333333333333, 'translation_length': 44, 'reference_length': 33} Rouge: {'rouge1': 0.2222222222222222, 'rouge2': 0.028571428571428574, 'rougeL': 0.19444444444444445, 'rougeLsum': 0.19444444444444445} Sari: {'sari': 35.11018111316026} Flesh Reading Ease: 61.55 ---------------------------------------- Source: ['Passepartout machte sich eine Freude daraus, dies Programm zu studieren und dessen verschiedene Artikel seinem Geist einzuprägen.'] Prediction: ['Eine Freude daraus, dessen verschiedene Artikel seinem Geist einzuprägen.\nDas Geist wurde von einem frühen Artikel eingestellt.\nDas Geist wurde von einem Freund ausgefunden.'] Label: [['Pas gefällt das.\nIch muss nur die Zeit genau einhalten, denkt er.']] Sacrebleu: {'score': 1.7574239156849023, 'counts': [3, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [10.714285714285714, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.10714285714285714, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8666666666666667, 'translation_length': 28, 'reference_length': 15} Rouge: {'rouge1': 0.05128205128205129, 'rouge2': 0.0, 'rougeL': 0.05128205128205129, 'rougeLsum': 0.05128205128205129} Sari: {'sari': 36.730769230769226} Flesh Reading Ease: 55.0 ---------------------------------------- Source: ['Es waren die gewöhnlichen Spielgenossen des Herrn Phileas Fogg, gleich ihm leidenschaftliche Whistspieler: der Ingenieur Andrew Stuart, die Banquiers John Sullivan und Samuel Fallentin, der Brauer Thomas Flanagan, Walther Ralph, einer der Administratoren der Bank von England, – reiche und angesehene Männer, selbst in diesem Club, welcher die hervorragendsten Glieder der Industrie und Finanzwelt in seiner Mitte zählt.'] Prediction: ['Immer mehr als ein Jahr spielten die gewöhnlichen Whistspieler des Herrn Phileas Fogg.\nIn der gewöhnlichen Club waren die gewöhnlichen Spielgenossen des Herrn Phileas Fogg.'] Label: [['Fogg und die anderen Männer im Club spielen Karten.']] Sacrebleu: {'score': 1.962672844874697, 'counts': [4, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [14.814814814814815, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.14814814814814814, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.7, 'translation_length': 27, 'reference_length': 10} Rouge: {'rouge1': 0.15789473684210525, 'rouge2': 0.0, 'rougeL': 0.10526315789473682, 'rougeLsum': 0.05263157894736841} Sari: {'sari': 36.06671740233384} Flesh Reading Ease: 62.2 ---------------------------------------- Source: ["»Nun Ralph, fragte Thomas Flanagan, wie steht's mit dem Diebstahl? – Nun, erwiderte Andrew Stuart, die Bank wird um ihr Geld kommen."] Prediction: ['Am Dienstagabend wurde der Deutsche Wirtschaftsministerin von der Schweiz veröffentlicht.\nWir behalten die beiden, dass sie ihr Geld kommen konnten.\nWir haben sie sich mit dem Geld geschickt und sie sind sich um ihr Geld gekommen.'] Label: [['Sie sprechen über den Raubüberfall auf die Bank von England.']] Sacrebleu: {'score': 1.2090878038257866, 'counts': [3, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [7.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.075, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.6363636363636362, 'translation_length': 40, 'reference_length': 11} Rouge: {'rouge1': 0.125, 'rouge2': 0.0, 'rougeL': 0.04166666666666667, 'rougeLsum': 0.08333333333333334} Sari: {'sari': 44.74135481278969} Flesh Reading Ease: 74.4 ---------------------------------------- Source: ['– Wie, dieses Individuum, welches fünfundfünfzigtausend Pfund in Banknoten (2.100,000 Mark) entwendet hat, ist nicht ein Dieb zu nennen?'] Prediction: ['Der fünfundfünfzigtausend Pfund in Banknoten (2.100,000 Mark) ist nicht ein Dieb zu nennen.\nWie, dass das Individuum, welches fünfundfünfzigtausend Pfund in Banknoten entwendet hat, ist, ist nicht ein Dieb zu nennen?'] Label: [['55.000 Pfund hat der Dieb mitgenommen.\nSo viel Geld ist noch nie geraubt worden.']] Sacrebleu: {'score': 1.4104555382959003, 'counts': [5, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [12.820512820512821, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 16} Bleu: {'bleu': 0.0, 'precisions': [0.1282051282051282, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4375, 'translation_length': 39, 'reference_length': 16} Rouge: {'rouge1': 0.23076923076923078, 'rouge2': 0.0, 'rougeL': 0.15384615384615385, 'rougeLsum': 0.1923076923076923} Sari: {'sari': 38.22222222222222} Flesh Reading Ease: 70.25 ---------------------------------------- Source: ['»Ich behaupte, sagte Andrew Stuart, daß der Dieb unfehlbar ein gewandter Mensch ist, welcher alle Aussicht hat, zu entkommen.'] Prediction: ['Ein gewandter Mensch wurde in der Nacht auf Sonntag in Frankreich entdeckt.\nDer Dieb wurde von einem gewandten Mensch entdeckt.\nAndrew Stuart, der ein gewandter Mensch entkommt, wurde von der Aussicht entkommen.'] Label: [['„Der Dieb ist weg“, sagt Andrew, einer der Herren.\n„Die Polizei wird ihn nicht finden.']] Sacrebleu: {'score': 1.6207525738139132, 'counts': [7, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [18.91891891891892, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.1891891891891892, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9473684210526316, 'translation_length': 37, 'reference_length': 19} Rouge: {'rouge1': 0.1702127659574468, 'rouge2': 0.044444444444444446, 'rougeL': 0.1702127659574468, 'rougeLsum': 0.12765957446808512} Sari: {'sari': 45.10201020102011} Flesh Reading Ease: 75.7 ---------------------------------------- Source: ['Ist die Erde etwa kleiner geworden?'] Prediction: ['Eine Frau wurde in der Nacht auf Sonntag 2020 in der Nacht auf Sonntag kleiner geworden.\nSie war mit ihrem Mann auf die Erde geworden.\nDie Frau war mit ihrem Mann nicht mehr geworden.'] Label: [['„Die Welt wird doch nicht kleiner?\n“']] Sacrebleu: {'score': 1.184949136625139, 'counts': [2, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [5.405405405405405, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.05405405405405406, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.625, 'translation_length': 37, 'reference_length': 8} Rouge: {'rouge1': 0.15, 'rouge2': 0.0, 'rougeL': 0.1, 'rougeLsum': 0.15} Sari: {'sari': 50.72463768115942} Flesh Reading Ease: 86.8 ---------------------------------------- Source: ['Die Erde hat an Umfang verloren, weil man jetzt zehnmal rascher wie vor hundert Jahren um sie herum reisen kann.'] Prediction: ['Die Erde hat an Umfang verloren, weil man jetzt zehnmal rascher wie vor hundert Jahren um sie herum reisen kann.\nDie Erde hat an Umfang verloren, weil man jetzt zehnmal rascher wie vor hundert Jahren um sie herum reisen kann.'] Label: [['„Weil man heute so schnell um die Erde reisen kann.\nZehnmal schneller als vor 100 Jahren!']] Sacrebleu: {'score': 3.9585298754221863, 'counts': [8, 2, 1, 0], 'totals': [44, 43, 42, 41], 'precisions': [18.181818181818183, 4.651162790697675, 2.380952380952381, 1.2195121951219512], 'bp': 1.0, 'sys_len': 44, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.18181818181818182, 0.046511627906976744, 0.023809523809523808, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.4444444444444446, 'translation_length': 44, 'reference_length': 18} Rouge: {'rouge1': 0.35714285714285715, 'rouge2': 0.1111111111111111, 'rougeL': 0.28571428571428575, 'rougeLsum': 0.28571428571428575} Sari: {'sari': 41.41865079365079} Flesh Reading Ease: 72.25 ---------------------------------------- Source: ['In achtzig Tagen nur, sagte Phileas Fogg.'] Prediction: ['Phileas Fogg (34) hat seit sechs Tagen nach dem Coronavirus gestorben.\nErstmals wird erstmals seit seinem Jahr 2020 verstorben.\nNun hat er sich über seinen Vater geschlossen.'] Label: [['„In genau 80 Tagen kann man um die Erde reisen.“']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.6666666666666665, 'translation_length': 32, 'reference_length': 12} Rouge: {'rouge1': 0.05405405405405406, 'rouge2': 0.0, 'rougeL': 0.05405405405405406, 'rougeLsum': 0.05405405405405406} Sari: {'sari': 55.55555555555555} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['– Wirklich, meine Herren, setzte John Sullivan hinzu, achtzig Tage, seitdem auf der großen Indischen Eisenbahn die Strecke zwischen Rothel und Allahabad eröffnet worden ist, wie das »Morning Chronicle« die Route berechnet, nämlich: Von London nach Suez über den Mont - Cenis und Brindisi, Eisenbahn und Packetboot 7 Tage.'] Prediction: ['Von London nach Suez wurde der Fahrer von der Strecke zwischen Rothel und Allahabad eröffnet.\nDie Route berechnet, nämlich: Von London nach Suez über den Mont - Cenis und Brindisi, Eisenbahn und Packetboot 7 Tage.'] Label: [['Dann liest er vor: „Mit Zug und Schiff von London nach Suez: 7 Tage.']] Sacrebleu: {'score': 6.364996151971675, 'counts': [9, 4, 2, 0], 'totals': [40, 39, 38, 37], 'precisions': [22.5, 10.256410256410257, 5.2631578947368425, 1.3513513513513513], 'bp': 1.0, 'sys_len': 40, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.225, 0.10256410256410256, 0.05263157894736842, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.3529411764705883, 'translation_length': 40, 'reference_length': 17} Rouge: {'rouge1': 0.32, 'rouge2': 0.16666666666666666, 'rougeL': 0.28, 'rougeLsum': 0.24} Sari: {'sari': 41.709701585126254} Flesh Reading Ease: 57.7 ---------------------------------------- Source: ['Von Suez nach Bombay, Packetboot 13". Von Bombay nach Calcutta, Eisenbahn 3". Von Calcutta nach Hongkong, Packetboot 13". Von Hongkong nach Yokohama in Japan, Packetboot 6". Von Yokohama n. San Francisco, Packetb. 22". Von San Francisco n. New -York, Eisenb. 7". V. New -York n. London, Packetb. u. Eisenb. 9". Sa. 80 Tage.'] Prediction: ['Von Suez nach Bombay, Packetboot 13".\nVon Bombay nach Calcutta, Eisenbahn 3".\nVon Hongkong nach Yokohama in Japan, Packetboot 6".\nVon Yokohama n. San Francisco, Packetb.\n22".\nVon San Francisco n. New -York, Eisenb.\n7".\nV. New -York n. London, Packetb.\nu. Eisenb.\n9".\nSa.\n80 Tage.'] Label: [['Mit dem Schiff von Suez nach Mumbai in Indien: 13 Tage.\nMit dem Zug von Mumbai nach Kalkutta in Indien: 3 Tage.\nMit dem Schiff von Kalkutta nach Hongkong in China: 13 Tage.\nMit dem Schiff von Hongkong nach Yokohama in Japan: 6 Tage.\nMit dem Schiff von Yokohama nach San Francisco in Amerika: 22 Tage.\nMit dem Zug von San Francisco nach New York: 7 Tage.\nUnd das Schiff von New York nach London braucht 9 Tage.“ „Insgesamt sind das 80 Tage“, sagt er.']] Sacrebleu: {'score': 6.094967700752101, 'counts': [33, 8, 3, 2], 'totals': [76, 75, 74, 73], 'precisions': [43.421052631578945, 10.666666666666666, 4.054054054054054, 2.73972602739726], 'bp': 0.7196808936920782, 'sys_len': 76, 'ref_len': 101} Bleu: {'bleu': 0.060949677007521005, 'precisions': [0.4342105263157895, 0.10666666666666667, 0.04054054054054054, 0.0273972602739726], 'brevity_penalty': 0.7196808936920782, 'length_ratio': 0.7524752475247525, 'translation_length': 76, 'reference_length': 101} Rouge: {'rouge1': 0.46969696969696967, 'rouge2': 0.2153846153846154, 'rougeL': 0.46969696969696967, 'rougeLsum': 0.46969696969696967} Sari: {'sari': 37.448094689619396} Flesh Reading Ease: 80.5 ---------------------------------------- Source: ['– Der Himmel behüte mich! rief Stuart, aber ich würde schon um viertausend Pfund wetten, daß eine solche Reise, unter solchen Bedingungen, unmöglich ist.'] Prediction: ['Stuart (34) hat seinen viertausend Pfund wetten.\nDer Himmel behüte mich!\nrief Stuart, aber ich würde schon um viertausend Pfund wetten.\nDer Himmel behüte mich!\nrief Stuart, da er eine solche Reise, unter solchen Bedingungen, unmöglich ist.'] Label: [['„Ich wette um 4000 Pfund, dass es in 80 Tagen nicht gelingt“, sagt Andrew.']] Sacrebleu: {'score': 1.137287189899225, 'counts': [5, 0, 0, 0], 'totals': [48, 47, 46, 45], 'precisions': [10.416666666666666, 1.0638297872340425, 0.5434782608695652, 0.2777777777777778], 'bp': 1.0, 'sys_len': 48, 'ref_len': 17} Bleu: {'bleu': 0.0, 'precisions': [0.10416666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.823529411764706, 'translation_length': 48, 'reference_length': 17} Rouge: {'rouge1': 0.1090909090909091, 'rouge2': 0.0, 'rougeL': 0.1090909090909091, 'rougeLsum': 0.1090909090909091} Sari: {'sari': 35.38011695906433} Flesh Reading Ease: 73.15 ---------------------------------------- Source: ['– Sehr möglich, vielmehr, erwiderte Herr Fogg.'] Prediction: ['Der Schweizer Chef hat seine Mutter aufgefunden.\nDer Chef hat sich mit einem Interview zu sehen, dass er sich nicht mehr möglich sei.\nDer Chef hat sich mit seiner Mutter zu sehen bekannt gegeben.'] Label: [['„Gut“, antwortet Fogg.\n„Ich nehme die Wette an!\nIch wette, dass ich in 80 Tagen einmal um die Erde reisen kann.']] Sacrebleu: {'score': 2.304907678117588, 'counts': [4, 1, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 2.7027027027027026, 1.3888888888888888, 0.7142857142857143], 'bp': 1.0, 'sys_len': 38, 'ref_len': 26} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.02702702702702703, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4615384615384615, 'translation_length': 38, 'reference_length': 26} Rouge: {'rouge1': 0.03571428571428571, 'rouge2': 0.0, 'rougeL': 0.03571428571428571, 'rougeLsum': 0.03571428571428571} Sari: {'sari': 52.19101885768552} Flesh Reading Ease: 80.95 ---------------------------------------- Source: ['– Wann? – Augenblicklich.'] Prediction: ['Im Interview mit dem 20-Minuten-Podcast "Unchained" mit Host Andrea über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media, die ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media, die ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media, die ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media, die ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media, die ihre Leute über Social Media und ihre Leute über Social Media und ihre Leute über Social Media, die ihre Leute aufmerksam ist, die ihre Leute aufmerksam, die ihre Leute aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerksam aufmerks'] Label: [['Ich werde noch heute losfahren.“ „Was?\n“, rufen die anderen.']] Sacrebleu: {'score': 0.1889678722649679, 'counts': [2, 0, 0, 0], 'totals': [224, 223, 222, 221], 'precisions': [0.8928571428571429, 0.2242152466367713, 0.11261261261261261, 0.05656108597285068], 'bp': 1.0, 'sys_len': 224, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.008928571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 14.933333333333334, 'translation_length': 224, 'reference_length': 15} Rouge: {'rouge1': 0.008968609865470852, 'rouge2': 0.0, 'rougeL': 0.008968609865470852, 'rougeLsum': 0.008968609865470852} Sari: {'sari': 56.01010101010101} Flesh Reading Ease: -143.16 ---------------------------------------- Source: ["– 's ist Narrheit! rief Andrew Stuart, dem das Drängen seines Spielgenossen lästig ward."] Prediction: ['Im Spiel von "Unchained" wurde ein Drängen seines Spielgenossen lästig geschickt.\nIn der Nacht auf Sonntag wurde ein Dränger von einem Drängen geschickt.\nIm Spiel wurde eine grosse Frau entdeckt.'] Label: [['„Das kann nicht Ihr Ernst sein!\n“']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 35, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.375, 'translation_length': 35, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 32.63888888888889} Flesh Reading Ease: 70.55 ---------------------------------------- Source: ['Dann zu seinen Collegen gewendet: – Ich habe zwanzigtausend Pfund bei Gebr. Baring stehen.'] Prediction: ['Ein junger Mann hat seinen französischen Pfund bei seinen Gebr verloren.\nDer französische Mann hatte sich zum zwanzigtausenden Pfund bei seinen Gebr gewendet.'] Label: [['„Auf meinem Konto stehen 20.000 Pfund “, sagt er.']] Sacrebleu: {'score': 1.7911710595643588, 'counts': [2, 0, 0, 0], 'totals': [25, 24, 23, 22], 'precisions': [8.0, 2.0833333333333335, 1.0869565217391304, 0.5681818181818182], 'bp': 1.0, 'sys_len': 25, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.08, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.272727272727273, 'translation_length': 25, 'reference_length': 11} Rouge: {'rouge1': 0.058823529411764705, 'rouge2': 0.0, 'rougeL': 0.058823529411764705, 'rougeLsum': 0.058823529411764705} Sari: {'sari': 52.196969696969695} Flesh Reading Ease: 57.35 ---------------------------------------- Source: ['Die setze ich gerne daran.'] Prediction: ['Die Schweizerin hat sich in der Nacht auf Sonntag zu Gast geschlossen.\nSie setzte sich daran, dass sie sich daran setzen konnte.\nDie Schweizerin hatte sich in der Nacht auf Sonntag zu Gast geschlossen.'] Label: [['„Um dieses Geld wette ich mit Ihnen.“']] Sacrebleu: {'score': 0.969094302009921, 'counts': [1, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [2.6315789473684212, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.02631578947368421, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.222222222222222, 'translation_length': 38, 'reference_length': 9} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 58.88888888888889} Flesh Reading Ease: 80.95 ---------------------------------------- Source: ['... – Zwanzigtausend Pfund ! rief John Sullivan .'] Prediction: ['Zwanzigtausend Pfund!\nrief John Sullivan.'] Label: [['„Oh nein!\n“, ruft John, ein anderer Herr aus dem Club.']] Sacrebleu: {'score': 2.75631563063758, 'counts': [3, 0, 0, 0], 'totals': [7, 6, 5, 4], 'precisions': [42.857142857142854, 8.333333333333334, 5.0, 3.125], 'bp': 0.31890655732397044, 'sys_len': 7, 'ref_len': 15} Bleu: {'bleu': 0.0, 'precisions': [0.42857142857142855, 0.0, 0.0, 0.0], 'brevity_penalty': 0.31890655732397044, 'length_ratio': 0.4666666666666667, 'translation_length': 7, 'reference_length': 15} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 36.94444444444444} Flesh Reading Ease: 58.0 ---------------------------------------- Source: ['Zwanzigtausend Pfund, die Sie durch eine unvorausgesehene Verspätung verlieren können! –'] Prediction: ['Zwanzigtausend Pfund, die Sie durch eine unvorausgesehene Verspätung verlieren können, werden können.\nDie Zwanzigtausend Pfund, die Sie durch eine unvorausgesehene Verspätung verlieren können, werden durch eine unvorausgesehene Verspätung verlieren können.'] Label: [['„Wenn Sie ein Schiff verpassen, verlieren Sie alles!\n“']] Sacrebleu: {'score': 1.4500372328365223, 'counts': [4, 0, 0, 0], 'totals': [36, 35, 34, 33], 'precisions': [11.11111111111111, 1.4285714285714286, 0.7352941176470589, 0.3787878787878788], 'bp': 1.0, 'sys_len': 36, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.1111111111111111, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.272727272727273, 'translation_length': 36, 'reference_length': 11} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.0, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.08888888888888889} Sari: {'sari': 32.5} Flesh Reading Ease: 18.75 ---------------------------------------- Source: ['Es giebt nichts Unvorhergesehenes, erwiderte Phileas Fogg einfach.'] Prediction: ['Ein Unvorhergesehen wurde von einem Unwetter aufgefunden.\nPhileas Fogg erwiderte den Unwetter einfach.'] Label: [['„Aber nein“, beruhigt Fogg ihn.']] Sacrebleu: {'score': 3.1251907639724417, 'counts': [2, 0, 0, 0], 'totals': [15, 14, 13, 12], 'precisions': [13.333333333333334, 3.5714285714285716, 1.9230769230769231, 1.0416666666666667], 'bp': 1.0, 'sys_len': 15, 'ref_len': 7} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.142857142857143, 'translation_length': 15, 'reference_length': 7} Rouge: {'rouge1': 0.1111111111111111, 'rouge2': 0.0, 'rougeL': 0.1111111111111111, 'rougeLsum': 0.1111111111111111} Sari: {'sari': 52.5} Flesh Reading Ease: 27.25 ---------------------------------------- Source: ['Ich wette mit Jedem, der Lust dazu hat, um zwanzigtausend Pfund, daß ich die Reise um den Erdball in längstens achtzig Tagen machen werde, d.h. in neunzehnhundertundzwanzig Stunden, oder hundertfünfzehntausendzweihundert Minuten.'] Prediction: ['Der Schweizer Erdball-Profi wurde in der Schweiz zwanzigtausend Pfund gefunden.\nDer 20-Jährige wurde in der Schweiz zum ersten Mal in der Nacht auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag auf Sonntag zum ersten Mal zweimal Mal.'] Label: [['„Ich wette um 20.000 Pfund, dass ich es schaffe.']] Sacrebleu: {'score': 0.7067604405306844, 'counts': [2, 0, 0, 0], 'totals': [61, 60, 59, 58], 'precisions': [3.278688524590164, 0.8333333333333334, 0.423728813559322, 0.21551724137931033], 'bp': 1.0, 'sys_len': 61, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.03278688524590164, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.545454545454546, 'translation_length': 61, 'reference_length': 11} Rouge: {'rouge1': 0.05714285714285715, 'rouge2': 0.0, 'rougeL': 0.028571428571428574, 'rougeLsum': 0.05714285714285715} Sari: {'sari': 51.42462638076674} Flesh Reading Ease: 57.9 ---------------------------------------- Source: ['– Wir nehmen die Wette an, erwiderten, nachdem sie sich unter einander verständigt, die Herren Stuart, Fallentin, Sullivan, Flanagan und Ralph.'] Prediction: ['Im Alter von 99 Jahren werden die Wette in der Schweiz erwidert.\nNun werden die Herren aufgefordert, die Herren Stuart, Fallentin, Sullivan, Flanagan und Ralph zu erwarten.'] Label: [['Die anderen fünf Männer machen mit.\nJeder von ihnen setzt 4000 Pfund ein.\nAlle denken, dass Fogg es nicht schaffen wird.\nNiemand glaubt, dass er in 80 Tagen um die Erde reisen kann.']] Sacrebleu: {'score': 1.5231061325477389, 'counts': [7, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [21.21212121212121, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 0.8337529180751805, 'sys_len': 33, 'ref_len': 39} Bleu: {'bleu': 0.0, 'precisions': [0.21212121212121213, 0.0, 0.0, 0.0], 'brevity_penalty': 0.8337529180751805, 'length_ratio': 0.8461538461538461, 'translation_length': 33, 'reference_length': 39} Rouge: {'rouge1': 0.12903225806451613, 'rouge2': 0.0, 'rougeL': 0.0967741935483871, 'rougeLsum': 0.12903225806451613} Sari: {'sari': 36.48288439955107} Flesh Reading Ease: 61.2 ---------------------------------------- Source: ['Der Zug nach Dover geht um acht Uhr fünfundvierzig Minuten ab. Mit dem reise ich. – Heute Abend? fragte Stuart. – Heute Abend, versetzte Phileas Fogg.'] Prediction: ['Am Freitagabend wird der Zug nach Dover in England abgebrochen.\nIm Interview mit dem 20-Minuten-Radio-Hosts Phileas Fogg spricht der Zug nach der Tür.\nIm Interview spricht der Zug der Schweizerin auf, wie es sich um den Zug geht.'] Label: [['„Ich steige heute Abend um 8.45 Uhr in den Zug“, sagt Fogg.']] Sacrebleu: {'score': 1.3024295746348018, 'counts': [6, 0, 0, 0], 'totals': [44, 43, 42, 41], 'precisions': [13.636363636363637, 1.1627906976744187, 0.5952380952380952, 0.3048780487804878], 'bp': 1.0, 'sys_len': 44, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.13636363636363635, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.142857142857143, 'translation_length': 44, 'reference_length': 14} Rouge: {'rouge1': 0.18181818181818182, 'rouge2': 0.037735849056603765, 'rougeL': 0.10909090909090909, 'rougeLsum': 0.14545454545454545} Sari: {'sari': 35.52050448535618} Flesh Reading Ease: 73.7 ---------------------------------------- Source: ['Also, fuhr er fort, indem er einen Kalender aus der Tasche zog und nachsah, weil heute Mittwoch, der 2. October, so muß ich Samstags, den 21. December um acht Uhr fünfundvierzig Minuten Abends wieder in London sein, hier in diesem Salon des Reformclubs, sonst sollen die zwanzigtausend Pfund, welche eben für mich bei den Gebr. Baring stehen, mit Recht und Fug Ihnen, meine Herren, angehören.'] Prediction: ['Der 21.\nDecember sollen in London einen zwanzigtausend Pfund sein.\nDas sollen die zwanzigtausend Pfund sein.'] Label: [['Er schaut in seinen Kalender.\n„Heute ist der 2.\nOktober.\nAm 21.\nDezember werde ich zur selben Zeit wieder hier sein.“']] Sacrebleu: {'score': 4.159232785061335, 'counts': [6, 2, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [31.57894736842105, 11.11111111111111, 2.9411764705882355, 1.5625], 'bp': 0.6563555554708402, 'sys_len': 19, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.3157894736842105, 0.1111111111111111, 0.0, 0.0], 'brevity_penalty': 0.6563555554708402, 'length_ratio': 0.7037037037037037, 'translation_length': 19, 'reference_length': 27} Rouge: {'rouge1': 0.2162162162162162, 'rouge2': 0.0, 'rougeL': 0.16216216216216214, 'rougeLsum': 0.2162162162162162} Sari: {'sari': 37.82254497094368} Flesh Reading Ease: 72.55 ---------------------------------------- Source: ['Man forderte Herrn Fogg auf, sein Spiel zu unterbrechen, um seine Reisevorbereitungen zu treffen.'] Prediction: ['Herrn Fogg hat sich bei einem Penalty aus dem Duell gegen Herrn Fogg verlassen.\nDer Schweizer spielte in der Nacht auf Sonntagabend, um seine Reisevorbereitungen zu treffen.\nDer Schweizer hatte seine Reisevorbereitungen zu treffen.'] Label: [['„Sie müssen jetzt doch Koffer packen, Fogg.']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.222222222222222, 'translation_length': 38, 'reference_length': 9} Rouge: {'rouge1': 0.047619047619047616, 'rouge2': 0.0, 'rougeL': 0.047619047619047616, 'rougeLsum': 0.047619047619047616} Sari: {'sari': 35.79059829059829} Flesh Reading Ease: 57.55 ---------------------------------------- Source: ['»Ich bin stets reisefertig!« erwiderte dieser leidenschaftslose Gentleman, gab seine Karten und sprach: »Ich schlage Eckstein um, Sie spielen aus, Herr Stuart.«'] Prediction: ['Ein leidenschaftslose Gentleman hat seine Karten geschlagen.\nDer Gentleman schlage Eckstein um, Sie spielen aus, Herr Stuart spielen aus.'] Label: [['„Nein“, sagt Fogg.\n„Ich habe genug Zeit.\nIch möchte noch ein bisschen weiterspielen.“']] Sacrebleu: {'score': 2.1671320168371846, 'counts': [3, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [13.043478260869565, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.13043478260869565, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2777777777777777, 'translation_length': 23, 'reference_length': 18} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 35.231136844040066} Flesh Reading Ease: 59.35 ---------------------------------------- Source: ['Um sieben Uhr fünfzig öffnete er seine Hausthüre und trat in sein Haus. Passepartout, welcher sein Programm gewissenhaft einstudiert hatte, war sehr überrascht, als er Herrn Fogg so ungenau sah, daß er zu dieser ungewöhnlichen Stunde erschien.'] Prediction: ['Herrn Fogg (34) öffnete sich am Freitagabend in seinem Haus.\nEr war sehr überrascht, als er sein Programm gewissenhaft einstudiert hatte.\nFogg war sehr überrascht, als er seine Hausthüre fünfzig öffnete.'] Label: [['Pas wundert sich.\nSein Herr kommt viel früher als erwartet.']] Sacrebleu: {'score': 1.3705063051209185, 'counts': [4, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [10.526315789473685, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.1666666666666665, 'translation_length': 38, 'reference_length': 12} Rouge: {'rouge1': 0.13636363636363635, 'rouge2': 0.0, 'rougeL': 0.13636363636363635, 'rougeLsum': 0.13636363636363635} Sari: {'sari': 36.155394524959746} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['In zehn Minuten reisen wir nach Dover und Calais.«'] Prediction: ['Immer mehr wieder sind die Tiere nach Dover und Calais.\nImmer mehr wieder sind die Tiere nach der Tiere.'] Label: [['„In zehn Minuten fahren wir los“, sagt Fogg.']] Sacrebleu: {'score': 1.8160849415439309, 'counts': [1, 0, 0, 0], 'totals': [21, 20, 19, 18], 'precisions': [4.761904761904762, 2.5, 1.3157894736842106, 0.6944444444444444], 'bp': 1.0, 'sys_len': 21, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.047619047619047616, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1, 'translation_length': 21, 'reference_length': 10} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 29.629629629629633} Flesh Reading Ease: 82.75 ---------------------------------------- Source: ['»Der Herr will eine Reise machen? fragte er. – Ja, erwiderte Phileas Fogg.'] Prediction: ['Am Dienstagabend wurde Phileas Fogg (34) von der Schweizer Promi-Community gefunden.\nDer Herr will eine Reise machen und fragte den Herr.\nIm Interview mit dem 20-Minuten-Radio-Host Andrea spricht Phileas Fogg über die Reise.'] Label: [['„Sie fahren weg?“, fragt Pas.\n„Ja“, antwortet Fogg.']] Sacrebleu: {'score': 1.2090878038257866, 'counts': [3, 0, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [7.5, 1.2820512820512822, 0.6578947368421053, 0.33783783783783783], 'bp': 1.0, 'sys_len': 40, 'ref_len': 14} Bleu: {'bleu': 0.0, 'precisions': [0.075, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.857142857142857, 'translation_length': 40, 'reference_length': 14} Rouge: {'rouge1': 0.044444444444444446, 'rouge2': 0.0, 'rougeL': 0.044444444444444446, 'rougeLsum': 0.044444444444444446} Sari: {'sari': 32.8975078975079} Flesh Reading Ease: 57.85 ---------------------------------------- Source: ['Wir wollen eine Reise um die Erde vornehmen.«'] Prediction: ['Der Schweizer Nachfolger Thomas Müller hat eine Reise um die Erde vorgestellt.\nEr wollen eine Reise um die Erde vornehmen.'] Label: [['„Und du auch.\nWir machen eine Reise um die Erde.“']] Sacrebleu: {'score': 17.588181044237437, 'counts': [7, 4, 3, 2], 'totals': [22, 21, 20, 19], 'precisions': [31.818181818181817, 19.047619047619047, 15.0, 10.526315789473685], 'bp': 1.0, 'sys_len': 22, 'ref_len': 13} Bleu: {'bleu': 0.1758818104423743, 'precisions': [0.3181818181818182, 0.19047619047619047, 0.15, 0.10526315789473684], 'brevity_penalty': 1.0, 'length_ratio': 1.6923076923076923, 'translation_length': 22, 'reference_length': 13} Rouge: {'rouge1': 0.3225806451612903, 'rouge2': 0.2758620689655173, 'rougeL': 0.3225806451612903, 'rougeLsum': 0.3225806451612903} Sari: {'sari': 52.21139971139971} Flesh Reading Ease: 64.7 ---------------------------------------- Source: ['Da staunte Passepartout über die Maßen. Er riß die Augen weit auf, spannte die Wimpern und Brauen, streckte die Hände aus – Symptome förmlicher Bestürzung.'] Prediction: ['Passepartout staunte in der Schweiz seit einigen Tagen über die Maßen.\nSymptome förmlicher Bestürzung staunte er sich dabei.\nDas Symptome förmlicher Bestürzung staunte Passepartout über die Maßen.'] Label: [['„Wie … wie meinen Sie das?\n“, fragt Pas.']] Sacrebleu: {'score': 1.2414943415352928, 'counts': [1, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [3.3333333333333335, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.03333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5, 'translation_length': 30, 'reference_length': 12} Rouge: {'rouge1': 0.05, 'rouge2': 0.0, 'rougeL': 0.05, 'rougeLsum': 0.05} Sari: {'sari': 34.69032429558745} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['»Reise um die Erde! brummte er. – In achtzig Tagen, erwiderte Herr Fogg.'] Prediction: ['Herr Fogg (34) brummte in der Schweiz einen Tag.\nIn achtzig Tagen war erwidert, dass er sich in der Schweiz nicht mehr geschickt hatte.\nNun wurde er von der Erde geschickt.'] Label: [['„Eine Reise um die Erde in 80 Tagen, Pas.']] Sacrebleu: {'score': 1.4899946568663818, 'counts': [5, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [13.513513513513514, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 11} Bleu: {'bleu': 0.0, 'precisions': [0.13513513513513514, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.3636363636363638, 'translation_length': 37, 'reference_length': 11} Rouge: {'rouge1': 0.15000000000000002, 'rouge2': 0.0, 'rougeL': 0.09999999999999999, 'rougeLsum': 0.15000000000000002} Sari: {'sari': 40.971800864438904} Flesh Reading Ease: 93.65 ---------------------------------------- Source: ['Also, wir haben keinen Augenblick Zeit zu verlieren.'] Prediction: ['Der Schweizer Gastronomiker und der Chef der 20-Minuten-App (20 Minuten Radio) werden im Interview veröffentlicht.\nWir haben keinen Augenblick Zeit zu verlieren.'] Label: [['Wir müssen uns beeilen.“']] Sacrebleu: {'score': 1.5880117714047368, 'counts': [2, 0, 0, 0], 'totals': [28, 27, 26, 25], 'precisions': [7.142857142857143, 1.8518518518518519, 0.9615384615384616, 0.5], 'bp': 1.0, 'sys_len': 28, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.07142857142857142, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.666666666666667, 'translation_length': 28, 'reference_length': 6} Rouge: {'rouge1': 0.06666666666666667, 'rouge2': 0.0, 'rougeL': 0.06666666666666667, 'rougeLsum': 0.06666666666666667} Sari: {'sari': 36.66666666666667} Flesh Reading Ease: 40.3 ---------------------------------------- Source: ['– Aber die Koffer? ... sagte Passepartout mit unwillkürlichem Kopfschütteln .'] Prediction: ['Der Schweizer Passepartout hat seine Koffer für den Schweizer Papier.\nEr wollte sich mit unwillkürlichem Kopfschütteln bekommen.'] Label: [['„Müssen wir keine Koffer packen?\n“, will Pas wissen.']] Sacrebleu: {'score': 2.4074859035470344, 'counts': [2, 0, 0, 0], 'totals': [19, 18, 17, 16], 'precisions': [10.526315789473685, 2.7777777777777777, 1.4705882352941178, 0.78125], 'bp': 1.0, 'sys_len': 19, 'ref_len': 12} Bleu: {'bleu': 0.0, 'precisions': [0.10526315789473684, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.5833333333333333, 'translation_length': 19, 'reference_length': 12} Rouge: {'rouge1': 0.06896551724137932, 'rouge2': 0.0, 'rougeL': 0.06896551724137932, 'rougeLsum': 0.06896551724137932} Sari: {'sari': 42.61363636363636} Flesh Reading Ease: 60.35 ---------------------------------------- Source: ['– Keine Koffer.'] Prediction: ['Die 20-Minuten-App (ganz unten im Leben) startet am Freitagabend mit Host Stefan über 20 Minuten Radio.\nNeue Episoden und Antworten von Host Stefan über 20 Minuten und 20 Minuten Radio.\nNeue Episoden und Antworten von Host Stefan über 20 Minuten und 20 Minuten sowie der Radio-Section deiner 20-Minuten-App (ganz unten im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im Leben im'] Label: [['„Brauchen wir nicht “, sagt Fogg.']] Sacrebleu: {'score': 0.12254975580822351, 'counts': [1, 0, 0, 0], 'totals': [290, 289, 288, 287], 'precisions': [0.3448275862068966, 0.17301038062283736, 0.08680555555555555, 0.04355400696864112], 'bp': 1.0, 'sys_len': 290, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.0034482758620689655, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 36.25, 'translation_length': 290, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 66.66666666666666} Flesh Reading Ease: -7.31 ---------------------------------------- Source: ["Nur eines Reisesackes bedarf's, mit zwei wollenen Hemden darin, und drei Paar Strümpfen; ebensoviel für Sie. Weiteres kaufen wir unterwegs."] Prediction: ["Im Reisesack bedarf's ein Reisesack ein Paar darin.\nDer Reisesack hat zwei wollenen Hemden darin, und drei Paar Strümpfen.\nWeiteres kaufen wir unterwegs."] Label: [['„Eine Reisetasche mit etwas Kleidung reicht.“']] Sacrebleu: {'score': 1.387819277861591, 'counts': [1, 0, 0, 0], 'totals': [27, 26, 25, 24], 'precisions': [3.7037037037037037, 1.9230769230769231, 1.0, 0.5208333333333334], 'bp': 1.0, 'sys_len': 27, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.037037037037037035, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.375, 'translation_length': 27, 'reference_length': 8} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 32.92824074074074} Flesh Reading Ease: 67.0 ---------------------------------------- Source: ['Passepartout hätte gern geantwortet, konnte aber nicht.'] Prediction: ['Ein Mann hatte sich in der Nacht auf Sonntag in der Nacht auf Sonntag gegen die Polizei gebracht.\nDer Mann hätte gern geantwortet und konnte aber nicht gefunden werden.\nDer Mann war nicht ganz gefragt, sondern auch der Chef.'] Label: [['Das kann doch nicht wahr sein, denkt Pas.']] Sacrebleu: {'score': 1.121617874316939, 'counts': [3, 0, 0, 0], 'totals': [43, 42, 41, 40], 'precisions': [6.976744186046512, 1.1904761904761905, 0.6097560975609756, 0.3125], 'bp': 1.0, 'sys_len': 43, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.06976744186046512, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.3, 'translation_length': 43, 'reference_length': 10} Rouge: {'rouge1': 0.04166666666666667, 'rouge2': 0.0, 'rougeL': 0.04166666666666667, 'rougeLsum': 0.04166666666666667} Sari: {'sari': 46.21212121212121} Flesh Reading Ease: 85.1 ---------------------------------------- Source: ['Und ich wollte ruhig leben! ...« Er machte mechanisch seine Vorbereitungen zur Reise.'] Prediction: ['Ein Schweizer machte seine Vorbereitungen zur Reise.\nEr wollte ruhig leben und wollte ruhig leben.'] Label: [['Eine ruhige Arbeitsstelle ist das hier also nicht!']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [17, 16, 15, 14], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 17, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.8888888888888888, 'translation_length': 17, 'reference_length': 9} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 31.666666666666664} Flesh Reading Ease: 61.35 ---------------------------------------- Source: ["Hatte er's mit einem Narren zu thun?"] Prediction: ['Ein Mann hatte sich in Thailand mit einem Narren zu thun gefunden.\nEr war mit einem Narren zu thun.\nNun hat er einen Narren zu thun gefunden.'] Label: [['Ist mein Herr verrückt geworden?']] Sacrebleu: {'score': 0.0, 'counts': [0, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [0.0, 0.0, 0.0, 0.0], 'bp': 1.0, 'sys_len': 30, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.0, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 30, 'reference_length': 6} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 29.166666666666668} Flesh Reading Ease: 89.1 ---------------------------------------- Source: ['Um acht Uhr hatte Passepartout den bescheidenen Sack mit seiner und seines Herrn Garderobe zurecht gemacht;'] Prediction: ['Ein Passepartout hatte in seiner und seiner Herrn Garderobe eine bescheidene Sack mit seiner und seines Herrn Garderobe zurecht gemacht.\nDie Garderobe wurde von der Passepartout zurecht gemacht.'] Label: [['Pas packt schnell eine Reisetasche.']] Sacrebleu: {'score': 1.4763939041893883, 'counts': [2, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [6.666666666666667, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 6} Bleu: {'bleu': 0.0, 'precisions': [0.06666666666666667, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.0, 'translation_length': 30, 'reference_length': 6} Rouge: {'rouge1': 0.06060606060606061, 'rouge2': 0.0, 'rougeL': 0.06060606060606061, 'rougeLsum': 0.06060606060606061} Sari: {'sari': 35.55555555555556} Flesh Reading Ease: 49.0 ---------------------------------------- Source: ['Er nahm Passepartout den Reisesack aus der Hand, öffnete ihn und schob ein starkes Bündel von den schönen Banknoten hinein, welche in aller Welt Cours haben.'] Prediction: ['In aller Welt wurde ein Reisesack aus der Hand gefunden.\nDer Reisesack nahm den Reisesack aus der Hand und schob ein starkes Bündel von den schönen Banknoten hinein.'] Label: [['Sein Herr steckt noch ein Bündel Geldscheine dazu.\n„Die werde ich brauchen “, sagt Fogg.']] Sacrebleu: {'score': 1.7557381354086663, 'counts': [4, 0, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 1.7241379310344827, 0.8928571428571429, 0.46296296296296297], 'bp': 1.0, 'sys_len': 30, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.6666666666666667, 'translation_length': 30, 'reference_length': 18} Rouge: {'rouge1': 0.13333333333333333, 'rouge2': 0.046511627906976744, 'rougeL': 0.13333333333333333, 'rougeLsum': 0.13333333333333333} Sari: {'sari': 34.986413043478265} Flesh Reading Ease: 72.4 ---------------------------------------- Source: ['In diesem Augenblicke trat eine arme Bettlerin mit einem Kinde an der Hand, barfuß im Koth, zerrissenem Hut mit jämmerlich herabhängender Feder, zerfetztem Shawl über dem Lumpenkleid, zu Herrn Fogg heran und bat um ein Almosen.'] Prediction: ['Eine Bettlerin hat eine arme Bettlerin mit einem Kinde an der Hand, barfuß im Koth, zerrissenem Hut mit jämmerlich herabhängender Feder, zerfetztem Shawl über dem Lumpenkleid und bat um ein Almosen.\nDie Bettlerin bat um ein Almosen.'] Label: [['Auf dem Weg zum Bahnhof sehen sie eine Bettlerin.']] Sacrebleu: {'score': 1.2350387043213578, 'counts': [4, 0, 0, 0], 'totals': [42, 41, 40, 39], 'precisions': [9.523809523809524, 1.2195121951219512, 0.625, 0.32051282051282054], 'bp': 1.0, 'sys_len': 42, 'ref_len': 10} Bleu: {'bleu': 0.0, 'precisions': [0.09523809523809523, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.2, 'translation_length': 42, 'reference_length': 10} Rouge: {'rouge1': 0.125, 'rouge2': 0.043478260869565216, 'rougeL': 0.08333333333333333, 'rougeLsum': 0.08333333333333333} Sari: {'sari': 36.395202020202014} Flesh Reading Ease: 56.2 ---------------------------------------- Source: ['Herr Fogg zog die zwanzig Guineen, welche er beim Whist gewonnen hatte, aus der Tasche und überreichte sie der Bettlerin mit den Worten: »Hier nehmen Sie, brave Frau, es ist mir lieb, daß ich Sie getroffen habe!«'] Prediction: ['Eine Frau hat beim Whist eine Guineen gewonnen.\nDer Whist-Bettlerin hatte sie aus der Tasche und überreichte sie mit den Worten.\nDie zwanzig Guineen sind zum dritten Mal gewonnen.'] Label: [['Fogg gibt ihr 100 Pfund.\nEr sagt: „Gnädige Frau!\nIch freue mich, dass ich Sie treffe!\n“']] Sacrebleu: {'score': 1.3794462224541233, 'counts': [2, 0, 0, 0], 'totals': [32, 31, 30, 29], 'precisions': [6.25, 1.6129032258064515, 0.8333333333333334, 0.43103448275862066], 'bp': 1.0, 'sys_len': 32, 'ref_len': 22} Bleu: {'bleu': 0.0, 'precisions': [0.0625, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.4545454545454546, 'translation_length': 32, 'reference_length': 22} Rouge: {'rouge1': 0.0851063829787234, 'rouge2': 0.0, 'rougeL': 0.0851063829787234, 'rougeLsum': 0.0851063829787234} Sari: {'sari': 32.66004030070527} Flesh Reading Ease: 65.0 ---------------------------------------- Source: ['Als er sich hierauf umdrehte, sah er sich von seinen fünf Collegen des Reformclubs umgeben.'] Prediction: ['Ein früher als ein früher als ein Reform-Student in den USA umdrehte, wurde in den USA eine Frau aufgefunden.\nNun wurde er von seinen fünf Reform-Studenten in einem Reform-Club in Brooklyn geschickt.'] Label: [['Am Bahnhof sieht Fogg die Männer aus dem Club.\nMit ihnen hat er die Wette abgeschlossen.\nSie wollen sehen, ob Fogg wirklich losfährt.']] Sacrebleu: {'score': 1.493369524819332, 'counts': [4, 0, 0, 0], 'totals': [35, 34, 33, 32], 'precisions': [11.428571428571429, 1.4705882352941178, 0.7575757575757576, 0.390625], 'bp': 1.0, 'sys_len': 35, 'ref_len': 27} Bleu: {'bleu': 0.0, 'precisions': [0.11428571428571428, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2962962962962963, 'translation_length': 35, 'reference_length': 27} Rouge: {'rouge1': 0.06349206349206349, 'rouge2': 0.0, 'rougeL': 0.031746031746031744, 'rougeLsum': 0.06349206349206349} Sari: {'sari': 45.17045454545454} Flesh Reading Ease: 64.55 ---------------------------------------- Source: ["»Meine Herren, sprach er, jetzt reise ich ab, und die Visa's auf meinem Paß werden Ihnen bei meiner Rückkehr den Nachweis meiner Reiseroute geben."] Prediction: ["Ein Paß wird bei der Rückkehr den Nachweis meiner Reiseroute geben.\nDie Visa's auf meinem Paß wird auf meinem Paß geben.\nDie Visa's auf meinem Paß wird auf meinem Paß den Nachweis meiner Reiseroute geben."] Label: [['„Meine Herren, es geht los“, sagt er.\n„In jedem Land bekomme ich einen Stempel in meinen Pass.\nSo können Sie später sehen, dass ich wirklich dort war.“']] Sacrebleu: {'score': 1.2753998269755913, 'counts': [3, 0, 0, 0], 'totals': [38, 37, 36, 35], 'precisions': [7.894736842105263, 1.3513513513513513, 0.6944444444444444, 0.35714285714285715], 'bp': 1.0, 'sys_len': 38, 'ref_len': 34} Bleu: {'bleu': 0.0, 'precisions': [0.07894736842105263, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.1176470588235294, 'translation_length': 38, 'reference_length': 34} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 30.89869281045752} Flesh Reading Ease: 74.7 ---------------------------------------- Source: ['– Sie vergessen nicht, daß Sie wieder hier sein müssen? ... bemerkte Andrew Stuart ... – Binnen achtzig Tagenerwiderte Herr Fogg , Samstags , den 21 . December 1872, um acht Uhr fünfundvierzig Minuten Abends.'] Prediction: ['Andrew Stuart (1872) bemerkte eine achtzig Tagenerwiderin, die wieder wieder sein müssen.\nDer Binnen achtzig Tagenerwiderin und der achtzig Tagenerwiderin Herr Fogg (1872) wurde am 21.\nDecember 1872 von der Nacht aufgefunden.'] Label: [['„Und Sie kommen tatsächlich in 80 Tagen wieder?“, fragt einer der Männer.\n„Am Samstag, den 21.\nDezember.\nAbends um 8.45 Uhr.']] Sacrebleu: {'score': 2.5131854313529596, 'counts': [7, 1, 0, 0], 'totals': [40, 39, 38, 37], 'precisions': [17.5, 2.5641025641025643, 1.3157894736842106, 0.6756756756756757], 'bp': 1.0, 'sys_len': 40, 'ref_len': 29} Bleu: {'bleu': 0.0, 'precisions': [0.175, 0.02564102564102564, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.3793103448275863, 'translation_length': 40, 'reference_length': 29} Rouge: {'rouge1': 0.2105263157894737, 'rouge2': 0.0, 'rougeL': 0.14035087719298245, 'rougeLsum': 0.2105263157894737} Sari: {'sari': 33.95859629780262} Flesh Reading Ease: 46.45 ---------------------------------------- Source: ['Auf Wiedersehen, meine Herren.«'] Prediction: ['Eine Frau aus Wiedersehen hat sich mehrere Tage lang verloren.\nSie war auf Wiedersehen, meine Herren, meine Herren.'] Label: [['Auf Wiedersehen!\n“']] Sacrebleu: {'score': 1.727223799216787, 'counts': [1, 0, 0, 0], 'totals': [22, 21, 20, 19], 'precisions': [4.545454545454546, 2.380952380952381, 1.25, 0.6578947368421053], 'bp': 1.0, 'sys_len': 22, 'ref_len': 4} Bleu: {'bleu': 0.0, 'precisions': [0.045454545454545456, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 5.5, 'translation_length': 22, 'reference_length': 4} Rouge: {'rouge1': 0.19999999999999998, 'rouge2': 0.1111111111111111, 'rougeL': 0.19999999999999998, 'rougeLsum': 0.19999999999999998} Sari: {'sari': 40.27777777777777} Flesh Reading Ease: 59.85 ---------------------------------------- Source: ['Um acht Uhr vierzig Minuten setzten sich Phileas Fogg und sein Diener in dieselbe Waggon - Abtheilung.'] Prediction: ['Am Wochenende fand die Schweizer Woche statt.\nPhileas Fogg und sein Diener setzten sich in dieselbe Waggon.\nDie beiden waren acht Uhr vierzig Minuten in dieselbe Waggon.'] Label: [['Fogg und Pas steigen in den Zug.']] Sacrebleu: {'score': 2.952787808378777, 'counts': [4, 1, 0, 0], 'totals': [30, 29, 28, 27], 'precisions': [13.333333333333334, 3.4482758620689653, 1.7857142857142858, 0.9259259259259259], 'bp': 1.0, 'sys_len': 30, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.13333333333333333, 0.034482758620689655, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 3.75, 'translation_length': 30, 'reference_length': 8} Rouge: {'rouge1': 0.17647058823529413, 'rouge2': 0.0625, 'rougeL': 0.17647058823529413, 'rougeLsum': 0.17647058823529413} Sari: {'sari': 38.35725677830941} Flesh Reading Ease: 71.55 ---------------------------------------- Source: ['Die Neuigkeit von der Wette verbreitete sich zuerst im Reformclub und erregte unter den Mitgliedern dieser ehrenwerthen Gesellschaft eine arge Aufregung, welche sich durch die Berichterstatter von da in die Journale verbreitete und durch diese das Publicum von London und im ganzen Vereinigten Königreiche durchdrang.'] Prediction: ['Der Reformclub der Wette hat die Neuigkeit von der Wette verbreitet.\nDie Neuigkeit der Wette verbreitete sich zuerst im Reformclub und erregte unter den Mitgliedern dieser ehrenwerthen Gesellschaft eine arge Aufregung.'] Label: [['Schon bald berichten Zeitungen über die Wette.']] Sacrebleu: {'score': 1.4780822562194806, 'counts': [3, 0, 0, 0], 'totals': [33, 32, 31, 30], 'precisions': [9.090909090909092, 1.5625, 0.8064516129032258, 0.4166666666666667], 'bp': 1.0, 'sys_len': 33, 'ref_len': 8} Bleu: {'bleu': 0.0, 'precisions': [0.09090909090909091, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 4.125, 'translation_length': 33, 'reference_length': 8} Rouge: {'rouge1': 0.10526315789473685, 'rouge2': 0.0, 'rougeL': 0.10526315789473685, 'rougeLsum': 0.10526315789473685} Sari: {'sari': 34.637188208616784} Flesh Reading Ease: 47.5 ---------------------------------------- Source: ['Die einen ergriffen Partei für Phileas Fogg, die anderen – und sie bildeten bald eine ansehnliche Majorität – sprachen sich gegen ihn aus.'] Prediction: ['Phileas Fogg ist ein französischer Partei-Fürwürf.\nDie anderen bildeten bald eine ansehnliche Majorität.\nDie Partei sprachen sich gegen ihn aus.'] Label: [['„Fogg wird verlieren “, schreibt eine Zeitung.']] Sacrebleu: {'score': 1.958224832501124, 'counts': [2, 0, 0, 0], 'totals': [23, 22, 21, 20], 'precisions': [8.695652173913043, 2.272727272727273, 1.1904761904761905, 0.625], 'bp': 1.0, 'sys_len': 23, 'ref_len': 9} Bleu: {'bleu': 0.0, 'precisions': [0.08695652173913043, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.5555555555555554, 'translation_length': 23, 'reference_length': 9} Rouge: {'rouge1': 0.12903225806451613, 'rouge2': 0.0, 'rougeL': 0.12903225806451613, 'rougeLsum': 0.12903225806451613} Sari: {'sari': 33.89724310776943} Flesh Reading Ease: 50.45 ---------------------------------------- Source: ['Diese Reise um die Erde, innerhalb der geringen Frist, mit den jetzt im Gebrauch befindlichen Verkehrsmitteln anders als in der Theorie und auf dem Papier fertig zu bringen, war nicht allein unmöglich, sondern unsinnig! »Times«, »Standard«, »Evening - Star«, »Morning Chronicle« und zwanzig andere Journale ersten Ranges erklärten sich gegen Fogg.'] Prediction: ['Der geringe Frist, der auf dem Papier fertig zu bringen, war nicht allein unmöglich, sondern unsinnig.\nDas sorgte für eine neue Reise.\nDas sorgte für eine neue Woche für eine Woche.'] Label: [['„Schiffe fahren oft später los als geplant.\nNiemand kann in 80 Tagen um die Erde reisen.“']] Sacrebleu: {'score': 1.184949136625139, 'counts': [2, 0, 0, 0], 'totals': [37, 36, 35, 34], 'precisions': [5.405405405405405, 1.3888888888888888, 0.7142857142857143, 0.36764705882352944], 'bp': 1.0, 'sys_len': 37, 'ref_len': 19} Bleu: {'bleu': 0.0, 'precisions': [0.05405405405405406, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.9473684210526316, 'translation_length': 37, 'reference_length': 19} Rouge: {'rouge1': 0.0, 'rouge2': 0.0, 'rougeL': 0.0, 'rougeLsum': 0.0} Sari: {'sari': 32.34903381642512} Flesh Reading Ease: 76.1 ---------------------------------------- Source: ['An diesem Tage, um neun Uhr Abends, erhielt der Polizeidirector der Hauptstadt folgende telegraphische Depesche: »Suez nach London.« »Rowan, Polizeidirector, Centralverwaltung, Schottlandplatz.«'] Prediction: ['Die Polizei erhielt sich am Dienstagabend in Suez nach London.\nDer Suez-Polizeidirector erhielt teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise teilweise.'] Label: [['Detektiv Fix.\nAm 9.\nOktober kommen Fogg und Pas mit dem Schiff in Ägypten an.']] Sacrebleu: {'score': 1.2413584734794654, 'counts': [3, 0, 0, 0], 'totals': [39, 38, 37, 36], 'precisions': [7.6923076923076925, 1.3157894736842106, 0.6756756756756757, 0.3472222222222222], 'bp': 1.0, 'sys_len': 39, 'ref_len': 18} Bleu: {'bleu': 0.0, 'precisions': [0.07692307692307693, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 2.1666666666666665, 'translation_length': 39, 'reference_length': 18} Rouge: {'rouge1': 0.07547169811320754, 'rouge2': 0.0, 'rougeL': 0.07547169811320754, 'rougeLsum': 0.07547169811320754} Sari: {'sari': 45.263377926421406} Flesh Reading Ease: 3.55 ---------------------------------------- Source: ['Dieser Mann hieß Fix, und war einer jener »Detectives« oder geheimen Agenten, welche die englische Polizei nach dem Diebstahl auf der Bank in die verschiedenen Häfen abgeschickt hatte.'] Prediction: ['Ein Mann wurde in der Nähe des Bankes in der Nähe des Opfers auf der Bank abgeschickt.\nDie Polizei hatte den Mann in die verschiedenen Häfen abgeschickt.'] Label: [['Sie wissen nicht, dass im Hafen ein Detektiv wartet.\nEr ist von der Polizei in London.\nUnd er heißt Fix.']] Sacrebleu: {'score': 1.9240848598265397, 'counts': [5, 0, 0, 0], 'totals': [29, 28, 27, 26], 'precisions': [17.24137931034483, 1.7857142857142858, 0.9259259259259259, 0.4807692307692308], 'bp': 1.0, 'sys_len': 29, 'ref_len': 24} Bleu: {'bleu': 0.0, 'precisions': [0.1724137931034483, 0.0, 0.0, 0.0], 'brevity_penalty': 1.0, 'length_ratio': 1.2083333333333333, 'translation_length': 29, 'reference_length': 24} Rouge: {'rouge1': 0.1568627450980392, 'rouge2': 0.0, 'rougeL': 0.1568627450980392, 'rougeLsum': 0.1568627450980392} Sari: {'sari': 36.410265860730256} Flesh Reading Ease: 72.9 ---------------------------------------- ---------------------------------------- Average scores: Sacrebleu: 9.859812779875638 Bleu: 0.07811832014356887 Rouge1: 0.27916231730958796 Rouge2: 0.1530109964866405 RougeL: 0.24203767578509217 Sari: 39.361003746099264 Flesh Reading Ease: 39.019279523293605 ---------------------------------------- ---------------------------------------- Total scores: Sacrebleu: 8.66977254466242 Bleu: 0.08669772544662424 Rouge1: 0.27927484896996696 Rouge2: 0.15306562336473634 RougeL: 0.24206869529717462 Sari: 39.361003746099264 Flesh Reading Ease: 39.019279523293605 ----------------------------------------