update model

README.md

@@ -1,13 +1,86 @@
 ---
-license: apache-2.0
+license: cc-by-nc-sa-4.0
+tags:
+  - generated_from_trainer
+  - simplification
+task_categories:
+  - text2text-generation
+task_ids:
+  - text-simplification
 language:
-- nl
+  - nl
+datasets:
+  - BramVanroy/chatgpt-dutch-simplification
 metrics:
-- rouge
-pipeline_tag: text2text-generation
-tags:
-- simplification
-widget:
-- example_title: "Grandmother's cooking"
-- text: "Op bepaalde tijdstippen verlang ik naar de smaakvolle culinaire creaties welke door de ambachtelijke expertise van mijn grootmoeder zijn vervaardigd."
----
+  - rouge
+  - sari
+---
+
+
+# ul2-small-dutch-simplification-mai-2023
+
+This model is intended to simplify Dutch sentences.
+
+This model is a fine-tuned version of [yhavinga/ul2-small-dutch](https://huggingface.co/yhavinga/ul2-small-dutch) on
+the [BramVanroy/chatgpt-dutch-simplification](https://huggingface.co/datasets/BramVanroy/chatgpt-dutch-simplification)
+dataset. 
+
+The model was created in light of the master thesis of Charlotte Van de Velde in the Master of Science in Artificial
+Intelligence (MAI) at KU Leuven in 2023. Dataset creation by Charlotte, model training by Bram.
+
+
+## Model description
+
+More information needed
+
+## Intended uses & limitations
+
+More information needed
+
+## Training and evaluation data
+
+More information needed
+
+## Training procedure
+
+### Training hyperparameters
+
+The following hyperparameters were used during training:
+- learning_rate: 0.0006370158604635734
+- train_batch_size: 20
+- optimizer: Adafactor
+- lr_scheduler_type: linear
+- num_epochs: 37
+
+
+### Training results
+
+`eval` results are on the evaluation set, `predict` results are on the test set.
+
+```json
+{
+    "eval_gen_len": 21.555555555555557,
+    "eval_loss": 3.2290523052215576,
+    "eval_rouge1": 40.9663,
+    "eval_rouge2": 18.499,
+    "eval_rougeL": 34.9342,
+    "eval_rougeLsum": 34.9752,
+    "eval_sari": 52.4509,
+  
+    "predict_gen_len": 21.796875,
+    "predict_loss": 3.063812494277954,
+    "predict_rouge1": 39.6138,
+    "predict_rouge2": 17.1242,
+    "predict_rougeL": 35.4629,
+    "predict_rougeLsum": 35.3679,
+    "predict_sari": 51.7538
+}
+```
+
+
+### Framework versions
+
+- Transformers 4.29.2
+- Pytorch 2.0.1+cu117
+- Datasets 2.12.0
+- Tokenizers 0.13.3

all_results.json

@@ -0,0 +1,24 @@
+{
+    "eval_gen_len": 21.555555555555557,
+    "eval_loss": 3.2290523052215576,
+    "eval_rouge1": 40.9663,
+    "eval_rouge2": 18.499,
+    "eval_rougeL": 34.9342,
+    "eval_rougeLsum": 34.9752,
+    "eval_runtime": 12.2189,
+    "eval_samples": 126,
+    "eval_samples_per_second": 10.312,
+    "eval_sari": 52.4509,
+    "eval_steps_per_second": 1.309,
+    "predict_gen_len": 21.796875,
+    "predict_loss": 3.063812494277954,
+    "predict_rouge1": 39.6138,
+    "predict_rouge2": 17.1242,
+    "predict_rougeL": 35.4629,
+    "predict_rougeLsum": 35.3679,
+    "predict_runtime": 13.1133,
+    "predict_samples": 128,
+    "predict_samples_per_second": 9.761,
+    "predict_sari": 51.7538,
+    "predict_steps_per_second": 1.22
+}

config.json

@@ -1,5 +1,5 @@
 {
-  "_name_or_path": ".",
+  "_name_or_path": "yhavinga/ul2-small-dutch",
   "architectures": [
     "T5ForConditionalGeneration"
   ],

generated_predictions.txt

@@ -0,0 +1,128 @@
+Onze hersenen kunnen ingewikkelde dingen doen door middel van elektrische netwerken die informatie verwerken en doorsturen via zenuwcellen.
+We hebben onderzocht hoe de pathologie werkt door middel van tests en tests.
+Om deze opdracht goed te kunnen uitvoeren, moet je weten hoe de materie werkt en de wetgeving.
+Het adagium zegt dat je niet moet nadenken over wat er kan gebeuren door onvoorziene omstandigheden.
+Hij was zo slim dat hij het idee goed begreep, maar het was niet goed genoeg.
+Bij het uitvoeren van de taak waren er veel problemen die ervoor zorgden dat er fouten werden gemaakt.
+Mensen veroorzaken de klimaatverandering door het uitstoten van broeikasgassen.
+Omdat deze materie ingewikkeld is, is het logisch dat we het idee moeten begrijpen omdat het ingewikkeld is.
+Als twee deeltjes verstrengeld zijn, beïnvloedt de toestand van het ene deeltje invloed op de toestand van het andere deeltje, zelfs als ze ver uit elkaar zijn.
+Het is belangrijk om af te spreken wat er kan gebeuren als je een keuze maakt.
+Het constructivisme is dat kennis wordt opgebouwd door mensen die actief zijn en met elkaar omgaan.
+Het is belangrijk om te bedenken welke maatregelen we moeten nemen om klimaatverandering tegen te gaan.
+Hoewel haar test niet goed genoeg was, heeft ze niet genoeg gedaan om de test te halen.
+Veel glycemie kan zorgen voor problemen met het geheugen, nefropathie, longziekte en longziekte.
+Het is belangrijk om te kijken naar hoe we energie opslaan en minder belastend zijn voor het milieu.
+Mensen die veel weten over hun cultuur en geschiedenis, moeten elkaar respecteren en respecteren.
+Dit probleem is ingewikkeld en vereist veel verschillende experts om het probleem op te lossen.
+Mensen veroorzaken de klimaatverandering door het uitstoten van broeikasgassen.
+Mensen gebruiken een vaginale ring die bekend is van gezondheidswerkers, maar sommige mensen vinden het niet goed genoeg.
+Deze auto zorgt ervoor dat het voertuig goed kan rijden en dat het snel en goed kan rijden.
+Mensen vinden het belangrijk om samen te leven en samen te werken als ze uit elkaar gaan.
+Kwantummechanica gaat over hele kleine deeltjes die met elkaar verbonden zijn en hun toestanden beschrijven met behulp van een golffunctie.
+In de filosofie denken mensen dat het universum het centrum van het universum is.
+Als de data niet goed is, kan dat ervoor zorgen dat de resultaten niet kloppen.
+Elektromagnetische straling hangt af van verschillende frequenties en energieën.
+Het menselijk brein heeft veel verschillende onderdelen, zoals geheugen, praten en aandacht.
+Hoewel het niet goed ging met het eten en drinken, was er geen verbetering in de gezondheid van de deelnemers.
+In het retorisch discours wordt er vaak gebruik gemaakt van hyperbolen en metaforen om het verhaal beter te begrijpen en aandacht te trekken.
+Ik denk dat het gebruik van deze nieuwe software geen problemen zal veroorzaken.
+Als we verder denken op basis van deze gegevens, kunnen we verkeerde conclusies trekken.
+Kwantummechanica is gebaseerd op moeilijke wiskunde en vereist veel kennis van wiskunde.
+Om te begrijpen of een idee klopt, moet je begrijpen dat het waarschijnlijk is om het te laten zien door middel van proeven.
+Het verschijnsel is soms moeilijk te begrijpen omdat het niet altijd goed genoeg is.
+De behandeling kan afhankelijk zijn van verschillende dingen, zoals wat de patiënt al eerder heeft meegemaakt en wat medicijnen zijn.
+Het is moeilijk voor beleidsmakers om te begrijpen hoe verschillende systemen met elkaar omgaan, omdat het erg ingewikkeld is.
+Het opslaan van de uitstoot van stikstof door de grond heeft invloed op hoe het ecosysteem zich gedraagt.
+Het menselijk brein kan niet begrijpen wat er gebeurt door de manier waarop ons brein werkt.
+Als je de informatie over de kwestie hebt bestudeerd, kun je een conclusie trekken die misschien juist is.
+De manier waarop we bewustzijn ervaren, heeft veel invloed op hoe we dit fenomeen ervaren.
+Als je het menselijk lichaam grondig bekijkt, kunnen we weten dat er verschillende structuren zijn die allemaal hun eigen taken en processen hebben.
+Kwantumsuperpositie betekent dat een deeltje op verschillende plekken tegelijk kan zijn, totdat iemand het bekijkt of meet.
+Hoe twee oppervlakken met elkaar verbonden zijn, hangt af van hoe warm ze zijn en hoe hard ze op elkaar drukken.
+Om te begrijpen hoe hele kleine deeltjes zich gedragen, moet je begrijpen hoe ze zich gedragen.
+Kwantumverstrengeling betekent dat als twee deeltjes ooit met elkaar in contact zijn gekomen, ze nog steeds met elkaar verbonden zijn, zelfs als ze ver uit elkaar zijn.
+De gegevens laten zien dat het fenomeen steeds groter wordt en dat dit grote gevolgen kan hebben voor de economie.
+Het is een moeilijke taak om deze ingewikkelde materie in begrijpelijke taal te vertalen.
+Het kan zijn dat de manier waarop we dingen zien niet past bij wat we verwachten.
+De coëfficiënt van de lineaire regressie tussen deze twee dingen is laag, waardoor het waarschijnlijk lijkt dat het verband niet-lineair is.
+Het is belangrijk om goed na te denken over wat er gebeurt als je een plan schrijft.
+Als de onderneming niet goed wordt uitgevoerd, is het belangrijk dat de afdelingen van de afdelingen samenwerken.
+Omdat kapitaal niet altijd beschikbaar is, kan het niet goed genoeg worden gebruikt wat er in de toekomst kan gebeuren.
+De ziekte is heel ingewikkeld en heeft veel oorzaken, dus het is moeilijk te voorspellen wat er gaat gebeuren.
+Door de manier waarop oude spullen in de oude museumzaal werden tentoongesteld, zagen we dat de tentoonstelling erg interessant was.
+Het is belangrijk om samen te werken tussen verschillende ideeën en verschillende ideeën.
+Als je een keuze maakt die niet past bij wat iemand denkt, wordt het ongemakkelijk.
+Deze discussie gaat over hoe we kennis en waarheid moeten onderzoeken.
+De voorspellingen laten zien dat er binnenkort meer groei zal zijn in de toekomst.
+De manier waarop een organisme werkt op een organisme bepaalt hoe het zich gedraagt.
+Als je een virtuele realiteit bekijkt, krijg je een beeld dat de lezer zelf ziet.
+Linguïstische relativiteit betekent dat de taal die we spreken invloed heeft op hoe we de wereld om ons heen zien.
+Hoe iemand eruitziet hangt af van zijn genen en omgeving.
+Een nepmedicijn werkt niet goed genoeg en kan klachten veroorzaken als je een nepmedicijn gebruikt.
+De cognitieve dissonantietheorie zegt dat mensen zich beter voelen als ze iets doen wat niet past bij hun eigen ideeën en meningen.
+De begrippen individualisme en collectivisme worden gebruikt om te beschrijven of culturen meer gericht zijn op het versterken van wie je bent en wie niet.
+De betekenis van de apocalyptische profetieën was voor de meeste mensen niet goed te begrijpen.
+Het is moeilijk om te zeggen dat het altijd zo is geweest en daarom zal het niet zo blijven.
+Mensen maken de aarde warmer door het verbranden van fossiele brandstoffen en het werken met fabrieken.
+De analyse van de gegevens wordt beïnvloed door verschillende manieren van denken, zoals de manier waarop we de gegevens analyseren, en de manier waarop we die analyse gebruiken.
+De manier waarop de werknemers hun best deden om hun werk goed te maken, maakte dat ze er allemaal een beetje anders uitzagen.
+Het is verwarrend dat de commotie over klimaatverandering is begonnen nadat de mensen het niet eens zijn over hoe het klimaat verandert.
+Kwantumverstrengeling betekent dat twee deeltjes met elkaar verbonden zijn op een manier waarbij de toestand van het ene deeltje altijd samenhangt, zelfs als ze ver uit elkaar zijn.
+Het protocol werkte niet goed genoeg en daarom hebben we het niet goed gedaan.
+Als iemand een moeilijke taak uitvoert, is het soms moeilijk om te begrijpen wat er moet gebeuren.
+Omdat het universum zo groot is, is het bijna onmogelijk om het te begrijpen omdat het zo groot is.
+Quantumverstrengeling is wanneer twee deeltjes zo verbonden zijn dat de toestand van het ene deeltje direct invloed heeft op het andere, zelfs als ze ver uit elkaar zijn.
+Kwantumverstrengeling betekent dat kleine deeltjes met elkaar verbonden zijn en dat hun interacties met elkaar samenhangen.
+Het menselijk brein is een ingewikkeld onderdeel dat verantwoordelijk is voor dingen als zien, praten en emoties.
+Het is duidelijk dat mensen verschillen in hun denkvermogen door hun denkvermogen.
+Cognitieve dissonantie gebeurt wanneer iemand iets doet dat niet past bij wat ze doen of wat ze doen.
+Om dit onderwerp op te lossen, heb je veel kennis van dit onderwerp nodig.
+Als iemand zich bewust wordt van wat existentiële angst betekent, kan dat voor problemen zorgen of als iemand moeite heeft met het leven.
+Het is lastig om precies te begrijpen hoe hersenactiviteit en gedrag invloed hebben op hoe mensen zich gedragen.
+Omdat de rente steeds hoger wordt, kan het verstandig zijn om de rente voor een lange periode vast te houden.
+Quantumverstrengeling betekent dat twee of meer deeltjes met elkaar verbonden zijn op een manier waarbij de toestand van het ene deeltje afhankelijk is van het andere deeltje, zelfs als ze ver uit elkaar zijn.
+Een moeilijke taak kost meer tijd om te voltooien.
+De geprojecteerde economische groei van de BRICS-landen wordt hoger dan de geprojecteerde economische groei van de BRICS-landen.
+Het klimaat verandert omdat het steeds warmer wordt en er steeds meer water en hittegolven ontstaan.
+Hoewel de rechter nog niet precies heeft gezegd wat er moet gebeuren, zijn er nog veel mensen die hun mening hebben over de kwestie.
+De overheid heeft geïmplementeerde beleidsmaatregelen om de werkgelegenheid te verbeteren en zo veel mogelijk mensen te laten werken.
+De tekst was verwarrend omdat de paragrafen niet goed met elkaar praatten.
+De onderzoekers dachten dat het medicijn beter zou werken als het medicijn beter werkt.
+Het bloed door ons lichaam wordt door ons lichaam gedragen en de hormonen die door ons lichaam werken worden geregeld.
+Bij de wetenschappelijke methode wordt het lastiger om te begrijpen wat er bedoeld wordt als wetenschappelijke methode.
+De meeste mensen begrijpen de abstracte ideeën van de metafysische realiteit niet goed.
+Het utilitarisme zegt dat het niet kan gebeuren als er zoveel mensen geluk hebben.
+Als er maar één soort mensen werkt in een bedrijf, kan dat ervoor zorgen dat sommige mensen zich buitengesloten voelen en uitgesloten worden.
+Om dit wiskunde probleem op te lossen, heb je veel kennis van algebraïsche structuren en getaltheorie nodig.
+Hoe ingewikkeld de realiteit is, hangt af van hoe snel je hersenen werken en hoe je ze in balans houdt.
+Door verschillende expertises te combineren, hebben we meer focus op het probleem.
+Het is belangrijk dat we een duidelijke visie hebben over hoe we deze strategie moeten uitvoeren.
+Onderzoekers hebben onderzoek gedaan naar hoe alcoholgebruik invloed heeft op het brein en het brein.
+Een woord wordt vervangen door een omschrijving van de betekenis, waardoor het lastiger wordt om het te begrijpen.
+Deze studie gaat over hoe mensen zich voelen en hoe ze zich voelen.
+Als verschillende afdelingen samenwerken, kan dit ervoor zorgen dat er problemen ontstaan door verschillende afdelingen.
+Omdat er veel verschillende gegevens zijn, is de analyse minder betrouwbaar.
+Het menselijk brein is erg ingewikkeld en het is lastig om helemaal te begrijpen hoe het werkt.
+Omdat de taal ingewikkeld is, kunnen we verschillende manieren van denken en communiceren begrijpen.
+De relativiteitstheorie gaat over hoe snel het licht beweegt en hoe snel het beweegt.
+Het is belangrijk om te begrijpen wat er in die tijd aan de hand is in de cultuur en de geschiedenis om te begrijpen wat het doel is.
+Als er verschillende dingen in een ecosysteem zijn, is het moeilijk om te voorspellen wat er gaat gebeuren.
+De manier waarop zenuwcellen zich in de loop van de tijd aanpassen, kan veranderen door verschillende dingen die ze doen.
+De kwantumfysica legt uit hoe hele kleine deeltjes zich gedragen en gebruikt daarvoor een rekensom uit.
+Als je te veel dingen tegelijk doet, word je moe in je hoofd en ga je slechter presteren.
+Het gesteente dat tijdens de seismische activiteit wordt gebruikt, is niet altijd betrouwbare voorspellers van aardbevingen.
+Omdat technologieën tegenwoordig ingewikkeld zijn, kunnen we ze beter begrijpen en beheersen.
+We kunnen kijken hoe kleine deeltjes zich gedragen door een kleine lens.
+We moeten nog meer onderzoek doen voordat we zeker kunnen weten wat er aan de hand is.
+Het is belangrijk om samen te werken om duurzame ontwikkelingsdoelen te bereiken.
+Het corpus callosum is een zwarte stof die de twee hersenhelften met elkaar verbinden en ervoor zorgen dat ze met elkaar kunnen praten.
+De kwantummechanica is moeilijk te begrijpen voor sommige mensen omdat het heel ingewikkeld is.
+Het is belangrijk om te bedenken hoe je een bepaalde uitdrukking begrijpt in verschillende contexten.
+Een fysieke substantie ontstaat door een nieuwe fase in de gasvormige fase, zonder dat de substantie smelt.
+De wiskundige formule is lastig te begrijpen hoe de parameters elkaar beïnvloeden.
+De manier waarop we het dialect spreken verschilt veel van de standaardtaal.
+Als de passagiers geen nooduitgangen hebben die zich aan weerszijden van het voertuig bevinden, kunnen de passagiers de nooduitgangen gebruiken die zich aan weerszijden van het voertuig bevinden.
+Bij het onderzoek werken deskundigen uit verschillende vakgebieden samen.
+Onderzoekers denken dat als er verschillende eigenschappen zijn, dat die ervoor zorgen dat er verschillende eigenschappen zijn die hetzelfde laten zien.
+Taalkennis kan gebeuren door te leren van ervaringen met de taal in verschillende contexten.

pytorch_model.bin

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:25a244d07f808acfee1079e83ad09a7c3ef8ce4d5c368a6297d393609aad5943
+oid sha256:6e00f507732778fe0ab7e8ebe24111ff096d44e7cc0b5fb688166d91a0f51442
 size 307910149