SuperAI2-Machima commited on
Commit
31833d2
2 Parent(s): 68a31d7 ce6e25e

Merge branch 'main' of https://huggingface.co/SuperAI2-Machima/mt5-small-thai-qg-v2 into main

Browse files
Files changed (1) hide show
  1. README.md +44 -0
README.md ADDED
@@ -0,0 +1,44 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ tags:
3
+ - question-generation
4
+ language:
5
+ - thai
6
+ - th
7
+ datasets:
8
+ - NSC2018
9
+ - wiki-documents-nsc
10
+ - ThaiQACorpus-DevelopmentDataset
11
+ widget:
12
+ - text: "โรงเรียนบ้านขุนด่าน ตั้งอยู่ที่ขุนด่าน จ.นครนายก"
13
+ example_title: "Example 01"
14
+ - text: "พลเอก ประยุทธ์ จันทร์โอชา (เกิด 21 มีนาคม พ.ศ. 2497) ชื่อเล่น ตู่ เป็นนักการเมืองและอดีตนายทหารบกชาวไทย"
15
+ example_title: "Example 02"
16
+ - text: "วันที่ 1 กันยายน 2550 12:00 น. ตำรวจภูธรจ.บุรีรัมย์บุกตรวจยึดไม้แปรรูปหวงห้ามกว่า 80 แผ่น"
17
+ example_title: "Example 03"
18
+
19
+ license: mit
20
+ ---
21
+ [SuperAI Engineer Season 2](https://superai.aiat.or.th/) , [Machima](https://machchima.superai.me/)
22
+
23
+ [Google's mT5](https://github.com/google-research/multilingual-t5) , [Pollawat](https://huggingface.co/Pollawat/mt5-small-thai-qg)
24
+
25
+ ```python
26
+ from transformers import T5Tokenizer, T5ForConditionalGeneration, T5Config
27
+
28
+ model = T5ForConditionalGeneration.from_pretrained('SuperAI2-Machima/mt5-small-thai-qg')
29
+ tokenizer = T5Tokenizer.from_pretrained('SuperAI2-Machima/mt5-small-thai-qg')
30
+
31
+ source_text = 'บุกยึดไม้เถื่อน อดีต ส.ส.บุรีรัมย์ เตรียมสร้างคฤหาสน์ทรงไทย 1 กันยายน 2550 12:00 น. ตำรวจภูธรจ.บุรีรัมย์บุกตรวจยึดไม้แปรรูปหวงห้ามกว่า 80 แผ่น'
32
+
33
+ print('Predicted Summary Text : ')
34
+ tokenized_text = tokenizer.encode(source_text, return_tensors="pt").to(device)
35
+ summary_ids = model.generate(tokenized_text,
36
+ num_beams=4,
37
+ no_repeat_ngram_size=2,
38
+ max_length=50,
39
+ early_stopping=True)
40
+ output = tokenizer.decode(summary_ids[0], skip_special_tokens=True)
41
+ print(output)
42
+ #Predicted Summary Text :
43
+ #answer: 80 แผ่น question: ตํารวจภูธรจ.บุรีรัมย์บุกตรวจยึดไม้แปรรูปหวงห้ามกว่ากี่แผ่น
44
+ ```