Hezam commited on
Commit
363eccd
1 Parent(s): 7bc5e31

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +9 -10
README.md CHANGED
@@ -16,9 +16,7 @@ tags:
16
  - Text2Text Generation
17
  widget:
18
  - text: >-
19
- خسارة مدوية لليفربول امام تولوز وفوز كبير لبيتيس، انتصار الفيولا واستون فيلا
20
- في دوري المؤتمر، والد لويس دياز حر، فوز انديانا على ميلووكي, انتصار
21
- للانترانيك
22
  ---
23
 
24
  # ArabicT5: Classification and Generation of Arabic News
@@ -49,26 +47,27 @@ widget:
49
 
50
  # Example usage
51
  ```python
 
52
  from transformers import T5ForConditionalGeneration, T5Tokenizer, pipeline
53
- from arabert.preprocess import ArabertPreprocessor
54
 
55
- arabert_prep = ArabertPreprocessor(model_name="aubmindlab/bert-base-arabertv2")
56
  model_name="Hezam/arabic-T5-news-classification-generation"
57
  model = T5ForConditionalGeneration.from_pretrained(model_name)
58
  tokenizer = T5Tokenizer.from_pretrained(model_name)
59
  generation_pipeline = pipeline("text2text-generation",model=model,tokenizer=tokenizer)
60
 
61
- text = " خسارة مدوية لليفربول امام تولوز وفوز كبير لبيتيس، انتصار الفيولا واستون فيلا في دوري المؤتمر، والد لويس دياز حر، فوز انديانا على ميلووكي, انتصار للانترانيك"
62
 
63
- text_clean = arabert_prep.preprocess(text)
64
- g=generation_pipeline(text_clean,
65
  num_beams=10,
66
- max_length=config.Generation_LEN,
67
  top_p=0.9,
68
  repetition_penalty = 3.0,
69
  no_repeat_ngram_size = 3)[0]["generated_text"]
 
 
 
70
  ```
71
 
72
  ```bash
73
- output:
74
  ```
 
16
  - Text2Text Generation
17
  widget:
18
  - text: >-
19
+ خسارة مدوية لليفربول امام تولوز وفوز كبير لبيتيس
 
 
20
  ---
21
 
22
  # ArabicT5: Classification and Generation of Arabic News
 
47
 
48
  # Example usage
49
  ```python
50
+
51
  from transformers import T5ForConditionalGeneration, T5Tokenizer, pipeline
 
52
 
 
53
  model_name="Hezam/arabic-T5-news-classification-generation"
54
  model = T5ForConditionalGeneration.from_pretrained(model_name)
55
  tokenizer = T5Tokenizer.from_pretrained(model_name)
56
  generation_pipeline = pipeline("text2text-generation",model=model,tokenizer=tokenizer)
57
 
58
+ text = " خسارة مدوية لليفربول امام تولوز وفوز كبير لبيتيس"
59
 
60
+ output= generation_pipeline(text,
 
61
  num_beams=10,
62
+ max_length=300,
63
  top_p=0.9,
64
  repetition_penalty = 3.0,
65
  no_repeat_ngram_size = 3)[0]["generated_text"]
66
+
67
+ print(output)
68
+ 4 كتبت لبنى عبد الله خسر فريق ليفربول بقيادة البرتغالي جوسفالدو فيريرا نظيره تولوز بنتيجة فى المباراة التى جمعتهما اليوم السبت ضمن منافسات الجولة الـ عمر مسابقة الدورى المصرى الممتاز والتى انتهت بفوز المارد الأحمر بهدف رد سجله أحمد سيد زيزو لاعب وسط الفريق الأول لكرة القدم بنادى
69
  ```
70
 
71
  ```bash
72
+ output: 4 كتبت لبنى عبد الله خسر فريق ليفربول بقيادة البرتغالي جوسفالدو فيريرا نظيره تولوز بنتيجة فى المباراة التى جمعتهما اليوم السبت ضمن منافسات الجولة الـ عمر مسابقة الدورى المصرى الممتاز والتى انتهت بفوز المارد الأحمر بهدف رد سجله أحمد سيد زيزو لاعب وسط الفريق الأول لكرة القدم بنادى
73
  ```