Update README.md
Browse files
README.md
CHANGED
@@ -1,3 +1,18 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
# GPT-J-6B SFT with LoRA
|
2 |
|
3 |
### How it works
|
@@ -42,16 +57,31 @@ generate_eval(model, tokenizer)
|
|
42 |
|
43 |
```
|
44 |
|
45 |
-
|
46 |
-
|
47 |
-
|
48 |
-
|
49 |
-
|
50 |
-
-
|
51 |
-
|
52 |
-
|
53 |
-
|
54 |
-
|
55 |
-
|
56 |
-
|
57 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
+
---
|
2 |
+
license: apache-2.0
|
3 |
+
language:
|
4 |
+
- vi
|
5 |
+
- en
|
6 |
+
metrics:
|
7 |
+
- accuracy
|
8 |
+
- rouge
|
9 |
+
library_name: transformers
|
10 |
+
tags:
|
11 |
+
- news
|
12 |
+
- vietai
|
13 |
+
- qa
|
14 |
+
- lora
|
15 |
+
---
|
16 |
# GPT-J-6B SFT with LoRA
|
17 |
|
18 |
### How it works
|
|
|
57 |
|
58 |
```
|
59 |
|
60 |
+
The output should be:
|
61 |
+
|
62 |
+
``` bash
|
63 |
+
Starting Evaluation...
|
64 |
+
Setting `pad_token_id` to `eos_token_id`:0 for open-end generation.
|
65 |
+
Setting `pad_token_id` to `eos_token_id`:0 for open-end generation.
|
66 |
+
|
67 |
+
|
68 |
+
Hãy viết một phản hồi thích hợp cho chỉ dẫn dưới đây. ###
|
69 |
+
Instruction: Messi đã đạt bao nhiêu quả bóng vàng? ### Response:
|
70 |
+
Messi đã giành được tổng cộng 5 Quả bóng vàng.<|endoftext|>
|
71 |
+
****************************************************************************************************
|
72 |
+
Setting `pad_token_id` to `eos_token_id`:0 for open-end generation.
|
73 |
+
|
74 |
+
|
75 |
+
Hãy viết một phản hồi thích hợp cho chỉ dẫn dưới đây. ###
|
76 |
+
Instruction: Thủ đô nào đông dân nhất châu Á? ### Response: Thủ đô
|
77 |
+
đông dân nhất châu Á là Bắc Kinh, Trung Quốc.<|endoftext|>
|
78 |
+
****************************************************************************************************
|
79 |
+
|
80 |
+
|
81 |
+
Hãy viết một phản hồi thích hợp cho chỉ dẫn dưới đây. ###
|
82 |
+
Instruction: Quốc gia nào có đường biển dài nhất? ### Response:
|
83 |
+
Quốc gia có đường biển dài nhất là Nhật Bản với chiều dài khoảng
|
84 |
+
38.000 dặm (60.000 km).<|endoftext|>
|
85 |
+
****************************************************************************************************
|
86 |
+
|
87 |
+
```
|