yuyijiong commited on
Commit
9f854bc
1 Parent(s): 7d7aed1

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +1 -1
README.md CHANGED
@@ -9,7 +9,7 @@ pipeline_tag: text-generation
9
  ---
10
  [LongAlpaca](https://huggingface.co/Yukang/LongAlpaca-7B)通过对 llama2-chat 进行少量长文本数据的微调,展现出了优秀的长文本对话能力。\
11
  LongAlpaca-7b-chinese 和 LongAlpaca 使用类似的训练方法:先使用线性位置插值,然后通过少量长文本数据的微调,使其获得优秀的长文本对话能力。\
12
- 此模型由atom-7b-chat经过lora微调得到, 通过线性位置插值,将文本长度从4k扩展到16k,可以完成上万字的多文档检索、论文总结等任务,而短对话能力几乎没有下降。\
13
  使用方法:
14
  ```python
15
  from transformers import AutoModelForCausalLM, AutoTokenizer
 
9
  ---
10
  [LongAlpaca](https://huggingface.co/Yukang/LongAlpaca-7B)通过对 llama2-chat 进行少量长文本数据的微调,展现出了优秀的长文本对话能力。\
11
  LongAlpaca-7b-chinese 和 LongAlpaca 使用类似的训练方法:先使用线性位置插值,然后通过少量长文本数据的微调,使其获得优秀的长文本对话能力。\
12
+ 此模型由atom-7b-chat经过lora微调得到,通过线性位置插值,将文本长度从4k扩展到32k,可以完成上万字的多文档检索、论文总结等任务,已经能满足绝大部分需要,而短对话能力几乎没有下降。\
13
  使用方法:
14
  ```python
15
  from transformers import AutoModelForCausalLM, AutoTokenizer