Update README.md
Browse files
README.md
CHANGED
@@ -1,3 +1,25 @@
|
|
1 |
---
|
2 |
license: apache-2.0
|
|
|
|
|
|
|
|
|
|
|
3 |
---
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
---
|
2 |
license: apache-2.0
|
3 |
+
language:
|
4 |
+
- en
|
5 |
+
- ja
|
6 |
+
tags:
|
7 |
+
- mistral
|
8 |
---
|
9 |
+
# RakutenAI-7B-chat-gguf
|
10 |
+
[Rakutenさんが公開しているRakutenAI-7B-chat](https://huggingface.co/Rakuten/RakutenAI-7B-chat)のggufフォーマット変換版です。
|
11 |
+
こちらはベースモデルになります。
|
12 |
+
|
13 |
+
## 他のモデル
|
14 |
+
[mmnga/RakutenAI-7B-instruct-gguf](https://huggingface.co/mmnga/RakutenAI-7B-instruct-gguf)
|
15 |
+
[mmnga/RakutenAI-7B-chat-gguf](https://huggingface.co/mmnga/RakutenAI-7B-chat-gguf)
|
16 |
+
[mmnga/RakutenAI-7B-gguf](https://huggingface.co/mmnga/RakutenAI-7B-gguf)
|
17 |
+
|
18 |
+
## Usage
|
19 |
+
|
20 |
+
```
|
21 |
+
git clone https://github.com/ggerganov/llama.cpp.git
|
22 |
+
cd llama.cpp
|
23 |
+
make -j
|
24 |
+
./main -m 'RakutenAI-7B-chat-q4_0.gguf' -p "USER: 「馬が合う」はどう言う意味ですか ASSISTANT: " -n 128
|
25 |
+
```
|