license: llama2 | |
language: | |
- ja | |
tags: | |
- llama2 | |
# ELYZA-japanese-Llama-2-7b-instruct-gguf | |
[ELYZAさんが公開しているELYZA-japanese-Llama-2-7b-instruct](https://huggingface.co/ELYZA/ELYZA-japanese-Llama-2-7b-instruct)のggufフォーマット変換版です。 | |
## Usage | |
``` | |
git clone https://github.com/ggerganov/llama.cpp.git | |
cd llama.cpp | |
make -j | |
./main -m 'ELYZA-japanese-Llama-2-7b-instruct-q4_0.gguf' -n 256 -p '[INST] <<SYS>>あなたは誠実で優秀な日本人のアシスタントです。<</SYS>>クマが海辺に行ってアザラシと友達になり、最終的には家に帰るというプロットの短編小説を書いてください。 [/INST]' | |
``` |