baku-10b-gguf / README.md
mmnga's picture
Update README.md
bb63ec9
|
raw
history blame
No virus
635 Bytes
metadata
license: apache-2.0
tags:
  - llama

baku-10b-gguf

sudy-superさんが公開しているbaku-10bのggufフォーマット変換版です。

他のモデルはこちら
mmnga/baku-10b-gguf
mmnga/baku-13b-v2-gguf
mmnga/baku-10b-chat-v2-gguf

Usage

git clone https://github.com/ggerganov/llama.cpp.git
cd llama.cpp
make -j
./main -m 'baku-10b-q4_0.gguf' -p '大規模言語モデルとは、' -n 100 --temp 0.8