pc에서 실행가능 한 코드 예제 문의 합니다.

#1
by kyungil - opened

아래와 같이 시도하였으나, RuntimeError: Failed to create LLM 'ggml-model' from 'models/KoAlpaca-polyglot-12.8B-ggml-model-q4_2.bin'.
이런 오류가 발생되네요.. 실행 가능한 코드 문의드려요

from langchain.llms import CTransformers

llm = CTransformers(
model="models/KoAlpaca-polyglot-12.8B-ggml-model-q4_2.bin",
model_type="llama"
)

content = "bts가 뭐지"
result = llm.predict("write a poem about " + content + ": ")
print(result)

안녕하세요 @kyungil 님.

먼저, model_type을 GPT-NeoX로 변경해보시겠어요? Polyglot 기반의 모델은 모두 GPT-NeoX 아키텍쳐를 사용합니다.
또한, 제가 올려놓은 양자화 모델은 ggml로 양자화 하였는데, ggml 버전에 따라서 호환이 되지 않을 수 있습니다. 이는 CTransformers 라이브러리도 마찬가지이기 때문에, 과거 버전으로 시도해야 정상 작동할 수 있습니다.

답변 감사합니다.

llm = CTransformers(
model="models/KoAlpaca-polyglot-12.8B-ggml-model-q4_2.bin",
model_type="gpt-neox"
)

Sign up or log in to comment