제출한 모델을 찾을 수가 없습니다.

#20
by lcw99 - opened

lcw99/llama2-ko-chang-13b-instruct-chat 모델을 제출했는데 완료에도 없고 대기큐에도 없습니다. 확인 부탁드립니다.

Hello!

According to the result, your model was failed the evaluation process. (Link)
For failed models,

Please try the code below and check it is working without a problem.

from transformers import AutoConfig, AutoModel, AutoTokenizer
config = AutoConfig.from_pretrained("your model name", revision=revision)
model = AutoModel.from_pretrained("your model name", revision=revision)
tokenizer = AutoTokenizer.from_pretrained("your model name", revision=revision)

Evaluation process is based on Eleuther AI Language Model Evaluation Harness.
So please check your model is working well on the harness.

If there is any issue even though the harness code is running, then let us know.

Thank you!


안녕하세요.

Link에 따르면 말씀해주신 lcw99/llama2-ko-chang-13b-instruct-chat 모델의 평가가 완료되지 못했습니다.

아래 코드가 정상적으로 작동 하는지 확인 부탁드립니다.

from transformers import AutoConfig, AutoModel, AutoTokenizer
config = AutoConfig.from_pretrained("your model name", revision=revision)
model = AutoModel.from_pretrained("your model name", revision=revision)
tokenizer = AutoTokenizer.from_pretrained("your model name", revision=revision)

Open Ko-LLM은 Eleuther AI Language Model Evaluation Harness를 이용해 평가를 진행합니다. 따라서 Harness를 통해 정상적으로 평가가 되었음에도 불구하고 Open Ko-LLM에서의 평가에 문제가 발생한다면 다시 한번 문의 부탁드립니다.

감사합니다.

lcw99 changed discussion status to closed
lcw99 changed discussion status to open

상기 코드를 이용해서 정상적으로 모델이 로드 됩니다. 확인 부탁드립니다.

upstage org

Fixed it ! Thanks

choco9966 changed discussion status to closed

Sign up or log in to comment