Update Dockerfile
Browse files- Dockerfile +6 -1
Dockerfile
CHANGED
@@ -4,4 +4,9 @@ ENV LLAMA_ARG_CTX_SIZE=10000
|
|
4 |
ENV LLAMA_ARG_FLASH_ATTN=1
|
5 |
ENV LLAMA_ARG_HF_REPO=bartowski/Qwen2.5-Coder-14B-GGUF
|
6 |
ENV LLAMA_ARG_HF_FILE=Qwen2.5-Coder-14B-Q4_K_M.gguf
|
7 |
-
ENV LLAMA_ARG_N_PARALLEL=2
|
|
|
|
|
|
|
|
|
|
|
|
4 |
ENV LLAMA_ARG_FLASH_ATTN=1
|
5 |
ENV LLAMA_ARG_HF_REPO=bartowski/Qwen2.5-Coder-14B-GGUF
|
6 |
ENV LLAMA_ARG_HF_FILE=Qwen2.5-Coder-14B-Q4_K_M.gguf
|
7 |
+
ENV LLAMA_ARG_N_PARALLEL=2
|
8 |
+
ENV LLAMA_ARG_PORT=7860
|
9 |
+
ENV LLAMA_ARG_HOST=0.0.0.0
|
10 |
+
|
11 |
+
RUN useradd -m -u 1000 user
|
12 |
+
USER user
|