ngxson HF staff commited on
Commit
f212354
1 Parent(s): a3b9e70

Update Dockerfile

Browse files
Files changed (1) hide show
  1. Dockerfile +6 -1
Dockerfile CHANGED
@@ -4,4 +4,9 @@ ENV LLAMA_ARG_CTX_SIZE=10000
4
  ENV LLAMA_ARG_FLASH_ATTN=1
5
  ENV LLAMA_ARG_HF_REPO=bartowski/Qwen2.5-Coder-14B-GGUF
6
  ENV LLAMA_ARG_HF_FILE=Qwen2.5-Coder-14B-Q4_K_M.gguf
7
- ENV LLAMA_ARG_N_PARALLEL=2
 
 
 
 
 
 
4
  ENV LLAMA_ARG_FLASH_ATTN=1
5
  ENV LLAMA_ARG_HF_REPO=bartowski/Qwen2.5-Coder-14B-GGUF
6
  ENV LLAMA_ARG_HF_FILE=Qwen2.5-Coder-14B-Q4_K_M.gguf
7
+ ENV LLAMA_ARG_N_PARALLEL=2
8
+ ENV LLAMA_ARG_PORT=7860
9
+ ENV LLAMA_ARG_HOST=0.0.0.0
10
+
11
+ RUN useradd -m -u 1000 user
12
+ USER user