BramVanroy commited on
Commit
730ef92
1 Parent(s): d3255a4

Update app.py

Browse files
Files changed (1) hide show
  1. app.py +14 -6
app.py CHANGED
@@ -14,7 +14,7 @@ DEFAULT_MAX_NEW_TOKENS = 1024
14
  MAX_INPUT_TOKEN_LENGTH = int(os.getenv("MAX_INPUT_TOKEN_LENGTH", "8192"))
15
 
16
  if torch.cuda.is_available():
17
- model_id = "Rijgersberg/GEITje-7B-chat-v2"
18
  model = AutoModelForCausalLM.from_pretrained(model_id, torch_dtype=torch.float16, device_map="auto")
19
  tokenizer = AutoTokenizer.from_pretrained(model_id)
20
 
@@ -64,7 +64,7 @@ def generate(
64
  chat_interface = gr.ChatInterface(
65
  fn=generate,
66
  chatbot=gr.Chatbot(height=450,
67
- label="GEITje-chat-v2",
68
  show_share_button=True,
69
  avatar_images=(None, 'geitje-logo.jpg')),
70
  # textbox=gr.Textbox(value="Typ een bericht…"),
@@ -133,12 +133,20 @@ Twee van de wortelbedrijven werkten mee door meer informatie over de ongeoorloof
133
  ```
134
  Vat bovenstaand artikel samen"""]
135
  ],
136
- title="🐐 GEITje 7B chat-v2 🐐",
137
- description="""Een ~eerste~ tweede chatbot op basis van GEITje 7B: een groot open Nederlands taalmodel. Gemaakt voor demonstratiedoeleinden.
 
 
138
 
139
- Generatieve taalmodellen maken fouten, controleer daarom feiten voordat je ze overneemt. GEITje-chat is niet uitgebreid getraind om _gealigned_ te zijn met menselijke waarden. Het is daarom mogelijk dat het problematische output genereert, zeker als het daartoe _geprompt_ wordt.
140
 
141
- Voor meer info over GEITje: zie de <a href="https://github.com/Rijgersberg/GEITje">📄 README op GitHub</a>.""",
 
 
 
 
 
 
142
  submit_btn="Genereer",
143
  stop_btn="Stop",
144
  retry_btn="🔄 Opnieuw",
 
14
  MAX_INPUT_TOKEN_LENGTH = int(os.getenv("MAX_INPUT_TOKEN_LENGTH", "8192"))
15
 
16
  if torch.cuda.is_available():
17
+ model_id = "BramVanroy/GEITje-ultra"
18
  model = AutoModelForCausalLM.from_pretrained(model_id, torch_dtype=torch.float16, device_map="auto")
19
  tokenizer = AutoTokenizer.from_pretrained(model_id)
20
 
 
64
  chat_interface = gr.ChatInterface(
65
  fn=generate,
66
  chatbot=gr.Chatbot(height=450,
67
+ label="GEITje-ultra",
68
  show_share_button=True,
69
  avatar_images=(None, 'geitje-logo.jpg')),
70
  # textbox=gr.Textbox(value="Typ een bericht…"),
 
133
  ```
134
  Vat bovenstaand artikel samen"""]
135
  ],
136
+ title="🐐 GEITje ultra 🤖",
137
+ description="""\
138
+
139
+ GEITje ultra is een geavanceerde versie van GEITje, verder getraind op uitgebreide chat datasets en ook op preferentiedatasets om beter te aligneren met het gedrag van een gewenste chatbot, in dit geval gpt-4-turbo.
140
 
141
+ Dit model is een verderzetting op basis van "GEITje 7B: een groot open Nederlands taalmodel." Deze demo is ook enorm sterk gebaseerd op de originele <a href="https://huggingface.co/spaces/Rijgersberg/GEITje-7B-chat">Geitje Chat</a> demo.
142
 
143
+ Hoewel dit model gealigneerd is met AI feedback (gpt-4-turbo), kan en zal het nog steeds fouten maken, leugens vertellen, redeneringsfouten maken, en misschien wel stoute dingen vertellen. Gebruik dit model dus op eigen risico en controleer de output zelf!
144
+
145
+ Meer info:
146
+ - <a href="https://github.com/Rijgersberg/GEITje">📄 basismodel GEITje op GitHub</a>
147
+ - <a href="https://huggingface.co/BramVanroy/GEITje-ultra-sft">GEITje ultra SFT</a>: Chat-tuned versie van GEITje met uitgebreidere chat datasets dan de originele GEITje chat. Niet echt aangeraden voor gebruik - het is een tussenversie om tot de DPO versie (geitje-ultra) te komen
148
+ - <a href="https://huggingface.co/BramVanroy/GEITje-ultra">GEITje ultra</a>: Het model in deze demo, gebaseerd op GEITje ultra SFT en verder gealigneerd met AI feedback (gpt-4-turbo)
149
+ """,
150
  submit_btn="Genereer",
151
  stop_btn="Stop",
152
  retry_btn="🔄 Opnieuw",