Spaces:
Running
on
Zero
Running
on
Zero
BramVanroy
commited on
Commit
•
730ef92
1
Parent(s):
d3255a4
Update app.py
Browse files
app.py
CHANGED
@@ -14,7 +14,7 @@ DEFAULT_MAX_NEW_TOKENS = 1024
|
|
14 |
MAX_INPUT_TOKEN_LENGTH = int(os.getenv("MAX_INPUT_TOKEN_LENGTH", "8192"))
|
15 |
|
16 |
if torch.cuda.is_available():
|
17 |
-
model_id = "
|
18 |
model = AutoModelForCausalLM.from_pretrained(model_id, torch_dtype=torch.float16, device_map="auto")
|
19 |
tokenizer = AutoTokenizer.from_pretrained(model_id)
|
20 |
|
@@ -64,7 +64,7 @@ def generate(
|
|
64 |
chat_interface = gr.ChatInterface(
|
65 |
fn=generate,
|
66 |
chatbot=gr.Chatbot(height=450,
|
67 |
-
label="GEITje-
|
68 |
show_share_button=True,
|
69 |
avatar_images=(None, 'geitje-logo.jpg')),
|
70 |
# textbox=gr.Textbox(value="Typ een bericht…"),
|
@@ -133,12 +133,20 @@ Twee van de wortelbedrijven werkten mee door meer informatie over de ongeoorloof
|
|
133 |
```
|
134 |
Vat bovenstaand artikel samen"""]
|
135 |
],
|
136 |
-
title="🐐 GEITje
|
137 |
-
description="""
|
|
|
|
|
138 |
|
139 |
-
|
140 |
|
141 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
142 |
submit_btn="Genereer",
|
143 |
stop_btn="Stop",
|
144 |
retry_btn="🔄 Opnieuw",
|
|
|
14 |
MAX_INPUT_TOKEN_LENGTH = int(os.getenv("MAX_INPUT_TOKEN_LENGTH", "8192"))
|
15 |
|
16 |
if torch.cuda.is_available():
|
17 |
+
model_id = "BramVanroy/GEITje-ultra"
|
18 |
model = AutoModelForCausalLM.from_pretrained(model_id, torch_dtype=torch.float16, device_map="auto")
|
19 |
tokenizer = AutoTokenizer.from_pretrained(model_id)
|
20 |
|
|
|
64 |
chat_interface = gr.ChatInterface(
|
65 |
fn=generate,
|
66 |
chatbot=gr.Chatbot(height=450,
|
67 |
+
label="GEITje-ultra",
|
68 |
show_share_button=True,
|
69 |
avatar_images=(None, 'geitje-logo.jpg')),
|
70 |
# textbox=gr.Textbox(value="Typ een bericht…"),
|
|
|
133 |
```
|
134 |
Vat bovenstaand artikel samen"""]
|
135 |
],
|
136 |
+
title="🐐 GEITje ultra 🤖",
|
137 |
+
description="""\
|
138 |
+
|
139 |
+
GEITje ultra is een geavanceerde versie van GEITje, verder getraind op uitgebreide chat datasets en ook op preferentiedatasets om beter te aligneren met het gedrag van een gewenste chatbot, in dit geval gpt-4-turbo.
|
140 |
|
141 |
+
Dit model is een verderzetting op basis van "GEITje 7B: een groot open Nederlands taalmodel." Deze demo is ook enorm sterk gebaseerd op de originele <a href="https://huggingface.co/spaces/Rijgersberg/GEITje-7B-chat">Geitje Chat</a> demo.
|
142 |
|
143 |
+
Hoewel dit model gealigneerd is met AI feedback (gpt-4-turbo), kan en zal het nog steeds fouten maken, leugens vertellen, redeneringsfouten maken, en misschien wel stoute dingen vertellen. Gebruik dit model dus op eigen risico en controleer de output zelf!
|
144 |
+
|
145 |
+
Meer info:
|
146 |
+
- <a href="https://github.com/Rijgersberg/GEITje">📄 basismodel GEITje op GitHub</a>
|
147 |
+
- <a href="https://huggingface.co/BramVanroy/GEITje-ultra-sft">GEITje ultra SFT</a>: Chat-tuned versie van GEITje met uitgebreidere chat datasets dan de originele GEITje chat. Niet echt aangeraden voor gebruik - het is een tussenversie om tot de DPO versie (geitje-ultra) te komen
|
148 |
+
- <a href="https://huggingface.co/BramVanroy/GEITje-ultra">GEITje ultra</a>: Het model in deze demo, gebaseerd op GEITje ultra SFT en verder gealigneerd met AI feedback (gpt-4-turbo)
|
149 |
+
""",
|
150 |
submit_btn="Genereer",
|
151 |
stop_btn="Stop",
|
152 |
retry_btn="🔄 Opnieuw",
|