Moodle Fragen in chatGPT - LLM Grenzen und Zukunft

Moodle Fragen in chatGPT - LLM Grenzen und Zukunft

by Ralf Meier -
Number of replies: 2

Hier ist der Link zur Präsi:

Slides:

Beste Grüße aus Kiel

Ralf

In reply to Ralf Meier

Re: Moodle Fragen in chatGPT - LLM Grenzen und Zukunft

by Ralf Meier -
Zsammenfassung:

ChatGPT ist eine inzwischen richtig gute Software, die einem viel Arbeit abnehmen und/oder erleichtern kann.
Es gibt aber noch einige Risiken und Limitierungen, wie
- zu viel Kreativität in den Parametern. Wenn ChatGPT sich nicht sicher ist "erfindet" er Ergebnisse. Dieser Parameter (Temperature) ist via API festlegbar. Nicht aber beispielsweise im "Free Web Interface".
- es gibt wenig Regulierung. Mit der passenden Frage kann ich kritisches Wissen abrufen, wie bspw. Bauanleitungen zu Bomben (Jailbreak)
- Ich bin auf 4096 Input-Tokens limitiert. Output liegt bei 2048 Tokens. 1 Token ist etwas mehr als ein Character, aber weniger als ein Wort. Schwammig definiert.
- Es gibt kein Gedächtnis, man manipuliert nur den aktiven Chat im eigenen Account

Wir gehen davon aus, dass ChatGPT Free auf Dauer vom Markt verschwinden wird, da OpenAI die stärkste Lösung am Markt ist und "es sich erlauben kann".

ChatGPT kann durchaus fehlerfrei und richtig gute Code-Snippets liefern, basierend auf meinem Text-Prompt. Es beherrscht mehrere Programmiersprachen. Auch MoodleXML kennt es, stolpert hier aber, wenn ich nicht genau beschreibe was ich erwarte. Hier kommt es dann zu Import-Error.

In der jetzigen Version ist ChatGPT als Inspirations- und Formulierungsquelle zu sehen. Es liefert wirklich gute Ergebnisse, aber Kreativität der Engine und Qualität der Formulierung (Wie anspruchsvoll wird formuliert?) müssen von jemandem mit Fachkompetenz geprüft und womöglich angepasst werden. Aber auch mit den Anpassungen kann ich mir enorme Zeitvorteile dadurch erarbeiten.
Bei Fachgebieten, die im Internet gut verfügbar sind, hat das Language Modell meist gute Ergebnisse. Habe ich Prompts mit Lokalbezug oder fordere ich ihn auf selbstständig Inhalte aus seinem Modell zu generieren (Gib mir 10 Fragen zur Stadt Zürich inklusive ihrer Antwort) erhöht sich die Fehlerquote. Hier ist Aufmerksamkeit wichtig - ChatGPT ist super als Co-Pilot!

AutoGPT ergänzt ein "leichtes" Gedächtnis zum ChatGPT und ermöglicht Prompts, die auch nach der fünften Frage noch sinnvolles Feedback liefern.

Wichtig bei allen Modellen ist das prompting, hier sollten die Inputs in einer Textdatei gesammelt und optimiert werden !!!!
In reply to Ralf Meier

Re: Moodle Fragen in chatGPT - LLM Grenzen und Zukunft

by Ralf Meier -
Zum Weiterarbeiten:
BMI AG - Thomas Staht
https://www.youtube.com/@bminformatikag insbesondere https://www.youtube.com/watch?v=fXIPbMcFIgY&t=609s (wenige Tage alt!)

FH Kiel Frau Dr. Doris Weßels:
https://www.youtube.com/watch?v=rho6HLrU5ro

Viel Spaß!