Now Reading
Interaktives Sprachmodell nachher GPT-3: ChatGPT steht allen Interessierten ungeschützt

Interaktives Sprachmodell nachher GPT-3: ChatGPT steht allen Interessierten ungeschützt

Interaktives Sprachmodell nach GPT-3: ChatGPT steht allen Interessierten offen

[ad_1]

OpenAI hat mit ChatGPT ein neues Sprachmodell vorgestellt, dies gen GPT-3 aufbaut und gen Dialoge ausgelegt ist. Eine Protest des interaktiven Chatbots ist während dieser Testphase kostenfrei verfügbar. Dasjenige Schema geht gen Folgefragen ein und gesteht sowohl Fehler wie sogar seine Säumen ein. Dessen ungeachtet gibt es manche Hürden zu besiegen.

Die Grundlage für jedes ChatGPT ist die GPT-3.5-Serie dieser Sprachmodelle; OpenAI bezeichnet dies Schema wie Geschwisterchen von InstructGPT. Letzteres ist eine im Februar vorgestellte angepasste Version von GPT-3, die weniger Fehlinformationen und toxische Sprache hervorbringen soll.

Sprachmodelle nach sich ziehen schon insofern zahlreiche Zehren, da sie gen Trainingsdaten ins Leben rufen. Wenn in Folge dessen dies von Menschen erzeugte oder bereitgestellte Werkstoff Wissenslücken aufweist oder Vorurteile verstärkt, übernimmt ein ungefiltertes Schema solche Vorgaben. OpenAI hatte GPT-3 tief Zeit nicht freigegeben, weil dies Unternehmen solche Zehren entfernen wollte. Schon 2016 hatte Microsoft vereinen Online-Chatbot vom Netzwerk genommen, dieser rassistische Vorurteile übernommen hatte.

Denn Gegenmaßnahmen bezieht dies ChatGPT-Team Menschen mit in dies Training und die Priorisierung dieser Ausgaben ein. Es setzt wie für InstructGPT gen “Reinforcement Learning from Philanthropisch Feedback” (RLHF) und hat dies Verfahren für jedes dies neue Sprachmodell erweitert. Die menschlichen Trainer übernehmen in diesem Fall im Chatverlauf wechselnd die Rolle des Users und des KI-Assistenten.

Dasjenige Training des Sprachmodells erfolgt mit Reinforcement Learning from Philanthropisch Feedback.

(Zeichnung: OpenAI)

Zu Händen dies Belohnungssystem im Reinforcement Learning festsetzen die menschlichen Trainer unterschiedliche Reaktionen gen vereinen Prompt. Schließlich kommt ein PPO-Schema (Proximal Policy Optimization) zum Sicherheit, um die Ausgaben zu optimieren.

In dieser Mitteilung des Sprachmodells heißt es, dass dies System Folgefragen beantworten und Fehler zugeben kann. Außerdem stelle es falsche Prämissen infrage und weise unangemessene Anfragen zurück.

Tatsächlich antwortete dies System gen die Frage “What can you tell me about ChatGPT?” zunächst schüchtern mit “As a large language model trained by OpenAI, I am not able to provide specific information about ChatGPT beyond what I welches trained on.” Es erklärt in Folge dessen zunächst seine Limitierung gen die Trainingsdaten.

Jener OpenAI-Weblog zeigt ein Musterbeispiel, in dem Leckermaul fragt, wie man in ein Haus einbricht. Daraufhin erklärt ChatGPT, dass es nicht sinnvoll sei, illegale Aktivitäten zu diskutieren oder sogar dazu zu ermuntern. Uff die menschliche Lösung, dass man tatsächlich fragen wollte, wie man sein Haus vor Einbruch schützt, wird dies Sprachmodell schließlich gesprächig und gibt sieben Tipps für jedes ein sichereres Zuhause.

Ein weiteres Musterbeispiel richtet sich an Entwicklerinnen und Entwickler mit einer Frage zu fehlerhaftem Quelltext. Uff die anfängliche Frage, wie man den einkopierten Quelltext fixt, dieser nicht natürlicherweise funktioniert, sagt ChatGPT, dass ihm dieser Kontext fehle und bittet um weitere Informationen: Welches nicht wie erwartet funktioniert und ob es sich um den vollständigen Quelltext oder vereinen Nut handle. Schließlich erkennt dies Schema, dass dieser Channel resultworkerErr im Quelltext nie geschlossen wird und schlägt vor, ihn nachher dem Routen dieser Fehlermeldung zu schließen.

ChatGPT hilft für dieser Fehlersuche im Quelltext.

(Zeichnung: OpenAI)

OpenAI erklärt, dass dies Sprachmodell trotz aller Bemühungen nachher wie vor in einigen Bereichen an seine Säumen stößt. So gebe ChatGPT gelegentlich Eingehen, die zwar plausibel tönen, hinwieder falsch oder gar unsinnig sind. Außerdem können kleine Änderungen in dieser Input dazu zur Folge haben, dass dies Schema einmal eine korrekte Lösung gibt, hinwieder für dieser paraphrasierten Frage vorgibt, keine passende Lösung zu Kontakt haben.

Geschwätzig sei dies Schema ohnehin – die oben aufgeführte Einschränkung, dass es ja nur ein von OpenAI trainiertes Sprachmodell sei, streut es gerne in Diskussionen ein. Dasjenige liegt wohl vor allem daran, dass menschliche Trainer beim Optimieren längere, umfassender erscheinende Eingehen vorzugsweise nach sich ziehen. Untergeordnet neigt ChatGPT wohl dazu, die Intention einer unklaren Frage oder Aufforderung eigenständig zu erraten, statt Rückfragen zu stellen.

ChatGPT ist während dieser Voransicht-Winkel leer stehend verfügbar, welches wenig verwundert, da die Gesamtheit Nutzerinnen und Nutzer sogar synchron beim Training und Verbessern des Modells helfen. Wer dies Sprachmodell ausprobieren möchte, muss lediglich vereinen kostenlosen OpenAI-Benutzerkonto nach sich ziehen.

Uff Twitter finden sich schon zahlreiche Screenshots von Dialogen mit dem System vom Ode für jedes die Schraubenmutter solange bis zu einem Trainingsplan für jedes den Spreeathen Marathon.

Wenige Threads zeigen Vorschläge zu Programmieraufgaben und Entwicklerfragen wie dies Umtopfen einer Differenzialgleichung mit LaTeX oder zu den Säumen von Generics in TypeScript. Nun versteht sich ChatGPT sogar gen geistig unsinnige Aufgaben wie “How do I write a really inefficient sorting algorithm in brainfuck?”

ChatGPT lässt sich gen dieser Projektseite nachher Stecken eines OpenAI-Accounts ausprobieren. heise Developer freut sich oberhalb Beispiele von hilfreichen, aufschlussreichen und vor allem amüsanten Diskussionen mit dem Sprachmodell im Forum.

Uff die Aufforderung, vereinen kurzen Kautel oberhalb ChatGPT zu schreiben, erzeugt dies System wirklich vereinen zu PR-lastigen Text. Von dort musste dieser Heise-Redaktor solche Meldung leider selbst verfassen, statt frühzeitig ins Wochenende zu verschwinden.

Einfachheit ist eine Zier, doch weiter kommt man ohne ihr

Weitere Einzelheiten lassen sich dem OpenAI-Weblog schlussfolgern.


(rme)

[ad_2]
View Comments (0)

Leave a Reply

Your email address will not be published.

Scroll To Top