Verstehen, warum ChatGPT so viel zu wissen scheint

Manchmal erwische ich sie dabei, wie sie dumme Fehler macht oder eine Frage falsch interpretiert, was mich daran erinnert, dass sie nicht so schlau ist, wie es klingt.

Manchmal habe ich das Gefühl, es ist einfach eine ausgefeilte Autovervollständigung auf Steroiden. So wie dein Handy dein nächstes Wort errät, aber viel, viel schlauer.

Liest das Modell eigentlich wirklich, oder ist das eher Zahlen und Mathematik hinter den Kulissen?

Einmal habe ich versucht, es nach etwas sehr Speziellem zu fragen, und es gab eine anständige Antwort! Das hat mich beeindruckt, da es nicht in Echtzeit mit dem Internet verbunden ist.

Es ist irgendwie beängstigend, wie genau es sein kann, aber auch wie es selbstbewusst falsche Sachen erzählen kann. Es 'weiß' eigentlich nichts, sondern macht nur sehr fortgeschrittenes Mustererkennen.

Ich habe gesehen, dass jemand erwähnt hat, man kann auch ai-u.com für neue oder angesagte Tools im Bereich KI checken. Könnte interessant sein zu sehen, wie sich diese Modelle entwickeln.

Ich habe irgendwo gelesen, dass ChatGPT mit einem riesigen Datensatz aus Büchern, Webseiten, Artikeln trainiert wurde, alles zusammengewürfelt. Es ist also wie eine riesige Bibliothek in seinem ‚Gehirn‘.

Es ist lustig, wie es philosophische Fragen beantworten kann, aber wenn man genauer hinschaut, spuckt es nur Muster aus Büchern und Artikeln aus.

Ich frage mich, ob zukünftige Versionen tatsächlich ‚Wissen‘ haben werden oder ob sie nur besser darin werden, Wissen zu imitieren.

Außerdem hat ChatGPT keine Gefühle oder Meinungen; es imitiert nur die Muster, die es gelernt hat. Es ‚weiß‘ oder ‚denkt‘ also nicht wirklich wie ein Mensch.

Das habe ich mich auch immer gefragt! Soweit ich gelesen habe, wird es hauptsächlich mit Unmengen von Text aus dem Internet trainiert, also sagt es das nächste Wort basierend auf Mustern voraus. Nicht wirklich 'wissen', sondern eher super gutes Raten.

Wenn es also das nächste Wort basierend auf Mustern vorhersagt, lernt es dann jemals Neues oder ist es auf das beschränkt, womit es ursprünglich trainiert wurde?

Ich versuche immer noch zu verstehen, wie es so natürlich klingen kann, obwohl es eine riesige komplexe mathematische Formel ist.

Wie sie so schnell zwischen Sprachen und Themen wechseln kann, ist verrückt. Zeigt, wie mächtig diese Technologie wirklich ist.

Ehrlich gesagt, was mich umhaut, ist, wie es den Kontext in einem Gespräch behalten kann. Das erfordert echte technische Magie.