Alle Aktivitäten

Ich hab mir die Werbung gerade angeschaut. Und ich stimme der Werbung weitestgehend zu. Das war Werbung für Codex. Und was de Werbung da sagt ist nicht falsch. Codex ist eines dieser Expertensysteme. Zusammengefasst: Ich sehe schwarz für den Berufsstand der Programmierer.

Naja, ich rede von der Werbung auf der OpenAI Webseite.

Okay, wir bewerten "schlechter" und "falsch" sehr unterschiedlich. Wenn ich in meinem Job jede Schülymeldung als "falsch" bewerten würde, die schlechter als die von vergleichbaren Fachpersonen wäre, dann wären die oberen Klassenstufen recht menschenleer ...

Ich vermute, wir reden von zwei unterschiedlichen Zielgruppen der Werbung. Ich bezog mich, ohne das explizit zu benennen, auf die 'Massenwerbung', also das, was beispielsweise während des Superbowls gelaufen ist. Also ein Publikum, das sehr wahrscheinlich so gut wie keinerlei Ahnung hat, wie KI funktioniert. Ich vermute, du meinst Werbung für Fachleute, die sich aus beruflichen Gründen besser mit der Thematik auskennen sollten.

"Falsch" liegt im Spektrum von "Schlechter". Deswegen sag ich ja: Das ist eine Werbegrafik. Und selbst Die malt keine rosa Wölkchen.

Öhm, ich meine, ich will jetzt nicht kleinlich sein, aber die obige Grafik sagt nicht aus, dass die KI 20 % Fehler produziert habe. GDPval vergleicht Lösungsvorschläge in den Kategorien "besser, gleich gut" oder "schlechter". Und "schlechter" muss nicht 'falsch' heißen.

Wie KI arbeitet hier ein Beispiel. Hab ich gestern ausprobiert als das neue 5.4 Modell rausgekommen ist. Es zeigt wie wichtig gute Prompts sind aber auch die kein Allheilmittel sind. https://chatgpt.com/share/e/69ac2a26-4fc4-8004-ab03-06b8aa3d1169

Was ich meine: Bei den 20% falschen Antworten hat das LLM unter Garantie so gut wie nie mit "Das weiß ich nicht" geantwortet sondern irgendwas zusammenfabuliert. Deswegen ist es so wichtig die Quellen der KI zu prüfen.

Bei 1000% Einsatz einiger Politiker bekommen wir dann jedes Mal 200%, also zwei Antworten pro Frage?

Danke!

Die Leute können halt nicht mit Zahlen umgehen. (Änder da mal was dran Herr Lehrer ) Sie wissen nicht, was 20% falsche Antworten bedeutet.

Und selbst bei einer Werbegrafik geht ziemlich deutlich hervor, wie fehleranfällig die LLMs noch sind. Edit: Deswegen kann ich Deinen Claim: nicht nachvollziehen.

Ansonsten stimme ich aber zu: Es ist ein Werkzeug, das man beherrschen sollte und über dessen Vor-, aber auch Nachteile man sich sehr bewusst sein sollte.

Oha. Das ist eine Werbegrafik von OpenAI. Liest man die Erklärung, findet man, dass die Bedingungen für 5.2 und 5.4 zugunsten von 5.4 geändert wurden (verstärktes Reasoning). Schon daraus ergibt sich, dass die Zahlenwerte nicht vergleichbar sind. Darüber hinaus fehlt völlig die Erklärung, um welche Berufsbereiche es sich handeln soll. Ja, auf der Webseite werden Andeutungen gemacht, aber wenn man die Kommentare auf openreview zu gdpval liest, haben sich die Ersteller des Benchmarks schon sehr deutlich Bereiche ausgesucht, in denen die Modelle glänzen können ( https://openreview.net/forum?id=hcuEdq6eKD ).

Da bin ich mir nicht sicher. Ich kann nur für ChatGPT sprechen. Das kenn ich ziemlich gut.

Nee. Bei Pro sind wir bei dem 200,- EUR Tier. Ich mit meiner Bezahlversion hab auch nur Zugang zu ein paar Anfragen "Pro" im Monat. Ich heb mir das für sehr spezielle Themen auf. Das derzeitige Standardmodell ist GPT 5.4 (seit gestern). Davor war es 5.2. Ich verwende ausschließlich "Thinking" das heißt, dass die KI sich selbst hinterfragt. Hier ein Beispiel aus meiner Orphan X Anfrage: Das nennt man "Chain of thought" Bei den Pro-Modellen arbeiten drei KIs zusammen, um sich gegenseitig zu prüfen (das war zumindest vor einem Jahr noch so. ich weiß nicht ob sich da was geändert hat).

Was sagst du zu der Antwort von Google?

Konkret sind dafür bisher zwei Punkte genannt worden: nicht die mit-Geld-Bezahlversion verwenden ohne den Zusatz „suche im Netz“. Letzteren habe ich bei einer ziemlich trivialen Frage schon ausprobiert (also erst ohne, dann mit gefragt) und praktisch wortgleich die selbe Antwort erhalten. Sind wir uns soweit einig oder gibt es noch mehr?

Ist der Unterschied zwischen „Pro“ und „ohne Pro“ in Deinem Schaubild der zwischen Bezahl- und kostenloser Version? Da wird ja zwischen den beiden fast Gleichstand suggeriert.

Ja, diese Befürchtung teile ich auch. Als Beleg nehm ich die Diskussion hier.

Noch ein Nachtrag: Ich persönlich habe inzwischen die Befürchtung entwickelt, dass die Vagheit der KI 'unseren' Umgang mit Tatsachen und Fakten beeinflusst, da uns alltäglich vorgeführt wird, dass es auf diese ja gar nicht so sehr ankomme, solange nur die Gesamtheit ansatzweise stimmt und es gut klingt. Das halte ich aus mehreren Gründen für extrem gefährlich, gerade wenn man bedenkt, dass selbst hochrangige Wissenschaftlys in ihren Forschungen aus Bequemlichkeit oder Geldgier oder -not Abkürzungen nehmen. Wenn aber schon diese Personen anfällig für unzulässige Vereinfachungen sind, wie sollen dann 'normale' Leute motiviert werden, die bequem erreichbaren Informationen aufwändig zu hinterfragen?

Nein, tun sie nicht. Hier was von ChatGPT über die Fähigkeiten: Das was Du schreibst wird den LLMs von Leuten, die von den sprachlichen Fähigkeiten beeindruckt sind, angedichtet. Du vergisst außerdem, dass man lernen muss mit einem Werkzeug umzugehen.

Ich denke, dieser Vergleich ist unpassend. Denn das, was du oben zitierst, ist die letztlich technische Seite. Etwas anderes aber ist es, wie die Anbieter ihr Produkt bewerben. So entsteht schon der Eindruck, das Werkzeug sei ein universal anpassbares Multifunktionstool, das 'alles' könne. Dein Beispiel müsste so umformuliert werden, dass du mit einem Werkzeug, das wie ein Hammer aussieht, einen Nagel in die Wand schlagen möchtest, sich das Werkzeug aber beim Auftreffen auf den Nagel recht willkürlich in etwas anderes verwandelt - und zwar, ohne das vorher auch nur irgendwie anzukündigen. Meine Erfahrungen mit der KI sind ernüchternd. Ich habe bei mittelkomplexen Anfragen in Sachbereichen, in denen ich mich auskenne, noch buchstäblich niemals eine Antwort erhalten, die vollständig korrekt ist. Als Informationssammler und -vermittler ist das Ding in diesen Anforderungsbereichen wertlos, weil alles überprüft werden muss. Insbesondere Quellenangaben waren informationell willkürlich in dem Sinne, dass zwar eine Quelle angegeben wurde, diese aber bei Überprüfung einen ganz anderen thematischen Schwerpunkt oder Kontext hatte also das von mir Angefragte. Lediglich einige Schlagwörter stimmten überein, aber wurden von der KI nicht auf angemessenen Kontext überpürft. Anders kann es bei deutlich stärker umgrenzten Aufgaben aussehen oder bei solchen, für die Informationen 'maschinenverständlicher' aufbereitet sind. Dort sind meiner Erfahrungen besser, aber für mich immer noch nicht so gut, dass es rundum auch nur befriedigend wäre.

@Ma Kai Was mir bei Deinen Screenshots zu Orphan X aufgefallen ist: Du verwendest die KI nicht als Suchmaschine. Vergleiche mal das mit meinem Ergebnis oder dem von @Francesco di Lardo Bei Dir fehlen Quellenangaben. Eine Suchmaschine liefert Dir Quellen im Netz. Das LLM wertet die aus. Dazu zeigt das LLM Dir die Quellen woher die Informationen stammen. Wenn Du die KI als Suchmaschine verwendest, werden nicht nur ganz unten die Quellen angegeben: Sondern auch neben den Textblöcken selbst. Alles anklickbar um die Gesamtliste zu bekommen: Wie gesagt, Du machst was falsch. Aber auch ich schaue mir immer die Quellen an und bilde mir meine eigene Meinung.

Du darfst die Anforderungen halt nicht durcheinander werfen. Nimm als Beispiel google.de, eine Suchmaschine, die du als Anwender als Black Box bekommst: Hier sind die englischen Originaltitel der Orphan X-Reihe von Gregg Hurwitz in der chronologischen Reihenfolge: Hauptromane Orphan X (2016) The Nowhere Man (2017) Hellbent (2018) Out of the Dark (2019) Into the Fire (2020) Prodigal Son (2021) Dark Horse (2022) The Last Orphan (2023) Lone Wolf (2024) Nemesis (2025) Antihero (angekündigt für 2026) Kurzgeschichten (Novellas) Ergänzend gibt es mehrere Kurzgeschichten, die zwischen den Romanen angesiedelt sind: Buy a Bullet (Band 1.5) The Intern (Band 3.5) The List (Band 5.5) The Recital (Band 8.5) The Code (Band 10.5) Weitere Details zur Serie und den Charakteren findest du auf der offiziellen Webseite von Gregg Hurwitz. KI-Antworten können Fehler enthalten. Weitere Informationen Gregg Hurwitz's Orphan X books in order - Fantastic Fiction 1 Orphan X (2016) 1.5 Buy a Bullet (2016) 2 The Nowhere Man (2017) 3 Hellbent (2017) 3.5 The Intern (2018) 4 Out of the Dark (2019... Fantastic Fiction Books by Gregg Hurwitz (Author of Orphan X) - Goodreads Books by Gregg Hurwitz (Author of Orphan X) Orphan X (Orphan X, #1) Gregg Hurwitz. by Gregg Hurwitz (Goodreads Author) ... The... Goodreads The guide to the Orphan X Evan Smoak series, Tim Rackley thrillers, ... Customers who bought this item also bought * Orphan X: A Novel (English Edition) Gregg Hurwitz. 4.4 out of 5 stars 23,353. Kindle ... Amazon.de Ich finde die Antwort nicht schlecht.