fbpx

OpenAI o1 Release:
‘Strawberry’ wird zu o1-preview & o1-mini

13/09/2024
Schulte_Markus_300x300px

Markus Schulte

AI Solution Development, Autor

Inhaltsverzeichnis
Teilen
AI Newsletter

OpenAI hat uns mit dem Codenamen ‘Strawberry‘ lange auf die Folter gespannt, und jetzt ist es endlich so weit. Seit gestern ist offiziell das neue OpenAI o1 Modell bekannt. Während o1 selbst der Öffentlichkeit bisher nicht zur Verfügung steht, wurden bereits zwei Ableger, o1-preview und o1-mini, veröffentlicht und sind live. Alle Infos zum OpenAI o1 Benchmark, einschließlich Preisen, Nutzungslimits und wichtige Tipps fürs Prompting mit o1.

OpenAI o1 hat Chain-of-Thought Methode integriert

Erst gestern haben wir noch über den geplanten Release von ‘Strawberry‘ geschrieben, und heute ist dies schon wieder kalter Kaffee. o1-preview & o1-mini sind die neuen Modelle, welche der Öffentlichkeit nun zur Verfügung stehen. Sie sind für anspruchsvolle Aufgaben entwickelt und können menschliches, logisches Denken nachahmen.

OpenAI o1 nimmt sich vor dem Antworten Zeit und plant einen langen internen Gedankengang. So ist eine komplexere Reasoning-Fähigkeit möglich. Aufgaben in den Bereichen Wissenschaft, Programmierung und Mathematik können besser gelöst werden.

Die Leistungsfähigkeit der neuen Modelle zeigt sich am besten in Zahlen. Auf der Website von OpenAI sind uns folgende Ergebnisse zu OpenAI o1 besonders ins Auge gefallen:

  • 89. Perzentil bei Wettbewerbsprogrammierungsfragen (Codeforces).
  • Platzierung unter den Top 500 Studenten in den USA bei der Qualifikationsprüfung für die USA-Mathematik-Olympiade (AIME)
  • o1 übertrifft die Genauigkeit von menschlichen Doktoranden (PhD Level) beim Benchmark für Physik-, Biologie- und Chemieproblemen (GPQA).
Leistungssteigerung von o1 durch Programmier-Feinabstimmung: Diagramm zeigt 49. Perzentil-Ranking bei der Internationalen Informatik-Olympiade 2024
Leistungssteigerung von o1 durch Programmier-Feinabstimmung: Diagramm zeigt 49. Perzentil-Ranking bei der Internationalen Informatik-Olympiade 2024

Zusätzlich wurden auch die Ergebnisse bei den AIME-Prüfungen 2024 übertroffen. Während das Vorgängermodell GPT-4o nur 12 % der Probleme löste, erreichte mit einer einzigen Antwort o1 bis zu 83 %.

Leistungsvergleich zwischen GPT-4 und o1 bei Reasoning-Benchmarks: Balkendiagramm zeigt verbesserte Ergebnisse von o1 in Mathematik, Programmierung und wissenschaftlichen Aufgaben
Leistungsvergleich zwischen GPT-4 und o1 bei Reasoning-Benchmarks: Balkendiagramm zeigt verbesserte Ergebnisse von o1 in Mathematik, Programmierung und wissenschaftlichen Aufgaben

Noam Brown (OpenAI) arbeitete an der Optimierung der Denkfähigkeiten der o1-Modelle und sagt: “Wir haben diese Modelle darauf trainiert, mehr Zeit zum Nachdenken über Probleme zu verwenden, ähnlich wie es ein Mensch tun würde.

Gemeint ist hier die Chain-of-Thought-Methode, bei der das System logische Schritte und Verknüpfungen plant, bevor es die finale Antwort generiert. Es werden komplizierte Aufgaben in kleinere logische Schritte unterteilt. Dasselbe Prinzip, wie es ein Mensch bei schwierigen Denkaufgaben tun würde.

Anthropics Opus 3.5 hat aktuell noch keinen Releasetermin, soll aber noch 2024 erscheinen und wird sich im Wettbewerb beweisen müssen.

Leistungsvergleich: o1 vs. GPT-4o in MMLU-Unterkategorien - Balkendiagramm zeigt Verbesserungen in 7 von 54 überlegenen Bereichen
Leistungsvergleich: o1 vs. GPT-4o in MMLU-Unterkategorien – Balkendiagramm zeigt Verbesserungen in 7 von 54 überlegenen Bereichen

Anwendungsgebiete mit großem Potenzial

Die Einsatzfelder der neuen KI-Modelle sind vielseitig und könnten im Gesundheitswesen zu Lösungen komplizierter Forschungsfragen führen. Beim Programmieren mit Code kann es die Softwareentwickler unterstützen oder ambitionierten No-Code-Entwicklern sogar kleinere Programme komplett schreiben.

Laut OpenAI können auch wissenschaftliche Daten besser analysiert und umfangreichere Arbeitsabläufe generiert werden. Im Blogartikel werden gezielt Experten und Entwickler in der Pharmaindustrie erwähnt.

Das o1-mini-Modell ist eine preisgünstigere und schnellere Variante als o1-preview oder das noch unveröffentlichte OpenAI o1 Modell. Seine Stärken liegen in der Bearbeitung von Programmieraufgaben. Der Preis ist 80 % günstiger als beim OpenAI o1-preview Modell.

Tipps & Tricks zum Prompting mit OpenAI o1 Modellen

Die neuen OpenAI o1 Modelle benötigen ein etwas anderes Prompting wie wir es gewohnt sind. Anders als bei früheren Modellen ist hier weniger oft mehr. Die künstliche Intelligenz wird weniger verunsichert und die Reasoning-Fähigkeiten werden besser angewendet.

Hier sind die wichtigsten Tipps fürs Prompten mit o1-preview & o1-mini (teilweise nur für die API):

  • Formuliere Prompts klar und prägnant: Das Modell ist darauf trainiert, komplexe Aufgaben selbstständig zu durchdenken. Übermäßige Erklärungen können es verwirren.
  • Keine Chain-of-Thought Anleitung: o1 führt intern bereits eine schrittweise Analyse durch. Externe Vorgaben könnten diesen Prozess stören.
  • Nutze Trennzeichen (z. B. ###, XML-Tags, “””) für Struktur: Dies hilft dem Modell, verschiedene Teile des Inputs klar zu unterscheiden und richtig zu interpretieren.
  • Begrenze zusätzlichen Kontext bei RAG: Zu viele Informationen können das Modell überfordern.
  • Reserviere Token-Kapazität für das interne Reasoning (mind. 25.000 Token empfohlen): o1 benötigt Raum für seine internen Denkprozesse, bevor es eine Antwort generiert.
  • Parameter max_completion_tokens zur Kostenkontrolle: So können die generierten Tokens (inklusive der nicht sichtbaren Reasoning-Tokens) begrenzt werden.

o1 ist besser, als du vielleicht denkst!

Mit der Skalierung von Rechenpower steigt die Leistung von KI-Modellen. Sowohl die Inferenz- als auch die Trainingszeit wird besser, ohne Anzeichen von Verlangsamung. In komplexen mathematischen Aufgaben zeigt o1 Fähigkeiten, die mit denen eines mittelmäßigen, aber nicht völlig inkompetenten Doktors vergleichbar sind – das gabs noch nie!

Die Zuverlässigkeit und das Wissen von o1 überraschen selbst eingefleischte Kritiker. Mathematiker wie Terren Tao, Träger der Fields-Medaille, erkennen die Fortschritte an. Einige Fachleute, darunter Bob McGrew (OpenAIs VP of Research), sprechen sogar über ein möglicherweise vorhandenes Bewusstsein in den komplexen neuronalen Netzen. Mit weiteren Updates und hochskalierter Hardware könnte das Niveau eines brillanten Denkers erreicht werden.

Wie immer: Sicherheit & ethische Aspekte

Mit den neuen Modellen und seinen erweiterten Fähigkeiten steigen auch die Sicherheitsanforderungen. OpenAI hat neue Governance-Maßnahmen eingeführt, um potenzielle Risiken zu reduzieren. In Jailbreaking-Tests erreichte das neue Modell 84 von 100 Punkten, im Vergleich zu nur 22 Punkten bei GPT-4o.

Preis & Limits für o1-preview und o1-mini

Nach nur fünf Tagen hat OpenAI die Limits deutlich erhöht! ChatGPT Plus oder Team-Nutzer profitieren nun von einer 66%igen Erhöhung für das o1-preview-Modell, das von 30 auf 50 Nachrichten pro Woche angehoben wurde. Für die API-Tests gibt es sogar eine 400%ige Steigerung beim o1-preview, das jetzt 100 Anfragen pro Minute unterstützt, im Vergleich zu den vorherigen 20 Anfragen.

Preise OpenAI o1-preview & o1-mini

ModellPreis für Eingabe-TokensPreis für Ausgabe-Tokens
o1-preview15,00 $ / 1M Tokens60,00 $ / 1M Tokens
o1-preview-2024-09-1215,00 $ / 1M Tokens60,00 $ / 1M Tokens
o1-mini3,00 $ / 1M Tokens12,00 $ / 1M Tokens
o1-mini-2024-09-123,00 $ / 1M Tokens12,00 $ / 1M Tokens

Limits OpenAI o1-preview & o1-mini

PlattformModellLimit
ChatGPT Plus oder TeamOpenAI o1-preview50 Nachrichten pro Woche
OpenAI o1-mini50 Nachrichten pro Tag
APITier 5 – OpenAI o1-preview10,000 Anfragen pro Minute
Tier 5 – OpenAI o1-mini30,000 Anfragen pro Minute
Tier 4 – OpenAI o1-preview10,000 Anfragen pro Minute
Tier 4 – OpenAI o1-mini10,000 Anfragen pro Minute
Tier 3 – OpenAI o1-preview5,000 Anfragen pro Minute
Tier 3 – OpenAI o1-mini5,000 Anfragen pro Minute
Nutzung von OpenAI o1-preview und o1-mini sind erst ab Tier 5 über API und Playground möglich
Nutzung von OpenAI o1-preview und o1-mini sind mittlerweile ab Tier 3 über API und Playground möglich (03.10.2024)

ChatGPT
für Handwerker

Hol dir jetzt kostenlos die besten ChatGPT Prompts für Handwerker. Du wirst damit bei Preisverhandlungen siegen können und Gegenargumente entkräften. Viele Prompts und ein breites Spektrum an Themen um deinen Arbeitsalltag zu erleichtern. Lade dir jetzt diese einmalige Prompt-Bibliothek speziell für Handwerksbetriebe herunter.

Webinar Release KI im Handwerk

Du hast eine Frage?