Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es
Wie intelligent ist Claude 3 Opus?
Claude 3 Opus ist ein Modell von Anthropic, veröffentlicht am 29.02.2024. Sein SI-IQ beträgt 65 (90-%-Intervall 60–70); die Schätzung stützt sich auf 5 Benchmark-Ergebnisse von 1 Evaluator.
Datenstand 18.10.2026 · Methode 1.0.0
Ein Modell wird in die Rangliste aufgenommen, wenn seine Ergebnisse aus mindestens 5 Benchmarks (die beiden Läufe von GPQA Diamond zählen als einer) in mindestens 3 Bereichen von mindestens 2 verschiedenen Evaluatoren stammen und die Veröffentlichungsdaten seiner Versionen höchstens 60 Tage auseinanderliegen. Dieses Modell erfüllt diese Bedingung noch nicht (Ergebnisse von weniger als 2 Evaluatoren). Seine vorläufige Schätzung stützt sich auf 5 Benchmark-Ergebnisse und kann sich stark ändern, wenn weitere Ergebnisse hinzukommen.
Fakten
- Entwickler
- Anthropic
- Veröffentlicht
- 29.02.2024
- Zugang
- API-Zugang
- Verwendete Benchmarks
- 5 Benchmark-Ergebnisse von 1 Evaluator
Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)
Alle verwendeten Benchmark-Ergebnisse
Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Abgeleiteter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.
| Benchmark | Punktzahl | Evaluiert von | Quelle |
|---|---|---|---|
| Chess Puzzles | 3,0 % | Epoch AI | Epoch AI Benchmarking Hub · Datendatei |
| MATH Level 5 | 37,5 % | Epoch AI | Epoch AI Benchmarking Hub · Datendatei |
| OTIS Mock AIME 2024–2025 | 4,7 % | Epoch AI | Epoch AI Benchmarking Hub · Datendatei |
| GPQA Diamond | 47,2 % | Epoch AI | Epoch AI Benchmarking Hub · Datendatei |
| SimpleQA Verified | 12,6 % | Epoch AI | Epoch AI Benchmarking Hub · Datendatei |
Menschliche Präferenz (Arena)
In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Claude 3 Opus eine Bewertung von 1.322 (1.319–1.325) aus 194.909 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)
Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen
Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) (Lizenzen und Änderungen).