Automatisierte Seite. Automatisch von KI verfasst und übersetzt und per Software mit den Quellen abgeglichen; keine menschliche Redaktion. SI-IQ ist ein Index auf Basis öffentlicher Benchmark-Ergebnisse, kein IQ-Test. So funktioniert es

Wie intelligent ist Llama 3.1-8B?

55 SI-IQ · 90-%-Intervall 49–60
Nicht in der Rangliste: zu wenige Daten

Llama 3.1-8B ist ein Modell von Meta AI, veröffentlicht am 23.07.2024. Der SI-IQ beträgt 55 (90-%-Intervall 49–60), geschätzt aus 3 Benchmark-Ergebnissen von 2 unabhängigen Evaluatoren.

Dieses Modell hat weniger als 5 unabhängige Benchmark-Ergebnisse oder weniger als 2 verschiedene Evaluatoren und wird daher angezeigt, aber nicht in die Rangliste aufgenommen.

Fakten

Entwickler: Meta AI
Veröffentlicht: 23.07.2024
Zugang: Offene Gewichte (eingeschränkte Lizenz)
Verwendete Benchmarks: 3 Ergebnisse von 2 Evaluatoren

Fähigkeiten nach Bereich (SI-IQ, 90-%-Intervall)

Alle verwendeten Benchmark-Ergebnisse

Jeder Wert ist genau so angegeben, wie ihn die Quelle veröffentlicht hat: bei Epoch AI die beste ihrer Laufeinstellungen, bei OpenRouter der mediane Hosting-Anbieter (das eigene Hosting des Entwicklers, wenn dieses den Test durchgeführt hat). „Implizierter SI-IQ“ ist die Fähigkeit, auf die dieses einzelne Ergebnis hindeutet; der Gesamt-SI-IQ ist ihr präzisionsgewichteter Durchschnitt.

Benchmark	Bereich	Punktzahl	Abgeleiteter SI-IQ	Evaluiert von	Wie von der Quelle aufgeführt	Abgerufen	Quelle
MATH Level 5	Mathematik	22,9 %	55	Epoch AI	`Llama-3.1-8B-Instruct`	18.10.2026	Epoch AI Benchmarking Hub · Datendatei
OTIS Mock AIME 2024–2025	Mathematik	1,7 %	53	Epoch AI	`Llama-3.1-8B-Instruct`	18.10.2026	Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond	Wissen	27,0 %	16	Epoch AI	`Llama-3.1-8B-Instruct`	18.10.2026	Epoch AI Benchmarking Hub · Datendatei
GPQA Diamond (OpenRouter run)	Wissen	26,9 %	10	OpenRouter	`meta-llama/llama-3.1-8b-instruct` DeepInfra · median over providers (5 of 5 rows)	18.10.2026	OpenRouter benchmark datasets · Datendatei

Menschliche Präferenz (Arena)

In der Arena-Rangliste, in der Nutzer zwischen zwei anonymen Antworten abstimmen, hat Llama 3.1-8B eine Bewertung von 1.211 (1.207–1.215) aus 49.605 Stimmen (veröffentlicht am 15.10.2026). Menschliche Präferenz ist ein anderes Maß als die Leistung in Benchmarks und fließt nicht in den SI-IQ ein. Arena (Hugging Face)

Berechnet mit der SI-IQ-Methodenversion 1.0.0. Die vollständige Methodik lesen

Datenquellen: Arena leaderboard dataset on Hugging Face (CC BY 4.0); Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0); Source: OpenRouter (openrouter.ai), licensed under CC BY 4.0: reuse and republish with attribution to OpenRouter..