Grok-1
Grok-1
Active

Grok-1

Grok-1 ist das 2024 Apache-2.0 Open-Weights 314B Mix-of-Experts-Basismodell von xAI, nicht der aktuelle Grok-Assistent. In diesem Leitfaden werden Architektur, Hardwarelast, Bereitstellungsoptionen, Alternativen und historische Relevanz erläutert.

46

Views

0

Likes

Jan 2026

Added

github.com

Website

Tags

open-source-llmfree

Editorial Review

About Grok-1

Grok-1 ist das 314 Milliarden Parameter umfassende Expertenmischungs-Basismodell, das xAI mit offenen Gewichten und Beispielcode JAX im März 2024 veröffentlicht hat. Es handelt sich um eine historische Modellversion für Forscher und Infrastrukturteams, nicht um den aktuellen Grok-Verbraucherassistenten und nicht um das Modell hinter jeder aktuellen Funktion. Ab Juni 2026 wird in der aktuellen Grok-Produktdokumentation von xAI Grok 4.5 eingeführt, während das Produkt auch Chat, Dateien, Sprache, Konnektoren, Bild- und Videoerstellung und andere Dienste umfasst, die im Checkpoint Grok-1 nicht vorhanden waren.

Diese Unterscheidung ist die wichtigste Tatsache auf der Seite. Wenn Sie Grok-1 herunterladen, erhalten Sie einen rohen Prüfpunkt vor dem Training, der laut xAI nicht für den Dialog oder eine andere spezifische Anwendung optimiert wurde. Grok.com, Live-X-Wissen, aktuelle Agententools, Grok Imagine, Sicherheitssysteme, Hosting oder das Verhalten neuerer proprietärer Modelle werden nicht neu erstellt.

Hand-drawn Grok-1 mixture-of-experts diagram showing eight experts with two active for each token
Grok-1 leitet jedes Token durch zwei von acht Experten. Der vollständige Prüfpunkt enthält 314B-Parameter, während etwa 25 % der Gewichtungen für einen Token aktiv sind.

Grok-1 technische Spezifikationen

SpezifikationOffizielle Grok-1-VeröffentlichungPraktische Bedeutung
ModelltypRohes BasissprachenmodellErfordert Aufgabenanpassung, Aufforderung, Bewertung und Sicherheitsmaßnahmen vor der benutzerorientierten Bereitstellung
Gesamtparameter314BDer Speicher- und Arbeitsspeicherbedarf von Checkpoints geht weit über den einer typischen Workstation hinaus
ArchitekturMischung aus 8 ExpertenEin Router wählt für jedes Token eine Teilmenge von Experten-Feed-Forward-Pfaden aus
Pro Token eingesetzte Experten2, etwa 25 % der Gewichte aktivDie aktive Rechenleistung ist geringer als bei einem dichten 314B-Modell, aber alle Gewichtungen erfordern dennoch eine geeignete Speicher- und Bereitstellungsstrategie
Schichten64Tiefer Transformatorstapel mit erheblichen Anforderungen an die verteilte Inferenz
Achtung48 Abfrageköpfe, 8 Schlüssel-/WertköpfeGruppierte Schlüssel-/Wertköpfe reduzieren einen Teil der Aufmerksamkeitsspeicherkosten
Einbettungsgröße6,144Eine große versteckte Darstellung trägt zum Modellspeicher und zur Rechenleistung bei
TokenizerSentencePiece, 131.072-Token-VokabularAnwendungen müssen den freigegebenen Tokenizer für kompatible Token-IDs verwenden
Maximale Sequenzlänge8.192 TokenViel kürzer als viele neuere Long-Context-Modellangebote
ReferenzstapelJAX Beispielcode; Aktivierungs-Sharding und 8-Bit-QuantisierungsunterstützungDas Repository demonstriert die Korrektheit, kein optimierter Produktionsserver
LizenzApache-Lizenz 2.0 für Repository-Quelle und Grok-1-GewichtungenÜberprüfen Sie den genauen Lizenzumfang sowie alle Abhängigkeiten und nachgelagerten Nutzungspflichten von Drittanbietern

Offene Gewichte bedeuten nicht, dass man sofort loslegen kann

Das Repository von xAI warnt ausdrücklich davor, dass die enthaltene Mixed-of-Experts-Implementierung ineffizient ist und zur Validierung der Modellkorrektheit ohne benutzerdefinierte Kernel ausgewählt wurde. Der Referenzpfad erwartet eine Maschine mit ausreichend GPU-Speicher für einen 314B-Prüfpunkt. Selbst bei 8-Bit-Gewichten liegt der Rohgewichtsspeicher allein in der Größenordnung von Hunderten von Gigabyte ohne Laufzeitaufwand, Caches, Framework-Puffer, Replikation und Redundanz. Community-Konvertierungen mit niedrigeren Bits können den Speicher reduzieren, können jedoch die Genauigkeit beeinträchtigen und sind nicht dasselbe Artefakt wie der offizielle Prüfpunkt von xAI.

Eine ernsthafte Bereitstellung erfordert ein kompatibles Prüfpunktformat, einen Sharding-Plan, optimierte MoE-Kernel, eine Beschleunigertopologie, einen Modellserver, einen Tokenizer-Dienst, eine Batch-Richtlinie, eine Schlüssel-/Wert-Cache-Strategie, Überwachung und Wiederherstellung. Messen Sie den Interconnect-Verkehr sowie die individuelle GPU-Auslastung: Expertenrouting über Geräte hinweg kann die Kommunikation zum Engpass machen.

Grok-1 im Vergleich zum aktuellen Grok-Produkt

FähigkeitGrok-1 Kontrollpunkt mit offenem GewichtAktuelles Grok-Produkt/API
ZweckForschung und selbst durchgeführte Experimente mit einem Basismodell der Ära 2023Aktuelle Assistenten- und Entwicklerdienste
DialogverhaltenKeine Feinabstimmung der Anweisungen oder Dialoge im freigegebenen KontrollpunktProduktspezifische Nachschulungen, Eingabeaufforderungen, Tools und Sicherheitsmaßnahmen
Aktuelle InformationenKein integrierter Live-Abruf oder X-ZugriffKann je nach Oberfläche aktuelle Suche, X-Kontext, Konnektoren oder Agent-Tools umfassen
MultimodalitätAls Textbasismodell veröffentlichtAktuelle Produktdokumente, Dateien, Sprache, Bilder, Videos und Grok Imagine Funktionen
OperationenSie stellen Hardware, Bereitstellung, Skalierung, Sicherheit und Überwachung bereitxAI betreibt den gehosteten Dienst vorbehaltlich der Pläne, Beschränkungen, Bedingungen und Verfügbarkeit
ModellgenerierungGrok-1Neuere Modellfamilien; Aktuelle Dokumente identifizieren Grok 4.5

Wenn Grok-1 immer noch Sinn macht

  • MoE-Forschung: Untersuchen Sie eine große veröffentlichte Mischung aus Expertenarchitektur, Routing-Verhalten, Sharding und Inferenzoptimierung.
  • Reproduktionsstudien: Vergleichen Sie den offiziellen Prüfpunkt und die Referenzimplementierung mit Community-Laufzeiten oder -Konvertierungen.
  • Historische Auswertung: Untersuchen Sie, wie sich ein prominenter Checkpoint vor dem Training im Jahr 2023 im Vergleich zu späteren offenen Modellen unter einem kontrollierten Benchmark verhält.
  • Infrastrukturexperimente: Testen Sie verteilte Lade-, Quantisierungs-, Expertenplatzierungs- und Bereitstellungssysteme, wenn bereits geeignete Hardware vorhanden ist.

Für eine neue Anwendung, die lediglich einen leistungsfähigen, selbst gehosteten Assistenten benötigt, handelt es sich in der Regel um eine schlechte Standardeinstellung. Neuere, kleinere offene Modelle können eine bessere Befolgung der Anweisungen, einen längeren Kontext, Multimodalität, eine einfachere Bereitstellung, eine bessere Werkzeugnutzung und niedrigere Gesamtkosten bieten. Der relevante Vergleich ist die akzeptierte Aufgabenleistung pro Hardwareeinheit und technischem Aufwand, nicht die Gesamtzahl der Parameter.

Checkliste für die Bereitstellungsentscheidung

  1. Definieren Sie den Forschungs- oder Produktgrund. Erklären Sie, warum Grok-1 anstelle eines neueren dichten oder MoE-Modells erforderlich ist.
  2. Schätzen Sie den gesamten Fußabdruck. Beziehen Sie heruntergeladene Prüfpunkte, konvertierte Kopien, Speicher, Schlüssel-/Wert-Cache, temporären Speicher, Replikate und Backup ein.
  3. Wählen Sie eine Bereitstellungsimplementierung aus. Stellen Sie sicher, dass es die genaue Architektur, den Tokenizer, die Quantisierung, das Expertenrouting und die Zielhardware unterstützt.
  4. Konvertierung validieren. Vergleichen Sie Protokolle oder eine feste Evaluierungssuite mit der offiziellen Referenz, bevor Sie einem konvertierten Prüfpunkt vertrauen.
  5. Fügen Sie Post-Training oder Kontrollen hinzu. Ein rohes Basismodell ist kein sicherer Chat-Assistent; Definieren Sie Aufforderungs-, Feinabstimmungs-, Moderations- und Ablehnungsverhalten für den beabsichtigten Verwendungszweck.
  6. End-to-End-Benchmark. Zeichnen Sie Ladezeit, Token pro Sekunde, Zeit bis zum ersten Token, Stapeldurchsatz, Speicher, Kommunikationsaufwand, Strom, Ausfallrate und Ausgabequalität auf.
  7. Sichern Sie sich den Service. Authentifizieren Sie Anforderungen, isolieren Sie Modellarbeiter, begrenzen Sie Eingabelänge und Parallelität, schützen Sie Protokolle und blockieren Sie nicht vertrauenswürdigen Zugriff auf Verwaltungsendpunkte.

Alternativen zum Vergleich

Alternativer WegWarum vergleichen?Entscheidungskriterium
Neueres, dichtes Modell mit offenem GewichtEinfacheres Servieren und stark auf Anweisungen abgestimmte VariantenQualität und Durchsatz bei gleichem Hardwarebudget
Neueres MoE-Modell mit offenem GewichtBehält den Forschungswert mit geringer Rechenleistung mit neueren FunktionenKernel-Unterstützung, aktive Parameter, Kontext, Lizenz und Ökosystem
xAI gehostet APIZugriff auf aktuelle Grok-Modelle ohne Betrieb eines 314B-CheckpointsAufgabenerfolg, Datenbedingungen, regionale Verfügbarkeit, Latenz und Kosten
Andere gehostete Grenze APIUmfassenderer Anbieter- und Governance-VergleichAkzeptierte Ergebniskosten, Tools, Kontext, Sicherheit, Support und Wechselrisiko
Retrieval plus kleineres ModellEin kleineres Modell, das auf genehmigten Daten basiert, kann bei einem begrenzten Auftrag ein großes Basismodell übertreffenBeweisgenauigkeit, Latenz, Wartbarkeit und Gesamtinfrastrukturkosten

Bewertungsmetriken

  • Aufgabenerfolg: Prozentsatz repräsentativer Aufgaben, die nach menschlicher Prüfung angenommen wurden.
  • Serviereffizienz: Ausgabetokens pro Sekunde, pro Beschleuniger und pro Watt bei nützlichen Batch-Größen.
  • Zeit bis zum ersten Token: interaktive Verzögerung nach der Warteschlange, einschließlich Routing und Prefill.
  • Qualität nach Quantisierung: Änderung der Aufgabenmetriken und Fehlermuster im Vergleich zur Referenzgenauigkeit.
  • Gesamtkosten: Hardware, Strom, Speicher, Netzwerk, Technik, Ausfallzeiten und Überprüfung je akzeptiertem Ergebnis.
  • Sicherheitsverhalten: schädliche Vervollständigung, Datenlecks, Prompt-Injection und Richtlinienfehlerraten für die beabsichtigte Anwendung.

So validieren Sie einen konvertierten oder quantisierten Prüfpunkt

Die meisten Teams bedienen den ursprünglichen Kontrollpunkt JAX nicht direkt. Eine Konvertierung kann Tensoren neu anordnen, Expertenrouting ändern, Tokenizer-Dateien ändern, eine andere numerische Genauigkeit auswählen oder laufzeitspezifische Kernel einführen. Validieren Sie es nicht, indem Sie eine plausible Vervollständigung lesen. Beginnen Sie mit Dateimanifesten und Hashes, bestätigen Sie Tensornamen und -formen und vergleichen Sie einen deterministischen Satz von Token-IDs und nächsten Token-Logits mit der offiziellen Referenz auf ausgewählten Ebenen oder der endgültigen Ausgabe, sofern die Toolchain dies zulässt.

Führen Sie dann einen festen Auswertungssatz mit den vorgesehenen Sequenzlängen und Batchgrößen aus. Vergleichen Sie Ratlosigkeit oder Aufgabengenauigkeit, numerische Drift, Expertenauswahl, Wiederholung, Ausgabekürzungen, Sprachverhalten und Misserfolg bei langen Eingabeaufforderungen. Konvertierungsskript-Commit aufzeichnen, Quell-Checkpoint-Hash, Quantisierungsmethode, Kalibrierungsdaten, Laufzeitversion, Kernel-Flags und Hardware. Behandeln Sie eine Community-Datei als separates Build-Artefakt mit eigener Herkunft – nicht so austauschbar mit der Version von xAI.

Überprüfung der Lizenz und Governance

Apache 2.0 ist freizügig, beantwortet aber nicht jede Bereitstellungsfrage. Bewahren Sie erforderliche Hinweise auf, dokumentieren Sie Änderungen und überprüfen Sie Patent- und Markenklauseln mit dem tatsächlichen Vertriebsmodell. Die Repository-Lizenz gilt für die freigegebene Quelle und die Gewichtungen Grok-1; Anwendungsdaten, Bibliotheken von Drittanbietern, Community-Konvertierungen, Feinabstimmungsdatensätze, generiertes Branding oder von einem nachgelagerten System abgerufene Inhalte werden nicht automatisch lizenziert.

Organisationen sollten außerdem akzeptable Nutzungsregeln, Evaluierungseigentum, Reaktion auf Vorfälle, Modellkartendokumentation und einen Prozess zum Entfernen unsicherer oder nicht autorisierter Feinabstimmungsdaten definieren. Wenn das Modell extern verfügbar gemacht wird, veröffentlichen Sie die für Benutzer relevanten Einschränkungen: Es handelt sich um einen älteren Rohbasis-Prüfpunkt, der über keinen inhärenten Zugriff auf aktuelle Daten verfügt, möglicherweise ungenauen oder schädlichen Text generiert und auf Sicherheitsmaßnahmen auf Anwendungsebene angewiesen ist.

Häufig gestellte Fragen

Ist Grok-1 Open Source?

xAI hat die Grok-1-Gewichte und den Repository-Code unter Apache 2.0 veröffentlicht. „Offene Gewichte“ ist die klarere Beschreibung, da die Veröffentlichung weder den vollständigen Trainingsdatensatz noch die Trainingspipeline enthält. Überprüfen Sie die Repository-Lizenz auf den genauen Umfang.

Kann Grok-1 auf einem normalen PC ausgeführt werden?

Nicht über den offiziellen Referenzpfad. Der 314B-Prüfpunkt erfordert sehr viel Speicher und das Repository warnt, dass seine Beispiel-MoE-Implementierung nicht effizient ist. Community-Quantisierung oder Offloading können die Anforderungen reduzieren, führen jedoch zu erheblichen Kompromissen bei Leistung und Wiedergabetreue.

Ist Grok-1 das Modell, das heute auf grok.com verwendet wird?

Nein. Grok-1 ist ein historisch freigegebener Prüfpunkt. Die aktuelle xAI-Dokumentation identifiziert neuere Grok-Generationen und ein viel umfassenderes gehostetes Produkt.

Enthält Grok-1 Echtzeit-X-Daten?

Nein. Der heruntergeladene Checkpoint hat keine automatische Verbindung zu X, zur Websuche oder zu aktuellen Ereignissen. Abruf und Datenzugriff müssen separat mit entsprechenden Berechtigungen erstellt werden.

Ist die Anweisung Grok-1 optimiert?

xAI beschreibt die Veröffentlichung als das rohe Basismodell nach dem Vortraining, nicht fein abgestimmt für den Dialog oder eine andere spezifische Anwendung.

Sollte ein Startup Grok-1 selbst hosten?

Nur mit klarem Forschungs- oder Infrastrukturgrund und geeigneter Hardware. Die meisten Produktteams sollten neuere, kleinere, offene Modelle und gehostete APIs vergleichen, bevor sie die betriebliche Belastung von Grok-1 akzeptieren.

Offizielle Quellen

Zuletzt überprüft am 25. Juli 2026. Grok-1 Spezifikationen beziehen sich auf die Open-Weight-Version 2024; Aktuelle Grok-Modelle, Produktfunktionen, Pläne und API Verfügbarkeit sollten separat überprüft werden.

Ready to try Grok-1?

Visit the official website to get started

Visit Grok-1

Quick Info

Added
1/21/2026
Published
1/21/2026
Updated
7/25/2026

Share This Tool

Have an AI tool to share?

Submit it to AI Dreamhub

Get your product in front of people actively exploring AI tools.

Submit Your Tool

Related Tools

DeepSeek-R1

DeepSeek-R1

DeepSeek's first-generation reasoning models. DeepSeek-R1-Zero, a model trained via large-scale reinforcement learning without supervised fine-tuning, demonstrated remarkable performance on reasoning. - Intelligentes KI-Tool für mehr Produktivität.

open-source-llmfree
590
DeepSeek-V3

DeepSeek-V3

A strong Mixture-of-Experts (MoE) language model with 671B total parameters with 37B activated for each token. - Intelligentes KI-Tool für mehr Produktivität.

open-source-llmfree
560
Qwen3

Qwen3

Qwen3 is the large language model series developed by Qwen team, Alibaba Cloud. - Intelligentes KI-Tool für mehr Produktivität.

open-source-llmfree
520
Llama 3

Llama 3

Llama3 is a large language model developed by Meta AI. It is the successor to Meta's Llama2 language model. - Intelligentes KI-Tool für mehr Produktivität.

open-source-llmfree
580