Grok, das man ggf. auch mit "kapieren" übersetzen kann ist, was die prinzipielle Konstruktion anbelangt, den Chatbots ChatGPT - und jenen von Microsoft und Googles Bard relativ ähnlich. Sehr ähnlich wie die Trainingsverfahren bei den Sprachmodellen (engl.: Large Language Modell/LLM) arbeiten die Entwickler auch bei Grok mit Trainingsverfahren.
Apropos: im Moment ist Grok lediglich auf X (vormals Twitter) für User aus den USA freigeschaltet. Viele andere Interessenten - die müssen noch warten haben momentan noch das Nachsehen. So auch die Europäer; Die deutschen X-Nutzer können sich aber vorerst schon mal auf eine Warteliste setzen lassen. Im Moment ist Grok noch in Entwicklungsvorgang begriffen und deshalb wird in offiziellen Statements dann auch von einem "sehr frühes Beta-Produkt" gesprochen.
weitere Hintergründe, Infos, Quellen und Beiträge
https://x.ai
The journey to Grok-1
The engine powering Grok is Grok-1, our frontier LLM, which we developed over the last four months. Grok-1 has gone through many iterations over this span of time.
After announcing xAI, we trained a prototype LLM (Grok-0) with 33 billion parameters. This early model approaches LLaMA 2 (70B) capabilities on standard LM benchmarks but uses only half of its training resources. In the last two months, we have made significant improvements in reasoning and coding capabilities leading up to Grok-1, a state-of-the-art language model that is significantly more powerful, achieving 63.2% on the HumanEval coding task and 73% on MMLU.
To understand the capability improvements we made with Grok-1, we have conducted a series of evaluations using a few standard machine learning benchmarks designed to measure math and reasoning abilities.
GSM8k: Middle school math word problems, (Cobbe et al. 2021), using the chain-of-thought prompt.
MMLU: Multidisciplinary multiple choice questions, (Hendrycks et al. 2021), provided 5-shot in-context examples.
HumanEval: Python code completion task, (Chen et al. 2021), zero-shot evaluated for pass@1.
MATH: Middle school and high school mathematics problems written in LaTeX, (Hendrycks et al. 2021), prompted with a fixed 4-shot prompt.
Early Access to Grok
We are offering a limited number of users in the United States to try out our Grok prototype and provide valuable feedback that will help us improve its capabilities before a wider release. You can join the Grok waitlist here. This release just represents the first step for xAI. Looking ahead, we have an exciting roadmap and will be rolling out new capabilities and features in the coming months.
https://x.ai
