马斯克将在本周开源xAI GrokGrok 在 xAI 建立

Peter

马斯克将在本周开源xAI Grok

Grok 在 xAI 建立的大型语言模型上运行，该模型名为 Grok-1，仅用了四个月时间就建成了，Grok-1 的上下文长度为 8,192 个token，是 63.2B 参数。


该团队最初使用的是 Grok-0，这是一个拥有 330 亿个参数的原型模型。


根据 xAI 网站的介绍，Grok-0 的性能可与 Meta 的 Llama 2 相媲美，但体积只有后者的一半。XAI 随后对原型模型的推理和编码能力进行了磨练，创造出了 Grok-1

加入社区,可阅读全站10w+资源

您尚未登录，请登录后操作

 非会员试读19%,加入社区后可阅读全文