马斯克的AI公司xAI正式公开Grok-1源代码
来源: PANews2024-03-18
PANews 3月18日消息,马斯克的人工智能公司xAI宣布开放其3140亿参数混合专家模型Grok-1的权重和架构。Grok-1是一个从头开始由xAI训练的大型语言模型,采用混合专家模型架构,其中25%的权重在给定令牌上处于活跃状态。该模型的基本模型权重和网络架构现已根据Apache 2.0许可证开放。Grok-1的预训练阶段已于2023年10月结束,目前发布的是原始基础模型检查点,未针对任何特定应用进行微调。有兴趣使用该模型的用户可以按照github.com/xai-org/grok上的指南操作。
热门新闻
- 1下周必关注|BounceBit将上线主网并空投代币;LayerZero将公布官方女巫检查结果(5.13-5.19)
- 2第67期 | 产业区块链一周快讯速览
- 3MIIX Capital:日本加密市场全景报告
- 4欧洲“OpenAI”叒融资6亿刀,成立1年估值60亿刀,他们只做了一件事
- 5Ton生态风起,一文速览14个新一轮基金会Grant项目
- 6BounceBit主网已上线,推出节点质押和委托等多项新功能
- 7由川普对加密资产的支持引发的联想
- 8以太坊近期事件解析:香港加密ETF影响、美国ETH ETF前景、ETH是否会被认定为证券?
- 9特朗普“蹭”上加密圈:买4653美元NFT即可参与晚宴 相关MEME币飞涨
交易平台最新公告查看更多>