2024CTIS-文章详情页顶部

小米AI大模型MiLM-6B首次曝光:64亿参数量,此前称不单独做ChatGPT|钛快讯

这是小米大模型产品的首次曝光,也是小米史上首个GPT大模型产品亮相。

小米总部园区

小米总部园区

在小米公司CEO雷军演讲前夕,其研发的人工智能(AI)大模型产品悄然现身。

钛媒体App获悉,8月11日,小米公司开发的大规模预训练语言模型 MiLM-6B/1.3B登陆代码托管平台GitHub,参数规模最高达64亿,而且现身在C-Eval、CMMLU基准评测榜单。

截至当前,小米大模型MiLM-6B在C-Eval总榜单排名第10、同参数量级排名第1,平均分为60.2分超过了阿里云Qwen-7B、OpenAI研发的ChatGPT(今年5月数据)等,而MiLM-1.3B排行第30名,平均分45.8分,接近谷歌投资的Anthropic公司的Claude 1.0版本大模型。

这是小米大模型产品的首次曝光,也是小米史上首个GPT大模型产品亮相。

事实上,随着ChatGPT风靡全球,今年4月14日,小米公司宣布成立小米 AI 实验室大模型团队,由栾剑带队向王斌汇报。据悉,AI实验室是小米AI战略的核心部门,而大模型负责人王斌曾在中科院从事了20多年NLP(自然语言处理)相关的研究和开发工作,2018年加入小米,2019年起负责AI实验室。

小米CEO雷军当时表示,公司正在研发一些技术和产品,等打磨好了再给大家演示。小米集团总裁卢伟冰称,小米目前拥有超过1200人的AI团队,会积极拥抱大模型,与业务深度结合,但不会像OpenAI一样。

今年6月,王斌对外透露,小米会去自研通用语言大模型,但不会单独发布一款类ChatGPT产品。他表示,小米第一步的目标基座模型参数在几百亿,而且小米大模型将会落地小爱同学、loT、自动驾驶、机器人等现有场景中,并利用丰富的应用场景反哺大模型能力。

成立仅仅四个月后的今天,小米公布了大模型产品——MiLM-6B,并在C-Eval和CMMLU基准评测上均取得同尺寸较好效果。

其中,在C-Eval评估中,MiLM-6B的平均得分为60.2,在不同学科和难度级别(如STEM、社会科学、人文学科等)得分从42分到71.7分不等。在CMMLU评估中,MiLM-6B在零样本和五样本测试中的平均得分分别为60.37分和57.17分,表现出良好的知识和推理能力。

据悉,C-Eval榜单是清华大学、上海交通大学和爱丁堡大学共同构建的综合汉语模型评估套件,而CMMLU则是综合汉语模型基准。

预计小米将会于8月14日举行2023雷军年度演讲,但目前雷军暂未透露是否会发布MiLM-6B大模型技术。

钛媒体App向团队询问关于MiLM-6B/1.3B是否开源、产品是否已经落地内测等问题,截至发稿前暂未得到小米官方回复。(本文首发钛媒体App,作者|林志佳)

转载请注明出处、作者和本文链接
声明:文章内容仅供参考、交流、学习、不构成投资建议。
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里

敬原创,有钛度,得赞赏

赞赏支持
发表评论
0 / 300

根据《网络安全法》实名制要求,请绑定手机号后发表评论

登录后输入评论内容
  • 有当年网盘大战那味儿了

    回复 2023.08.17 · via android
  • 通用大模型的研发现在看来并不光明

    回复 2023.08.13 · via android
  • 还是个噱头吧

    回复 2023.08.12 · via android
  • 目测应该还不如文心一言

    回复 2023.08.12 · via pc
  • 小米现在也不平价了

    回复 2023.08.12 · via pc
  • 小米也搞大模型

    回复 2023.08.12 · via h5
  • 小米务实,先干出来再说。

    回复 2023.08.12 · via netease

快报

更多

17:42

美国撤销部分企业对华为出口许可?英特尔:不予置评

17:40

2连板济民医疗:公司目前干细胞药物研发管线相关项目均处于临床前阶段,项目较为早期

17:38

南向资金今日净买入约18亿港元,理想汽车获净买入居前

17:37

重庆发布全国首个小贷行业消费者权益保护工作指引

17:34

广汽集团:4月汽车销量同比下降24.78%

17:32

北向资金今日净卖出40.44亿元,平安银行遭净卖出2.58亿元

17:31

前起落架无法打开,联邦快递一波音货机在土耳其惊险迫降

17:30

香港证监会:Quantum AI涉嫌从事虚拟资产相关欺诈行为

17:21

2天1板怡达股份:目前公司没有TMA、醋酸偏苯三酸酐产品

17:20

江西:目标到2027年废旧家电回收量较2023年增长30%,每年力争推进实施1000个左右重点技改项目

17:14

6只香港虚拟资产ETF今日成交2631.61万港元

17:13

6连板蔚蓝生物:公司在合成生物领域尚不具备产业化条件

17:11

旭辉控股集团:4月合同销售金额约39.8亿元

17:10

招商银行:副行长王云桂辞任

17:04

日本央行行长植田和男:若物价趋势上升,将调整宽松程度

17:03

2024年现代职业教育质量提升计划资金预算下达

17:02

中概股美股盘前普跌,小鹏汽车跌超2%

17:00

合生创展集团:前4月集团及其合营公司及联营公司总合约销售金额54.04亿元

16:59

北方多地正“组团”冲击30℃,北京气温已达29.5℃

16:58

航新科技:公司近期经营情况及内外部经营环境未发生重大变化

7

扫描下载App