小米AI大模型MiLM-6B首次曝光:64亿参数量,此前称不单独做ChatGPT|钛快讯

AGI
这是小米大模型产品的首次曝光,也是小米史上首个GPT大模型产品亮相。

小米总部园区

小米总部园区

在小米公司CEO雷军演讲前夕,其研发的人工智能(AI)大模型产品悄然现身。

钛媒体App获悉,8月11日,小米公司开发的大规模预训练语言模型 MiLM-6B/1.3B登陆代码托管平台GitHub,参数规模最高达64亿,而且现身在C-Eval、CMMLU基准评测榜单。

截至当前,小米大模型MiLM-6B在C-Eval总榜单排名第10、同参数量级排名第1,平均分为60.2分超过了阿里云Qwen-7B、OpenAI研发的ChatGPT(今年5月数据)等,而MiLM-1.3B排行第30名,平均分45.8分,接近谷歌投资的Anthropic公司的Claude 1.0版本大模型。

这是小米大模型产品的首次曝光,也是小米史上首个GPT大模型产品亮相。

事实上,随着ChatGPT风靡全球,今年4月14日,小米公司宣布成立小米 AI 实验室大模型团队,由栾剑带队向王斌汇报。据悉,AI实验室是小米AI战略的核心部门,而大模型负责人王斌曾在中科院从事了20多年NLP(自然语言处理)相关的研究和开发工作,2018年加入小米,2019年起负责AI实验室。

小米CEO雷军当时表示,公司正在研发一些技术和产品,等打磨好了再给大家演示。小米集团总裁卢伟冰称,小米目前拥有超过1200人的AI团队,会积极拥抱大模型,与业务深度结合,但不会像OpenAI一样。

今年6月,王斌对外透露,小米会去自研通用语言大模型,但不会单独发布一款类ChatGPT产品。他表示,小米第一步的目标基座模型参数在几百亿,而且小米大模型将会落地小爱同学、loT、自动驾驶、机器人等现有场景中,并利用丰富的应用场景反哺大模型能力。

成立仅仅四个月后的今天,小米公布了大模型产品——MiLM-6B,并在C-Eval和CMMLU基准评测上均取得同尺寸较好效果。

其中,在C-Eval评估中,MiLM-6B的平均得分为60.2,在不同学科和难度级别(如STEM、社会科学、人文学科等)得分从42分到71.7分不等。在CMMLU评估中,MiLM-6B在零样本和五样本测试中的平均得分分别为60.37分和57.17分,表现出良好的知识和推理能力。

据悉,C-Eval榜单是清华大学、上海交通大学和爱丁堡大学共同构建的综合汉语模型评估套件,而CMMLU则是综合汉语模型基准。

预计小米将会于8月14日举行2023雷军年度演讲,但目前雷军暂未透露是否会发布MiLM-6B大模型技术。

钛媒体App向团队询问关于MiLM-6B/1.3B是否开源、产品是否已经落地内测等问题,截至发稿前暂未得到小米官方回复。(本文首发钛媒体App,作者|林志佳)

转载请注明出处、作者和本文链接
声明:文章内容仅供参考、交流、学习、不构成投资建议。
想和千万钛媒体用户分享你的新奇观点和发现,点击这里投稿 。创业或融资寻求报道,点击这里

敬原创,有钛度,得赞赏

赞赏支持
发表评论
0 / 300

根据《网络安全法》实名制要求,请绑定手机号后发表评论

登录后输入评论内容
  • 有当年网盘大战那味儿了

    回复 2023.08.17 · via android
  • 通用大模型的研发现在看来并不光明

    回复 2023.08.13 · via android
  • 还是个噱头吧

    回复 2023.08.12 · via android
  • 目测应该还不如文心一言

    回复 2023.08.12 · via pc
  • 小米现在也不平价了

    回复 2023.08.12 · via pc
  • 小米也搞大模型

    回复 2023.08.12 · via h5
  • 小米务实,先干出来再说。

    回复 2023.08.12 · via netease

快报

更多

12:33

大连市:27项具体举措提振消费

12:20

香港《稳定币条例》将于8月1日生效

12:17

天问二号探测器在轨状态如何?圆形柔性太阳翼展开图片来了

12:08

特斯拉美股夜盘持续反弹,股价重上300美元关口

12:07

胜蓝股份:向不特定对象发行可转债申请获审核通过

12:04

港股午评:恒生指数跌0.21%,恒生科技指数跌0.59%,蔚来跌超5%

11:45

股东读长文批比亚迪存在营销等短板,王传福:确实存在不足,会改进

11:42

新疆铁路今年货运发送量突破1亿吨

11:42

市场监管总局(国家反垄断局)发布《中国反垄断执法年度报告(2024)》

11:38

A股午评:创业板指半日跌0.48%,新消费、创新药概念股回调

11:25

北京市委副书记、市长殷勇:北京将加快建设具有全球影响力的人工智能创新策源地和产业高地

11:22

北京公积金新政:抵押房屋可正常评估

11:20

日本东电股东要求前高管赔偿超13万亿日元,二审裁决股东败诉

11:17

北京:探索培育二锅头新消费场景,推动红星、牛栏山工业旅游基地升级国际文化交流驿站

11:15

中国进出口银行前5个月投放对外贸易领域贷款4600亿元

11:14

十年间实现翻番,2024年中国和南亚国家贸易额近2000亿美元

11:09

1到5月我国新批准发布468项国家标准物质,同比增长65.9%

11:08

算力租赁概念持续反弹,优刻得、青云科技涨超15%

11:01

足球概念盘中持续走弱,金陵体育高开低走跌超10%

10:52

商务部:中方愿与有意愿的南亚国家新签或升级《双边促进和保护投资协定》

7

扫描下载App