推荐
快报
广场
科股宝VIP
视频
直播
媒体
企服
创投
咨询
活动
钛空时间
集团时光
公众号
清朗网络行动
写稿
视频投稿
App下载
ENGLISH
钛媒体
链得得
钛空时间
消研所
钛媒体创投家
品牌服务
专家服务
政府服务
创业者服务
融资需求
申请报道
项目数据库
投资者服务
创投家CLUB投资机构库
机构数据库
行研报告
钛媒体
链得得
ITValue
钛空时间
消研所
钛极客
资讯
科股宝
PRO
视频
直播
FM
小红书开源首个大模型,预训练未使用合成数据
2025.06.10 09:12
微信扫码
19
12
钛媒体App 6月10日消息,小红书开源了首个大模型dots.llm1,小红书方面称,dots.llm1是一个1420亿参数的混合专家模型(MoE),在推理过程中仅激活140亿参数,能保持高性能的同时大幅度降低训练和推理成本。此外,dots.llm1.ins在预训练阶段使用了11.2万亿的非合成数据,最终性能与阿里Qwen3-32b相比,在中英文、数学、对齐任务上表现接近。(广角观察)
AGI
本文内容仅供参考,不构成投资建议,请谨慎对待。
评论
0
/ 300
根据《网络安全法》实名制要求,请绑定手机号后发表评论
登录
请
登录
后输入评论内容
投资日历
更多
根据《网络安全法》实名制要求,请绑定手机号后发表评论