新一代大语言模型书生·浦语20正式发布
2024-05-24 【 字体:大 中 小 】
1月17日,新一代大语言模型书生·浦语2.0(InternLM2)发布会暨书生·浦源大模型挑战赛启动仪式在上海举行。
InternLM2由上海人工智能实验室(简称“上海AI实验室”)与商汤科技联合香港中文大学和复旦大学发布。据介绍,InternLM2的核心理念在于回归语言建模的本质,致力于通过提高语料质量及信息密度,实现模型基座语言建模能力获得质的提升,进而在数理、代码、对话、创作等各方面都取得长足进步,综合性能达到同量级开源模型的领先水平。
据悉,InternLM2不仅在客观性能指标上提升显著,在主观体验上也有明显改善,可以为用户提供优秀的对话和交互体验。研究测试表明,InternLM2-Chat可以精准地理解和遵循用户意图,具备较强的共情能力和丰富的结构化创作能力。
上海AI实验室联合团队研究认为,大模型各项性能提升的基础在于语言建模能力的增强,对于大模型的研究应回归语言建模本质,通过更高质量的语料以及更高的信息密度,筑牢大模型能力基础。
为此,该联合团队通过多维度数据价值评估、高质量语料驱动的数据富集、针对性的数据补齐等技术方法,提出了新一代的数据清洗过滤技术。目前,InternLM背后的数据清洗过滤技术已经历三轮迭代升级,仅使用约60%的训练数据即可达到使用第二代数据训练1T token的性能表现,模型训练效率大幅提升。
沿袭第一代书生·浦语(InternLM)的设定,InternLM2包含7B及20B两种参数规格及基座、对话等版本,满足不同复杂应用场景需求。值得一提的是,秉持“以高质量开源赋能创新”理念,上海AI实验室继续提供InternLM2免费商用授权。
为促进AI生态发展,推动大模型在各行业的应用落地,书生·浦源大模型挑战赛同日启动。赛事由上海市经济和信息化委员会、上海市科学技术委员会、徐汇区人民政府共同指导,上海AI实验室主办,上海市人工智能行业协会承办,首期赛事包含行业应用和创新创意两个赛道,即日起面向全球进行场景和赛队征集。
猜你喜欢
新疆克州城乡低保标准再提高 平均提高10%和15%
尺素金声|中国经济的高成长性向“见顶论”说不
诺奖作家转型剧作家,莫言以《鳄鱼》开启创作后半生
新国都涨超9%:2023年净利润同比预增146319%-16865%
希腊股指在欧洲央行决议日收跌超05%,俄罗斯MOEX指数则涨约01%
艾德生物(300685SZ):FGFR2基因断裂检测试剂盒(荧光原位杂交法)在日本获批上市
可靠的股票配资 ,内幕交易:美国“国会山股神”们如何炼成的?
习近平总书记关切事|他们,向科学技术广度和深度进军
切尔西喜迎送分童子?英超水晶宫VS切尔西比分预测
【每周热点前瞻】重磅数据!2023年GDP增速将公布
(身边的变化)闽北乡村种植“小瓜蒌”特色产业促增收
摩恩电气(002451SZ):目前未生产铜缆高速链接线相关产品
创耀科技(688259SH):已累计回购75万股股份
解码“香山夜墟”①|深中通道通车在即,“香山夜墟”靠什么吸引深圳游客?
图解清远西牛麻竹笋一桌菜丨惊艳五感,碟碟精彩
赵孟頫临《兰亭序》十种,你最爱哪款?
一次性分红8亿后,这家户外运动“小巨人”来IPO了!
产业规模三年增长超两倍,算力节点中卫下一局押注算网
加和国际控股(08513HK)完成发行136亿股配售股份 净筹96715万港元
异动快报:丹化科技(600844)7月29日14点42分触及涨停板