上海人工智能实验室开源书生·浦语20B模型,消费级GPU即可运行
来源:上观新闻2023.9.21
书生·浦语(InternLM)大语言模型由上海人工智能实验室联合多家机构共同推出。今年6月,InternLM千亿参数(104B)语言大模型首次发布,现已经历多轮升级。7月,上海人工智能实验室开源书生·浦语70亿参数的轻量级版本InternLM-7B,且在业内率先开源贯穿数据、预训练、微调、部署和评测的全链条工具体系。本次发布的InternLM-20B是一款中量级大模型,相较于InternLM-7B,其理解能力、推理能力、数学能力、编程能力等都有显著提升。
相比于此前国内陆续开源的7B和13B规格模型,20B量级模型具备更强大的综合能力,复杂推理和反思能力尤为突出,能为实际应用场景提供更有力的性能支持;同时,20B量级模型可在单卡上进行推理,经过低比特量化后,可运行在单块消费级GPU上,因而在实际应用中更为便捷。
相比于此前的开源模型,InternLM-20B能以不足1/3的参数量,测评成绩达到了Llama2-70B的水平,同时支持数十类插件,上万个API接口功能,还具备代码解释和反思修正能力。另外,InternLM-20B在研发训练的过程中,研究团队进行了基于SFT和RLHF两阶段价值对齐,并通过专家红队的对抗训练大幅提高其安全性。
更多资讯
-
面积超大、宠物友好、夜间也开放…打卡这家艺术场馆2024.8.30
马上就将迎来人从众的“五一”假期了,哪里有轻松有趣、老少皆宜的活动?来这个坐落于美丽的静安苏州河畔、总面积达4600余平方米的Fotografiska影像艺术中心观展,或许是个不错的体验哦! 从地铁1… 查看详情 >
-
从上海县到闵行区,1949年后上海的变迁你知多少?2024.4.30
勾勒上海发展的线索,描摹上海的历史风情。如何用最少的文字,将大上海的发展脉络说清楚?沧海桑田、筚路蓝缕,终成“上海”,这是一部袖珍的上海通史。 “发现闵行之美”系列丛书诵读活动第十二季,我们邀请了沪语… 查看详情 >
-
共506户!嘉定这一住宅地块项目规划出炉2024.4.30
@嘉定的小伙伴们, 菊园新区这一住宅地块项目规划出炉, 详情如下 嘉定区菊园新区JDC1-0404单元50-01地块项目建筑方案 基地东至柳轩路、南至环城路-洋泾支河、西至城北路、北至陈家山路,规划用… 查看详情 >
-
上海工人新村文化节启动,推出摄影展、主题话剧等系列活动2024.4.30
4月29日,上海工人新村文化节在杨浦区228街坊启动。4月29日至5月4日,228街坊将举办“人民城市新实践”摄影展、同济大学《暖·光》话剧展演、青春秀2.0—228 Live House草地音乐会等… 查看详情 >