国产中文大模型天河天元发布
来源:中国青年报 发布时间:2023-05-20 17:39:08

中国青年报客户端天津5月20日电(中青报·中青网记者 胡春艳)国家超算天津中心刚刚在第七届世界智能大会期间举行的世界智能科技创新合作峰会上,发布了天河百亿亿级智能计算开放创新平台和国产中文大模型——天河天元。

国家超级计算天津中心党组书记、应用研发首席科学家孟祥飞说,国家超算天河团队与信创海河实验室、天津大学、国防科大团队,共同致力于打造国产超级算力和智能算力底座,构建高标准大规模的中文数据集,通过国产中文大模型的研发和设计来支撑智能科技的创新。


(相关资料图)

众所周知,中文大语言模型的数据集非常稀缺。国家超算天津中心搜集整理了网页数据、各种开源训练数据、中文小说数据、古文数据、百科数据、新闻数据,以及专业领域的中医、医药、问诊、法律等多种数据集,训练数据集总token数达到350B,训练打造了自己的中文语言大模型——天河天元大模型。

未来大模型将成为产业智能化基座,在此基础上融合专家知识图谱,即可打造面向跨场景或行业服务的“元能力引擎”。该模式将进一步驱动各行各业的生产能力、生产效率从“量变到质变”,实现跨越式发展。

在算力中,超级算力应该是算力当中的战斗机,是最强大的算力存在。事实上,每一次超级计算机的升级换代,都经历了从底层的高性能计算芯片升级、高速互联网络升级,再到基础操作软件的整体性升级换代,才能带来一代新的超级计算机,而这也代表着在信息技术的创新能力和创新水平的新的革命。

超级计算也被誉为大国重器,在这个体系当中天河应该成为中国超级计算发展的一个代表。孟祥飞说,过去十年中,我们不断挑战着世界算力速度的极限,从千万亿次到亿亿次、到十亿次,一直到今天的百亿次的突破,正是这样一个强大的算力,也使得天津成为全国乃至世界超级算力的重镇,天津为全国贡献了超过20%以上的超级算力。来自全国8000多个科研机构、企业、政府部门的研发、设计依托天河超算进行技术创新和产业发展。

“天河百亿亿级的智能计算开放创新平台”正是依托了天河超级计算系统。超级计算的传统强项是高精度的科学工程计算,比如预报天气,需经过成千上万次的精确迭代计算以后,得出一个正确的结果,“预报的结果要可信,要有严格的误差控制,因此必须保持高精度计算”。

而眼下正在快速兴起的智能计算,特别是大模型带来的智能计算需求,对高精度计算的要求并不强烈。比如文本生成等,主要做的是特征提取、逻辑判断,就带来了一个新的计算范式的需求,即“低精度智能计算”。

于是在新一代超级计算机中,天河团队首次提出了柔性体系结构,就是在支持高性能计算、超级计算、科学工程计算的同时,也适配智能计算,支持世界领先的双精度、单精度、半精度融合计算输出能力。天河E级智能计算开放创新平台将带来突破百亿亿次的跨模态的超级计算算力,支撑传统的科学工程计算,并服务智能混合计算,打造全方位的算力赋能创新和数字经济高质量发展载体。

行业大模型就是在基础大模型上,进一步融合行业数据、知识以及专家经验,提升大模型对行业应用的适配性。大模型“预训练+精调”等模式带来了新的标准化AI研发范式,实现AI模型在更统一、简单的方式下规模化生产。这将会带来一场通用人工智能为驱动力的“AI革命”。

用大模型作为产业智能化升级基座,加之专业数据集,将打造出更贴合行业领域的智能化高水平“专家”,为行业赋能,推动行业升级,提升领域创新效率、行业生产效率,成为人工智能驱动新一轮科技革命和产业变革的巨大力量。

孟祥飞期待,让国产创新基础上的“天河E级超智算力开放平台”“天河天元大模型”赋能百业、赋能天津、赋能中国高质量发展。

来源:中国青年报客户端

关键词:

猜你喜欢

国产中文大模型天河天元发布

国产中文大模型天河天元发布

中国青年报客户端天津5月20日电(中青报·中青网记者胡春艳)国家超算天津中心刚刚在第七届世界智能...更多

2023-05-20 17:39:08
全球滚动:全球首台氢电混合动力人工智能运输机器人发布

全球滚动:全球首台氢电混合动力人工智能运输机器

中新社天津5月20日电(记者王君妍)在第七届世界智能大会上,天津港集团20日发布了其自主研发制造的全...更多

2023-05-20 17:42:26
实探第七届世界智能大会:AI下棋机器人、脑控轮椅齐亮相

实探第七届世界智能大会:AI下棋机器人、脑控轮椅

中国商报(记者赵熠如彭婷婷文 图)5月18日,第七届世界智能大会在天津开幕。一批代表世界最前沿技...更多

2023-05-20 16:50:00
第七届世界智能大会:大咖云集精彩纷呈_短讯

第七届世界智能大会:大咖云集精彩纷呈_短讯

国际在线报道(记者位树理、马嘉欣):5月18日,第七届世界智能大会在国家会展中心(天津)开幕。大...更多

2023-05-20 17:00:40
全球快资讯丨能举重物、下象棋、送外卖!各类智能机器人亮相世界智能大会

全球快资讯丨能举重物、下象棋、送外卖!各类智能

海报新闻记者姜雪颖解强民天津报道5月18日—21日,第七届世界智能大会在天津举行。据了解,本届世界...更多

2023-05-20 17:03:57
世界智能科技创新合作峰会召开 天河百亿亿级智能计算开放创新平台发布|天天观点

世界智能科技创新合作峰会召开 天河百亿亿级智能

人民网天津5月20日电5月19日,第七届世界智能大会世界智能科技创新合作峰会在天津召开,本次峰会由...更多

2023-05-20 16:58:49
天津市第37届科技周开幕-焦点信息

天津市第37届科技周开幕-焦点信息

青少年参与机器人竞赛。人民网记者孙一凡摄人民网天津5月20日电5月20日上午,天津市第37届科技周开...更多

2023-05-20 16:42:06
注意|天津多条公交线路调整!涉及改道、增站、更名……

注意|天津多条公交线路调整!涉及改道、增站、更

据微信公众号“天津公交天天服务”发布消息,近期740路、652北、629路、212东(西)、627路、204路...更多

2023-05-20 15:52:19
国企数字化转型论坛在天津举办 助推数字经济高质量发展

国企数字化转型论坛在天津举办 助推数字经济高质

图为“数智引领信创驱动”国企数字化转型论坛现场。周亚强摄中新网天津5月20日电(周亚强)第七届世界...更多

2023-05-20 14:59:32
全球首台氢电混合动力人工智能运输机器人亮相 天天速递

全球首台氢电混合动力人工智能运输机器人亮相 天

北京日报客户端|记者白波5月20日,在第七届世界智能大会上,天津港集团重磅发布自主研发制造的全球...更多

2023-05-20 14:49:35

© 2012-2020 财经快报网 版权所有 关于我们

网站联系邮箱:435 227 67@qq.com

琼ICP备2022009675号-3