以基础设施角度看待大模型 智源解读行业生态与开源路径思考
6月9日至10日,第五届北京智源大会在京举行,现场,智源研究院院长黄铁军发布了全面开源的“悟道3.0”大模型系列,并带来一系列产品:“悟道·天鹰(Aquila)”语言大模型系列、“天秤(FlagEval)”大语言评测体系及开放平台,“悟道 · 视界”视觉大模型系列,以及一系列多模态模型成果。
采访中,黄铁军表示,目前制约国内大模型行业发展的一点就是“太热”,业界应避免重复性发力,集中力量办大事。
公开资料显示,智源研究院是国内最早进行大模型研究的科研机构之一,自2020年10月启动大模型研发工作。所谓“大模型”,目前业界有不同定义,黄铁军认为需具备三个条件:一是规模要大,参数达百亿规模以上;二是涌现性,能够产生预料之外的新能力;三是通用性,不限于专门问题或领域,能够处理多种不同的任务。
《中国人工智能大模型地图研究报告》显示,截至今年5月28日,中国10亿参数规模以上的大模型已发布79个。在黄铁军看来,目前行业低水平重复与碎片化现象比较严重,这种现象会造成资源分散,很难形成重大影响的系统性突破。且黄铁军并不认为未来会有几十个,甚至十几个大模型存在下去。大模型只是全球大模型生态中的一个环节,未来全球可能只有极少数的两三个大模型生态。
“大模型最终比的是智能水平,”黄铁军表示,多个大模型存在的地方,肯定是智力水平最高的大模型生态会被绝大多数人使用,赢者通吃的现象从来都是起作用的,最重要的是,应从基础设施的角度来看待大模型,将来智力可以作为通用的社会流通要素,人人都可以得到它,其价格也将类似于水电低成本的方式让全社会使用,这是放大人工智能能力的最佳方式。
“极少数大模型生态起基础性作用,基于智力的基础设施提供各种应用与服务,这是一个正常的生态。”黄铁军表示。为了搭建服务千行百业的大模型生态,智源选择将大模型开源。
此次智源发布新进展的FlagOpen 大模型技术开源体系,旨在打造全面支撑大模型技术发展的开源算法体系和一站式基础软件平台。黄铁军表示,大模型不是任何一家机构或公司可以垄断的技术,而是大家共建共享,行业需共建一个智力社会需要的基础算法体系。在黄铁军看来,Linux和安卓生态差别很大,后者是Google掌控下的开源社区,需要符合主导者的意志。“我们作为非营利机构,期望将来人工智能开源开放的方向是Linux这样的开源开放。”黄铁军称。
另外针对智源开源生态与国内生态之间的区别,智源研究院副院长、总工程师林咏华对第一财经记者表示,大模型具备两层生态的特殊之处——过去所谓的应用生态是第二层生态,与基础大模型更紧密的生态是基于基础模型进行持续训练而产生的领域基础模型,或基于基础模型去训练自身应用,经微调之后的领域应用模型。林咏华表示,智源更适合基于自身开源的基础模型去发展后一类大模型生态。
至于该类大模型生态与国内包括阿里、腾讯、华为、百度等互联网大厂之间的区别,林咏华称,有实力的互联网公司如BAT、华为等,会倾向于用自己研发的大模型。由于其商业原因,大多数不会开源。但更广泛的行业企业,需要在优质的开源基础模型之上再去开发其行业领域适用的模型。
外交部:望美方为中美经贸合作创造良好的环境
毛宁表示,中方一贯反对美方将经贸科技问题政治化、武器化。7月18日,外交部发言人毛宁主持例行记者会。有记者问,据报道,拜登政府或将出台一系列政策,限制对华投资,包括半导体、量子计算和人工智能等尖端技术,但不涉及生物技术和能源行业,请问中方对此有何评论?0000证券交易印花税减半征收;证监会三箭齐发!收紧IPO、调降保证金比例、限制减持;中国恒大上半年净亏损合计人民币392.5亿元丨早报
第一财经每日早间精选热点新闻,点击「听新闻」,一键收听。中办、国办印发《关于进一步加强青年科技人才培养和使用的若干措施》锤子财富2023-08-28 07:07:080002全球大宗商品波动加剧,投资者如何应对?
外盘大宗商品价格波动加剧端午假期期间,海外市场受宏观因素扰动,外盘大宗商品价格波动加剧。黄金、原油和农产品等期货价格在假期期间波动明显。消息面上,美联储表达继续加息的观点引发金融市场动荡,国际原油盘中跳水,周跌幅超3%,目前已跌破70美元/桶关键价位,盘中触及67美元/桶;COMEX黄金期货价格周跌幅超2%,盘中触及1919美元/盎司,刷新近14周价格低位。0000李强会见欧洲理事会主席米歇尔
李强表示,中欧作为世界两大力量、两大市场、两大文明,双方关系关乎全球格局稳定和亚欧大陆繁荣。当地时间9月10日上午,国务院总理李强在新德里出席二十国集团领导人峰会期间会见欧洲理事会主席米歇尔。0000收盘丨沪指跌0.26%,贵金属板块大涨
截至收盘,沪指跌0.26%,深证成指涨0.25%,创业板指涨0.51%。7月5日,A股三大指数涨跌不一。截至收盘,沪指跌0.26%,深证成指涨0.25%,创业板指涨0.51%。Wind数据显示,全市场超3900只个股上涨。两市成交额连续3日不足6000亿。板块方面,贵金属、创新药、中药、Web3.0、财税数字化等板块上涨,银行、保险、人形机器人、白酒等板块下跌。锤子财富2024-07-07 16:30:290000