英伟达开源3400亿参数模型Nemotron-4 340B
锤子财富2024-06-26 02:35:270阅
开发人员可使用该系列模型生成合成数据。
当地时间6月14日,英伟达开源Nemotron-4 340B(3400亿参数)系列模型。据英伟达介绍,开发人员可使用该系列模型生成合成数据,用于训练大型语言模型(LLM),用于医疗保健、金融、制造、零售和其他行业的商业应用。
Nemotron-4 340B包括基础模型Base、指令模型Instruct和奖励模型Reward。英伟达使用了9万亿个token(文本单位)进行训练。Nemotron-4 340B-Base在常识推理任务,如ARC-c、MMLU和BBH基准测试中,可以和Llama-3 70B、Mixtral 8x22B和Qwen-2 72B模型媲美。

0000
评论列表
共(0)条相关推荐
市场监管总局发布计量促进仪器仪表产业高质量发展指导意见
《指导意见》提出,到2025年,部分国产仪器仪表的计量性能和技术指标达到或接近国际先进水平。10月19日,市场监管总局发布《关于计量促进仪器仪表产业高质量发展的指导意见》(以下简称《指导意见》)。0000美国二季度GDP下修为2.1%,9月加息还是暂停?丨环球读数
纽交所交易员告诉第一财经记者,美国可能还能承受数次加息,因为美联储决心将通胀降至2%。当地时间30日,美国商务部经济分析局(BEA)公布二季度美国实际国内生产总值(GDP)二读数据,年化季率修正值为2.1%,低于市场预期值2.4%,较一读数据2.4%下调0.3个百分点,同时,一季度GDP终值也由2.4%下修为2.0%。锤子财富2023-08-30 22:23:460000世贸组织:经苏伊士运河的小麦运输量大幅下降
通过苏伊士运河的小麦运输量在1月的上半月下降了近40%。红海局势持续紧张升级,对全球海运造成严重影响。世界贸易组织当地时间18日表示,通过苏伊士运河的小麦运输量在1月的上半月下降了近40%。0000手机配件“老厂”品胜电子IPO:曾硬杠苹果,如今营收停滞净利下滑
老牌厂商的业绩增长潜力堪忧。申请深交所主板上市的广东品胜电子股份有限公司(下称“品胜电子”)于7月28日收到了首轮问询,该公司预计融资7.57亿元,保荐机构为中信证券。品胜电子可以说是最早一批进入手机配件行业的企业,业务发展几乎伴随着智能手机的流行史,曾研发出了中国最早的“充电宝”。锤子财富2023-07-30 18:09:140000欧盟气候监测机构:6月初全球平均气温创新高
6月初的全球平均气温为有记录以来同期最高,打破了此前的气象记录。欧盟气候监测机构哥白尼气候变化服务局15日表示,6月初的全球平均气温为有记录以来同期最高,打破了此前的气象记录。哥白尼气候变化服务局副局长萨曼莎·伯吉斯说:“世界刚刚经历了有记录以来最热的6月初,今年5月也只比历年最热的5月低不到0.1摄氏度。”0000