mt下载腾讯云近日推出了新一代高性能计算集群 HCC近来邦内 AI 圈像下过了一场雨,百般 AI 模子宛如春笋一律冒了出来。
凭据金十数据的统计料理,目前邦内起码有 15 个大巨细小的 AI 大模子正正在研发。此中,百度的文心一言和阿里的通义千问最受人们合心。
BAT 此中两家 AI 大模子依然进入试用阶段,这下压力来到了腾讯这边。
正在即日,腾讯也通告了它正在 AI 模子和云揣测上面的动态。从通告的实质来看,腾讯好似不光仅是念赶这场「AI 淘金热」——它念「给淘金者卖水」。
腾讯云不日推出了新一代高本能揣测集群 HCC,旨正在知足不竭增加的人工智能、科学咨询和工程范畴的揣测需求。
有目共睹,磨练 AI 大模子必要洪量的揣测资源和数据举办磨练。普遍小我或小型公司能够无法接受如许的资源消费,由于采办和庇护这些揣测资源的本钱异常高。
腾讯推出 HCC 高本能揣测集群,便是面向大范畴 AI 磨练,以专用集群办法售卖算力,这就像是给前来 AI 金矿淘金的淘金者们卖水。
新一代 HCC 集群供应了诸众革新技巧和架构,包含星星海自研办事器、星脉自研收集、高本能文献存储和对象存储架构以及邦内首发的英伟达 H800 Tensor Core GPU。
源委实测,腾讯云新一代集群的算力本能较前代晋升高达3倍,是邦内本能最强的大模子揣测集群。
先来说说显卡,HCC 揣测集群采用的英伟达 H800 Tensor Core GPU 是英伟达新一代基于 Hopper 架构的图形管制器,专为深度进修、大型AI说话模子、基因组学和繁复数字孪生等使命而策画,本能较前一代 A800 提升了3倍。
星星海自研办事器则采用 6U 超高密度策画,上架密度提升了 30%。通过运用并行揣测理念、一体化的 CPU 和 GPU 节点策画,单点算力本能获得明显晋升。
星脉自研收集还供应了业界最高的 3.2T 超高互联带宽,配合高本能文献存储和对象存储架构,具备 TB 级含糊才干和切切级 IOPS。
这一架构能有用管理 AI 磨练经过入彀算、存储、收集的「木桶效应」,确保运算速率不会因瓶颈而受限。星脉收集还采用了 1.6T ETH RDMA 高本能收集,为每个揣测节点供应 1.6T 的超高通讯带宽,带来 10 倍以上的通讯本能晋升。
让咱们从直观揣测的发挥来看。客岁 10 月,腾讯完毕首个万亿参数的AI大模子——混元NLP大模子磨练。正在平等数据集下,将磨练年华由 50 天缩短到 11 天。假若基于HCC 揣测集群,磨练年华将进一步缩短至4天。
HCC 高本能揣测集群使用普遍,包含主动驾驶磨练、自然说话管制、AI天生制造(AIGC)大模子磨练以及科研揣测。
为了进一步消重磨练大型AI模子的本钱,腾讯推出了AngelPTM 磨练框架。现正在,AngelPTM 依然列入了 TACO Train加快组件,助力大模子磨练显存上限和本能大幅晋升。这就像为机械人装配了一套壮健的进修编制,让其或许更速地独揽百般能力。
别的,腾讯众款自研芯片依然量产。此中,用于 AI 推理的紫霄芯片、用于视频转码的沧海芯片已正在腾讯内部交付利用,本能目标和归纳性价比明显优于业界。
紫霄采用自研存算架构,补充片上内存容量并利用更先辈的内存技巧,撤消访存才干亏欠限制芯片本能的题目,同时内置集成腾讯自研加快模块,裁减与 CPU 握手守候年华。
目前,紫霄依然正在腾讯头部营业范畴摆设,供应高达 3 倍的揣测加快本能,和赶上 45% 的整个本钱省俭。
腾讯云的新一代 HCC 高本能揣测集群纠合了先辈的硬件和软件技巧,供应了壮健的揣测才干和高度优化的编制本能。这些革新将有助于饱吹 AI、科研和工程范畴的速捷发扬,知足百般行业正在大数据和繁复揣测使命方面的需求。
通过自研硬件、收集、存储和软件优化等各个方面的冲破,腾讯将高本能揣测的才干晋升到了一个新的高度。正 如科幻片子中的智能机械 人,新一代HCC集群将不竭进修、进化,为各行各业供应壮健的揣测援手,饱吹邦内人工智能范畴的前进。
FXCG 相关资讯