腾讯云发布专有云智算套件,助力企业打造专有智算云

2024-06-28 19:20:22     来源:

6月28日,腾讯云副总裁李力在A2M人工智能创新峰会上宣布,腾讯云推出基于公有云的成熟实践的专有云智算套件。

该套件集合了腾讯云高性能计算集群构建模块、智能高性能网络IHN、高并发文件存储系统TurboFS、算力加速框架Taco以及GPU算力共享技术等核心能力,与腾讯云专有云平台TCE结合,能够支撑企业基于自有硬件搭建高性能的专有智算云,满足在私有算力环境下训练大模型的诉求。

据了解,腾讯云智算套件提供的算、存、网一体的云原生能力,能够帮助企业高效利用算力卡资源,解决算力集群的木桶短板效应。比如,腾讯云自研高性能智能网络IHN,能够实现企业算力卡持续稳定高带宽通信;腾讯云高性能文件存储系统,能够有效解决海量数据存储的读写性能瓶颈问题。

同时,智算套件还在调度架构层融合了腾讯云自研的算力加速框架Taco和GPU算力共享技术qGPU。其中Taco基于网络协议、通信策略、AI 框架、模型编译等多层级的优化,能够大幅提升大模型训练和推理业务性能;qGPU能够在算力集群内对算力卡实现精准切分,提升卡的利用效率。

另一方面,腾讯云TCE拥有跟公有云同源同构的技术架构和“一云多芯”的能力,能够灵活支持不同规模的云平台构建,还能屏蔽底层硬件差异,更好地纳管不同类型的硬件设施。

腾讯云智算套件源自腾讯云公有云算力集群HCC的成熟实践。去年,腾讯云在行业率先发布了大模型公有云算力集群HCC,该集群结合腾讯云星星海自研服务器,腾讯云自研高性能智能网络提供的3.2T超高互联带宽,以及腾讯自研高并发文件存储系统,能够为大模型训练、自动驾驶、科学计算等提供高性能、高带宽和低延迟的集群算力。

当前,AI正在逐步从辅助技术成为引领行业变革的关键要素。作为这一变革的重要支撑之一,云计算正与AI深度融合,孕育出AI原生云这一全新的技术形态。

腾讯云联合Gartner发布的《AI原生云建设与加速指南》指出,AI原生云将AI技术深度融合到云服务的每一个层面,并着重于开放性和生态系统的构建,通过提供丰富的API和SDK,以支持AI原生新服务和应用的开发。

李力介绍,腾讯云将围绕AI原生云,为客户提供生成式AI驱动的新一代云平台架构,为客户带来AI原生理念的基础设施、模型、工程、应用、全栈安全防护等五大核心能力。

其中,基础设施层,腾讯云构建了支持多GPU卡型的统一算力平台,结合长稳训练、利用率提升以及任务和节点的异常恢复机制等技术,能够助力模型训练提效 200%,提升硬件资源利用率至 99%+。

在工程平台层面,腾讯云打造了基于腾讯云高性能服务HAI 与 云端开发工具CloudStudio的GPU开发空间;腾讯云向量数据库提供了全面的数据检索增强套件能力;腾讯云机器学习平台TI提供了从数据标注到模型推理的工具链。在此之上,腾讯云OrcaTerm AI助手、AI代码助手可以提供智能运维、技术问答、代码补全等AI辅助能力。

在模型层,腾讯自研的大模型混元最大参数量级已过万亿,在国内率先采用混合专家模型 (MoE) 结构,部分中文能力已追平GPT-4,在“时新”问题的回答表现上,数学、推理等能力上均有较大提升。同时,腾讯会议等腾讯SaaS产品已经全面接入腾讯混元大模型。

在安全方面,腾讯全栈安全产品都已应用AI技术,并在实际攻防场景中守护安全防线,同时,腾讯云还在积极探索生成式AI在安全场景的落地。

值得一提的是,腾讯云还支持通过分布式云的方式部署,能够为用户在多云、混合云场景下提供一致的产品服务和体验,并且通过集中管控,统一管理位于不同位置的云资源和业务应用,帮助用户在任意位置获取需要的AI原生云资源与云服务。

截至目前,包括百川智能、MiniMax、智谱科技、元象等在内的90%头部大模型企业,都在使用腾讯云的解决方案。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

猜你喜欢

小米、华为、荣耀、中兴、红魔亮相MWC上海 入手参展同款手机来京东就够了
第九届“创客中国”智能机器人中小企业创新创业大赛 新闻发布会在京召开
AI终端创新周期下,消费电子彰显高景气度
抢先体验京东.Vision!完美化解家电家居尺寸选择、搭配等难题
AI医疗发展提速 迈瑞医疗“数智化”引领行业高质量前进
高露洁携手京东深化战略合作,助推中国口腔行业再升级
稳固的金三角生态链助力广汽汇理汽车金融高质量发展
爱善天使“卫蕾行动”走进湘潭,书写留守儿童保护新篇
中粮香雪体验行,一“点”心意,来日方长
记忆力提升有路可循,讲真《高效记忆训练营》助力大众激活记忆潜力
呼叫“睡眠保单”的主人!平安人寿上海分公司“睡眠保单”清理专项工作进行时...
一秒心动!《玫瑰的故事》家居美学图鉴!
高德地图携手HarmonyOS NEXT,打造智能出行极致用户体验
HarmonyOS NEXT赋能南方航空,打造民航出行的极简高效体验
HarmonyOS NEXT 赋能小红书,引领社交媒体平台全新沉浸式体验
HarmonyOS NEXT助力微博创新:多媒体体验与性能的双重突破
美国缪斯设计奖公布2024年度评选结果,舍得酒业两款产品荣膺最高荣誉“铂金奖”
小红书亮相VOGUE Business纽约美妆峰会,引领美妆洗护行业新浪潮
香港航空推出留学生惠飞计划,筑起连接梦想与现实的空中桥梁
跨越大洋的情谊:棒球在福建推动中美文化交流
德立全新开放式空间美学馆:阔启家居空间的自由想象
哈喽六厂设计大赛全球招募
台州银行湖州分行多措并举优化支付服务
一加平板Pro在京东先人一步上线 售价2799元起可享6期免息
亚马逊广告投放干货免费学习,51节入门&进阶课程放送
东阿阿胶、雀巢、振东等企业确认演讲,AAES2024首轮日程
2024数字化转型推进大会在京召开,三维家获评十大创新企业称号
南昌大悦城综合体发布会:城市沸腾青年主场,盛宴启航!
应时而至,向新而行,ISPO SHANGHAI 2024闪耀开幕
超越边界,拥抱变革,欧诗漫斩获2024第十二届TopDigital创新营销奖