游乐游手机版
首页/科技数码/文章详情

腾讯云发布AI数据湖方案:支持CPU与GPU混合调度创新实践

时间:2026-01-21 18:31
支撑 AI 发展的数据基建正在加速演进。1月16日,腾讯云发布全新AI数据湖解决方案,深度融合多模态数据湖与异构计算弹性能力,实现了多模态数据处理到应用的全流程闭环。借助解决方中的产品能力,能够显著

推动AI智能化演进的数据底座构建进程,正在以前所未有的速度加快演进。

1月16日,腾讯云正式发布全新AI数据湖解决方案,深度整合多模态数据湖与异构计算弹性能力,实现了从多模态数据处理到上层应用调用的全流程闭环。借助该方案中的产品能力,能够显著降低从数据处理到模型训练过程中跨平台协同的复杂度,为大数据与算法团队提供一体化、高效率的技术底座。

腾讯云发布 AI 数据湖解决方案,支持 CPU和GPU 混合调度

随着大模型技术从技术探索迈向与业务的深度融合,企业数据处理的重心已从传统的结构化数据,全面转向海量的图片与音视频、物联网信号,乃至巨量的智能交互数据。企业需要处理的数据不仅在类型和体量上都发生了显著变化,对数据的管理精细度、质量可靠性和流转敏捷性也都提出了全面升级的需求。

腾讯云发布的AI数据湖解决方案,以多模态数据湖 TCLake 与开源大数据平台 EMR 为核心,具备结构化与非结构化数据统一管理、CPU与GPU资源混合调度能力,能够轻松应对AI场景下数据管理复杂性和算力需求激增的双重挑战,力图为客户提供一站式的数智一体化底座,加速企业AI转型的落地进程。

TCLake 通过构建统一的数据表格格式,完美兼容视频、音频、文档及模型文件等全量多模态数据。这一特性实现了业务分析、数据工程与AI训练在同一套数据体系下的协同工作,从源头上消除了重复存储,显著降低了运维开支。在扩展性方面,TCLake 结合智能管理算子,通过自动化执行碎片文件合并与无效数据清理,确保数据高并发访问性能的同时,极大简化了数据治理流程与系统运维的复杂性。

EMR 承担着资源与作业统一调度的枢纽角色,随着业务边界的扩展,EMR 从传统大数据平台升级为数据智能计算平台,一方面需要加强对 Python 生态及各类工作负载的原生调度能力,特别是要能适配和支撑主流机器学习框架的分布式训练需求;另一方面必须改变CPU、GPU等资源独立管理、利用率不高的现状。其核心在于构建一个统一的资源调度层,能够智能地混合编排数据预处理与模型训练任务,让两类任务共享资源池,形成高效协同。

在此基础上,腾讯云还针对AI场景引入向量引擎进行数据加速,自研高性能引擎 Meson 在标准测试中实现了显著性能提升,降低了计算与I/O过程中的资源消耗。

目前,这套AI数据湖方案已在多个行业落地应用。在消费终端领域,客户通过平台处理店铺的实时管理数据,成功跑通了货架补货预警、店员操作规范修正等业务逻辑,使应用开发效率提升了20%。在具身智能场景中,客户将大量的第三方数据导入对象存储,通过 Spark 与 Ray 的协同架构完成图片模拟信号提取、处理、修正补偿、后处理等环节,有效过滤了无效噪声带来的资源损耗,直接为相关企业节省了约30%的算力消耗。

市场表现方面,腾讯云正持续发力Data与AI融合赛道。根据IDC 2025年发布的多项报告显示,腾讯云在AI大数据领域的市场份额及增速等指标上,已在多个细分领域处于领先位置。

来源:https://news.zol.com.cn/1121/11217317.html
上一篇荣耀战魂新英雄吕布官宣:2026年上线,巨人造型曝光 下一篇尼克尔Z 40mm f/2镜头售1899元:轻便大光圈的入门优选
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
泰坦军团战魂KG277VPLUS双模显示器27英寸4K165Hz/520Hz仅1888元
科技数码 · 2026-07-03

泰坦军团战魂KG277VPLUS双模显示器27英寸4K165Hz/520Hz仅1888元

泰坦军团“战魂KG277VPLUS”27英寸显示器发售,支持4K165Hz与FHD520Hz双模切换,定价1888元。采用FastIPS面板,97%DCI-P3色域,配备升降支架及双HDMI2 1和双DP1 4接口。

苹果调价影响消费需求 2026年全球笔电出货量或降13.6%
科技数码 · 2026-07-03

苹果调价影响消费需求 2026年全球笔电出货量或降13.6%

迈入2026年,DRAM与NAND闪存的供应持续紧张及价格不断攀升,正逐步传导至终端消费市场。可以预见,下半年市场环境将更加严峻。上半年多家PC厂商已陆续上调产品定价,最终连苹果也不得不跟进,宣布提升iPad、Mac及家居设备的价格,以应对存储成本的快速上涨。 TrendForce分析指出,苹果全面

苹果iPhone 18 Pro自研C2芯片或不支持5G毫米波
科技数码 · 2026-07-03

苹果iPhone 18 Pro自研C2芯片或不支持5G毫米波

苹果自研C2芯片仅支持Sub-6GHz,不支持5G毫米波。因此,美版iPhone18Pro继续采用高通基带方案以支持毫米波,而其他地区版本则搭载苹果自研C2芯片。这一差异将导致在毫米波覆盖的市场中,用户峰值速率可能显著低于美版用户。

纳睿雷达推出睿宸超精细化短时临近AI气象大模型
科技数码 · 2026-07-03

纳睿雷达推出睿宸超精细化短时临近AI气象大模型

纳睿雷达近日释放了一项重磅成果。2026年7月1日,公司正式对外发布了两款自主研发的全新产品:一款是“WDSPT0152型”S波段全极化多功能有源相控阵雷达,另一款则是名为“睿宸”的超精细化短时临近AI气象大模型。从产品战略来看,此次发布直指气象监测与灾害预警领域的技术制高点。 先来看这款S波段雷达

南航国际创新港一期交付 四大专业园区打造空天产业强磁场
科技数码 · 2026-07-03

南航国际创新港一期交付 四大专业园区打造空天产业强磁场

近日,南京航空航天大学与六合区深度合作的标杆项目——南航国际创新港一期正式交付投用。两个地块陆续启用,成功串联起高校科研能量、地方产业载体与市场创新主体,为南京打造全国领先的航空航天产业创新中心、助力江苏布局商业航天全产业链,提供了坚实的物理支撑。 该创新港一期位于六合区雄州街道,分为3号和4号两个