当前位置: 首页 > news >正文

阿里云ODPS十五周年重磅升级发布:为AI而生的数据平台

7月23日,正值阿里云第一款产品,自研大数据平台 ODPS 十五周年之际,阿里云智能集团副总裁、计算平台负责人汪军华正式宣布 ODPS 全面拥抱 AI,升级 ODPS 架构,推动大数据与 AI 的深度融合。

十五年深耕,从云原生到AI原生的跨越

自2009年诞生以来,ODPS 见证了大数据技术的飞速发展,从最初的离线计算引擎成长为全球领先的云原生大数据平台。过去十五年,ODPS 不仅支撑了阿里集团内部电商、金融、物流等核心业务的数据处理需求,还帮助全球客户实现了从线下 IDC 到云原生的平滑过渡。今天,ODPS 正式迈入 AI Native 时代,ODPS 将再次进化,成为为AI而生的数据平台。

Data+AI 双引擎:加速企业智能落地

ODPS 平台架构在面对 AI 浪潮做了全新升级,推出面向 Data+AI 的新一代数智一体计算平台,融合 Data 和 AI 双引擎。

基础设施层:整合阿里云计算、网络、存储等核心资源,支撑上层大数据和 AI 分布式架构的稳定运行。

计算服务层:在计算引擎层提供多种离线/实时/AI 计算资源保障云端数据加工与 AI 算力调度能力之外,Data 和 AI 也进行了深层的融合,MaxCompute 融合大模型,围绕大模型提供超大规模数据预处理能力。Hologres 通过 MCP 协议能够将湖仓中的海量数据转化为实时可查询的服务。

平台管理层:提供了统一 Data+AI 数据治理体系,用户可通过 DataWorks Copilot 智能助手和智能体 Agent,通过自然语言交互实现数据开发、数据分析与治理全流程。

应用场景层:当前数智一体计算平台已覆盖 RAG 增强检索、LLM 大模型训练、MLOps 运维等多种 AI 工程化场景及需求。我们希望企业可以基于平台之上便捷地获取数据与 AI 的能力,真正实现“数据驱动业务,AI 创造价值”。

为 AI 而生:ODPS 的四大核心升级

1、超大规模数据处理能力,支撑 AI 算力爆发;在 AI 时代,大模型训练需要处理海量数据,对算力提出了极高要求。ODPS 通过云原生架构,实现了数十万台集群的弹性调度,峰值数据处理能力达50亿次/秒。阿里云智能集团计算平台事业部大数据产品总监陈守元介绍到:“LLM 基模训练过程中往往需要突发调用数十万 CPU 和数万 GPU,以通义千问为例,ODPS 的即开即用、按量付费模式为其节省了90%以上的成本。”

2、多模态数据存储与计算,打破AI数据边界;着 AI 时代的到来,数据逐渐呈现多元化,包含文本、图片、视频等多种类型,非结构化数据占比超过80%。ODPS 推出湖仓一体方案,支持文本、图像、音视频等多模态数据的统一存储。

在计算方面,ODPS-MaxCompute 推出面向 Python 开发生态的分布式计算框架 MaxFrame,统一 Python 编程接口,提供高效的分布式计算能力,部分算子相比用户本地自建性能提升3倍以上,计算、运维成本降低50%。MaxFrame 同时支持 AI Funtion 能力,可通过简易的编程接口调用内置大模型,对 MaxCompute 表中的海量数据进行离线处理。 同时,ODPS- Hologres 在高性能实时数据分析的基础上,提供了面向多模态数据和 RAG 场景的检索增强特性,与 Deepseek/通义等大模型结合构建企业级 RAG 知识库,减少大模型问答幻觉,提升知识更新与问答速度,性能领先开源30%-40%。

3、近实时计算实现极致性价比;AI 时代企业用户不仅追求性能,更追求极致性价比。阿里云智能计算平台事业部 MaxCompute 研发负责人张治国重点介绍了 ODPS 在计算范式上的创新:ODPS 通过增量计算引擎(DLMV)和近线查询(MaxQA),填补了实时与离线之间的空缺。增全量一体的计算能够极大地优化整体计算资源,并且提供一个更稳定的环境、更强大的计算能力。MaxQA 引擎通过在实现近实时场景下的查询性能优化,能够在独享的查询计算资源池中,对管控链路、查询优化器、执行引擎、存储引擎及缓存机制等多个环节进行全面优化,显著减少响应时间,提升数据效率。

4、AI赋能数据价值变现;数据无应用不价值。AI 让数据价值从“人分析数据”到“AI 直接变现业务价值”,让数据价值更加显性化。MaxCompute Notebook 通过结合 MaxFrame 分布式计算框架,支持通过 SQL 与 Python 相结合,轻松访问 MaxCompute 中海量数据,进行 Data + AI 一体化数据分析、数据科学计算、AI 模型数据处理。ODPS-DataWorks Copilot 智能助手提供 SQL/Python 代码自动生成和智能补全等服务,数据开发分析平均提效35%。 ODPS-Hologres 及 DataWorks 发布 MCP Server 服务,为客户提供基于自然语言的用户交互界面及智能化产品体验。

总结

在 AI Native 时代,数据与 AI 的融合已不再是选择题,而是必答题。阿里云将持续深耕 Data+AI 双引擎,助力企业加速智能化落地,共同迈向数智未来。

http://www.lryc.cn/news/597131.html

相关文章:

  • HTTP性能优化终极指南:从协议原理到企业级实践
  • k8s pvc是否可绑定在多个pod上
  • 【Kubernetes】集群启动nginx,观察端口映射,work节点使用kubectl配置
  • 优化 Elasticsearch JVM 参数配置指南
  • 每日一算:华为-批萨分配问题
  • 谷粒商城篇章13--P340-P360--k8s/KubeSphere【高可用集群篇一】
  • 常用的正则表达式
  • 代码随想录算法训练营第五十二天|图论part3
  • 图论的题目整合(Dijkstra)
  • 【图论,拓扑排序】P1347 排序
  • 算法竞赛备赛——【图论】最小生成树
  • Modbus协议详解与c#应用
  • 算法竞赛备赛——【图论】拓扑排序
  • CI/CD与DevOps集成方法
  • python在windows电脑找回WiFi密码
  • 【按下电源键后,电脑里发生了什么?——BIOS:启动世界的“第一把钥匙”】
  • C++编程学习(第14天)
  • [Mediatek] MTK openwrt-21.02 wifi 没启动问题
  • 详述消息队列kafka
  • 【通识】手机和芯片相关
  • LazyVim 加载顺序
  • MySQL金融级数据一致性保障:从原理到实战
  • 数据持久化--PlayerPrefs
  • Hexo - 免费搭建个人博客06 - 安装、切换主题Butterfly
  • 基于Java实现DFT、FFT,并绘制波形图和频谱图,音频播放频谱或波形图
  • 内积(Inner Product)和余弦相似度区别
  • MATLAB近红外光谱分析:MATLAB编程+BP神经网络+SVM+随机森林+遗传算法+变量降维+卷积神经网络等
  • 以 “有机” 重构增长:云集从电商平台到健康生活社区的跃迁
  • 零工合规挑战:盖雅以智能安全体系重构企业用工风控
  • 认识linux进程内存布局以及与命令行参数和环境变量的关系