创建

登录 ReadmeX

或

了解我们如何处理你的信息: 隐私政策

ReadmeX

陪你读懂 AI 动态

今天,想先了解什么?

选一份动态总结,或直接聊聊你的问题。

社区和关注动态总结只属于你自己。

资讯

EMR Serverless StarRocks全面支持Paimon 2.0

AI 总结

据项目及厂商作者介绍,阿里云EMR Serverless StarRocks现已全面支持Paimon 2.0。该集成在同一SQL执行架构中整合向量与全文检索、标量预过滤、BLOB读取、缓存、候选归并和关系分析,用于多模态数据及AI数据准备。阿里云DLF还可管理索引构建、Compaction、Snapshot、分区和废弃文件清理。

深度见解

此次更新为多模态湖仓数据检索和AI数据准备提供了统一路径,但相关落地规模与性能说法尚未得到独立验证。

作者:范振,StarRocks TSC Member;阿里云开源 OLAP 负责人

阿里云 EMR Serverless StarRocks 是面向实时数仓与湖仓分析的全托管服务,Stella 是其企业级内核。围绕企业在开放数据湖上的查询需求,Stella 持续优化存算分离架构、数据读取、缓存与查询执行,让保留在湖中的数据可以直接用于交互式查询、多表关联与业务分析。随着湖中的数据类型与使用方式不断扩展,Stella 也在将湖上分析能力进一步延伸到多模态检索与 AI 数据准备。

这一方向延续了 StarRocks 对 Lakehouse 的长期投入。自 2023 年提出“From OLAP to Lakehouse”技术路线以来,社区持续完善对 Delta Lake、Iceberg、Paimon 等开放湖表的支持。围绕这些湖上查询需求积累的 SQL 优化、分布式执行与数据缓存能力,也为 Stella 在云上承载更大规模、更多类型的分析负载提供了基础。

今天,湖中的分析对象正在扩大。视频、图像、音频、文档和传感器记录,需要与订单、日志、标签和评测指标一起进入计算。模型能够提取这些内容的语义,也让企业有了新的数据使用方式:根据内容发现样本,关联业务记录解释结果,再把选出的数据送入训练与评测。Paimon 2.0 在实时湖表的基础上,进一步将数据管理、特征加工和索引检索连接起来,也让查询引擎需要同时处理大范围分析与低延迟检索。

#Alibaba Cloud#EMR Serverless StarRocks#Paimon 2.0#StarRocks#Stella#Alibaba Cloud DLF#PyPaimon

原文约 16 分钟读完阅读原文
群聊

还没有评论,来说说你的看法。