暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

赠票 + 演讲 !Amoro 邀您相约北京 CommunityOverCode Asia 2025

Amoro Community 2025-07-18
273
点击上方蓝字关注我们,了解更多内容

Amoro 是一个构建在 Apache Iceberg 等开放数据湖表格之上的湖仓管理系统,提供了一套可插拔的数据自优化机制和管理服务,旨在为用户带来开箱即用的湖仓使用体验。

Community Over Code 是 Apache 软件基金会(ASF)的官方全球系列大会,其前身为 ApacheCon。长期以来,吸引着各个层级的参与者,投身探索“Tomorrow’s Technology Today”。

今年 7 月 Community Over Code Asia 2025 重返北京。我们将通过分享 Apache 项目的最新突破和 Apache 孵化器中即将到来的创新,向大家展示 ASF 如何基于“The Apache Way”提供可靠、创新的开源软件和开放、协作、创新的社区,持续推动社会进步,并为全球用户提供价值。

01

Amoro 技术分享
演讲议题:货拉拉生产环境中的Apache Amoro 与 Iceberg实践
分享时间:7 月 25 日 15:00-15:45
专题:DataLake & Data Warehouse
议题介绍:
在货拉拉,我们利用Apache Amoro构建了以Apache Iceberg为核心的新一代湖仓平台。在管理PB级日处理数据量的过程中,我们解决了关键的稳定性挑战,包括:
  • 生产环境稳定性挑战:
  • 生产环境中的小文件压缩与快照过期处理
  • 使用对象存储(如S3、OSS)进行大规模数据迁移
  • 实时监控与告警,针对合并任务和元数据操作
  • 优化表设计,以最小化小文件和压缩开销
架构创新:
  • 针对物流数据定制的Iceberg模式与分区策略
  • 预防性文件管理,以减少合并压力
  • 自动化维护,确保长期稳定性
  • 在本次会议中,我们将分享:
  • 在高流量物流平台中扩展Iceberg的经验教训
  • 性能与可靠性的关键优化
我们的湖仓之旅——从货拉拉的PoC到生产环境。本次演讲将为数据工程师和架构师提供在大型、真实环境中实施Iceberg的可操作见解。
演讲嘉宾:
  • Zheng Yu Chen: Apache Amoro PPMC ,货拉拉高级大数据开发,ALC ShenZheng成员,长期从事大数据开源贡献。Apache Flink 中文社区志愿者,Apache Flink周边项目贡献者,长期从事实时计算平台开发工作与Flink内核开发。从23年开始参与Amoro孵化并成为 Apache Amoro PPMC,长期从事大数据数据开发工作,曾负责从0到1设计并构建Flink公有云多云数据解决方案、数据同步和实时计算云原生平台,目前在货拉拉负责大数据平台开发与数据湖工作推进。



演讲议题:在实践中构建实时数据湖
分享时间:7 月 26 日 15:00-15:45
专题:DataLake & Data Warehouse
议题介绍:
在实时驱动业务决策的时代,高吞吐量数据湖仓库的架构设计已成为企业数字化转型的决战战场。面对传统批处理架构难以逾越的时效性瓶颈,我们基于 Flink CDC 3.0 + Apache Iceberg + Apache Amoro 构建了流式数据湖仓库系统,成功实现了单客户日均数百亿数据流的分钟级就绪和查询性能跨越。
本次分享将介绍三方面的实践经验: 基于 Flink CDC3.0,多业务表异构数据秒级入库,解决了历史数据漂移与增量同步的精准对接难题; Iceberg 性能调优设计,复杂查询性能相比 Hive 提升 400%; Apache Amoro 自优化框架的创新应用,在高效合并小文件和清洗数据的同时,提供高效的读取性能。
该系统已在电信运营商的生产实践中落地,支撑每日PB级数据处理的业务峰值,可为参与者提供可无缝迁移的实时湖仓架构范式。
演讲嘉宾:
  • Congxian Qiu: Apache Flink Committer、Apache Amoro PPMC 成员, 天翼云副总监,拥有多年大数据基础设施研发经验。目前领导天翼云基于 Apache Iceberg 的数据湖架构开发和实现, 他是 Apache Flink Committer 和 Apache(incubating)Amoro PMC 成员。
  • Zhuojun Jiang: 天翼云 高级大数据工程师,致力于大数据湖仓架构研发。她正在专注于基于Apache FlinkCDC、Iceberg 和 Amoro 等组件搭建的数据湖仓,深入数据同步、性能优化等技术领域,并积极参与开源社区贡献。



演讲议题:在腾讯云上基于 Iceberg & Amoro & Gravitino 构建云原生 Lakehouse 架构
分享时间:7 月 26 日 17:15-17:45
专题:DataLake & Data Warehouse
议题介绍:
    自2020年以来,腾讯一直利用Apache Iceberg构建其Lakehouse数据基础设施。2022年,腾讯云开始在云上向用户提供基于Iceberg的Lakehouse服务。2024年,我们引入了包括Apache Amoro和Apache Gravitino在内的优秀项目,为用户提供更强大、更智能、更全场景的Lakehouse服务。
本次主题演讲将分享腾讯云多年来在Lakehouse架构方面的丰富经验,并重点介绍丰富的用户实践。我们将重点演示如何利用这些Apache项目构建云原生的Lakehouse架构,尤其侧重于流计算和BI场景。
演讲嘉宾:
  • Jinsong Zhou: 腾讯软件工程师, Apache Amoro PPMC 成员,腾讯软件工程师,在数据库和大数据领域拥有 8 年经验。目前,他领导腾讯云基于 Apache Iceberg 的 Lakehouse 架构的实现,并担任 Apache Amoro(incubating)的 PPMC 成员,积极推动社区发展。


02

开源集市

欢迎各位大数据开发者来开源市集上的 Apache Amoro 展台,与项目的 Committer 们面对面交流技术心得,同时还有机会赢取我们精心准备的项目定制小礼品,让这份技术之旅留下温馨的纪念。


03

赠票活动
关注 Apache Amoro 公众号且关注 Amoro Github 项目,转发朋友圈 24H 后,留言截图后台公众号即有机会获得 CommunityOverCode Asia 2025 3日通行证 一张,与大牛面对面交流湖仓技术,欢迎各位来到现场~

04

关于 Apache Amoro
社区鼓励任何形式的参与,并期待大家能与 Amoro 共同成长
欢迎 Watch Fork Star 一键三连~
官网:https://amoro.apache.org/
源码:https://github.com/apache/amoro


文章转载自Amoro Community,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论