基本信息
文件名称:2025大数据实时资源弹性伸缩的前沿探索与实践.docx
文件大小:11.77 MB
总页数:37 页
更新时间:2025-11-10
总字数:约6.17千字
文档摘要
2025
基于ApacheFlink打造Oceanus一站式实时计算解决方案,集实时应用的创建、调试、部署、运行、运维和监控为一体,为实时应用提供全生命周期的服务,覆盖微信支付、腾讯视频、腾讯广告等集团所有业务。
整体规模
机器核数:百万级别
作业个数:上万级别
流量峰值:十亿级别
应用场景
实时报表
特征生产
湖仓一体
数据同步
整体架构
目录
从零断流到智能自治的一体化架构
Flink介绍:以流计算为内核的新一代计算引擎,提供基于数据流的有状态计算。
相比storm(流计算开创者),flink有以下优势:
保障数据exactly-once,通过localstate和基