基本信息
文件名称:2025大数据实时资源弹性伸缩的前沿探索与实践.docx
文件大小:11.77 MB
总页数:37 页
更新时间:2025-11-10
总字数:约6.17千字
文档摘要

2025

基于ApacheFlink打造Oceanus一站式实时计算解决方案,集实时应用的创建、调试、部署、运行、运维和监控为一体,为实时应用提供全生命周期的服务,覆盖微信支付、腾讯视频、腾讯广告等集团所有业务。

整体规模

机器核数:百万级别

作业个数:上万级别

流量峰值:十亿级别

应用场景

实时报表

特征生产

湖仓一体

数据同步

整体架构

目录

从零断流到智能自治的一体化架构

Flink介绍:以流计算为内核的新一代计算引擎,提供基于数据流的有状态计算。

相比storm(流计算开创者),flink有以下优势:

保障数据exactly-once,通过localstate和基