基本信息

---

下载

文档摘要

---

人力资源数据服务平台

目录

一、技术方案3

2.1人力资源数据中台概要设计方案3

2.2.1平台整体概述3

2.2.2数据存储规划4

数据存储设计4

数据源分布6

数据流转6

数据访问7

模型设计8

2.2.3数据汇聚12

数据批量采集13

.1功能模块概述13

.2功能方案14

.2.1主机管理14

.2.2标签管理14

.2.3收集器管理14

数据实时采集15

.1数据汇聚15

.2数据映射18

.3数据落地20

.4采集监控23

.4.1Ambari监控23

.4.2统一监控平台25

.4.3个性化监控25

.5质量稽核27

.5.1一致性稽核28

.5.2完整性稽核28

.5.3及时性稽核28

数据采集接口28

2.2.4数据存储与计算29

分布式计算29

.1业务场景29

.1.1非实时计算场景30

.1.2实时计算场景30

.2分布式计算引擎30

第2页

.2.1HiveQL30

.2.2SparkStreaming30

.2.3Flink30

.3功能清单31

分布式存储32

2.2.5数据加工33

技术数据34

元数据管理35

业务对象36

数据分享37

2.2.6数据处理38

多维数据分析功能39

数据建模功能39

数据算法功能43

一、技术方案

2.1人力资源数据中台概要设计方案

2.2.1平台整体概述

第3页

人力资源数据服务平台设计以灵活、开放、可扩展为目标，提升数据分析与处理、

数据可视化、管理控制、统一监控、安全管理能力，为人力资源业务领域的大数据应用

功能开发提供统一的数据分析与展示的环境。构建平台大数据管理与加工能力，支持源

信息