数字化经营平台 - 智能数据驱动业务增长

核心能力矩阵 · 全方位数据运营解决方案

从数据采集到价值变现，构建企业级数据驱动决策体系

数据集成

多源异构数据统一接入、实时/批量同步、CDC变更捕获

DataX Flink CDC

数据调度

可视化DAG工作流、依赖管理、分布式任务调度、故障重试

DAG XXL-JOB 依赖

数据开发

在线SQL开发IDE、UDF函数管理、版本控制、代码审查

SQL IDE UDF Git

数据质量

规则配置、异常检测、质量报告、数据清洗、血缘分析

规则告警血缘

立即开启您的数字化转型之旅

克隆项目 (Git Clone)

或执行命令：


                                    git clone https://github.com/zhaoyachao/zdh_web.git && cd zdh_web && sh build.sh && sh bin/start.sh

启动后访问 http://localhost:8081 | 默认账号：zyc / 123456

平台核心特色

企业级数据平台的必备能力

企业级架构

微服务架构设计、高可用集群部署、多租户隔离、完善的权限体系。

可视化操作

拖拽式任务编排、实时监控大屏、丰富的图表组件、零代码开发。

智能分析

AI驱动的数据洞察、自动异常检测、预测性分析、智能推荐。

功能模块一览

覆盖数据全生命周期的完整功能矩阵

                                 数据集成中心
                                DataX引擎：基于DataX的离线数据同步，支持200+数据源
Flink CDC：实时变更数据捕获，支持MySQL/PostgreSQL/Oracle
Kafka集成：高吞吐消息队列，支持流批一体处理
API接口：RESTful API数据接入，支持第三方系统对接
文件采集：日志文件、CSV/Excel、FTP/SFTP自动采集

                            

                                 任务调度中心
                                DAG工作流：可视化拖拽编排，支持复杂依赖关系
定时调度：Cron表达式、手动触发、事件驱动
分布式执行：支持多节点并行执行，负载均衡
失败重试：智能重试策略、告警通知、断点续跑
资源管控：CPU/内存限制、队列优先级、并发控制

                            

                                 数据开发环境
                                SQL IDE：在线SQL编辑器，语法高亮、智能补全、格式化
UDF管理：自定义函数开发、测试、发布一体化
版本控制：基于Git的代码版本管理，支持回滚
代码审核：Code Review流程，保障代码质量
调试工具：断点调试、性能分析、执行计划查看

                            

                                 数据质量管理
                                规则配置：内置100+质量规则，支持自定义规则扩展
异常检测：统计方法+机器学习，自动识别数据异常
质量报告：DQ评分、趋势分析、问题根因定位
数据清洗：ETL清洗流程、去重、标准化、脱敏
血缘追踪：字段级血缘关系、影响分析、溯源查询

                            

典型应用场景

适用于各行业的数据建设需求

数据仓库建设

ODS/DWD/DWS/ADS分层架构、数仓建模、维度管理

BI报表分析

多维度报表、自助式BI、实时大屏、移动端看板

用户画像平台

标签体系、人群圈选、360度视图、精准营销支撑

AI模型训练

特征工程、样本管理、模型训练、在线推理服务

技术架构

基于成熟稳定的大数据技术栈

数据集成：DataX / Flink CDC / Kafka Connect / Canal

计算引擎：Spark / Flink / Hive / Presto / ClickHouse

存储层：HDFS / MySQL / PostgreSQL / Redis / Elasticsearch

调度框架：XXL-JOB / Apache DolphinScheduler / Airflow

服务治理：Spring Cloud / Nacos / Sentinel / Seata

快速开始

三步启动您的数字化经营平台

Step 1: 获取代码

从GitHub或Gitee克隆项目代码到本地

git clone https://github.com/zhaoyachao/zdh_web.git

Step 2: 编译打包

使用Maven进行项目编译和打包

sh build.sh

Step 3: 启动应用

启动应用并访问数字化经营平台

sh bin/start.sh
# 访问 http://localhost:8081

配置说明

在启动前，请确保在 application.properties 中配置以下参数：

# 数据库配置

spring.datasource.url=jdbc:mysql://localhost:3306/zdh

spring.datasource.username=root

spring.datasource.password=your_password

# Redis配置（缓存和任务队列）

spring.redis.host=localhost

spring.redis.port=6379

# 数据源配置（可选）

etl.datax.home=/opt/datax

etl.flink.home=/opt/flink

版本演进

持续迭代，不断增强数据能力

V5.7.4 最新

新增Flink CDC实时集成、优化DAG调度性能、增强数据质量规则引擎

V5.7.3

重构SQL IDE、新增UDF函数市场、支持ClickHouse数据源

V5.7.2

引入XXL-JOB调度中心、新增数据血缘可视化、提升系统稳定性

V5.7.1

升级DataX引擎至最新版、优化大数据量同步性能、修复已知问题

V5.7.0

数字化经营平台全新上线，实现数据集成、调度、开发、质量四位一体

项目信息

开源项目，持续维护中

项目名称	ZDH Digital Operation Platform (数字化经营平台)
开源协议	Apache License 2.0
技术栈	Java / Spring Boot / DataX / Flink / Spark
适用场景	数据仓库建设、ETL开发、数据分析、数据治理

GitHub	github.com/zhaoyachao/zdh_web
Gitee	gitee.com/zhaoyachao/zdh_web
相关文档	微智客 \| PushX \| 问卷平台
问题反馈	提交Issue

Star 支持 Fork 参与微智客 PushX 问卷平台