代码澎湃 CodeSurge

DATA MID-PLATFORM

SurgeData

大数据平台 · 数据采集、治理、开发与服务一体化数据中台

SurgeData 是面向政企与工业场景的数据中台产品,覆盖数据标准、数据资产、数据开发、数据质量与数据服务全链路能力。支持多源异构数据接入、可视化建模与 ETL 编排、血缘追踪与 API 发布,打通业务数据孤岛,为数字孪生、IoT 与 AI 决策提供统一数据底座。

6大 核心模块多源 异构数据接入全链路 治理到服务可视化 ETL 编排

PRODUCT POSITIONING

产品定位

构建统一数据底座,让标准、资产、开发与服务在同一平台协同运转。

产品类型企业级数据中台(Data Mid-platform)
核心价值统一标准、统一资产、统一开发、统一服务,降低数据建设门槛与运维成本
模块体系工作台、数据标准、数据资产、数据开发、数据质量、数据服务、系统管理
目标用户数据工程师、数据治理团队、业务分析师、系统集成商、企业 IT 部门
典型场景智慧工厂、智慧园区、能源双碳、政务数据中台、IoT 数据汇聚与分析

01 / DATA STANDARDS ↗

数据标准管理

建立国家、地方、行业、团体等多层级标准体系,统一管理标准文档、标准字段与枚举值,为数据建模与资产治理提供规范基线。

标准检索

按标准分类、地区、实施状态、发布/实施日期等多维条件检索,支持标准文档上传与详情维护。

国家标准库

标准类目树按金融、制造、医疗等行业组织,管理标准号、名称、状态与发布机构。

标准字段

定义标准字段及枚举值,支撑模型设计与资产数据的标准化映射。

标准分类体系

覆盖国家标准、地方标准、团体标准、行业标准,形成完整标准知识库。

02 / DATA ASSETS ↗

数据资产管理

从数据源接入到模型设计、资产编目、血缘追踪与脱敏治理,构建企业级数据资产地图。

数据源管理

统一管理 MySQL、PostgreSQL 等数据源,支持连接测试、表结构查看与启用/禁用。

模型设计

可视化定义数据模型与属性字段,支持中英文命名、类型长度、主键标识与拖拽排序。

资产数据

按原始库、明细库、主题库、应用库分层管理 TABLE 资产,支持发布、标签与详情维护。

数据发现

自动发现与编目存量数据,快速纳入平台治理体系。

数据查询

统一 SQL 查询入口,支撑业务人员自助取数与分析。

数据血缘

可视化展示表级汇入血缘,支持按目标表查询上游任务与自动/按表解析血缘。

数据脱敏

敏感字段脱敏策略配置,满足安全合规要求。

03 / DATA DEVELOPMENT ↗

数据开发

支持 Spark / Flink 批流任务管理与可视化工作流编排,覆盖从数据源接入到清洗输出的完整 ETL 链路。

任务管理

创建 Spark 批处理、Flink 批/流处理任务,配置 Driver/Executor 资源与执行策略,支持上线/下线。

可视化工作流

拖拽编排 JDBC、Kafka、HTTP 数据源与表达式映射、过滤、关联、清洗等处理节点。

CDC 实时接入

支持 PostgreSQL CDC 等变更捕获数据源,配合窗口关联实现流式数据处理。

任务实例

任务运行实例监控,追踪执行状态与失败排查。

工作流编排

多任务组合编排,支撑复杂数据 pipeline 调度。

04 / DATA QUALITY ↗

数据质量

对关键资产建立质量规则与监测机制,保障入湖、入仓与应用层数据的准确性、完整性与一致性。

质量规则

针对字段完整性、格式规范、值域范围等配置质量校验规则。

质量监测

定期或实时执行质量检测,生成质量报告与异常告警。

问题追踪

质量问题闭环处理,支撑数据治理持续改进。

05 / DATA SERVICES ↗

数据服务

从单表向导到 SQL 模式与第三方转发,统一 API 发布、应用鉴权与调用审计,让数据能力快速对外赋能。

API 服务

单表向导、SQL 模式、第三方转发三种方式快速创建 API,支持在线测试与上线发布。

应用管理

维护 client_id / client_secret,控制应用访问范围与 Token 生命周期。

调用日志

记录调用状态、耗时、参数与错误信息,便于联调排错与审计追溯。

服务类目

按主题维护服务树结构,实现 API 分类检索与隔离展示。

数据订阅

订阅配置与通知分发能力,支撑数据按需推送(规划中)。

06 / WORKBENCH ↗

统一工作台

个人工作台汇聚任务、数据源、实例与标准集等核心指标,提供创建任务、数据源、工作流、数据查询等快捷入口。

任务总数

任务总数 / 已上线 / 运行中 / 今日实例一览

数据源与标准集数量统计

数据源与标准集数量统计

我的任务、最近执行与失败

我的任务、最近执行与失败实例

任务状态分布与核心指标图

任务状态分布与核心指标图表

消息中心与帮助中心

消息中心与帮助中心

WHY SURGEDATA

核心优势

6大模块

全链路数据中台

标准、资产、开发、质量、服务六大模块一体,覆盖数据从接入到赋能的完整生命周期。

多源接入

多源异构接入

MySQL、PostgreSQL、Kafka、HTTP、JDBC、CDC 等多元数据源统一纳管与开发。

低代码开发

可视化 ETL

拖拽式工作流编排,表达式映射/过滤、多表关联与清洗节点即配即用。

全链路血缘

血缘可追溯

表级汇入血缘图谱,清晰展示上游表、处理任务与目标表依赖关系。

一键发布

API 快速发布

单表向导、SQL 模式快速生成 API,配套应用鉴权与调用审计。

四层架构

分层资产治理

原始库、明细库、主题库、应用库四层架构,规范数据由入到出的流转路径。

ECOSYSTEM

生态整合能力

SurgeData 作为 Surge 产品体系的数据底座,与 SurgeIoT、SurgeView、SurgeSight、SurgeAI 深度打通,实现「采集—治理—分析—呈现—智能」全链路协同。

数据同源

IoT 时序、业务系统、孪生场景数据统一入湖入仓,一处治理、多处消费,避免重复建设与口径不一致。

能力分层

SurgeData 负责数据底座,SurgeIoT 负责设备接入,SurgeView / SurgeSight 负责可视化呈现,SurgeAI 负责智能分析,各司其职、无缝衔接。

端到端闭环

从设备数据采集、清洗建模、API 发布,到大屏展示、孪生联动与 AI 预测,形成完整的数据价值闭环。

SurgeIoT物联网中台

设备遥测与属性数据通过 Kafka、JDBC 等通道汇入 SurgeData,支撑时序数据分层存储、主题建模与 API 对外服务,为 IoT 场景提供统一数据底座。

了解详情 →

SurgeView数字孪生平台

孪生场景中的模型属性、运行指标与业务数据共享 SurgeData 资产层,通过数据 API 实现三维场景与真实数据的实时联动。

了解详情 →

SurgeSight可视化大屏

大屏组件直接绑定 SurgeData 发布的 API 或 SQL 数据源,动态请求与轮询刷新,快速搭建指挥中心与运营驾驶舱。

了解详情 →

SurgeAIAI 算法训练

SurgeData ETL 管道输出清洗后的特征数据集,SurgeAI 训练节点直接消费,支撑时序预测、异常检测等工业智能应用。

了解详情 →

APPLICATION SCENARIOS

应用场景

工业数据中台

汇聚 IoT、MES、ERP 多源数据,分层入湖入仓,支撑生产分析与孪生应用

政务数据共享

标准统一、资产编目、API 服务发布,实现跨部门数据安全共享

能源双碳分析

时序数据接入、质量监测与主题建模,支撑能耗与碳排分析

AI 特征工程

可视化 ETL 清洗与关联,为 SurgeAI 等算法平台提供高质量训练数据

实时数据管道

Kafka / CDC 流式接入与 Flink 处理,满足实时监控与告警场景

体验 SurgeData 数据中台

预约在线演示,了解数据标准、资产治理、可视化 ETL 与 API 服务等核心能力,快速构建企业级数据底座。

立即咨询