数据集成
概述
数据集成是一组业务流程,它包含了 ETL、数据同步等各种类型的数据技术,将不同来源的数据整合为一组有意义且有价值的数据集,供业务分析。
在 HENGSHI SENSE 中,数据集成支持对不同业务系统的原始数据进行各种清洗、转换和合并,根据业务需求创建一致的维度表和事实表,将最靠近分析的就绪的数据写入性能良好的数据库或数仓中,供数据建模、指标计算、可视化分析使用,从而得到更全面、更精准的报表。
数据集成使用户不再需要使用第三方工具比进行数据迁移和转换,可以在 HENGSHI SENSE 一站式解决所有数据问题。
功能简介
数据集成功能包括数据集成和批量同步两个子模块,批量同步模块主要用于表数据的直接同步,数据集成子模块则有更丰富的功能,包括:
- 支持多种数据源输入,包括本地文件、数据连接、数据集市、SQL 输入等。
- 支持数据清洗。
- 支持多种数据转换方式,包括数据联合、数据聚合、数据合并、行转置为列、列转置为行。
数据集成和批量同步都支持手动执行项目和定时执行项目。