1. 数据集成简介
1.1. 概述
数据集成是一组业务流程,它包含了ETL、数据同步等各种类型的数据技术,将不同来源的数据整合为一组有意义且有价值的数据集,供业务分析。
在HENGSHI SENSE中,数据集成支持对不同业务系统的原始数据进行各种清洗、转换和合并,根据业务需求创建一致的维度表和事实表,将最靠近分析的就绪的数据写入性能良好的数据库或数仓中,供数据建模、指标计算、可视化分析使用,从而得到更全面、更精准的报表。
数据集成使用户不再需要使用第三方工具比进行数据迁移和转换,可以在 HENGSHI SENSE一站式解决所有数据问题。
1.2. 功能简介
数据集成中,包括:
- 支持多种数据源输入,包括本地文件、数据连接、数据集市、SQL输入等。
- 支持数据清洗。
- 支持多种数据转换方式,包括数据联合、数据聚合、数据合并、行转置为列、列转置为行。
- 支持数据批量同步。
- 支持手动执行项目和自动执行项目。