---
url: /v6.2/pipeline-intro.md
---
# 数据集成

## 概述

数据集成是一组业务流程，它包含了 ETL、数据同步等各种类型的数据技术，将不同来源的数据整合为一组有意义且有价值的数据集，供业务分析。

在 HENGSHI SENSE 中，数据集成支持对不同业务系统的原始数据进行各种清洗、转换和合并，根据业务需求创建一致的维度表和事实表，将最靠近分析的就绪的数据写入性能良好的数据库或数仓中，供数据建模、指标计算、可视化分析使用，从而得到更全面、更精准的报表。

数据集成使用户不再需要使用第三方工具比进行数据迁移和转换，可以在 HENGSHI SENSE 一站式解决所有数据问题。

## 功能简介

数据集成功能包括[数据集成](pipeline.md)和[批量同步](batch-sync.md)两个子模块，批量同步模块主要用于表数据的直接同步，数据集成子模块则有更丰富的功能，包括：

1. 支持多种[数据源输入](pipeline.md#输入类型)，包括本地文件、数据连接、数据集市、SQL 输入等。
2. 支持数据清洗。
3. 支持多种数据转换方式，包括数据联合、数据聚合、数据合并、行转置为列、列转置为行。

数据集成和批量同步都支持手动执行项目和定时执行项目。