数据集成 UDI Studio

数据集成 UDI Studio

数据集成（ETL）平台支持包括主流数据库和大数据系统在内的200多种ETL处理组件，实现复杂数据集成流程的高效执行管理。并提供可视化操作界面，用户通过组件拖拽即可轻松定义和定制数据集成任务。

全部产品

功能特性

元数据驱动的数据集成平台，支持可视化开发，通过拖拽方式构建数据处理工作流，支持多引擎运行，内置的生命周期管理工具支持项目在开发、测试、生产环境之间进行切换，无需做大量迁移和适配工作。

支持30余种异构数据源集成，支持数据源任意方向数据读写，屏蔽各业务系统底层数据存储技术差异，实现全域数据汇聚，为上层计算应用提供统一的数据出口。

快速配置抽取任务，支持分批抽取、批量命名等配置；支持同步业务数据中的新增及变化数据，提高同步效率；支持记录同步点位，中断时自动重启并从之前点位继续同步，保障数据抽取可靠性。

底层技术自研，数据同步低延迟、高吞吐、高可靠；支持可视化/脚本双模式数据同步，满足不同人员集成需求，支持全量和增量同步及性能展示，支持多通道并发抽取、同步速度上限控制和读写数据总量同步。

同时支持实时/定时/批处理多种应用场景，满足用户对数据的不同时效需求。一份数据可同时应用于各类分析场景。

提供可视化数据开发平台，输入、输出、加工、清洗、数据转换等200多种组件可自由拖拽组合，形成自动化作业调度和运维监控，易于扩展、定制修改、升级和移植。

支持接入多源异构数据，对数据链路统一管理，从传统数据迁移到工业物联设备、日志、事件流实时捕获，多源异构数据皆可高效入湖。

集成流程可视化，对数据全过程进行实时监控，并提供完整的日志信息、快速进行故障排查和问题定位。

系统集成

数据集成 UDI Studio在某单位通过多源数据抽取、采集服务，将该单位多个子系统数据实现在线采集同步，解决该单位数据零散，部门之间信息不同步等问题，保障该单位对各部门任务执行情况的实时掌握。
数据清洗

数据集成 UDI Studio在某省委通过数据清洗服务，识别、处理和修复数据集中存在的任何无效数据、矛盾数据、不完整数据、重复数据或格式错误的数据等问题，以创建高质量的数据集。
数据转换

在某单位多源数据融合项目中，需要对多个不同的数据源之间进行数据整合时，由于各数据源格式和结构的差异，无法对数据进行融合展示，使用数据集成UDI Studio，按照新的数据标准，将其不同数据源之间的数据转换，以确保不同来源的数据能够被统一处理和分析。
规则校验

对于一些单位，一直以来都采用excel文件的形式进行数据采集与上报，导致数据填写不规范，数据管理困难，使用数据集成UDI Studio，制定完整的数据校验规则，对采集或上报的数据进行校验后入库，减少后期数据处理成本，提高数据规范与数据价值。