覆盖主流数据库、云组件、大数据平台、文件和流式数据
数据集成平台
数据集成平台
基于分布式架构的一站式数据集成产品
通过 Web 界面和拖拽配置完成集成任务配置、监控管理、数据截取、转换和周期调度，轻松完成海量数据抽取、转换、加载服务。
多源异构拖拽清洗自动建表断点续传
通过拖拽方式完成复杂数据清洗和转换整合
典型实时集成场景中支撑海量数据处理
轨迹类业务数据集成速度高达 20 万条每秒
数据集成平台是数美科技研发的一款基于分布式架构的数据集成产品。
针对多源异构数据集成共享难度大、速率低、操作复杂等难题，平台提供一站式解决方案，用户可通过简单易用的 Web 界面和拖拽点击方式实现集成任务配置和监控管理。
平台支持灵活进行数据截取、转换等操作，并根据需要进行自动周期性调度，完成海量数据的抽取、转换、加载服务。
能力链路
以资源为核心组织数据流
数据集成平台OracleSQL ServerGBaseRDS功能架构
围绕多源接入、任务配置、清洗转换、调度监控和高可靠执行构建完整数据集成能力。
优势特点
核心优势覆盖数据服务全流程
支持多源异构数据集成
支持 100+ 数据源集成能力，覆盖主流数据库、阿里云组件、大数据平台、文件搬移、文件解析和流式数据接入。
100+ 数据源全量/增量流式接入
清洗转换组件丰富易用
提供数十种转换插件类型和 100+ 转换组件，屏蔽复杂数据操作过程，降低技术入门门槛。
拖拽配置低门槛复杂清洗
批量作业快速自动建表
支持异构数据库之间通过 Web 页面批量创建任务作业，字段类型自动匹配，无需手工执行 SQL。
自动建表字段匹配批量创建
高性能高可靠
基于分布式任务架构，多线程并行流式处理，支持增加作业节点提升性能，并通过断点续传和自动回滚保障可靠性。
并行处理容器化部署断点续传
多租户管理
支持不同租户下数据源、转换和作业信息独立管理，租户间数据严格隔离，租户内资源共享。
租户隔离角色权限资源共享
非侵入式数据增量获取
支持数据库全量交换复制、基于时间戳的增量同步，以及日志或 CDC 方式的非侵入式增量同步。
Full Load时间戳增量CDC
典型应用场景
面向跨层级协同与数据流通的落地场景
多源异构数据实时集成
将多源异构数据进行抽取、转换及装载，实现增量数据实时导入，并通过配置完成码表查询、字符转换、脏数据过滤、JS 脚本处理和数据校验。
跨隔离网络海量数据集成
将数据库表存量和增量数据转换成文件，通过网闸进行内外网文件交换，再由 Bridge 将 FTP 中的文件转换成数据库表数据。
核心能力
核心能力清单
数据源适配
OracleSQL ServerGBaseRDSMaxComputeOSS
集成处理
抽取转换加载自动调度批量建表字段匹配
可靠运行
多线程并行断点续传自动重传自动回滚多租户
让异构数据集成从配置到运行更简单
围绕数据抽取、清洗转换、自动调度、断点续传和增量同步，构建稳定可靠的数据集成链路。