轻易云
注册体验

轻易云数据集成平台架构解析:可视化集成方案装配

· 系统管理员· 数据集成· 14 次浏览· 约 2 分钟读完
iPaaSAPI 编排数据集成

整体分层

轻易云数据集成平台采用四层架构,自底向上分别是:

  1. 连接器层:封装各系统的 API 差异。金蝶云星空的会话鉴权、旺店通的 MD5 签名、聚水潭奇门的报文格式,都在连接器内部消化,对上暴露统一的"读单据/写单据/查询基础资料"语义。
  2. 方案装配层:可视化的方案画布。一个"方案"由源端、转换、目标端三类节点构成,节点之间用数据流连接,字段映射以表格方式配置。
  3. 调度运行时层:负责方案的调度执行,包括定时触发、分页拉取、断点续传、失败重试、幂等写入与限流控制。
  4. 可观测层:任务运行日志、逐条数据的执行明细、异常告警与数据重放。

方案装配的三个核心概念

源端节点(Source)

源端定义"从哪里取数"。配置要素包括:连接器实例(即已授权的系统账号)、接口(如"销售订单查询")、增量条件(按修改时间/按单号区间)与分页策略。

转换节点(Transform)

转换节点承载字段映射与数据加工:字段改名、类型转换、值映射(枚举翻译)、常量填充、脚本扩展。轻易云强调"映射即配置",常用转换不写代码;复杂口径才开放脚本。

目标端节点(Target)

目标端定义"写到哪里、怎么写"。关键配置是写入策略:按单号幂等(存在则更新、不存在则新增)、批量大小、失败时的行为(跳过/中止/转人工)。

一条方案的生命周期

阶段关键动作产出
装配画布上连接源端/转换/目标端,配置映射方案草稿
调试单条试跑,查看每个节点的输入输出可运行的方案
上线设置调度周期,开启监控告警生产任务
运营看日志、处理异常、按需重放稳定的数据链路

设计取舍

轻易云在架构上做了几个明确的取舍:配置优先于代码,降低方案的维护门槛;幂等优先于事务,跨系统场景分布式事务不可行,用幂等写入 + 补偿重试保证最终一致;明细优先于汇总,每一条数据都保留执行轨迹,出问题先定位"哪一条、哪一步",而不是先争论"是不是平台的问题"。

本文为原创内容,转载请注明出处:/insights/integration/qeasy-platform-architecture-visual-assembly

评论