数据管道 · 衍流

数据怎么被采进来、洗干净、转出去，以及平台当前运行在哪些数据库上。

本文解决什么问题：一是企业已有数据库或多套系统时，分散的数据如何整合进来；二是信创 / 国产化项目常问的「能否使用达梦」。

一句话定义

衍流（Derive-Flux） 是衍数的数据处理方向：负责数据的采集、清洗、转换与流转。平台当前可运行在 MySQL、PostgreSQL、SQLite、达梦 DM8 等数据库上；ClickHouse 这类分析型引擎用于数据分析侧的读取来源，不充当业务主库。

企业的数据很少只住在一个地方：业务系统一套库、历史数据一套、统计分析可能又接了一个数据仓库。衍流要解决的是数据在不同存储之间如何顺畅流动，以及平台自身能不能跑在用户已有的数据库生态里。

平台当前支持下列数据库。部署时按贵司现有环境选择即可。请把「业务主库」与「分析数据源」分开看：

业务数据不会永远静止在一个库里，常见要流转的场景：

衍流提供这类「采洗转流」的处理思路与落地路径，让数据能够被加工成业务真正可用的形态。

界面需要的数据，最终都由数据层提供。 在衍景中看到的一个数字、一张图，追溯到底都是数据层的字段与口径在支撑。因此衍数强调口径一致：同一个指标（例如「销售额」）在所有页面指向同一份定义，而不是每张报表各自计算。

必须用达梦 / ClickHouse 才能用衍数吗？ 不用。默认即可在主流数据库上运行；需要时再切到国产库，不需要为「换库」推翻系统。

是不是所有业务都非要经过 ETL？ 不是。多数业务数据直接在业务库内闭环；只有跨库、跨系统的数据才需要流转加工。衍流是「需要时可用」的能力，而不是强加给每个模块的负担。