数据多源采集与国产化适配:衍流怎么看数据
企业的数据不在一个库里——衍流负责把它们接进来、对齐口径、供界面与 AI 使用。本文讲多源接入与国产化适配的机制与边界。
本文解决什么问题:正式选型时,决策者常问两件事——「我们已有老系统/多套库,你们能把数据整合进来吗」和「信创要求用国产库,你们跑得了吗」。衍流是衍数回答这两问的方向。这篇讲它的机制与边界:多源数据怎么被接进来、口径怎么对齐、国产化怎么落地,以及哪些事它现在就能做、哪些是演进方向。
一句话机制:把「数据从哪来」变成配置,而不是迁移工程
衍流的核心主张是:平台运行在哪种数据库上、接哪些外部数据源,应该是配置层面的选择,而不是推翻系统的迁移工程。
- 界面(衍景)要展示的数、规则(衍枢)要计算的口径,最终都来自数据层;
- 数据层把「接哪套库、从哪采、按什么口径对齐」收敛为可配置项;
- 业务主库、分析读取源、历史/外部数据源分开管理,各司其职。
企业的数据不必搬进一个"大而全"的库才用得上平台——多数业务数据在业务库内闭环,需要跨库/跨系统时才走采集流转。
两个定位,分开看
① 平台跑在哪:业务主库 vs 分析源
- 业务主库:平台系统本身运行其上。默认支持通用关系数据库;国产化(信创)要求下,可接入国产数据库作为主库运行——这是部署期的选型配置,不是另行开发一套。
- 分析读取源:报表/看板做大数据量分析时,可读取独立的分析数据源——它与业务写入解耦,只读、不作为业务主库。
这样设计的好处:日常交易与写入稳定跑在业务主库上,重分析不拖累业务写入;两处按需配置,不互相绑架。
② 数据怎么流动:多源采集与口径对齐
企业数据很少只在一个库里。常见需要整合的场景:
- 采进来:把外部系统的数据接进来(通过接口、文件,或直接连接其它数据库);
- 对齐口径:清洗并统一口径后,进入业务可用的形态;
- 输出:按需提供给报表、看板或下游系统。
衍流的目标,是让「跨系统的数据整合」是一条可配置、可重复的路径,而不是每次手工搬数。
一个关键抓手:AI 源头录入(已落地)
「源头数据准」是口径一致的起点。衍数在这一层已落地的能力是 AI 源头录入:
- AI 表单代填 / 辅助录单:把表单中可自动填的部分由 AI 预填,减少人工重复录入;
- 人工确认后入账:AI 填的内容不是静默写入——由人确认后才正式入账,异常录入在源头即被拦截。
它回答的是「数据进门那一关」:录入少出错、口径从源头统一,下游的报表与 AI 才可能算得对。
与口径体系的关系:为什么先有口径,才有多源
多源采集如果没有「同源口径」,接进来的越多越乱——同一个「销售额」在不同来源里各算各的,整合反而制造矛盾。
衍流的采集流向,最终都汇到同一个口径体系(指标口径):无论数据来自哪套库,落到报表、看板、AI 里时引用的是同一份定义。「多源采集」与「口径一致」是一件事的两面——采是为了让数据可用,口径是为了让数据可信。
边界:哪些是方向,哪些已是能力
对外沟通时我们保持透明:
- 已是能力/主张:多源接入的方向与路径、AI 源头录入(表单代填+人确认)、多库/国产化作为配置项、业务主库与分析源分离;
- 演进方向:离线批量的深度数据管道仍在建设完善中。已落地的以实际版本为准,涉及具体部署选型请在评估阶段与交付方逐项确认。
常见疑问
必须用国产库才能用衍数吗? 不用。默认即支持通用关系数据库,国产化是部署期按需的选型项——需要时再切换,不需要为"换库"推翻系统。
我们已有老系统的数据,能接进来吗? 可以按多源接入的路径把外部数据采进来并对齐口径。具体对接方式(接口/文件/直连)与数据量,建议在实施评估阶段确认。
所有业务都必须走数据采集/清洗吗? 不是。多数业务数据在业务库内直接闭环;只有跨库、跨系统的整合才需要走采集流转——衍流是「需要时可用」的能力,不是每个模块的强制负担。
相关阅读
- 数据最终长成什么界面 → 衍景 · 配置驱动界面
- 口径如何定义与校验 → 指标口径:定义与校验
- 部署在哪种数据库、怎么接入 → 私有化部署与环境要求