在客户行为发生时立即采取行动
流式数据架构将原始的线上和线下信号转化为持续解析的身份信息和稳定的服务合约——因此,AI 决策基于实时数据,而非昨晚的数据。
人工智能基于实时数据运行——大多数企业仍然使用昨天的数据进行训练
客户信号的价值衰减迅速。购物车遗弃、门店访问、客服电话、价格查询——每一次都开启了一个窗口,但这个窗口会在几分钟或几小时内关闭。然而,大多数企业数据仍然以夜间批量的方式导入到为报告而非行动而构建的数据仓库中。等到模型接收到事件时,采取行动的时机早已过去。实时人工智能很少会因为算法而失败;它无法处理过时、不连续的数据。
两个结构性缺陷使情况更加糟糕。身份信息分散在POS机、电商平台、应用程序、CRM和服务系统中,因此“客户”实际上是十几个部分信息,这些信息大多一致——如果没有受监管的共享标识符,这些统一的信息就会悄然失效。当存储或管道发生变化时,下游的一切都会受到影响。这就是为什么分析师们不断得出相同的结论:数据质量和信任,而非模型质量,才是number——人工智能价值实现的障碍。
- 到 2028 年,随着未经验证的人工智能生成的数据激增,50% 的组织将采用零信任数据治理。 — Gartner,2026 年 1 月 ↗
- 数据质量反复被列为人工智能成功的最大障碍,大多数公司表示其人工智能投资几乎没有或根本没有价值。 — 行业数据质量研究,2026 年 ↗
- 88% 的组织经常使用人工智能,但超过 80% 的组织表示,人工智能对企业级息税前利润 (EBIT) 没有产生任何实质性影响。 — 麦肯锡,《2025 年人工智能现状》 ↗
为什么这个问题今天仍未解决
批量延迟:过期意图的决策
每晚 ETL 意味着模型根据客户昨天的行为进行操作。最高意图窗口(信号发出后的几分钟和几小时)在数据到达时就已经过去了,因此即使是完美的模型也会优化已经过去的时刻。
身份碎片化:十几个部分客户
由于没有规范标识符,记录在 POS、应用程序、电子商务和 CRM 系统之间合并不一致。电子邮件会更改,设备会共享,Cookie 会过期——统一的配置文件会悄无声息地失效,因此客户细分和代理会基于一个并不存在的客户进行推理。
Forrester Consulting 发现,只有 10% 的客户数据平台 (CDP) 用户表示该平台满足了他们的所有需求。— Forrester Consulting,来自 Uniphore ↗脆弱的合约:存储的改变破坏了上面的一切
当语义层、代理层和应用层直接从存储读取数据时,对管道或引擎的任何更改都会向上级联导致故障。没有稳定的机制将依赖于数据的组件与数据存储方式隔离开来。
您无法信任的 AI 数据
如果没有血统、重新认证和治理,人工智能就会忠实地放大陈旧和未经验证的数据——随着模型开始生成自己的数据,信任问题会变得更加复杂,而不是得到解决。
具有持续身份和稳定服务合约的流式架构
Kafka 是事件主干,实时捕获线上和线下发生的每一个操作。Flink 利用事件时间语义、窗口机制和状态转换,基于该数据流进行计算,因此平台能够反映客户当前的实际操作,而非夜间作业的最后总结结果。此外,StarRocks 在此基础上提供高性能的分析访问。连接器目录负责与 POS、电商、CRM、服务、广告和数据仓库系统集成。
身份信息会持续解析到“黄金记录”中,并随着事件的到来而不断演进,而不是一次性清理后立即失效。上层通过服务视图(显式数据契约)读取数据,因此底层存储引擎和管道内部结构可以进行更改,而不会破坏上层的语义层、代理层或应用层。由于该架构遵循最小复制模式,您现有的数据仓库仍然是权威存储;该循环仅添加了事件处理、身份解析和服务层。
工作原理
实时数据基础 背后的机制。
事件流
所有线上和线下行为都会以连续行为信号的形式记录到 Kafka 中。Flink 使用事件时间语义和窗口机制对其进行计算,因此状态反映的是客户当前的行为,而不是夜间作业最后总结的内容。
黄金记录
身份是连续解决的,而不是一次性清理。随着新事件的到来,记录不断演变——将碎片化的配置文件合并成下游语义和代理可以信任的单一当前视图。
服务视图
上层读取稳定的数据合约。存储引擎和管道内部结构可以在底层进行更改,而不会破坏依赖于它们的语义、代理或应用程序层。
卓越的典范
基于上述机制和独立基准的方向性结果——设计目标,而非保证结果。
基于实时意图而非过时批次进行决策
因为状态反映了当前的事件流,所以代理和活动在仍然转换的窗口内进行操作(信号发出后几分钟,而不是第二天早上),而不是优化已经过去的时刻。
一位值得信赖的客户,持续不断
持续的身份解析确保黄金记录保持最新,因此细分、报告和代理只需读取一个不断更新的个人资料,而不是十几个互不相符的不完整资料。
在不破坏 AI 的情况下更改存储
稳定的服务合约将数据之上的所有内容隔离开来,因此管道和引擎可以在不造成下游中断的情况下不断发展——随着数据量和机器生成的数据的增长,这是值得信赖、可治理的人工智能的基础。
到2028年,随着未经核实数据的激增,50%的组织将采用零信任数据治理。— Gartner,2026 年 1 月 ↗常见问题
这会取代我们的数据仓库吗?
不。该架构采用最小复制模式——您的数据仓库仍然是权威存储。Kafka、Flink 和 StarRocks 在其基础上添加了事件处理、持续身份解析和快速服务层,而不是成为一个新的记录系统。
这里的实时与 CDP 的批量同步有何不同?
CDP 通常会按计划整合数据。这里的事件流是连续的,Flink 使用事件时间语义对其进行计算,因此状态转换和窗口反映了行为发生时的情况——这是 AI 决策实际需要的输入。
如果存储发生变化,上层如何保持稳定?
服务视图是显式数据契约。语义、代理和应用程序会读取这些合约,因此存储引擎或管道内部结构可以在不破坏上述任何内容的情况下进行发展。