Data Engineering 3.0

数据工程 3.0：AI 的需求从数据质量转向上下文质量

数据工程正从仅关注数据质量演变为强调上下文质量，这是由生成式 AI 和代理式 AI 的兴起所必需的转变。虽然传统的数据工程 2.0 通过衡量准确性、完整性和一致性的框架确保数据的可信度，但 AI 代理需要的不仅仅是高质量的数据。这些代理需要理解关系、解释业务含义、考虑历史和当前状态以及识别相关证据，这些方面都属于上下文质量的范畴。挑战在于，即使底层数据通过了所有传统的质量检查，也要为 AI 代理组装全面且相关的上下文。