Databricks Zerobus Ingest Achieves Petabyte-Scale Data Streaming

Databricks 推出了 Zerobus Ingest，这是一个无服务器流式 API，旨在处理 PB 级数据管道。该系统通过使用动态分区自动扩展计算资源来实现这一目标，无需手动管理基础设施。在基准测试中，Zerobus Ingest 向单个表持续提供超过 12 GB/s 的吞吐量，使用 NASA 的 NEOWISE 数据集在不到 24 小时内摄取了 1 PB 数据，且无需任何预配置。 AI

影响 使组织能够处理海量实时数据流，用于 AI/ML 应用，而无需复杂的基础设施管理。

排序理由 一家主要数据基础设施公司发布的产品公告，详细介绍了大规模数据处理的新功能。 [lever_c_demoted from significant: ic=1 ai=0.7]

在 Databricks Blog 阅读 →

• Databricks
• Delta tables
• NASA’s NEOWISE dataset
• Unity Catalog
• Zerobus Ingest

• 基础设施
• 产品

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →