我们如何构建 Cloudflare 的数据平台及其上的 AI 智能体 (opens in new tab)

📌 One-Sentence Summary Cloudflare 构建了 Town Lake，一个统一的数据分析平台，以及在其之上的 AI 智能体 Skipper，以解决数据分散问题，让公司任何人都能用自然语言提问，并在几秒内获得正确、可审计的答案。 📝 Summary 本文详细介绍了 Cloudflare 构建统一数据平台 Town Lake 及其对话式 AI 智能体 Skipper 的过程。面对数十个系统造成的数据严重分散问题，Cloudflare 采用数据湖仓架构，基于 Apache Trino、运行在 R2 上的 Apache Iceberg 以及一系列用于治理、PII 检测和 ELT 的内部工具。Skipper 构建在此平台之上，允许用户用自然语言提问，并通过一个多层上下文系统（包括 schema 元数据、人工标注、代码衍生知识和精心整理的数据模型）来锚定问题。文章强调了“默认关闭”的安全模型、使用带有“代码模式”的 MCP 服务器来实现高效的多步骤工作流，并分享了关于提示词设计、工具构建以及访问控制和审计等“枯燥”基础设施重要性的关键经验。该系统现已支持计费、商业智...