Cloudflare测试Web Search API统一接入实时网页搜索
Cloudflare推出Web Search API测试版,面向需要实时网络信息的AI应用和代理。该服务通过REST API及Cloudflare Workers提供访问,并支持使用开发者自带的供应商密钥,同时将日志记录、权限控制和费用管理统一纳入AI Gateway。
目前,API可接入Ceramic.ai、Exa和Linkup等搜索提供商,为语言模型获取近期新闻、API变更、技术文档等网页内容,并将搜索结果作为推理上下文。应用或外部服务只需携带AI Gateway身份验证令牌,在请求中指定搜索提供商,即可获得结果;搜索请求和模型推理日志也能进行统一记录和归因。
这项服务试图解决AI代理盲目猜测网页地址的问题。代理在需要实时抓取内容时,常会先推测URL,再通过curl等工具访问;一旦地址判断错误,就可能得到404响应。引入搜索接口后,代理可以先检索相关页面,再获取更可靠的内容。
Cloudflare要求参与搜索的爬虫遵守开发者文档中关于“已验证机器人”的公开规则,搜索响应还必须附带被抓取内容的来源链接。公司认为,这有助于提高网络搜索的透明度和公平性,也让内容创作者能够更清楚地决定数据是否被使用。
社区讨论主要集中在搜索质量、数据保留政策以及统一接口的实际价值。Simon Willison提出,开发者尤其需要确认是否可以保存并再次发布搜索结果;如果代理不能保留响应,或无法支持分享完整对话记录,可能会限制实际应用。Erato Labs联合创始人兼首席技术官Maximilian Goisser则认为,对已经使用Cloudflare的企业而言,通过同一平台结算云服务费用,可能减少重新走采购流程的成本。
Cloudflare表示,后续会筛选支持“零数据保留”的供应商,并按照供应商标价提供搜索服务,不额外加价。公司还计划为AI Gateway增加原生服务器工具,Web搜索将成为首批能力之一;在相关功能完善前,开发者可以继续利用Workers把网页搜索接入现有工作流。
本文基于公开渠道信息整理,内容可能存在不准确或遗漏之处,不代表本站立场,如内容涉及侵权或错误,请联系我们处理。
阅读原文