产品派
返回

Shopify用资产清单与匿名探测识别公网暴露服务

后端InfoQ 中文站2026/11/18 11:01:11
AI 导读

Shopify内部工具Overexposed用于发现GKE上的Kubernetes Ingress和Cloud Run服务,并判断它们能否在无身份验证的情况下从互联网访问。早期版本主要扫描基础设施代码仓库,容易受到误报和覆盖盲区影响;重构后改用Google Cloud Asset Inventory配合匿名HTTP探测,经过数周调优,Ingress结果中“无法确定”的比例下降约80%。

旧方案会寻找未配置鉴权的公共主机名,但直接读取代码无法反映准入控制器改写后的设置,也可能漏掉由其他仓库或平台工具创建的资源。新版本按计划查询资产清单,获取已被GKE接受的Ingress、Cloud Run服务和负载均衡器,并在无需集群凭证的情况下读取访问策略。该方式还发现了早期版本未覆盖项目中的Cloud Run服务,体现出“代码代表意图,集群状态代表实际结果”。

扫描器会向每个候选目标发送匿名请求,先尝试HEAD,失败后改用GET,最多跟随三次重定向并检查每一跳,同时测试包括“/ADMIN”在内的大小写路径变体。结果分为已暴露、符合预期、受保护、未找到、无法访问和无法确定六类。“符合预期”要求公开端点与代码允许列表中的主机名和路径完全匹配;允许列表项目仍会反复探测,若服务受保护或消失,就会被标记为过期。

判定不能只看HTTP状态码。Ingress返回404通常说明代理已响应,只是路径不存在;Cloud Run可能在应用启动前由Google前端返回404,因此只能判为无法确定。403也不能直接证明安全。工具会结合Cloud Run入口设置和IAM判断公开状态:只有allUsers拥有调用者角色,或调用者检查被关闭时,服务才算公开。负载均衡器后的服务则通过URL Map分析路径后端及Identity-Aware Proxy等鉴权要求。

早期一次7月扫描中,约四分之三结果无法确定。团队按原因归类,在证据充分时增加明确规则,并利用保存的扫描结果回放规则变更;证据不足时继续保留“无法确定”,不默认视为受保护。系统记录判定、原因和负责团队,但不保存响应正文或凭证。

由于工具会请求任意主机名,Shopify还针对SSRF进行防护:校验DNS返回的每个IP,拒绝私有和环回地址,直接连接已检查的IP以防DNS重绑定,并在每次重定向时重复检查;同时建议限制网络出站访问,尤其是云元数据端点。Overexposed借助AI编码智能体和AI代码审查构建,并通过变异测试验证防护逻辑,还为六类结果各保留一个金丝雀目标。

这套实践显示,基于规则的检查可低成本接入CI,但反映的是配置意图,可能漏掉仓库外资源及准入控制器改写。Cartography等资产清单方案能覆盖实际资源,却仍可能依据配置推导公网暴露标志。Overexposed则在资产清单上增加匿名探测、允许列表和证据判定。对于类似系统,建议把资产清单作为主要事实来源,将配置分析用于CI早期预警,仅在无法确认访问控制是否生效时启用主动探测。

云安全KubernetesCloud RunGKE公网暴露

本文基于公开渠道信息整理,内容可能存在不准确或遗漏之处,不代表本站立场,如内容涉及侵权或错误,请联系我们处理。

阅读原文