GEOChecker安全检测器如何处理 URL 检查和 crawler 安全。URL 处理API 在抓取前会拒绝本地、私有、内网和不支持协议的地址。抓取限制请求设置超时、重定向上限、页面数量上限和响应大小上限。
