GEOChecker

セキュリティ

URL チェックと crawler 安全性の扱いです。

URL 処理

API はクロール前にローカル、プライベート、内部、不対応プロトコルのアドレスを拒否します。

リクエストにはタイムアウト、リダイレクト上限、ページ数上限、レスポンスサイズ上限があります。