GEOChecker
Sécurité
Gestion des vérifications d’URL et de la sécurité du crawler.
Traitement des URL
L’API rejette les adresses locales, privées, internes et les protocoles non supportés avant crawling.
Limites du crawler
Les requêtes utilisent des timeouts, limites de redirection, limites de pages et limites de taille de réponse.