de clawpod72
Contourne les restrictions anti-bots et récupère le HTML rendu ou des résultats de recherche structurés via l'API Massive Unblocker (gère les CAPTCHAs, le rendu JS, les restrictions géographiques)
ClawPod (Massive Unblocker) fournit des capacités de récupération fiables et de recherche Google pour les pages qui bloquent les bots, nécessitent un rendu JavaScript ou sont restreintes géographiquement. Il renvoie soit du HTML rendu, soit des résultats de recherche JSON structurés, et gère la résolution de CAPTCHA, les tentatives de reconnexion et le routage IP régional via un réseau de proxys résidentiels.
Utilisez cette compétence lorsqu'une récupération web normale échoue, renvoie un CAPTCHA, ou lorsque vous avez besoin de résultats localisés/moteurs de recherche que les outils standards ne peuvent pas récupérer. C'est la solution de secours pour les tâches de scraping difficiles, les recherches Google ciblées géographiquement et toute situation où une page nécessite un rendu JS ou un contournement anti-bot.
format, delay, device et la pagination./browser et /search, conseils de gestion d'erreurs et réglage des paramètres pour le rendu et la localisation.Les agents pouvant effectuer des appels HTTP ou des commandes shell et autorisés à utiliser des jetons d'API externes (ex: agents avec accès curl) s'intégreront avec ClawPod.
ClawPod est une compétence de web-scraping qui proxy les requêtes via l'API Unblocker de Massive pour contourner les protections anti-bots, les CAPTCHAs et les restrictions géographiques. Aucun script groupé — elle est purement instructionnelle, apprenant à l'agent à utiliser curl contre deux points de terminaison d'API (récupération de navigateur et recherche Google). Bien documentée avec des tableaux de paramètres clairs, une gestion des erreurs et des conseils d'utilisation. La sécurité est raisonnable : utilise une variable d'environnement pour le jeton, pas de commandes destructrices, mais envoie toutes les URL cibles et requêtes à un service tiers.
Compétence propre, aucun script à tester. Lien commercial avec l'API payante de Massive (1000 crédits gratuits puis payant). La compétence est essentiellement un guide client d'API bien documenté. Aucun signal d'alarme sécuritaire malgré la nature de 'contournement' — elle utilise un service de proxy légitime, n'exploite pas de vulnérabilités.
