Apify (web scraping)

Ce qu'il fait\n\nCette compétence fournit des instructions concises et des exemples pour exécuter des Actors Apify afin de scraper des sites web, d'effectuer des analyses synchrones ou asynchrones, de consulter l'état d'exécution et de récupérer les résultats du jeu de données. Elle couvre le démarrage des exécutions, l'attente de la fin, la récupération des éléments du jeu de données et les modèles courants d'exécution/interruption.\n\n## Quand l'utiliser\n\nUtilisez cette compétence lorsqu'un utilisateur demande de "scraper un site web", "extraire des données de", "exécuter un crawler web" ou demande un scraping structuré (exemples : titres de sites, listes de produits, résultats de recherche). Elle est conçue pour des tâches synchrones rapides (<5 min) et des analyses asynchrones plus longues.\n\n## Ce qui est inclus\n\n- Scripts : Exemples de commandes curl pour démarrer des exécutions, des points de terminaison run-sync et des boucles de scrutation (aucun répertoire de scripts locaux présent).\n- Références : Conseils en ligne pour les ID d'exécution, les ID de jeu de données, la pagination et les Actors populaires (Google Search Scraper, Instagram scraper, Amazon crawler).\n- Instructions : Guides étape par étape pour les exécutions asynchrones, les exécutions synchrones, la vérification du statut, l'interruption et la récupération des éléments du jeu de données.\n\n## Agents compatibles\n\nProbablement utilisable avec des environnements d'exécution d'agents capables d'effectuer des requêtes HTTP et des commandes shell (flux basé sur Curl). Agents compatibles : agents génériques capables de HTTP, automatisation de style Copilot pouvant exécuter shell/curl, et connecteurs de style MCP fournissant l'injection de jetons et des installations de scrutation.