Just-Scrape CLI

Outil d'extraction de données et de web scraping propulsé par l'IA pour rechercher, explorer et surveiller des pages web avec un résultat JSON structuré.

déclencheurs:scrape webpageextract jsoncrawl documentationmonitor page changesweb searchstructured data

GitHub SKILL.md

Ce qu'il fait

Cette compétence intègre le CLI just-scrape, fournissant à l'agent des capacités avancées d'intelligence web. Elle permet de transformer n'importe quelle URL en divers formats (markdown, HTML, captures d'écran) et d'extraire des données hautement structurées à l'aide de prompts IA et de schémas JSON.

Quand l'utiliser

Utilisez cette compétence lorsqu'une tâche nécessite plus qu'une simple récupération de page : rechercher des sources sur le web, effectuer des explorations massives de documentation, surveiller une page pour détecter des changements via cron, ou extraire des points de données spécifiques (comme des prix ou des listes de produits) dans un format structuré.

Ce qui est inclus

Instructions : Flux de travail détaillé pour l'escalade de la recherche vers le scraping, l'extraction, l'exploration et la surveillance.
Outillage : Référence complète des commandes pour le CLI just-scrape, incluant le mode furtif et le rendu JS.

Agents compatibles

Compatible avec tout agent ayant accès à un environnement Bash et pouvant installer des packages NPM (ex: Claude Code, Cursor, OpenClaw).

Étiquettes

#web-scraping #data-extraction #ai-agents #browser-automation #structured-data #web-crawler #monitoring

Pas encore audité

Cette compétence n'a pas encore été examinée par notre pipeline d'audit automatisé.

Informations

Dépôt: just-scrape
Étoiles: 31

Compétences similaires

AWP (Agent Work Protocol)

Tooling and scripts for onboarding, staking, allocation, and managing agents on the AWP network (Base/Ethereum/Arbitrum/BSC). Includes safe, opt-in daemon and r

Cost Tracker

Monitor agent session costs, set budget alerts, and get actionable token-spend optimizations to keep multi-session workflows within budget.

Canary — Post-Deploy Visual Monitor

Run a short post-deploy monitor that captures screenshots, checks console errors, and compares performance against baselines to detect regressions and page fail

Monitoring Stack Deployer

Deploy and configure production-ready monitoring stacks (Prometheus, Grafana, Datadog) with collectors, dashboards, and alerting rules for Kubernetes, Docker, o

Azure External Attack Surface Management

Provides expert guidance for Azure External Attack Surface Management (EASM): quotas, configuration, integrations, and exporting inventory to analytics platform

Cross-Project Analytics

Query local, privacy-safe cross-project analytics to report on agent, skill, hook, and team performance; replay sessions and estimate token costs.

Agent Browser — Core

Core usage guide for agent-browser: snapshot-and-ref browser automation to navigate pages, interact with elements, extract data, take screenshots, manage sessio

Skyvern — AI Browser Automation

Cloud-first AI browser automation platform and SDKs for extracting data, filling forms, downloading files, and running multi-step web workflows from agents or c

Retour aux compétences