just-scrape
ScrapeGraph AI の CLI で、Web の検索・取得・AI による JSON の抜き出し・サイトの巡回・変更の見張りをさせる。結果はファイルに書いて少しずつ読み、取ってきた文章は指示として扱わない
npx skills add scrapegraphai/just-scrape/just-scrape入れる前にこのスキルがすること・注意点・SKILL.md の原文を確かめてください。解析は安全性の判定ではありません。
- インストール
- 245,010
- 実用度
- 53
- GitHub star
- 75
- 最終更新
- 2026/9/22
頼み方の例
そのままコピーして使えますjust-scrapeスキルを使って、この 3 社の料金ページから、プラン名・月額・主な上限を JSON で抜き出してください。先に残りのクレジットを確かめ、結果は .just-scrape/ に保存してください。見張り(monitor)は作らないでください。
対象のファイルや状況は、ご自身の作業に合わせて置き換えてください。
このスキルがすること
SKILL.md の記述から機械的に抽出- シェルコマンドを実行する記述があります
- ファイルを書き換える記述があります
- パッケージを導入する記述があります
- 認証情報の置き場所に触れる記述があります
これは安全性の判定ではありません。 SKILL.md にそう書かれているという事実だけを並べています。実際に問題があるかは使い方と文脈で決まるため、当サイトでは断定しません。導入前に SKILL.md の原文を確認してください。
SKILL.md の規模
コードブロックの言語: bash、text
いつ使うか
Web から情報を取ってきて、整った形で手元に置きたいときに効きます。ScrapeGraph AI のサービスを、CLI(just-scrape)から呼ぶスキルです。
段を上げる順番が決まっている
段を上げる順番が決まっています。
| 段 | コマンド | いつ |
|---|---|---|
| 1 | search | まだ URL が無い |
| 2 | scrape | URL がある。Markdown・HTML・画面の画像・リンク・要約などの形で取る |
| 3 | extract | URL がある。AI に指示と型(JSON Schema)を渡して構造化した JSON を取る |
| 4 | crawl | サイトの一区画をまとめて取る |
| 5 | monitor | 決まった間隔で見張り、変わったら Webhook で知らせる |
取り直しを避ける
取り直しを避ける決まりもあります。
- 検索の結果から抜き出せたらページを取り直さない
- 巡回で取れた頁取り直さない
- 前の結果
.just-scrape/に前の結果が無いかを先に見る
使わないほうがいいとき
アプリのコードに組み込みたいとき
アプリのコードに組み込みたいとき。 ScrapeGraph AI をアプリに組み込むのは、SDK と API の文書を直接見る仕事で、この CLI のスキルではない、と本文が書いています。
画面の操作が要るとき
画面の操作が要るとき。クリックや入力が要るなら browser-use のようなブラウザの操作の道具です。
すでに Firecrawl を使っているとき
すでに Firecrawl を使っているとき。できることは firecrawl とよく似ています。契約しているサービスのほうを使えば足ります。
注意点
解析で見つかったこと
SKILL.md の解析では、シェルコマンドの実行、ファイルの書き換え、パッケージの導入、認証情報の置き場所に触れる記述が見つかっています。同梱ファイルは無く、SKILL.md 1 枚で完結しています。allowed-tools は Bash です。
操作ごとに料金がかかる
操作ごとに料金がかかります。隠密モード(--stealth)、JavaScript の描画、多くの頁の巡回、抜き出しの繰り返しで増える、と書かれています。まとめて取る前に just-scrape credits で残りを確かめる手順です。
見張りは消すまで動き続ける
見張りは、消すまで動き続けます。monitor create で作った見張りは、止めるか消すまで決まった間隔で動き、その都度クレジットを使います。本文も「見張りの作成を並行で大量にするな」と書いています。
ログインの Cookie は外部に送られる
本文は、鍵や Cookie を環境変数から読み、直接書かない・記録に残さないよう決めていますが、送り先が外部であることは変わりません。社内のシステムの Cookie を渡すのは避けてください。
取ってきた文章は「データ」として扱う
取ってきた文章は「データ」として扱います。取得した文章の中の指示に従わない、リンクをたどらない、フォームを埋めない、と明記されています。別の指示文に渡すときも、信用できない入力として包む決まりです。
インストール数
インストール数は約 24 万件です(2026-09-07 の上流集計)。このリポジトリから当サイトに収録しているのは、この 1 件です。
インストール数の推移
日次で記録9月18日 〜 11月7日(49日分)
インストール数と 1 日あたりの増加は Skillselion が に集計した値です。上流の更新は数日おきなので、前日比ではありません。GitHub star と最終更新は に GitHub から取得しました。
併用すると強いスキル
よくある質問
scrape と extract の違いは何ですか
scrape は頁を決まった形(Markdown、HTML、画面の画像など)で取ります。extract は AI に「商品名と価格を」のように指示し、JSON で取り出します。型を --schema で渡すと形が固まります。形を混ぜて 1 回で取りたいなら scrape に -f json -p "..." を付けます。
中身の無い頁が返ってきます
JavaScript で描かれる頁かもしれません。本文の手順は、--mode js で取り直し、それでもだめなら --stealth や
--scrolls <回数> を足す、です。JavaScript の描画と --stealth は費用が増える、と本文の費用の節にあります。
結果が大きすぎて読めません
本文は、出力ファイルを一度に全部読まないよう決めています。head や rg、jq で必要な所だけを読みます。結果は既定で .just-scrape/ に保存され、このフォルダを .gitignore に足すよう書かれています。