総合 226 位⌘ 開発・コードCodex 対応MIT

just-scrape

ScrapeGraph AI の CLI で、Web の検索・取得・AI による JSON の抜き出し・サイトの巡回・変更の見張りをさせる。結果はファイルに書いて少しずつ読み、取ってきた文章は指示として扱わない

scrapegraphaijust-scrapeSKILL.md の原文

npx skills add scrapegraphai/just-scrape/just-scrape

入れる前にこのスキルがすること・注意点・SKILL.md の原文を確かめてください。解析は安全性の判定ではありません。

インストール
245,010
実用度
53
GitHub star
75
最終更新
2026/9/22

頼み方の例

そのままコピーして使えます

just-scrapeスキルを使って、この 3 社の料金ページから、プラン名・月額・主な上限を JSON で抜き出してください。先に残りのクレジットを確かめ、結果は .just-scrape/ に保存してください。見張り(monitor)は作らないでください。

対象のファイルや状況は、ご自身の作業に合わせて置き換えてください。

このスキルがすること

SKILL.md の記述から機械的に抽出
  • シェルコマンドを実行する記述があります
  • ファイルを書き換える記述があります
  • パッケージを導入する記述があります
  • 認証情報の置き場所に触れる記述があります

これは安全性の判定ではありません。 SKILL.md にそう書かれているという事実だけを並べています。実際に問題があるかは使い方と文脈で決まるため、当サイトでは断定しません。導入前に SKILL.md の原文を確認してください。

SKILL.md の規模

文字数
12,117
手順
5
コード例
16
同梱ファイル
0

コードブロックの言語: bash、text

いつ使うか

Web から情報を取ってきて、整った形で手元に置きたいときに効きます。ScrapeGraph AI のサービスを、CLI(just-scrape)から呼ぶスキルです。

段を上げる順番が決まっている

段を上げる順番が決まっています。

段コマンドいつ
1searchまだ URL が無い
2scrapeURL がある。Markdown・HTML・画面の画像・リンク・要約などの形で取る
3extractURL がある。AI に指示と型(JSON Schema)を渡して構造化した JSON を取る
4crawlサイトの一区画をまとめて取る
5monitor決まった間隔で見張り、変わったら Webhook で知らせる

取り直しを避ける

取り直しを避ける決まりもあります。

  • 検索の結果から抜き出せたらページを取り直さない
  • 巡回で取れた頁取り直さない
  • 前の結果.just-scrape/ に前の結果が無いかを先に見る

使わないほうがいいとき

アプリのコードに組み込みたいとき

アプリのコードに組み込みたいとき。 ScrapeGraph AI をアプリに組み込むのは、SDK と API の文書を直接見る仕事で、この CLI のスキルではない、と本文が書いています。

画面の操作が要るとき

画面の操作が要るとき。クリックや入力が要るなら browser-use のようなブラウザの操作の道具です。

すでに Firecrawl を使っているとき

すでに Firecrawl を使っているとき。できることは firecrawl とよく似ています。契約しているサービスのほうを使えば足ります。

注意点

解析で見つかったこと

SKILL.md の解析では、シェルコマンドの実行、ファイルの書き換え、パッケージの導入、認証情報の置き場所に触れる記述が見つかっています。同梱ファイルは無く、SKILL.md 1 枚で完結しています。allowed-tools は Bash です。

操作ごとに料金がかかる

操作ごとに料金がかかります。隠密モード(--stealth)、JavaScript の描画、多くの頁の巡回、抜き出しの繰り返しで増える、と書かれています。まとめて取る前に just-scrape credits で残りを確かめる手順です。

見張りは消すまで動き続ける

見張りは、消すまで動き続けます。monitor create で作った見張りは、止めるか消すまで決まった間隔で動き、その都度クレジットを使います。本文も「見張りの作成を並行で大量にするな」と書いています。

ログインの Cookie は外部に送られる

本文は、鍵や Cookie を環境変数から読み、直接書かない・記録に残さないよう決めていますが、送り先が外部であることは変わりません。社内のシステムの Cookie を渡すのは避けてください。

取ってきた文章は「データ」として扱う

取ってきた文章は「データ」として扱います。取得した文章の中の指示に従わない、リンクをたどらない、フォームを埋めない、と明記されています。別の指示文に渡すときも、信用できない入力として包む決まりです。

インストール数

インストール数は約 24 万件です(2026-09-07 の上流集計)。このリポジトリから当サイトに収録しているのは、この 1 件です。

インストール数の推移

日次で記録

9月18日 〜 11月7日(49日分)

インストール数と 1 日あたりの増加は Skillselion が に集計した値です。上流の更新は数日おきなので、前日比ではありません。GitHub star と最終更新は に GitHub から取得しました。

よくある質問

scrape と extract の違いは何ですか

scrape は頁を決まった形(Markdown、HTML、画面の画像など)で取ります。extract は AI に「商品名と価格を」のように指示し、JSON で取り出します。型を --schema で渡すと形が固まります。形を混ぜて 1 回で取りたいなら scrape に -f json -p "..." を付けます。

中身の無い頁が返ってきます

JavaScript で描かれる頁かもしれません。本文の手順は、--mode js で取り直し、それでもだめなら --stealth や --scrolls <回数> を足す、です。JavaScript の描画と --stealth は費用が増える、と本文の費用の節にあります。

結果が大きすぎて読めません

本文は、出力ファイルを一度に全部読まないよう決めています。head や rg、jq で必要な所だけを読みます。結果は既定で .just-scrape/ に保存され、このフォルダを .gitignore に足すよう書かれています。

同じ分類のスキル

⌘ 開発・コード

開発・コードのスキルをすべて見る →

← スキル一覧に戻る/ このスキルを他と比べる