URLを渡すと、サイト全体をAIが読みやすい形式にして持ってきてくれる。
#スクレイピング#データ収集
これは何?ブラウザで使えるサービス
できること
URLを渡すと、そのサイト全体を巡回して広告やメニューを取り除き、AIが読みやすいきれいな文章に変換して持ってきてくれる。『このサイトの内容をぜんぶChatGPTに読ませたい』というとき、コピペを何十回も繰り返さずに一発で用意できる。競合調査や資料集めの下準備が一気にラクになる。
誰に効く?
Web情報をAIに読ませたい人
用意するもの
または自前構築
時間のめやす
3分
使えるようになるまでの手順をひらく
- 下の「GitHubで見る」ボタンで公式ページを開く
- ページ内の公式サイトリンク(Website / Cloud など)へ進む
- アカウント登録(メールアドレスなど)をする
- そのままブラウザ上で使えます
こんな人には向かないかも
- 登録やAPIキーの設定を一切やりたくない人
🔑 必要な鍵(APIキー)
OpenAI(ChatGPT) の発行ページ↗発行は無料。APIはChatGPT Plus(月額)とは別勘定で、使った分だけの課金。※Codex等の一部公式ツールは、キーの代わりにChatGPTの月額プランでログインして使える
鍵は「合鍵」の文字列。発行→コピー→ツールの設定に貼り付け、の3手です。迷ったらAIチャットに「画面つきで教えて」と。
迷ったらこれ:いつも使っているAIチャット(ChatGPT・Claude・Geminiなど)にこのツールのGitHubリンクを貼って 「これを使いたい。私のPCでの始め方を一歩ずつ教えて」と頼むのが一番の近道です。
注意点
取得先サイトの利用規約は自分で確認。
ひとことメモ
提供元が明確。クラウド版は無料枠あり。
Firecrawlについてよくある質問
- Firecrawlは無料で使えますか?
- Firecrawl自体は無料で使えますが、動かすのに外部AIのAPIキーが必要です。そのAI側の利用料は別にかかります(無料枠があるものもあります)。
- Firecrawlを使うのに、インストールや専門知識は必要ですか?
- ブラウザで開くだけで使えます。インストールは不要です。
- Firecrawlはスマホでも使えますか?
- スマホでも使えます。
- Firecrawlは仕事(商用)で使えますか?
- ライセンスは AGPL-3.0 です。使うだけなら商用でも問題ありませんが、これを組み込んだものを配布する場合は、同じライセンスで公開する義務が生じることがあります。社内利用にとどめるか、配布前に確認してください。
ブラウザ自動化のほかのツール
Firecrawlが合わなかったときの、同じ用途の候補です。
Crawl4AI
AI用データ収集の人気クローラー
はじめやすい・ターミナル操作あり
llm-scraper
Webページから欲しい項目だけを表の形で抜き出す
準備がいる・ターミナル操作あり
browser-use
AIにブラウザを操作させる
準備がいる・ターミナル操作あり
Puppeteer
Google製のブラウザ自動操作の老舗
はじめやすい・ターミナル操作あり
Playwright
ブラウザ自動操作の定番エンジン
はじめやすい・ターミナル操作あり
Stagehand
自然な言葉でブラウザ操作を書く
準備がいる・ターミナル操作あり