Webスクレイピングツール7選！ノーコード・無料で高機能なおすすめを紹介

ノーコードでWebスクレイピングができる、「ビジュアルスクレイピングツール」について主として無料かつ高機能な7つのサービスをまとめました。基本的には無料で利用することができるサービスを主としてまとめています。

7つの中でも特におすすめなのが、最初にご紹介する下記4つのノーコードスクレイピングツールです。それぞれ以下のような特徴があります。

以下、それぞれ順番にご紹介したあと、残る3つのスクレイピングツール+おまけを解説していきます。

目次：

Simplescraper — Scrape Websites and turn them into APIs

Simple ScraperはかんたんにスクレイピングすることができるChrome拡張機能です。CSVやJSON形式でデータを取得することができます。

どのようにスクレイピングされるのかについてのイメージは動画から。

使い方については下記が詳しいです。

あらゆるWebページをAPI化してデータを取得できるChrome拡張機能のSimple Scraper

公式ドキュメントはこちら。

Getting started with Simplescraper - Simplescraper docs

私も使ってみましたが、非常に直感的に利用できます。とにかくスピーディーに利用できるのが印象的。

ローカルからSimplescraperを利用してスクレイピングする場合には、登録やログインすら不要です。

APIを使用・構築したい場合、Simplescraperではいくつかのプランが用意されており、無料のFreeプランでは50回（or100回）のAPIコールができるようになっています。本格的に使用する場合は有料のPlus、Proプランが用意されています。

API構築できることで、Simplescraperと他サービスとの連携が可能になりますね。

参考: WayScript

WayScriptとは（意訳）: WayScriptは、ローカルで書いたコードを、信頼できるホスティングアプリに変換できる最も素早い方法。

WayScript X

Building internal tools has never been easier.

wayscript.com

言い換えると、ローコードなデプロイ用iPaaSであると言うことができそうです。

参考: プログラマーにもオススメしたい！ローコードな iPaaS、WayScript を使ってみる！ - ノーコード ラボ

→ HerokuやDetaをより簡易にしたローコードアプリ？

なお、APIによるスクレイピングの実行はサーバーサイド側（Simplescraperクラウドサーバー上）で実行されます。

複数ページにまたがるスクレイピングを実行したい場合は下記公式ドキュメント参照。

URLによって複数ページの遷移が推定できる場合: Crawling lists of URLs - Simplescraper docs

URLによる推定が難しい場合: Multiple page and infinite scroll scraping - Simplescraper docs

Simplescraper — Scrape Websites and turn them into APIs

上の表のうち、”Cloud scrape credits”がスクレイピング実行可能回数です。

便利なストアレシピ（既に作成されたスクレイピングレシピ）やGoogle Sheetのリアルタイムアップデート、実行スケジューリング機能を利用したい場合には$35/月~の有料プランを契約する必要がありそうです。

ストアレシピの数はまだあまり多くはなさそうです。

Simplescraper — Scrape Websites and turn them into APIs

Web Data Integration - Import.io - Data Extraction, Web Data, Web Harvesting, Data Preparation, Data Integration https://www.import.io

現在、無料版は利用できなくなっているようです。

ページネーションと無限スクロールの設定方法 Advanced Pagination & Infinite Scroll – Import.io Help Center

Google Sheets : スプレッドシートにAPI経由でリアルタイムに取得データを同期させる方法（コピペでOK） Using Google Sheets IMPORTDATA with Import.io – Import.io Help Center

URLを入力するだけ！コンテンツをスクレイピングしてデータ化してくれる無料ツール「import.io」

import.ioで手軽にスクレイピング | kitayama lab

Import.ioの料金

Web Scraper - The #1 web scraping extension

Web Scraper - Free Web Scraping - Chrome ウェブストア

Web Scraperはブラウザの開発者ツールを利用してスクレイピングを可能にするChrome, Firefoxのブラウザ拡張機能。

Chrome拡張である"Web Scraper"。下記の2点がメリットとのこと。

Google WebScraperでWebスクレイピングしてみての感想　メリットとデメリット

現在ではCSV, XLSX, JSON形式に対応しています。

[Chrome 拡張機能] Web Scraper で note の記事一覧を取得する – with a Christian Wife

クラウド機能（有料）を利用すれば、スケジューラを走らせることも可能なようです。

また、個人的には上記に加えて、「公式ドキュメントや動画チュートリアルが充実していること」をメリットの1つに加えたいところ。

全体の流れとして、ダウンロード完了ページの流れ説明がわかりやすかったです。

私はselect機能でリンクの選択ができなかったため、ChromeではなくFirefoxで試したら無事に選択されました。Chromeで他の拡張機能と競合してしまっていたのかもしれません。

また、開発者ツールのコンソール画面を画面横に表示させている状態だと、Web Scraperの項目が表示されませんでした。

画面下に開発者コンソール画面が表示されるように設定し、>>> から”Web Scraper”を選択してください。

公式サイトにもチュートリアル動画一覧の掲載があります。

Web Scraper Tutorials

また、下記noteにも詳しくまとめてありました。

スクレイピングツール「Web Scraper」でサイトのデータを抽出 - Qiita

スクレイピング練習用の公式テストサイトは下記です。

Web Scraper Test Sites

スクレイピング | Webクローラー | Octoparse

Octoparseの評判は総じて良く、「本当にノーコードでかんたんにスクレイピングが実装できて感動した」という声が多く挙がっているようです。

iPaaSツールであるIntegromatを噛ませることで、下記の自動化フローを組んだ方がいらっしゃいました。

Octoparseでスクレイピング→Airtableにデータ保存→parabola経由でDeepLで一括日本語化

ただし海外発のサービスであるということもあり、サポートは微妙らしいです。日本語訳もちょっとヘン…？

Octopraseはとにかく「視覚的にわかりやすい」というのが特徴。レビューの評価もその点は評価が高かったです。（総合評価は5点中2.8点程度）

Octoparseの最新ユーザーレビュー・評判を紹介！価格や製品の特徴、導入メリットなども掲載中【ITreview】IT製品のレビュー・比較サイト

Macの場合、インストール時にセキュリティ解除が必要。

Macにインストールする方法 – スクレイピングツール | Octoparse

参考: 画像を一括ダウンロードするのに超便利なツール5選 | Octoparse

Octoparseで下記の機能を利用しようと思ったら、$75/月以上の有料プランへの契約が必要になるようです。

無料プランでできないこと:

定期実行（スケジューリング）機能を除けば、ほとんどのことができてしまうのではないでしょうか…！

エクスポートのデータ数制限はありますが、スクレイピングによる取得ページ数自体は無制限のようです。

Webスクレイピングツール & Webクローラー - 料金表 | Octoparse

＼タピ活に必要／2019年最新の【タピオカマップ】を作った - Qiita

FineReport｜パワフルで効果的な帳票とBIダッシュボード作成ツール

Octoparse公式によるYouTube説明動画です。GUIのみでTwitterからデータをスクレイピングし、Google Spread Sheetにデータを抽出・保存させています。

How to Extract Data from Twitter Without Coding - YouTube

ただし、通常Twitterではスクレイピングツールによるスクレイピングは利用規約で禁止されています。この点はグレーゾーンあるいは違反となる可能性があるため、ご注意ください。

Octoparseと似たビジュアル重視ノーコードツールに”ScrapeStorm”というものがあります。

人工知能Webスクレイピングツール | Webクローラ | ScrapeStorm

ScrapeStormのほうが新しい出てきたスクレイピングツールだと思われます。もしOctoparseが使いづらい、と感じた方はScrapeStormを試してみても良いかもしれません。

Spider Pro - the easiest way to scrape the internet

Spider Proはシンプルにスクレイピングを行うことが出来るChrome拡張機能（有料プラグイン）です。

1度の買い切り価格、38ドルで購入することが可能。

公式サイトの冒頭にデモがあるのですが、Web上のUIを用いてビジュアル的に簡単にスクレイピング設定が可能でした。

Spider Proについてはこちらの記事で知りました。使用感としては、複雑な構造のWebサイトのスクレイピングは難しいようです。

ビジュアルスクレイピングツールscrapinghub/portiaの使い方 - Qiita

" portiaを自前のサーバに入れて使う場合は、scrapinghubの料金を支払う必要もなく、制約もありません。

Extract website data without any code - AnyPicker: Visual Web Scraper | Web Crawler | Web Data Extractor | Web Data Visualization

dexi.io

No-Codeツールである「Bubble」と連携ができるよう。

Bubbleでスクレイピングをしてみよう！ - ノーコード ラボ

Webスクレイピングツールdexi.ioの使い方 - ブログ｜Web・ホームページ制作の株式会社アウラ（大阪）

Automatio - No-code Web Automation Tool

Automatioはスクレイピングを含む自動化のためのワークフローをGUIで操作できる自動化ワークフロー設定ツール。

AutomatioのChrome拡張機能(エクステンション)でWebページに対してどのような処理・スクレイピングをするかカラフルなUIベースで設定を行い、専用のユーザーページで結果を確認する、という流れになります。

2021/08/11現在はまだEarly Accessを募っている段階です。興味がある方はぜひ試してみてください。

これらを自由に組み合わせて一連の「ワークフロー」として実行できるのがAutomatioの特徴です。

Automatioはお試しクレジット等もなく、有料プランのみで利用可能となります。

Automatio - No-code Web Automation Tool

厳密にはスクレイピングでは無いのですが、Twitterやその他のアプリからデータを収集し、Google Spread Sheetに落とし込むことができます。

Blockspring - get data for prospecting, reports, and landing pages – Blockspring

現在は下記3つの機能が提供されています。

上記3つのうち、ReportsがBlockspringが当初から提供していたものです。各種サービスからデータを吸い取って、SpreadSheet上に吐き出すというサービス。

Blockspringは非常に便利なのですが、$29/月となりコストがかかります。有料でも大丈夫という方は試してみて下さい。

無料でTwitterスクレイピングを利用したい、という場合には、先述のOctoparseを利用するか、多少なりともPythonが書ける方ならTweepyというライブラリからTwitter APIを活用すると便利です。

【スクレイピングツール】面倒な情報収集はGoogle Spreadsheetにやらせよう！ | DAINOTE

私も実装したことがあるのですが、HTMLの一部の知識さえあれば簡単に実現できました。

ノーコード手法ではないのですが、ツールやサービスの制限なくスクレイピングを行いたいという方にはおすすめの方法です。数時間程度の学習は必要ですが、ある程度柔軟にスクレイピングが可能です。

この記事の気になる箇所を読み返す：