logo
languageJPdown
menu

無料Webスクレイピングツール & WebクローラーOctoparseとは?

約5分で読めます

Octoparseは、視覚的に分かりやすくデータを抽出できるWebスクレイピングツールです。コードを書くことなく、スクレイピングの初心者でも、Octoparseを使ってWebサイトから大量の情報を手軽に抽出できます。WindowsアプリケーションであるOctoparseは、Ajaxを使うWebページを含む静的および動的Webサイトに対応し、フォームを記入したり、テキストボックスに検索語を入力したりするなどで、人間の操作をシミュレートしてWebページとやり取りします。抽出プロジェクトは、自分のマシン(ローカル抽出)またはクラウド(クラウド抽出)で実行できます。CSV、EXCEL、HTML、JSON、データベース(Google sheet、SQL Server)などさまざまな出力形式があります。

Octoparse無料版と有料版は同じ機能を共有しています。無料版だと、一部機能に制限がありますが、ヘビーユーズでもしない限りは、十分すぎるくらいの機能があります。有料版だと、タスクの登録数や自動実行数が多くなり、クラウド上で動作させることもできます。無料版と有料版の違いについては、料金プランを参照してみてください。

Octoparseは、視覚的に使いやすい操作ペインを提供します。Octoparseは、Webページを開いたり、アカウントにログインしたり、テキストを入力したり、Web要素をクリックするなど人間のWebブラウジング動作をシミュレートします。内蔵組ブラウザでWebサイトの情報をクリックして、必要な構造化データを取得します。

クラウドサービス

分散コンピューティングに基づいて大規模なWebデータを同時にスクレイピングすることは、Octoparseの最も強力な機能です。クラウド機能を使うと、多数のクラウドサーバーを使って同時に抽出を実行できます。短期間に10,000のWebページをスクレイピングする必要がある場合は、Octoparseクラウドサービスが最適です。クラウド型プラットフォームでは、6〜20倍の高速抽出が可能です。自動取得したデータはクラウドに保存され、どこでもアクセスできます。ハードウェア保守も不要だし、ネットワーク中断に心配する必要もありません。

豊富なツール

ユーザー体験を向上させるため、Octoparseには、豊富なツールセットを提供します。

データを再フォーマットする

Xpathを編集できる

 定期実行をスケジュールする

Ajax自動検出

API

Octoparse APIに接続すると、自分のシステムにデータを自動的に配信でき、自分のアカウントにあるデータにアクセスできます。タスクのルールを設定するだけで、Octoparseクラウドサーバーが残りの作業を行います。データはXMLの形式で配信されます。

Webスクレイピングテンプレート

Webスクレイピングテンプレートは非常にシンプルで強力な機能です。テンプレートを使うと、プログラミング知識の少ない/ない人でも簡単にWebスクレイピングを達成できます。具体的には、Octoparseのソフトには数十種類のあらかじめ作成されたテンプレートがあり、パラメータ(ターゲットWebサイトのURL、検索キーワードなど)を入力するだけで、データが抽出されてきます。そのため、スクレイピングタスクやコードを書く必要はありません。例えば、eBayで「イヤフォン」に関する製品情報を収集したい場合は、パラメータに「イヤフォン」と入力してタスクを実行して、数秒でアイテム番号、価格、送料などを含む製品情報を得ることができます。

Webスクレイピングツールはニュースポータル、人工知能、フォーラム、Eコマースサイト、ソーシャルメディア、不動産、財務報告などさまざまな分野で広く使われています。Octoparseを利用することで、価格比較、研究、事業、営業、マーケティングを効率的に進めることができるようになります。

人気記事

トピックを検索する

今すぐOctoparseを始めて、業務効率化を実現しましょう。

ダウンロード

関連記事

  • avatarOctoparse
    今回、ノーコードツールについて幅広く情報を発信しているNoCode DBの記事内にて、Octoparseが紹介されました。
    2022.10.10 · 2 min read
  • avatarTakahashi
    Webデータ収集を効率化する「Webスクレイピングツール」が数多く登場しています。しかし、Macのスクレイピングに対応しているツールが少ないのが現状です。 iPhone人気もあり、国内ではMacユーザー・アップルユーザーが増え続けています。PC市場でも同様に、年々Macデバイスのシェアが伸びています。そうした背景から、Webスクレイピングツールの「Octoparse」では、MacOSのスクレイピングの対応を求める声が日に日に高まっていました。 そうしたことからOctoparseでは従来のWindows版に加え、ついにMac用ウェブスクレイパーをついにリリースいたしました。Macユーザーのみなさんは早速こちらからダウンロードをしてください。
    2022.07.26 · 5 min read
  • avatarOctoparse
    数週間にわたるベータテストの後、Octoparseチームは、新機能を搭載した 8.5.4 アップデートを配布しています。このアップデートでは、新しい決済システム、Captchaバイパス、Octoparseプロキシ、あらゆるウェブサイトからあらゆるファイルをダウンロードする機能などが追加されています。
    2022.07.22 · 3 min read
  • avatarOctoparse
    いつもOctoparseをご愛顧いただき、誠にありがとうございます。8.5バージョンでは、ローカルスクレイピング時の抽出速度の向上、ダッシュボードでのタスク管理、タスクのクラウドIPの切り替え 抽出された時間の変換などの機能を改善・追加された。
    2022.02.24 · 5 min read