抽出モード

• カスタマイズモード
• テンプレートモード

基本概念

• タスクとは？
• 並行処理とは？
• タスク分割とは？

データ取得

• ローカル抽出
• クラウド抽出/スケジュール設定
• Octoparse APIとの連携

データ出力

• CSV, Excel, JSON, HTML
• データベースに出力する

データ選択

• テキスト/URL/画像/HTMLを抽出する
• リストを使ってデータを抽出する
• 複数のページからデータを抽出する

ページでの操作

• ログインした後のデータ取得
• テキスト/キーワードの入力
• 無限スクロールでの読み込み
• ドロップダウンリストを選択する
• AJAXを扱う方法
• マウスオーバーで表示されるメニュー

カスタマイズ

• XPathで要素を見つける
• 近くの2箇所のデータを関連付ける方法
• ソースコードからデータを抽出する
• ページレベルのデータを抽出する
• 取得したデータを再フォーマットする
• 取得したデータを合併する

より多くのテク

• 条件判断によるスクレイピング
• 複数のURLからデータを抽出する
• 待ち時間を設定する
• プロキシを設定する
• アクションを再試行する
• 広告ブロック/キャッシュクリア
• URLの一括インポート

• 基本問題
• 決済と請求書
• アカウント問題
• インストール問題
• API

• クラウド問題
• データ問題
• ページネーション問題
• ループ問題
• Advanced API