AIスクレイパー | Octoparse テンプレート

テンプレート一覧

テンプレート詳細

📌 AIはウェブページのリストからカスタムフィールドをどのように抽出できますか？

このテンプレートは、提供された各公開ページURLからユーザーが要求した構造化フィールドを収集します。ノーコードのデータユーザー、リサーチチーム、データ運用チームに役立ちます。

データはユーザーが提供した公開ウェブページから収集されます。このテンプレートは特定のソースウェブサイトに限定されません。タスクのために提供された公開ページURLからユーザーが要求したフィールドを抽出します。

このテンプレートには行ごとの使用料はありません。基本プロキシは無料です。拡張プロキシはURLごとに$0.04が追加されます。自動モードでは、まず基本プロキシを試し、失敗した場合に自動的に拡張プロキシに切り替わります。その切り替えにより拡張プロキシの料金が追加されることがあります。

出力フィールドはユーザーの抽出指示によって定義されるため、このテンプレートには固定の出力フィールドスキーマはありません。

{}

すぐに使えるワークフロー： ユーザーが提供した公開ウェブページからの抽出ステップはすでに設定済みなので、スクレイパーをゼロから構築する必要はありません。
柔軟な実行： 収集のためにローカルコンピュータをオンラインに保つことなく、クラウドで既製のタスクを実行できます。
構造化され、再現可能な出力： 結果は一貫した行として返されるため、手動でコピーしたページよりも比較、フィルタリング、重複排除、処理が容易です。
検証済みの入力ガードレール： フォームには、このテンプレート用に設定された現在の入力、選択可能な値、および意味のある制限が表示されます。
実用的なデータハンドオフ： Octoparseで結果を確認し、お使いのOctoparse環境でサポートされているオプションを使用してエクスポートまたは処理します。

以下のフィールドを入力してください：

ターゲットURL (必須) — 処理する公開ページのURLを入力します。クレジットの過剰な使用を避けるため、最初は10件以下のURLで始めることをお勧めします。1回の実行で最大10,000件まで。
抽出するフィールド (必須)
プロキシ (必須) — 無料処理の基本プロキシ、URLごとに$0.04追加の拡張プロキシ、または最初に基本を試し、失敗した場合に自動的に拡張に切り替える自動を選択します。利用可能なオプション：基本プロキシ - 無料、拡張プロキシ - URLごとに$0.04追加、自動 - 最初に基本を試し、失敗した場合に拡張に切り替える。
クッキー (任意) — ログインが必要なページのために、任意でクッキーを貼り付けます。各タスクでは1つのウェブサイトのクッキーのみを使用してください。

結果は、実行時にソースサイトが公開している内容に依存します。ソースページが値を提供しない場合、リストされた出力フィールドは空になることがあります。上記に示されている入力制限は、テンプレートによって強制されます。

大規模なバッチを開始する前に、具体的で有効な入力を使用し、代表的な結果を確認してください。繰り返しレコードが不要な場合は、重複した入力を削除してください。

Pythonオートメーションは、各ターゲットURLを検証し、ユーザー定義のフィールド仕様と選択されたプロキシまたはクッキー設定とともにページをAI抽出サービスに送信し、結果を待って、動的に形成されたレコードを返します。

入力セクションに示されているフィールドと受け入れ可能な値を使用してください。ユーザーに関連する制限と選択可能なオプションのみがリストされています。

現在の出力フィールドと代表的なJSONデータプレビューは、出力セクションにリストされています。ソースページが値を表示しない場合、フィールドの可用性は異なることがあります。

行ごとの使用料はありません。基本プロキシは無料ですが、拡張プロキシはURLごとに$0.04の追加料金がかかります。自動モードでは、テンプレートはまず基本プロキシを試し、基本が失敗した場合にのみ拡張プロキシに切り替わります。

ソースページは、すべてのレコードに対してすべての値を常に公開しているわけではなく、レイアウトはアイテム、市場、または現在のサイトの応答によって異なる場合があります。テンプレートは、現在のページがフィールドを提供している場合にそれを返します。

Octoparseで構造化された行を確認し、お使いのOctoparse環境でサポートされているオプションを使用してエクスポートまたは処理できます。