logo
JP

ECサイトの商品URLと画像URLを一括取得する方法|商品一覧をCSV化するには?

この記事では、ECサイトの商品URLと画像URLを一括取得する方法について詳しく紹介します。

約9分で読めます

ECサイトの商品一覧から、商品ページのURLと画像URLをまとめて取得することは可能です。 主な方法は、公式API・CSV出力機能、Pythonによるスクレイピング、専用スクレイピングツールの3つです。

特に、数百〜数千件の商品を一覧化したい場合は、商品URLと画像URLを同じ商品に紐づけて取得し、CSVやExcelに出力できる方法が便利です。対象サイトに専用テンプレートがあるなら、複雑な抽出ルールを作らずに始められます。

この記事では、3つの取得方法の違いと、専用スクレイピングツールを使って商品のページURLと画像URLを取得する方法について詳しく紹介するとともに、画像URLが取得できないときの確認ポイントを解説します。

ECサイトの商品URLと画像URLを一括取得するには、どんな方法がある?

取得方法は、対象が自社ECサイトか他社ECサイトか、必要な件数や更新頻度によって選びます。まずは次の比較表で全体像を確認しましょう。

取得方法特徴向いているケース
公式API・CSV出力サイトが提供するデータを取得自社EC・API対応サイト
PythonスクレイピングコードでHTMLやページ情報を解析開発者・独自システムとの連携
ノーコードツール専用テンプレートにキーワードやURLを入力して収集大量の商品URL・画像URLを手軽に一覧化

① 公式APIやCSV出力機能で取得できる?

対象のECサイトに公式APIやCSVエクスポート機能がある場合は、まずその方法を確認しましょう。自社ECサイトの管理画面から商品データを出力できれば、商品URLや画像URLをまとめて取得できることがあります。

  • メリット: データ形式が整理されており、比較的安定して取得できる
  • 注意点: APIの認証や利用申請が必要な場合があり、取得項目・件数に制限がある

② Pythonで商品URLと画像URLを抽出できる?

PythonのRequestsやBeautiful Soupなどを使えば、WebページのHTMLを解析し、商品リンクや画像の参照先を抽出できます。商品URLは主にリンク要素のhref属性、画像URLは画像要素のsrc属性などから取得します。

  • メリット: 抽出条件や加工処理を細かくカスタマイズできる
  • 注意点: JavaScriptで表示される商品、ページ送り、遅延読み込みへの対応やコード保守が必要

③ ノーコードツールで商品URLと画像URLを一括取得できる?

ECサイトの商品URLと画像URLをまとめて取得したい場合は、Octoparse(オクトパース)の専用テンプレートを利用する方法がおすすめです。

Octoparseは、プログラミング不要でWebサイトから必要な情報を収集できるデータ収集自動化プラットフォームです。商品名・価格・商品URL・画像URLなどをまとめて抽出し、CSVやExcel形式で整理できます。

特に便利なのが、AmazonやYahoo!ショッピングなど、ECサイトごとに用意された専用スクレイピングテンプレートです。600種類以上のテンプレートが用意されており、対象サイトに対応するものを選び、検索キーワードやURLなどの条件を入力するだけでデータ収集を始められます。

商品一覧を1ページずつ開き、リンクを手作業でコピーする手間を減らせます。なお、画像URLを含む出力項目はテンプレートによって異なります。 対応フィールドを事前に確認してください。

Octoparseはどんなユーザーや用途に向いている?

商品情報を一度だけ整理したい個人ユーザーから、継続的に競合調査を行うEC担当者まで、用途に応じて活用できます。

ユーザー主な活用シーン
ECサイト運営担当者競合商品のURL・画像URL・価格をまとめて取得し、商品構成や価格を比較
商品リサーチ・仕入れ担当者Amazonなどの商品情報を一覧化し、仕入れ候補を比較
マーケティング担当者商品画像URLと商品情報を紐づけ、競合調査や市場分析に活用
データ分析・開発担当者CSVやAPI経由で取得した商品データを社内データベースや分析システムに活用

Octoparseの専用テンプレートを使うメリットは?

手動での商品調査や自作スクレイパーと比べ、専用テンプレートには次のような利点があります。

  • プログラミング不要: XPathやCSSセレクターなどの収集ルールを一から作らずに始められる
  • 関連情報を同時に取得: 対応テンプレートなら商品URL・画像URLと商品名・価格・評価をまとめて収集できる
  • 大量の商品を一覧化: 検索結果を1件ずつ開いてコピーする作業を減らせる
  • CSV・Excel出力: 取得データをスプレッドシートや社内システムに取り込みやすい

定期的な商品情報の更新が必要な場合は、対応プランのクラウド収集・スケジュール実行機能も利用できます。

Octoparseのテンプレートは無料で利用できる?

Octoparseは無料プランから試用可能です。以下は一部の料金情報を紹介します。

プラン料金・データ取得枠
フリープラン月額$0。月間2,000行まで、1回の実行は最大100行
ベーシックプラン月額$19。月間10,000行まで、1回あたりの行数制限なし
スタンダードプラン以上スタンダートプランは月額$69〜。月間行数上限なし。従量課金型テンプレートは毎月合計10,000行まで無料

※料金・無料枠・対応機能は変更される場合があります。最新情報は料金プランとhttps://www.octoparse.jp/template/amazon-japan-product-scraperをご確認ください。

Octoparseの専用テンプレートで商品URLと画像URLを取得するには?

ここではAmazon.co.jpの商品検索結果を例に、Amazon Japan 商品検索テンプレートを使った4つの手順を紹介します。このテンプレートには、商品URLと画像URLの両方が出力項目として用意されています。

Step 1:ECサイトに対応したテンプレートを選ぶには?

Octoparseのテンプレートギャラリーから対象ECサイトに対応するものを探します。Amazon.co.jpの場合は、Amazon Japan 商品検索を開き、出力項目を確認して「無料で試す」をクリックします。

取得項目内容
商品名検索結果に表示された商品タイトル
商品URL商品詳細ページへのリンク
画像URL商品画像の参照先リンク
ASINAmazonの商品識別番号
価格・評価・レビュー数比較・分析に使える関連情報
ページ番号検索結果の掲載ページ

これらは当該テンプレートの公開出力項目の一部です。実際の取得結果には空欄が含まれる場合もあるため、実行後の確認が必要です。

テンプレートを検索

Step 2:収集したい商品を指定するには?

テンプレートを開いたら、入力欄に検索キーワード、またはAmazon上で条件を絞り込んだ検索結果ページのURLを入力します。

  • キーワードで指定: 「ワイヤレスイヤホン」「ノートパソコン」など
  • URLで指定: カテゴリ・価格帯などで絞り込んだ検索結果ページ

必要に応じて、テンプレートに用意されている「ページネーション回数」入力欄も確認・調整します。

テンプレートを設定する

Step 3:商品URLと画像URLの収集を実行するには?

入力が完了したら「実行」をクリックし、「クラウド収集」を選択します。テンプレート側に抽出ルールが用意されているため、XPathやCSSセレクターを一から設定する必要はありません。

タスクを実行

収集結果では商品名・商品URL・画像URLがそれぞれ別の列に出力されます。まず少量のデータを確認し、商品と画像の対応関係や空欄の有無を検証してください。

Step 4:商品URLと画像URLをCSVに保存するには?

収集が完了したら結果を確認し、「エクスポート」からCSVまたはExcel形式で保存します。以下のように、ただ26秒で96件のデータが取得されました。もし今後も定期的にデータを更新したい場合は、スケジュール実行を設定できます。

データを確認
データをエクスポート
取得したデータ

商品URLと画像URLは、ECサイトのどこから取得する?

多くの商品一覧ページでは、商品カードの中に商品名、価格、商品ページへのリンク、商品画像が含まれています。重要なのはURLを別々に集めるのではなく、1つの商品に紐づけて取得することです。

商品URLはどこに保存されている?

商品URLは、商品名や画像をクリックした際のリンク先として設定されていることが多く、HTMLでは一般的に<a>タグのhref属性に保存されています。

  • 取得したURLが商品詳細ページを指しているか確認する
  • 広告や関連カテゴリなど、商品以外のリンクが混在していないか確認する
  • 相対URLの場合は必要に応じて絶対URLに変換する

画像URLはどこから取得できる?

画像URLは一般的に<img>タグのsrc属性に保存されていますが、サイトによってはdata-srcやsrcsetなどの属性が使われます。スクロール後に画像が読み込まれる「遅延読み込み」にも注意が必要です。

商品一覧のサムネイル画像URLが必要なのか、商品詳細ページの高解像度画像URLが必要なのかを決めておくと、後からの取り直しを減らせます。

専用テンプレートが見つからないECサイトはどうすればよい?

対象サイト向けのテンプレートがない場合や、テンプレートに画像URLが含まれない場合は、Octoparse デスクトップアプリのカスタムタスクが選択肢になります。商品カードの繰り返し構造を指定し、商品リンクや画像要素のURL属性を抽出する方法です。

  • 商品一覧のURLを入力し、商品カードを繰り返し対象に設定する
  • 商品名・商品URL・画像URLの抽出項目を指定する
  • 必要に応じてページ送りやスクロール処理を追加する
  • プレビューで対応関係を確認し、CSV/Excelに出力する

まずは専用テンプレートで対応できるか確認し、足りない項目や特殊なページ構造がある場合にカスタムタスクを検討すると、設定作業を抑えやすくなります。

画像URLを取得できない場合は、どう対処すればよい?

ECサイトによっては、画像の遅延読み込みやアクセス制限により、期待したURLを取得できないことがあります。次のチェックポイントを確認してください。

問題考えられる原因確認・対処方法
画像URLが空欄遅延読み込み・属性の違い読み込み状態や抽出属性を確認
一部の商品が欠落ページ送り・追加表示が未対応ページネーションやスクロールを確認
商品と画像が不一致抽出対象のずれ同じ商品カード単位で取得
画像が小さいサムネイルURLを取得詳細ページの画像参照先を確認
画像URLが開けない期限付きURL・アクセス制限URLの有効期限とアクセス条件を確認
商品URLが空欄ページ構造・一部レコードの欠損空欄行を確認し、必要なら再取得

画像URLを取得することと、画像ファイルそのものをダウンロードすることは別です。 CSVや商品データベースにリンクを保存するだけなら画像URLで十分な場合がありますが、オフライン保存が必要なら別途画像ファイルの取得が必要です。

関連ガイド:Webサイトの画像をスクレイピングする方法

取得した商品URLと画像URLは、どんな業務に活用できる?

商品リンクと画像リンクを商品名・価格・識別番号とあわせて管理すると、単なるURL一覧にとどまらず、さまざまな業務に活用できます。

  • EC商品リサーチ: 商品情報を一覧化し、品揃えや価格帯を比較する
  • 競合調査: 価格や画像の参照先を記録し、変化を確認する
  • 商品データベース作成: 商品ID・画像URL・商品ページの対応表を作る
  • 画像チェック: 画像URLのリンク切れや掲載内容を点検する
  • 社内レポート: CSVをExcelやスプレッドシートに取り込んで分析する

定期収集する場合は、商品IDや商品URLをキーに重複を整理し、取得日時も残しておくと比較しやすくなります。なお、対象サイトの利用規約、アクセス制限、画像の権利・利用条件を確認し、許可された範囲で取得・利用してください。

商品URL・画像URLの一括取得でよくある質問は?

Q1. Amazonや楽天市場の商品URLと画像URLも一括取得できる?

Amazon.co.jp向けには、商品URLと画像URLを出力項目に含むOctoparseの専用テンプレートがあります。楽天市場など他のECサイトでは、対象サイト向けのテンプレートと出力項目の対応状況を確認してください。公式APIなどが利用できる場合は、その方法もあわせて検討しましょう。

Q2. 商品一覧ページから複数枚の画像URLも取得できる?

一覧ページに設定されている画像URLを取得できます。ただし、メイン画像しか表示されないページでは、サブ画像や別角度の画像を取得するために商品詳細ページへアクセスする必要があります。

Q3. 画像URLをGoogleスプレッドシート内に表示できる?

はい。画像URLがD2セルに保存されている場合、Googleスプレッドシートでは=IMAGE(D2)を使ってセル内に画像を表示できます。ただし、公開されていないURL、有効期限付きURL、アクセス制限があるURLでは表示できないことがあります。

Q4. プログラミング初心者でも商品URLと画像URLを一括取得できる?

はい。対象ECサイトに対応した専用テンプレートがあれば、キーワードやURLを入力して収集できます。 例えばOctoparseの「Amazon Japan 商品検索」テンプレートでは、商品名・価格・商品URL・画像URLなどをまとめて取得できます。取得可能な項目はテンプレートによって異なります。

Q5. 無料でも商品URLと画像URLを取得できる?

Octoparseには無料プランがあり、対象テンプレートを試せます。Amazon Japan 商品検索テンプレートの公開料金情報では、フリープランは月2,000行、1回の実行は100行までと案内されています。大量収集前に、利用するテンプレートの最新料金・行数条件を確認してください。

まとめ

いかがでしょうか。ECサイトの商品URLと画像URLを一括取得する方法について詳しく紹介しました。この記事では、ECサイトの商品URLと画像URLを一括取得したい場合は、公式API・CSV機能を確認し、利用できない場合は専用のスクレイピングテンプレートを検討するのが効率的です。

とくに、複雑な設定なしで初心者でも商品の各情報を取得したい場合は、AIデータ取得自動化ツールOctoparseの利用をお勧めしまう。専用テンプレートならキーワードやURLを入力し、商品URL・画像URLを含むデータをCSV/Excelへ出力できます。まずは少量のデータで空欄や対応関係を確認し、必要に応じて収集範囲を広げましょう。

今日はどんなデータを集めたいですか?
欲しいデータを伝えるだけで、AI アシスタント がスクレイパーを自動的に作成します。
クレジットカード不要

今すぐOctoparseを始めて、業務効率化を実現しましょう。

ダウンロード

関連記事