市場をまたぐ価格モニタリング:国ごとに一つの静的IP
目次

要点: 市場をまたぐ価格モニタリングとは、ショップが各国で表示する公開価格を、決まったスケジュールで記録することです。同じ商品でも、通貨、税の表示、在庫の有無、地域ごとのプロモーションによって違いが出ます。回ごとに比較するには、各市場をその国にある一つの静的アドレスから確認し、価格、通貨、税、在庫、時刻、使用したアドレスを記録し、サイトの利用規約、robots.txt、控えめな頻度を守ります。
市場をまたぐ価格モニタリングとは、商品が販売されている各国でその商品がいくらなのかを、回を重ねて記録していく作業です。記録の変化が、そのままショップでの変化を意味するようにするためです。このガイドでは、各市場の内側から、国ごとに一つの固定アドレスを使い、サイトが認めるペースで公開価格を確認する方法を扱います。ProxyJamは、この作業で使う種類のアドレスである静的レジデンシャル(ISP)プロキシを販売しています。ページを国ごとに確認する作業全般については、当社のリージョン別テストのページにあります。このような記事の出典の選び方と訂正の仕方は、当社の編集方針で説明しています。
同じ商品が市場によって違う価格になるのはなぜですか?
ショップが市場ごとに価格を設定し、国境を越えるといくつかのことが変わるからです。ECプラットフォームはこれを機能として組み込んでいます。Shopifyのヘルプページは、国や地域ごとに設定する価格、市場ごとの割合での調整、通貨換算後の丸めを説明しており、ある市場でそもそもどの商品を購入できるかを決めるカタログについても説明しています。特によく見られる違いは四つです。
- 通貨。 金額は市場ごとに換算または設定され、丸めによってその土地らしい価格の端数になることがあります。ドル記号だけでは、どのドルなのか分かりません。オーストラリア、カナダ、米国の価格はどれもこの記号を使います。ISO 4217はすべての通貨に、USDやCADのような3文字のコードを割り当てており、記録に入れるべきなのはこのコードです。
- 表示価格に含まれる税。 EUでは、消費者に示す価格は、価格表示指令のもとで「VATとその他すべての税を含む、製品一単位または一定量の製品の最終価格」です。米国では、売上税は通常、決済時に加算されます。GoogleのMerchant Centerのルールも同じ分け方をしており、米国とカナダでは送信する価格に税を含めず、それ以外の多くの国ではVATやGSTを含めます。ドイツの価格と米国の価格を表示どおりに並べると、税込みの数字と税抜きの数字を比べることになります。
- 在庫の有無。 商品、サイズ、プランは、ある市場では提供され、別の市場にはないことがあり、提供されていても在庫切れのことがあります。これらは別々の事実なので、記録でも別々の値が必要です。
- プロモーション。 セールは市場ごと、日付ごとに実施されます。EUでは、オムニバス指令が、告知する値引きに以前の価格を示すことを求めています。以前の価格とは、値引きの前の少なくとも30日間に事業者が適用したうちで最も低いものと定められています。そのため、EUのページの取り消し線付きの価格には、米国のページにはないかもしれない情報が含まれています。
表「一つの商品に異なる価格が付く理由」では、それぞれの違いを、それを捉える記録の項目と組み合わせています。サイトが訪問者の市場をどう判断し、ほかにどのシグナルを読むのかは、自分のウェブサイトを別の国から見る方法で扱っています。
市場ごとに一つの固定アドレスを保つのはなぜですか?
比較では、一度に一つのことだけが変わる必要があります。月曜日の確認がショップにあるネットワークから届き、木曜日の確認が別のネットワークから届いたなら、新しい価格はショップから来たのかもしれませんし、ショップが二つめのアドレスをどう扱ったかから来たのかもしれず、記録からはどちらか分かりません。国ごとに一つの静的アドレスを使えば観測点が一定に保たれるので、二回の確認の間の違いはショップを指し示します。一つのアドレスを保持する場合とプールから取り出す場合は、ISPプロキシとレジデンシャルプロキシの比較で比べています。
ネットワークの種類も影響します。ホスティングのネットワーク上のアドレスを家庭の接続とは違うように扱うサイトがあるため、ホスティングの範囲からの確認では、その市場の買い物客なら目にしないページが表示されることがあります。ISPプロキシは、インターネット事業者のネットワークが経路をアナウンスし、データセンターから提供されるアドレスで、地元の買い物客が使うのと同じ種類のネットワークにあります。
固定アドレスでも位置がずれることはあります。位置情報データベースは更新され、アドレスが別の国として記録されることもあります。毎回の確認の前に、プロキシ経由でWhat Is My IPを開いてください。アドレスが購入した市場の位置として判定されなくなった場合は、そのアドレスで行った確認を記録に残すべきではありません。アドレスはお支払い済みの期間中に入れ替わらず、別のIPが必要な場合は新規注文となります(利用規約の第2.5条)。
価格モニタリングの静的レジデンシャルプロキシで確認すること
静的レジデンシャルプロキシは、この手順の土台となるアドレスなので、初日にテストしてください。決済は返金不可ですが、返金ポリシー(第1条)は、決済から24時間以内に報告された不具合がある場合に限り、そのIPを残高に返金します。静的アドレスの場合、その不具合とは、2 Mbit/s未満の速度、接続の拒否、そして当社のIPチェッカーでのFraud Score 75以上です。その日のうちに次の四つの確認ができます。
- 国。 プロキシ経由でWhat Is My IPを開き、購入した市場と国を比べます。当社はアドレスの国をMaxMindで判定しています。別の位置情報データベースが同じアドレスを別の場所に置くことがありますが、返金ポリシーはそれを不具合とは扱わない(第2条)ため、ショップ自身が最初のページに表示する国も控えておきます。
- ネットワーク。 注文に表示されるキャリアは、そのアドレスを広報しているネットワークです。ASNをそのキャリアと照らし合わせます。手順はIPがレジデンシャルかどうかを確認する方法に順を追って載っています。
- 接続。 注文に表示されるユーザー名とパスワードで接続するか、ご自身の許可IPリストに登録したIPから接続します。両者の比較はプロキシの認証方式にあります。プロキシ経由で速度テストを行い、スクリーンショットを残してください。速度の申告にはそれが必要です。
- ショップの最初の応答。 その市場の設定で商品ページを一つ読み込みます。対象サイトによるブロックは返金の対象となる不具合ではなく(第2条)、初日にそれが出たなら、スケジュールを組む前にそのショップへフィードを依頼すべきだということです。
アドレスがこの確認を通れば、保持している限りその市場の記録を担えます。注文を更新しても同じアドレスのままです(利用規約、第2.5条)。
シンプルなモニタリングの手順はどのようなものですか?
商品を選び、市場を選び、スケジュールを決め、毎回同じ方法で記録します。手順は「1回のモニタリングを市場ごとに」に、項目は「一回分の記録の項目」に挙げています。記録を比較できる状態に保つ習慣は三つです。
- 市場ごとの設定を固定する。 国ごとに一つのブラウザプロファイルまたはスクリプトの設定を用意し、その市場の言語にし、保存されたCookieを持たせず、その市場のアドレスを使います。Cookieに保存された地域や通貨が、アドレスより優先されることがあります。
- まず値を書き、換算はあとで。 価格は表示どおりに、通貨コードと税込みかどうかとともに記録します。一つの通貨への換算と税の除外は別の列に入れ、為替レートとその日付を横に添えます。そうすれば元の記録は変わりません。
- 在庫の状態を三つに分けて保つ。 在庫あり、在庫切れ、その市場では提供なしは、別々の結果です。空欄では、そのどれだったのかが分からなくなります。
まず各記録を、同じ市場の前回の確認と比べてください。二つの市場どうしの比較は、換算した列ができてからにします。
サイトのルールの範囲内にとどまるにはどうすればよいですか?
公開ページを、控えめなペースで、サイトの利用規約とrobots.txtの範囲内で確認します。当社の適正利用ポリシーは、価格・市場インテリジェンスを事前の審査が不要な用途に挙げており(第2条)、お客様が合法的にアクセスを許されている情報を使ったビジネスインテリジェンスを認めています(第1条)。この作業で最も重要な制限を定めているのは第3条です。データが公開されているというだけではスクレイピングや自動アクセスは許可されず、サイトのルール、契約上の制限、レート制限、そして法的に適用される場合にはrobots.txtを守らなければなりません。
- 公開ページだけ。 その市場の訪問者なら誰でもサインインせずに見られる価格が、公開価格です。ある市場の訪問者に価格を見せているショップは、その市場で価格を公開しています。ご自身の国からの訪問者を拒否しているショップは制限を設けており、ポリシーの第5条は、サイトの地域別提供範囲に反してアクセスすることを禁止しています。
- サイトの利用規約。 サイトの利用規約が自動アクセスを禁止したり制限したりしていることがあります。最初の実行の前と、変更があったときに読んでください。スクリプトが禁止されている場合は、ショップに許可を求めるか、ショップが公開しているフィードを求めてください。
- robots.txt。 ルールはRFC 9309で標準化されており、同RFCは「これらのルールはアクセスの許可の一形態ではない」と述べています。そのため、robots.txtが許可しているパスでも、利用規約には従う必要があります。robots.txtが禁止しているパスは、スクリプトによる実行の対象から外します。同RFCは、クローラーがキャッシュしたコピーを24時間を超えて使うべきではないとも述べているので、スクリプトは毎日ファイルを読み直すべきです。
- 頻度。 スケジュールを判断に合わせます。週に一度の価格見直しなら週に一度、毎日の価格改定の判断なら毎日の実行です。一回の実行の中では、一つのサイトにつき一度に一ページずつ読み込みます。429 Too Many Requestsを返すサーバーはレートを制限しており、RFC 6585は、どれだけ待つべきかを示すRetry-Afterヘッダーを付けることを認めています。少なくともその時間は待ってください。続けるためにリクエストをより多くのアドレスに分散させるのはサイトのレート制限に反する行為であり、第5条が禁止しています。
アドレスはいくつ必要ですか?
市場ごとに一つです。どの取り組みにも当てはまる数はありませんが、三つの問いで決まります。
- 市場はいくつか? 各国にはその国のアドレスが必要なので、三つの市場には三つのアドレスが要ります。当社が提供している国はプロキシの所在地のページに掲載しており、現在は76か国です。
- 頻度は? 頻度によってアドレスが増えることはありません。毎日の実行でも毎時の実行でも、市場ごとに同じアドレスを使い、変わるのは訪問の回数だけです。
- 同時にどれだけ実行するか? 同じ市場を確認する複数の人やスクリプトは、その市場のアドレスを共有できます。各アドレスは同時セッションを通信量にかかわらず最大100まで扱えます(利用規約第2.4条)。一つのサイトにつき一度に一ページずつ読み込む手順なら、使うのはサイトごとに一つのセッションです。
アドレスはIP単位・期間単位で価格が決まり、料金ページに掲載しています。各アドレスはお支払いいただいた期間中ずっとお客様のものなので、市場の観測点は最初の確認から最後の確認まで変わりません。
価格モニタリングにプロキシが向かないのはどんな場合ですか?
- 都市ごとの価格。 カタログは国単位で販売しているので、二つの都市の間の違いは示せません。
- 買い物客に結びついた価格。 ポイント会員のアカウント、カートの中身、過去の注文によって決まる価格は個人向けの価格で、サインアウトした確認で見えるのは公開価格です。
- 独立したサンプルを同時に多数。 サイトが多数の異なる訪問者に異なる価格を見せているかを調べるには、多数のアドレスを並行して使う必要があります。それはローテーションプールの役割で、当社はローテーションのアドレスをまだ販売していません。
- カタログ全体を短時間で。 大手小売業者の価格をすべて短時間で集めるのは、その小売業者に相談すべきことです。データフィードやライセンスを求めてください。アドレスはその答えになりません。
米国の市場については、米国のISPプロキシのページに名前の分かるキャリアをそれぞれ掲載しており、カタログ全体はISPプロキシのページにあります。追跡する市場ごとに一つのアドレスから始め、リストが増えるにつれて市場を加えてください。
