単一のIPアドレスでAmazonの偽造品リストをスクレイピングすると、最初の100リクエスト以内に60～80%の確率で失敗します。マーケットプレイスは、リクエスト元の地理的出身地、デバイスフィンガープリント、過去の閲覧履歴に基づいて、異なる商品ページ、価格、出品者名を表示します。複数の国とASNをローテーションするプロキシプールがなければ、商標権侵害のスイープでは、まさに捕捉すべきリスト——ジャカルタのバイヤー、深圳の出品者、サンパウロの再販業者にだけ見えるもの——を見逃してしまいます。
地理的なリストのばらつきとプロキシプールの必須条件
Amazon、eBay、Alibaba、Shopee、Lazadaはすべて、地域認識型のコンテンツ配信を実装しています。Amazon.comで「Rolex Submariner」を検索した結果は、Amazon.deやAmazon.co.jpでの同じクエリとは異なります。偽造品業者はこれを悪用し、ブランド保護チームによる監視が緩い地域サブドメインに侵害商品を出品します。同じ商品がamazon.comでは正規品として表示されても、amazon.inでは偽造品として表示されることがあります——しかも、インドの住宅用IPからクエリした場合に限ります。
ターゲットマーケットプレイスの主要地域（米国、ドイツ、日本、中国、インド、ブラジル、東南アジア）に分散した、少なくとも50～100の出口ノードを持つプロキシプールが最小限の有効なフットプリントです。各ノードはデータセンターIPではなく、住宅用またはモバイルIPである必要があります。マーケットプレイスはデータセンターのレンジを積極的にフラグするためです。Alibabaでは、データセンターのみのプールの失敗率は最初の200リクエスト後で90%を超えます。10～30リクエストごとにIPをローテーションし、リクエストごとにUser-Agentヘッダーをランダム化して、その地域のデバイスプロファイルに合わせてください。
法的に有効な削除通知のための証拠収集
DMCAまたはAlibabaのIP保護プラットフォームに基づく削除通知には、URLだけでは不十分です。特定の時点、特定の地理的視点からリストが存在し、それがあなたの商標を侵害していることを証明しなければなりません。つまり、完全なHTTPレスポンスヘッダー（Amazonの場合はDate、Content-Type、Set-Cookie、X-Amz-Ridを含む）、URLバーが表示されたリストページのスクリーンショット、商品説明と出品者情報の生のHTMLを取得する必要があります。
プロキシローテーションミドルウェアで駆動するPuppeteerやPlaywrightのようなヘッドレスブラウザを使用してください。以下のシェルスニペットは、curlを使用したプロキシとヘッダーダンプによる単一のキャプチャを示していますが、本番環境ではJavaScriptで読み込まれるコンテンツをレンダリングするためにフルブラウザが必要になります。
curl -v --proxy "http://user:pass@res-proxy-1.example.com:3128" \
-H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36" \
-o listing.html \
-D response_headers.txt \
"https://www.amazon.com/dp/B0EXAMPLE"ヘッダー、生のHTML、PNGスクリーンショットを、マーケットプレイス名、リストID、タイムスタンプで命名したディレクトリに保存します。この3部構成の証拠バンドルが、AmazonのBrand RegistryとAlibabaのIPPチームが24～48時間以内に削除を処理するために要求するものです。リクエストがターゲット地域から来たことを証明するプロキシ発信元のヘッダーがなければ、プラットフォームは「地理的関連性が不十分」として通知を却下する可能性があります。
地域をまたぐ日次モニタリングワークフロー
地域ごとに6～12時間ごとに実行されるcronジョブまたはKubernetes CronJobを設定します。各実行は、専用のプロキシプールセグメントを持つ個別のScrapyまたはカスタムPythonプロセスを起動します。プールは「地理コホート」に分割します。例えば、US-Westに20 IP、EU-Westに20 IP、APAC-Southeastに20 IPといった具合です。IPブラックリスト化を避けるため、コホート全体を24時間ごとにローテーションします。5つのマーケットプレイスにわたる10,000件の商品ASINの典型的な日次スイープでは、約500～1,000のユニークIPを消費します。
すべてのリクエストのプロキシIP、レスポンスステータス、レイテンシをログに記録します。成功率の急激な低下を監視します——20%の低下は、プロキシプロバイダーがIPをリサイクルしているか、マーケットプレイスがボット検出を更新したことを示します。その場合は、バックアッププロバイダーに切り替えるか、ローテーション頻度を調整します。単一のプロキシベンダーに依存せず、少なくとも2つの異なる住宅用プロキシネットワークとの契約を維持してフェイルオーバーできるようにしてください。
よくある間違いの一つは、過剰なローテーションです。リクエストごとにIPを変更すると、eBayやShopeeでレート制限パターンがトリガーされ、実際にブロックが増加します。より良いリズムは、IPあたり10～15リクエスト、その間に2～5秒のランダムな遅延を入れることです。これにより人間のブラウジング行動を模倣し、持続的なクロールで成功率を95%以上に維持できます。
トレードオフ：レイテンシ、コスト、検出回避
住宅用プロキシは遅いです——往復時間の中央値は2～5秒で、データセンターIPの200msと比較されます。このレイテンシは10,000 ASINのスイープで積み重なり、地域あたり6～8時間かかると予想されます。複数のプロセスで並列化できますが、各プロセスには相関を避けるために独自のIPが必要です。ブランドモニタリング用の高品質な住宅用プロキシプールのコストは、地域あたり月額300～800ドルです。データセンタープロキシは安価ですが、このユースケースでは役に立ちません——数分で検出され、実行可能な証拠はゼロになります。
近道はありません。小さすぎる、または均質すぎるプロキシプールは、偽造品リストに対して60%の偽陰性率を生み出します。大きすぎて過剰にローテーションするプールは、IPブラックリストをトリガーし、予算を浪費します。正しいバランスは、中規模のプール（100～200 IP）で、地理固有のセグメンテーション、適度なローテーション、成功指標の継続的な監視を行うことです。これこそが、削除手続きで通用する証拠を取得する唯一の方法であり、断片化されたグローバルマーケットプレイスの状況全体でブランドを保護する唯一の方法です。