Satu alamat IP yang melakukan scraping Amazon untuk daftar barang palsu gagal 60-80% dalam 100 permintaan pertama. Marketplace menyajikan halaman produk, harga, dan nama penjual yang berbeda berdasarkan asal geografis peminta, sidik jari perangkat, dan riwayat penelusuran sebelumnya. Tanpa kumpulan proxy yang berputar melalui berbagai negara dan ASN, pemindaian pelanggaran merek dagang Anda akan melewatkan daftar yang justru perlu Anda tangkap — daftar yang hanya terlihat oleh pembeli di Jakarta, penjual di Shenzhen, atau penjual ulang di São Paulo.
Variasi Daftar Berdasarkan Geografis dan Kewajiban Kumpulan Proxy
Amazon, eBay, Alibaba, Shopee, dan Lazada semuanya menerapkan pengiriman konten yang sadar wilayah. Pencarian untuk “Rolex Submariner” di Amazon.com memberikan hasil yang berbeda dibandingkan kueri yang sama di Amazon.de atau Amazon.co.jp. Pemalsu mengeksploitasi hal ini: mereka mendaftarkan barang yang melanggar di subdomain regional yang kurang diawasi secara agresif oleh tim perlindungan merek. Produk yang sama mungkin tampak asli di amazon.com tetapi palsu di amazon.in — dan hanya jika Anda melakukan kueri dari IP residensial India.
Kumpulan proxy dengan setidaknya 50–100 node keluar yang tersebar di wilayah utama marketplace target — Amerika Serikat, Jerman, Jepang, China, India, Brasil, dan Asia Tenggara — adalah jejak minimum yang layak. Setiap node harus berupa IP residensial atau seluler, bukan IP pusat data, karena marketplace secara agresif menandai rentang pusat data. Tingkat kegagalan kumpulan proxy yang hanya menggunakan pusat data di Alibaba melebihi 90% setelah 200 permintaan pertama. Putar IP setiap 10–30 permintaan dan acak header User-Agent per permintaan agar sesuai dengan profil perangkat di wilayah tersebut.
Pengambilan Bukti untuk Pemberitahuan Penghapusan yang Sah Secara Hukum
Pemberitahuan penghapusan berdasarkan DMCA atau Platform Perlindungan IP Alibaba memerlukan lebih dari sekadar URL. Anda harus membuktikan bahwa daftar tersebut ada pada waktu tertentu, dari perspektif geografis tertentu, dan bahwa daftar tersebut melanggar merek dagang Anda. Itu berarti menangkap header respons HTTP lengkap (termasuk Date, Content-Type, Set-Cookie, dan X-Amz-Rid untuk Amazon), tangkapan layar halaman daftar dengan bilah URL terlihat, dan HTML mentah dari deskripsi produk dan informasi penjual.
Gunakan browser tanpa kepala seperti Puppeteer atau Playwright yang digerakkan oleh middleware rotasi proxy. Cuplikan shell berikut menunjukkan satu kali pengambilan menggunakan curl dengan proxy dan dump header — tetapi untuk produksi Anda akan membutuhkan browser penuh untuk merender konten yang dimuat JavaScript:
curl -v --proxy "http://user:pass@res-proxy-1.example.com:3128" \
-H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36" \
-o listing.html \
-D response_headers.txt \
"https://www.amazon.com/dp/B0EXAMPLE"Simpan header, HTML mentah, dan tangkapan layar PNG dalam direktori yang dinamai berdasarkan marketplace, ID daftar, dan stempel waktu. Bundel bukti tiga bagian ini adalah yang diperlukan oleh Brand Registry Amazon dan tim IPP Alibaba untuk memproses penghapusan dalam 24–48 jam. Tanpa header yang berasal dari proxy yang membuktikan permintaan berasal dari wilayah target, platform dapat menolak pemberitahuan sebagai “relevansi geografis yang tidak memadai.”
Alur Kerja Pemantauan Harian di Seluruh Wilayah
Siapkan cron job atau Kubernetes CronJob yang berjalan setiap 6–12 jam per wilayah. Setiap proses memunculkan proses Scrapy atau Python kustom terpisah dengan segmen kumpulan proxy khusus. Kumpulan proxy harus dibagi menjadi “kelompok geo” — misalnya, 20 IP di US-West, 20 di EU-West, 20 di APAC-Southeast. Putar seluruh kelompok setiap 24 jam untuk menghindari daftar hitam IP. Pemindaian harian tipikal dari 10.000 ASIN produk di lima marketplace menghabiskan sekitar 500–1.000 IP unik.
Catat IP proxy, status respons, dan latensi setiap permintaan. Pantau penurunan mendadak dalam tingkat keberhasilan — penurunan 20% menandakan bahwa penyedia proxy mendaur ulang IP atau marketplace telah memperbarui deteksi botnya. Jika itu terjadi, beralihlah ke penyedia cadangan atau sesuaikan frekuensi rotasi. Jangan bergantung pada satu vendor proxy; pertahankan setidaknya dua kontrak dengan jaringan proxy residensial yang berbeda untuk failover.
Satu kesalahan umum adalah terlalu sering memutar. Mengganti IP pada setiap permintaan memicu pola batas kecepatan di eBay dan Shopee yang justru meningkatkan pemblokiran. Ritme yang lebih baik adalah 10–15 permintaan per IP dengan penundaan acak 2–5 detik di antaranya. Ini meniru perilaku penjelajahan manusia dan menjaga tingkat keberhasilan Anda di atas 95% untuk perayapan berkelanjutan.
Trade-Off: Latensi, Biaya, dan Penghindaran Deteksi
Proxy residensial lambat — waktu pulang-pergi median 2–5 detik dibandingkan 200ms untuk IP pusat data. Latensi itu bertambah selama pemindaian 10.000 ASIN: perkirakan 6–8 jam per wilayah. Anda dapat melakukan paralelisasi di beberapa proses, tetapi setiap proses membutuhkan IP sendiri untuk menghindari korelasi. Biaya kumpulan proxy residensial berkualitas tinggi untuk pemantauan merek berkisar $300–$800 per bulan per wilayah. Proxy pusat data lebih murah tetapi tidak berguna untuk kasus penggunaan ini — mereka terdeteksi dalam hitungan menit dan tidak menghasilkan bukti yang dapat ditindaklanjuti.
Tidak ada jalan pintas. Kumpulan proxy yang terlalu kecil atau terlalu homogen akan menghasilkan tingkat negatif palsu 60% pada daftar barang palsu. Kumpulan yang terlalu besar dan berputar terlalu agresif akan memicu daftar hitam IP dan membuang anggaran. Keseimbangan yang tepat adalah kumpulan berukuran sedang (100–200 IP) dengan segmentasi khusus geo, rotasi moderat, dan pemantauan metrik keberhasilan yang persisten. Itulah satu-satunya cara untuk menangkap bukti yang bertahan dalam proses penghapusan — dan satu-satunya cara untuk melindungi merek di lanskap marketplace global yang terfragmentasi.