Pazar Araştırması için Proxy Çözümü

Pazar araştırmasında sık sorulan soru şudur: aynı sayfayı başka bir şehirdeki ya da ülkedeki bir kullanıcı da benim gördüğümü mü görüyor? Fiyat, kampanya, dil, stok ve reklam çoğu zaman ziyaretçinin konumuna göre değişir. Hedef bölgeden çıkan bir proxy bu farkı ölçmenin pratik yollarından biridir; ancak sonucu doğru yorumlamak için deneyi dikkatli kurmanız gerekir.

Senaryo ve gereksinimler#

Bölgesel araştırma genellikle şu sorulardan birine yanıt arar.

• Fiyat ve kampanya farkı: Bir marka aynı ürünü farklı ülkelerde farklı fiyata mı sunuyor?
• İçerik uyarlaması: Ana sayfa, dil, para birimi ve öne çıkan ürünler bölgeye göre değişiyor mu?
• Reklam görünümü: Belirli bir sorgu ya da sayfa için hangi reklamlar, hangi bölgede gösteriliyor?
• Erişilebilirlik: Bir hizmet ya da sayfa belirli bir bölgeden açılıyor mu, yönlendirme yapılıyor mu?

Gereksinimler: çıkış konumunun bilinmesi, ölçüm koşullarının sabit tutulması, sonuçların tarih ve çıkışla birlikte saklanması ve her bölge için yeterli sayıda tekrar.

Proxy hangi sorunu çözer?#

Ofisinizin ağından yaptığınız her istek aynı konum görünümüyle gider. Proxy, istek çıkışının konumunu değiştirerek sitenin o bölgedeki bir ziyaretçiye gösterdiği sayfayı almanızı sağlar. Bunun işe yaraması için sitenin konumu IP adresinden çıkarması gerekir; bazı siteler bunu hesap bilgisinden, çerezden ya da tarayıcının dil ayarından da yapar.

Bu nedenle proxy tek başına yeterli değildir. Konumu hesap ya da çerez belirliyorsa, çıkışı değiştirmek sonucu değiştirmez. Böyle durumlarda hesap ayarını ya da bölge seçimini de deneyin parçası olarak değiştirin ve hangi etkenin sonucu belirlediğini ayrı ayrı sınayın.

Proxy ayrıca "gerçek kullanıcı deneyimini" birebir yansıtmaz. Veri merkezinden çıkan bir bağlantı ile ev ya da mobil bağlantısı, bazı sitelerde farklı muamele görebilir. Bu fark araştırmanın yöntem bölümünde not edilmelidir.

Önerilen mimari#

Deney tasarımı#

Karşılaştırma yapmak için kontrol edilen değişken yalnızca çıkış konumu olmalıdır. Şunları sabitleyin:

1. İstemci türü ve kimliği (user-agent), ekran boyutu.
2. Dil başlığı (Accept-Language), ya da bilinçli olarak değiştirdiğiniz tek değişken olarak ayrı bir tur.
3. Çerezler: temiz oturumla başlayın.
4. Zaman: karşılaştırılan istekleri aynı saat aralığında yapın, çünkü kampanyalar zamana bağlıdır.

Çıkışları bölgeye eşlemek#

Her hedef bölge için bir çıkış grubu tanımlayın ve her ölçümde hangi çıkışın kullanıldığını kaydedin. Çıkışın gerçekten o bölgede göründüğünü başka bir kaynaktan doğrulayın; proxy kontrol aracı bağlantının çalıştığını ve hangi adresten çıktığınızı görmenize yardım eder. Konumu doğrulanmamış çıkıştan alınan sonucu o bölgenin sonucu olarak raporlamayın.

Tekrar ve özet#

Tek bir sayfa görüntülemesi tesadüf olabilir. Her bölge ve her sayfa için birkaç tekrar yapın, farklı sonuçları ayrı kaydedin. Büyük sayfaları baştan sona karşılaştırmak yerine ilgilendiğiniz alanları (fiyat, başlık, para birimi, reklam metni) ayıklayıp o alanları karşılaştırın.

import requests

# Örnek adresler ve çıkış bilgileri yer tutucudur.
CIKISLAR = {
    "bolge-a": "http://KULLANICI:PAROLA@PROXY_HOST:PROXY_PORT",
    "bolge-b": "http://KULLANICI:PAROLA@PROXY_HOST:PROXY_PORT",
}
URL = "https://example.com/urun/123"
BASLIK = {"Accept-Language": "tr-TR,tr;q=0.9"}


def oku(proxy):
    r = requests.get(
        URL,
        headers=BASLIK,
        proxies={"http": proxy, "https": proxy},
        timeout=(5, 20),
    )
    r.raise_for_status()
    return r.text


sonuclar = {ad: oku(p) for ad, p in CIKISLAR.items()}
for ad, govde in sonuclar.items():
    print(ad, len(govde))

Bu betik yalnızca iki bölgeden aynı sayfayı çeker ve gövde uzunluğunu yazar. Gerçek araştırmada uzunluk yerine ilgili alanları ayrıştırır, sonucu tarih ve çıkış bilgisiyle saklarsınız; PROXY_HOST ve PROXY_PORT yerine siparişinizin panelinde verilen değerler girilir.

Reklam doğrulama#

Reklam doğrulamasında sayfanın sunucudan gelen HTML'i çoğu zaman reklamı içermez; reklamlar sonradan yüklenir. Bu yüzden gerçek bir tarayıcı otomasyonu ve ekran görüntüsü ya da yüklenen reklam öğelerinin kaydı gerekir. Reklam ağlarının otomatik erişime dair kuralları olabilir; ölçümü bu kurallara uygun biçimde, düşük hacimli ve açıklanmış yöntemle yapın. Doğrulama sonucunu "reklam gösterilmedi" diye değil, "bu çıkıştan, bu zamanda, bu koşulda gösterilmedi" diye raporlayın.

Doğru proxy türünü seçmek#

Mobil Proxy paketlerinde IP'yi bir değiştirme bağlantısıyla istediğiniz anda yenileyebilirsiniz; bu, aynı mobil hatta farklı IP gerektiren tekrar ölçümlerinde işe yarar. Yine de coğrafi çeşitlilik için sipariş adımındaki ülke listesine bakın ve yurt dışı paketlerde günlük seçeneğin olmadığını unutmayın.

IPv6 Proxy bu işte sınırlıdır. Bir bölgeyi temsil etmek istiyorsanız, çıkışın o bölgede olduğuna dair bir bilginiz olmalıdır; ürün sayfasında ağ geneli için bazı ülkeler örnek olarak anılsa da sipariş adımında ülke seçimi yoktur. Hedef sayfa yalnızca IPv4 ise IPv6 çıkış ona doğrudan ulaşamaz; konu ayrıntıları için IPv6 adres türleri yazısına bakabilirsiniz.

Sık yapılan hatalar#

• Tek değişkeni sabitlememek. Hem çıkışı hem dil başlığını hem çerezi aynı anda değiştirirseniz, farkın nedenini bulamazsınız.
• Çıkış konumunu varsaymak. Sağlayıcının belirttiği konum ile sitenin algıladığı konum farklı olabilir. Her bölge için doğrulama yapın.
• Tek ölçümle genelleme yapmak. Bir görüntüleme, kampanya ya da A/B testi nedeniyle farklı olabilir; birden çok tekrar ve farklı gün gerekir.
• Para birimi ve vergi farkını görmezden gelmek. Bölgeler arası fiyat karşılaştırmasında vergi dahil/hariç gösterim farklıdır; aynı tabana getirin.
• Reklamı HTML'de aramak. Reklamlar çoğunlukla sonradan yüklenir; ham HTML boş görünür.
• Araştırma sonucunu "gerçek kullanıcı" diye sunmak. Proxy çıkışı, ev kullanıcısının tam deneyimini yansıtmayabilir; yöntemi raporda açıkça yazın.

Sorumlu kullanım#

Bölgesel araştırma, tüketicinin gördüğünü anlamak için meşru bir yöntemdir; yine de sınırlar vardır.

• Sitenin robots.txt ve kullanım koşullarına uyun; otomatik erişim yasaksa resmi veri kaynağı ya da izinli bir yöntem arayın.
• Düşük hacimle çalışın; araştırma, siteye yük bindirmek için değildir.
• Kişisel veri toplamayın. Reklam doğrulamasında karşılaşılan kullanıcı verisi varsa saklamayın.
• Bölgesel kısıtlama ya da lisans nedeniyle sınırlanmış içeriğe, sınırı aşmak amacıyla erişmeyin. Kısıtlamayı aşmak ile kısıtlamanın var olduğunu doğrulamak farklı şeylerdir.
• Araştırma sonuçlarını yayımlarken yöntemi (tarih, çıkış, istemci, tekrar sayısı) belirtin.

Aynı yaklaşımın arama sonuçlarına uygulanışı için SEO izleme, fiyat ve stok izleme için e-ticaret sayfasına bakın.

Güncel fiyatlar için ürün sayfalarına bakın; satın alma Sağlam Proxy (saglamproxy.com) üzerinden yapılır. Örneğin Residential Proxy satın alma sayfası (yeni sekmede açılır).