Netpeak araçları ne zaman proxy ister
Netpeak Spider siteleri tarar, Netpeak Checker ise URL ve anahtar kelime listeleri için arama sonuçlarını ve metrikleri çeker. Kendi sitenizin denetimi nadiren proxy gerektirir. Büyük rakip sitelerin taranması ve toplu arama kontrolleri ise gerektirir: proxy olmadan hedef veya arama motoru IP'nizi sınırlar ve iş yavaşlar ya da durur.
İki araç da ayarlarında bir proxy listesi alır ve istekler arasında onu değiştirir. Paket için önce bilgisayarınızın adresine ProxyMix panelinde izin verin.
Adım adım
- Listeyi bir dosyaya indirin veya bağlantıdan kopyalayın.
- Spider veya Checker'da proxy ayarlarını açın ve listeyi dosyadan ya da panodan yükleyin.
- Satırları HTTP proxy olarak kullanın: Spider bir HTTP proxy listesi alır ve her paket portu HTTP'ye yanıt verir.
- Thread'leri paket sınırında ayarlayın.
- Kısa bir test taraması yapın ve hata oranına bakın.
Spider ve Checker ayarları
Spider tek bir siteye istek gönderir, bu yüzden tarama hızı o sitenin adres başına kaç isteği tolere ettiğine bağlıdır. Thread'leri adım adım artırın ve 429 ile 403 yanıtlarını izleyin. Checker istekleri arama motorlarına ve hizmetlere dağıtır ve uzun bir listeden en çok o yararlanır.
Proxy üzerinden istekler doğrudan isteklerden uzun sürer. Zaman aşımını biraz artırın ve hızı korumak için thread ekleyin.
Hep güncel kalan bir dosya
Listenin dünkü kopyasında çok sayıda ölü satır vardır. Her büyük çalışmadan önce yeniden yükleyin veya bir zamanlayıcının 10 dakikada bir yeniden yazdığı bir dosya tutun:
*/10 * * * * curl -fsS "YOUR_LIST_LINK" -o /opt/proxies/list.tmp && mv /opt/proxies/list.tmp /opt/proxies/proxies.txtİpuçları
- Spider ve Checker için aynı dosyayı kullanın.
- Küresel arama kontrolleri için World MIX'i, yerel sonuçlar için Avrupa veya BDT havuzunu seçin.
- Taramayı basit tutmak için kendi sitenizin denetiminde proxy'leri kapatın.
Tipik işler
- Büyük bir rakip siteyi IP başına sınırına takılmadan taramak.
- Checker'da binlerce anahtar kelime için sıralamaları ve snippet'leri kontrol etmek.
- Arama motorlarından ve hizmetlerden URL listeleri için metrik çekmek.
- Bir sitenin farklı ülkelerden gelen ziyaretçilere nasıl yanıt verdiğini görmek.
Netpeak'te residential satırlar
Spider, panelin verdiği biçimle aynı olan host:port:login:password satırlarından bir liste alır, ama host bir IPv4 adresi olmalıdır. Residential satırın host'u için nslookup çalıştırın ve yerine IP'yi yazın. HTTP satırları kullanın.
Seçilen ülkeye ait bir “Ülke” satırı, bir sitenin o ülkeden gelen ziyaretçilere nasıl yanıt verdiğini gösterir; bir arama motoru veri merkezi aralıklarını engellediğinde Checker arama sonuçlarını ev adresleri üzerinden çekebilir. Taramalar tüm sayfaları indirir, bu yüzden büyük bir çalıştırmadan önce gigabaytları tahmin edin.
Önce deneyin
Hesabınız doğrulandıktan sonra destekten bir ücretsiz saat isteyin ve gerçek bir hedefi tarayın. Paketleri fiyat sayfasında karşılaştırın, kendi tarayıcılarınız için Python rehberine bakın.