طريقتان لتزويد ScrapeBox
يستطيع ScrapeBox حصاد البروكسي من مصدر مخصص أو تحميله من ملف. الحصاد يناسب الجلسات القصيرة: تحصد رابط ProxyMix، وتنقل النتيجة إلى قائمة البروكسي، وتبدأ. التشغيل الطويل يعمل أفضل مع ملف يعيد المجدول كتابته كل 10 دقائق، فتعيد تحميله كلما ارتفعت نسبة الأخطاء.
للباقة، أضف عنوان حاسوب ScrapeBox إلى القائمة المسموحة في لوحة ProxyMix قبل أول حصاد.
خطوة بخطوة
- افتح Proxy Harvester وأضف رابط قائمتك مصدرًا مخصصًا.
- شغّل الحصاد، ثم انقل النتيجة إلى قائمة البروكسي في النافذة الرئيسية.
- علّم البروكسيات كـ SOCKS في إعدادات البروكسي، أو استخدم الأسطر كـ HTTP.
- اضبط الحد الأقصى للاتصالات بما لا يتجاوز خيوط الباقة.
- للتشغيل الأطول من ساعة، أعد الحصاد كل 10 دقائق أو حمّل الملف الذي يُبقيه المجدول محدّثًا.
ملف يبقى محدّثًا
سطر crontab أدناه ينزّل القائمة كل 10 دقائق ولا يستبدل الملف إلا بعد اكتمال التنزيل. في Windows يشغّل برنامج جدولة المهام التنزيل نفسه بالجدول نفسه.
*/10 * * * * curl -fsS "YOUR_LIST_LINK" -o /opt/proxies/list.tmp && mv /opt/proxies/list.tmp /opt/proxies/proxies.txtالاتصالات ومحركات البحث
يفتح ScrapeBox اتصالات كثيرة لكل محرك بحث، والمحركات تحظر بسرعة. اجعل الاتصالات لكل محرك معتدلة، وخذ قائمة أكبر، ودع أداة الحصاد توزع الطلبات على عناوين أكثر. خيوط الباقة تحد المجموع عبر كل المحركات.
تجاوز اختبار البروكسي المدمج بعد كل حصاد. المجمّع يقدم عناوين عاملة، واختبار آلاف الأسطر لا يفعل سوى استهلاك الخيوط.
نصائح
- بروكسيات كثيرة معلّمة كفاشلة؟ خفّض الاتصالات أولًا: الاتصالات الزائدة تُرفض وتبدو كأسطر معطلة.
- استخدم مجمّع الرابطة لـ Yandex وWorld MIX لـ Google.
- احفظ القوائم المحصودة مع التاريخ في اسم الملف، كي لا تحمّل نسخة قديمة أبدًا.
مهام ScrapeBox التي تناسب القائمة
- حصاد روابط URL من نتائج البحث لقائمة كلمات مفتاحية.
- فحص الصفحات التي فهرسها محرك البحث.
- جمع اقتراحات الكلمات المفتاحية وفحص الروابط الخلفية.
- فحص جماعي لرموز الاستجابة لقوائم URL.
كلها ترسل طلبات قصيرة كثيرة. كلما زادت الأسطر في القائمة، قلّت الطلبات على كل عنوان.
الأسطر السكنية في ScrapeBox
يقرأ ScrapeBox البروكسي مع بيانات الدخول بصيغة host:port:login:password، وهي الصيغة نفسها التي تعطيها اللوحة، فالصق الأسطر كما هي عبر الحافظة. استخدمها بروكسي HTTP: أنشئ أسطر HTTP في اللوحة واترك علامة SOCKS غير محددة.
يوزّع سطر «دولة» الدوّار طلبات الحصّاد على عناوين منزلية حين يحظر محرك البحث نطاقات مراكز البيانات. الحصاد ينزّل صفحات نتائج كثيرة، والمرور السكني يُحاسب بالغيغابايت، فيبقى الحصاد الجماعي أرخص على باقة.
اختبر قبل الشراء
بعد توثيق حسابك اطلب من الدعم ساعة مجانية وشغّل حصادًا حقيقيًا. حدود الخيوط في صفحة الأسعار، ويعرض دليل curl القائمة نفسها في سكربتات shell.