Como o Key Collector usa proxies
O Key Collector envia muitas requisições aos serviços do Yandex e aos buscadores: Wordstat, sugestões de busca, páginas de resultados para análise da concorrência. Um IP bate nos limites em minutos, por isso o programa distribui as requisições por uma lista de proxies. Ele lê essa lista de um arquivo ou da área de transferência, então o link da ProxyMix precisa de um passo a mais: um download agendado para um arquivo.
Para um pacote, o painel da ProxyMix precisa conhecer o endereço do computador com o Key Collector. Os proxies o reconhecem, então a lista não traz logins.
Passo a passo
- Configure um download agendado da lista para um arquivo: a linha de crontab abaixo, ou o Agendador de Tarefas no Windows.
- Abra as configurações de rede do Key Collector e ative o uso de proxies.
- Importe o arquivo com a lista.
- Ajuste as threads de coleta dentro do limite do pacote.
- Importe o arquivo de novo antes de cada sessão longa de coleta.
Um arquivo sempre atualizado
Em um servidor ou Mac, esta linha de crontab reescreve o arquivo a cada 10 minutos. No Windows, o Agendador de Tarefas faz o mesmo download na mesma frequência.
*/10 * * * * curl -fsS "YOUR_LIST_LINK" -o /opt/proxies/list.tmp && mv /opt/proxies/list.tmp /opt/proxies/proxies.txtQual pool para Yandex e Google
O Yandex mostra resultados e dados do Wordstat por região e trata endereços estrangeiros com mais desconfiança. O pool CEI traz endereços da Rússia, Cazaquistão, Belarus e países vizinhos, o que serve para coletar no Yandex. Para pesquisa de palavras-chave no Google, use o World MIX, ou a Europa para mercados europeus. Os preços de cada pool estão na página de preços.
Dicas
- Colete em várias sessões mais curtas e renove o arquivo entre elas.
- Reduza as threads se a proporção de erros subir: o Yandex também reage a rajadas de muitos endereços ao mesmo tempo.
- Mantenha um arquivo para cada pool se você trabalha com várias regiões.
Wordstat, sugestões e resultados
A coleta no Wordstat é a que mais pesa nos serviços do Yandex, então dê a ela menos threads e pausas mais longas. As sugestões de busca usam requisições mais leves e aceitam mais threads. A análise da concorrência pede páginas de resultados inteiras e reage a rajadas, então aumente as threads aos poucos e acompanhe o log de erros.
Linhas residenciais no Key Collector
O Key Collector trabalha com proxies HTTP e guarda o login e a senha em colunas próprias da tabela de proxies, nas configurações de rede. Adicione ali uma linha residencial HTTP: endereço, porta, login e senha.
A coluna de endereço espera um IP. Se a sua linha começa com um nome de host, rode nslookup nele e coloque o endereço que ele devolver. Para o Yandex, use uma linha “País” com a Rússia como país. A coleta envia muitas requisições pequenas, então acompanhe o contador de tráfego no painel durante a primeira sessão.
Teste grátis
Depois que a sua conta for verificada, peça ao suporte uma hora grátis do pacote CEI e faça uma coleta pequena. As perguntas frequentes explicam pagamento, pausas e regras de atualização.