21 Industry Network mudou oficialmente seu nome para PhpSou. O programa adicionou uma nova função de pesquisa para chamar automaticamente os dados do Baidu para imitar o mecanismo de pesquisa do Baidu sem dados. O componente spider do software do mecanismo de pesquisa de imitação do Google inclui três módulos funcionais: coleta de links, análise de páginas da web e verificação de páginas da web inválidas;
Identifique automaticamente codificações de páginas da web, como GB2312, BIG5, UTF-8 e Unicode;
A verificação do tipo de arquivo evita a coleta de arquivos de tipo não textual;
Os spiders podem coletar dados dinâmicos de páginas da web, como ASP, PHP e JSP, e páginas da web estáticas, como HTML, SHTML e XHTML;
Suporta a função de retomada de coleta. Se a coleta for encerrada devido a falhas no sistema, na rede, etc., o sistema solicitará se você deseja "continuar a coleta" ou "encerrar a tarefa" ao iniciar a coleta na próxima vez;
A função de gerenciamento de tarefas de coleta pode configurar várias tarefas de coleta para agendar o trabalho, e cada tarefa de coleta será executada em sequência;
Desta vez, corrigimos o erro de que a classificação dos lances não pode ser modificada, adicionamos links amigáveis em segundo plano, adicionamos exclusão em lote de páginas sem título em segundo plano, ferramentas de gerenciamento de SQL em segundo plano e fornecemos instruções relevantes de exclusão de páginas inválidas.
Corrigido o problema em que o URL enviado pelo frontend falhava quando a inclusão automática era definida no backend. Ao mesmo tempo, uma nova função de captura agendada é adicionada
Expandir
