O sistema de coleta automática AMR (anteriormente Universal Thief Program) é um aplicativo da web que coleta sites de forma totalmente automática. Atualmente, suporta mais de 95% das coleções de sites.
Comparado com outros programas de roubo ou ferramentas de coleta do mercado, este programa possui as seguintes características:
1. Fácil de instalar e usar: basta inserir as informações de URL do site de destino que deseja coletar e o conteúdo do site de destino será coletado automaticamente configurando regras de substituição e modificando CSS, você pode personalizar o layout e o conteúdo do site; ;
2. Suporta geração estática e atualização estática sob demanda: apenas as páginas visitadas pelos usuários (incluindo mecanismos de pesquisa) serão coletadas e a estática será gerada, o que não causará grande pressão de tráfego no site de destino, mesmo que o site de destino esteja fora do ar; este site ainda funcionará normalmente;
3. Atualizar automaticamente a estática sob demanda: Defina o tempo de atualização estática em segundo plano, e a estática será atualizada automaticamente de acordo com o status de acesso do visitante, mantendo-a consistente com o conteúdo do site de destino;
4. Suporta coleta de vários nomes de subdomínio: se o site de destino usar vários nomes de domínio de segundo nível, esse site também poderá coletar automaticamente o conteúdo do site de todos os nomes de domínio de segundo nível para formar um site;
5. Coleta de imagens opcional: Se a coleta de imagens estiver habilitada, todas as imagens do site de destino podem ser coletadas automaticamente para o servidor deste site, o que é benéfico para a otimização do mecanismo de pesquisa (esta função pode ocupar muito espaço no disco rígido e é recomendado para usuários com servidores independentes ou VPS);
6. Romper a função anti-hotlinking de imagem: Ative a função de coleta de imagens e, mesmo que a outra parte tenha a função anti-hotlinking de imagem, você pode facilmente romper;
7. Suporta coleta de imagens de diferentes nomes de domínio: por exemplo, grandes sites como Taobao e Sina usam nomes de domínio diferentes para imagens e sites; este programa também pode coletar todas as imagens e também pode quebrar links importantes;
8. O conteúdo/publicidade da página da Web pode ser modificado à vontade: por meio de regras de substituição, regras de exclusão e regras de nó, você pode substituir o título do site, os anúncios e o conteúdo especificado pelo conteúdo desejado (substituição do código HTML que você pode excluir); conteúdo desnecessário;
9. Suporte à substituição e exclusão de expressões regulares; suporte à substituição, exclusão, adição ou modificação da sintaxe Xpath de elementos do nó;
10. Suporta invocação personalizada de feeds RSS: o programa possui regras de chamada do Baidu Top Ranking integradas, que podem facilmente exibir o Baidu Top Rankings em qualquer lugar da página da web e formar uma pesquisa agregada dentro do site;
11. Suporte à pesquisa agregada no site: a pesquisa agregada no site pode pesquisar conteúdo no site. Se o conteúdo não existir no site, você pode personalizar a fonte de dados de pesquisa para coletar dados diretamente de outros sites e oferecer suporte ao chinês; segmentação de palavras!
12. Você pode criar facilmente mecanismos de pesquisa agregados, sites de comparação de preços e sites de pesquisa de compras: por meio da função de pesquisa agregada no site, você pode personalizar N fontes de dados de pesquisa e, ao personalizar modelos de exibição, você pode criar mecanismos de pesquisa agregados, preços sites de comparação e sites de busca de compras;
13. Você pode usar este programa para ajudar o site corporativo a gerar páginas estáticas e melhorar a segurança do site corporativo: para sites dinâmicos em geral, você pode conectar este programa para gerar páginas estáticas automaticamente, e as páginas estáticas podem ser atualizadas regularmente de acordo com para as configurações;
14. Suporte à coleta de servidores proxy para evitar que sites de destino bloqueiem endereços IP;
15. Regras de extração e função de coleta de vários sites: Através desta função, vários sites de destino podem ser facilmente integrados em um site! O objetivo das regras de extração é extrair o conteúdo do site da enésima parte e preenchê-lo em seu site, para que possa ser perfeitamente conectado ao seu site atual. Você pode usar seu site anterior para publicar o conteúdo sozinho e usar o AMR. sistema para coletar todo o conteúdo do site para realizar a atualização automática do conteúdo, uma vez que o conteúdo da página web é composto pelo conteúdo de vários sites, também é equivalente ao conteúdo original;
Esta é uma ferramenta pesada de originalidade de artigos;
16. Você pode definir um endereço não estático: Esta função é principalmente para a página de pesquisa. Se a página de pesquisa for estática e palavras-chave diferentes forem pesquisadas, os resultados exibidos serão os mesmos, portanto a página de pesquisa deverá ser adicionada ao. lista não estática.
17. Poderosa função de gerenciamento de publicidade: As regras de extração de publicidade integradas podem atualmente corresponder aos códigos de publicidade comumente usados. Os usuários só precisam substituir os códigos de publicidade dos tamanhos correspondentes.
18. A página de erro executa automaticamente o redirecionamento 301: Se você alterar o site de destino, o endereço incluído no mecanismo de busca original reportará um erro, que pode facilmente levar ao site K agora se você acessar uma página que não existe, uma página de erro amigável será exibida e saltará automaticamente para a página inicial do site após 5 segundos (o peso também será transferido para a página inicial), informando ao mecanismo de busca que a página original não existe mais, permitindo sua exclusão. o índice incluído, reduzindo o risco de ser K!
Instruções de instalação
Requisitos do sistema de coleta automática AMR V4.1: Seu servidor deve suportar asp.net2.0 e usar a versão do banco de dados MSSQL2005 ou superior.
Windows.netframework2.0 anexado
Endereço de download de 32 bits: http://uwz.cc/10P
Endereço de download de 64 bits: http://uwz.cc/10Q
Para etapas específicas de instalação, participe do fórum para obter instruções de ajuda: http://www.amr-lab.net/showtopic-222.html
Instruções de atualização
Primeiro, faça backup do banco de dados e do arquivo web.config e faça o seguinte:
Descompacte o pacote do programa. Exceto web.config, install.aspx, Setup2000.sql e Setup2005.sql, carregue todos os outros arquivos no diretório raiz do site. Execute seu URL/upgrade e siga as instruções para importar a atualização. roteiro!
Modifique o arquivo web.config e exclua ou comente esta linha.
Observação: se você modificou o modelo em seu site, faça backup dele você mesmo.
Lista de atualização do programa
Recursos adicionados na versão V4.1:
Uma nova função de tradução automática foi adicionada para tornar o conteúdo coletado verdadeiramente original!
Adicionado código incorporado de variável de sistema para facilitar a personalização do modelo;
Itens otimizados:
Função de sequestro de link externo: A função de sequestro de link externo foi adicionada, que pode facilmente transformar links externos em links internos e colocar anúncios com [sistema de proxy AMRweb: http://uwz.cc/11H] para obter o melhor efeito! Amigos que entendem podem consultar o arquivo go.aspx e modificá-lo você mesmo!
Adicione correspondência de URL às regras de nó padrão;
Bugs corrigidos:
Pesquisa agregada de palavras relacionadas à pesquisa para remover código HTML redundante;
A imagem não possui um tipo MIME. O problema de julgar que a referência não pertence a este site. O problema de alterar a senha de segundo plano. O problema de falha na atualização automática quando o html está incompleto.
4. Declaração de direitos autorais
O sistema de aquisição AMR é desenvolvido pelo laboratório de aquisição automática AMR amr-lab.net e goza de direitos de propriedade intelectual independentes.
Ao usar o sistema de coleta automática AMR, você aceita o "Contrato de licença do sistema de coleta automática AMR" por padrão. Consulte http://www.amr-lab.net/showtopic-220.html Contrato de licença.
5. Diferenças de versão
O sistema de coleta AMR possui oito versões: gratuita, experimental, autorizada básica, autorizada vitalícia, básica, padrão, avançada e suprema. A versão gratuita é de uso gratuito. A versão comercial possui mais funções e atendimento pós-venda. Os amigos podem escolher de acordo com suas necessidades.
Para visualizar as funções, cobranças e diferenças de serviço de cada versão, consulte http://www.amr-lab.net/showtopic-223.html para obter a lista de funções e cotação da versão gratuita e da versão paga
6. Contate-nos
Grupos QQ: 124867090, 147976428, 4624706 (entre em contato com o proprietário do grupo para compra de software, consulta de uso, desenvolvimento personalizado, etc.)
Site oficial: http://www.amr-lab.net
Weibo oficial: http://weibo.com/AmrLab
7. Campos de aplicação
1. Site do cliente Taobao: Ao coletar sites de clientes Taobao existentes ou um determinado subsite do Taobao, você pode construir rapidamente seu próprio site de cliente Taobao. Você só precisa dar um salto com um link de cliente Taobao na página de compra; Depois disso, o conteúdo será atualizado automaticamente todos os dias, e o webmaster irá apenas sentar e esperar para receber o dinheiro!
2. Site de pesquisa agregada: você pode criar um mecanismo de pesquisa personalizado personalizando fontes de dados de pesquisa multicanal e pode incorporar dados do Baidu Ranking em páginas designadas para atualizar o conteúdo do site em tempo real!
3. Atualização de conteúdo do site corporativo: A maior dor de cabeça para o site de uma empresa é a atualização de conteúdo. Geralmente, eles optam por recrutar um funcionário para adicionar artigos, o que custa uma grande quantidade de taxas de emprego todos os anos. O sistema de coleta AMR pode ser perfeitamente conectado; o site corporativo existente Você pode usar este sistema para coletar as últimas tendências do setor! Como o conteúdo é atualizado em tempo real, a classificação do Baidu aumentará rapidamente!
4. Rede de comparação de preços: você pode criar facilmente uma rede de comparação de preços personalizando as interfaces de pesquisa de vários shoppings; tudo o que você precisa fazer é criar um modelo e combinar os dados obtidos; Esperando para receber comissão de vendas!
5. Sites de filmes, fotos de beleza, jogos em flash... desde que não sejam sites que exijam login e cadastro dos usuários, nosso sistema pode ser facilmente construído, não é incrível?