wechat_articles_spider

Rastreador de artigos de conta pública do WeChat (obtenção de curtidas para leitura de artigos do WeChat)

Instalar

pip install wechatarticles

Endereço de exibição:

Atualização diária, obtenha o link do artigo mais recente da conta pública, suporte à atualização diária, leia curtidas e comente o texto

Nota: Este projeto é apenas para aprendizagem e comunicação, e é estritamente proibido para uso comercial (este projeto não pode ser usado diretamente) e não pode atingir o nível pronto para uso. Para usar este projeto, você precisa ler a documentação + código-fonte + prática prática e consultar o código de exemplo (na pasta test ) para reescrever.

Dica: Além disso, muitos amigos (marmanjos) já se basearam neste conjunto de projetos ou os reescreveram para atender às suas próprias necessidades, olhando diretamente o código-fonte.

Idéia de implementação um:

1. Obtenha os URLs de todos os artigos públicos do WeChat na plataforma de conta pública do WeChat
2. Faça login no WeChat no PC ou celular para obter o número de leituras, curtidas e comentários de artigos.

Para ideias completas, você pode consultar meu blog: Relembrando uma experiência de rastreamento de contas públicas do WeChat (obter curtidas ao ler artigos do WeChat)

Idéia de implementação dois:

1. Faça login no PC ou na versão móvel do WeChat para obter os URLs de todos os artigos da conta pública. O número de URLs obtidos é superior a 500 e o número específico não é totalmente consistente para cada conta do WeChat (atualmente só pode ser). obtido uma vez e não pode ser obtido uma segunda vez!!! Use test_GetUrls.py com cuidado, de preferência sem .)
2. Use o mesmo método acima para obter o número de leituras, curtidas e comentários do artigo.

Os links permanentes para os artigos históricos rastreados de contas públicas são divulgados. As datas são a partir do momento do commit. Eles são apenas para teste e aprendizado.

Lista de contas públicas

Estética tecnológica

Comitê Central da Liga da Juventude Comunista

fim de semana do sul

AppSo

## Notas

O projeto teve início em 2017 e atualmente é atualizado em março de 2023

Para ajustar o código do projeto, use pip install wechatarticles para chamar a interface anterior.

1. Quando o rastreamento falha, pode haver os seguintes motivos:
   1. Ao executar, você precisa desligar o proxy de rede (software de captura de pacotes) ou adicionar parâmetros relevantes
   2. Se os parâmetros são os mais recentes Ao obter os parâmetros relacionados ao WeChat (cookie, token), certifique-se de que se trata de qualquer artigo correspondente à conta oficial.
   3. Verifique o código
   4. Precisa prestar atenção à conta pública correspondente (talvez)
2. Ideia 1: Ao obter o URL, o intervalo entre cada página pode ser definido por mais tempo, como 3 minutos, e a duração é de várias horas (a partir de testes de internautas)
3. Ao obter curtidas de leitura de artigos, cada artigo pode ser definido para cerca de 5 a 10 segundos e o tempo de expiração é de 4 horas. Se estiver bloqueado, o rastreamento pode continuar em cerca de 5 a 10 minutos;
4. Ideia 2: Ao obter o URL, se estiver bloqueado, demorará 24 horas até que possa ser rastreado novamente (este artigo é inválido e não pode ser desbloqueado temporariamente)

Consulte o README para obter a descrição do arquivo de parâmetros.

versão python

• python : 3.6.2, 3.7.3

Realização de função

Função

Relacionado à conta oficial

Informações oficiais da conta

Negócios de contas públicas. Como obter: Qingbo, página oficial da conta

Número de artigos publicados pela conta pública (não totalmente preciso)

Artigo relacionado

O URL de um determinado artigo de conta pública. Como obter: página oficial da conta, PC WeChat, WeChat móvel, leitura do WeChat

Todas as informações do artigo de uma conta pública (incluindo número de curtidas, número de leituras e informações de comentários) precisam ser alteradas manualmente.

Informações sobre artigos designados de uma determinada conta pública

Suporta download de artigos do WeChat localmente e conversão para HTML (opcional para salvar imagens)

Exemplos de API

Use a versão web oficial da conta para obter o URL do artigo do WeChat

Há um limite para o número de vezes aqui, então você não pode obter muitos URLs de uma vez. Solução: várias contas rastreiam test_WechatUrls.py ao mesmo tempo

Faça login no WeChat PC para obter informações do artigo (ler e curtir)

test_WechatInfo.py

Obtenha rapidamente um grande número de URLs de artigos (use artigos históricos para obter links)

test_GetUrls.py

Os artigos do WeChat são baixados como HTML offline (incluindo imagens)

test_Url2Html.py

Aprender/executar processo

Você pode ler esta edição, muito obrigado pela explicação concisa.

Documentos relacionados

Veja o blog e a documentação abaixo

Consulte este documento para saber como obter manualmente o official_cookie e o token.

Para uma introdução à aquisição manual de wechat_cookie e appmsg_token, consulte este documento

Notas de contato :

1. Não é possível (não é possível) fazer login automaticamente nas contas oficiais do WeChat e no WeChat

2. Não posso (não posso) fazer em tempo real (obter parâmetros, ler curtidas, obter artigos)

3. Alterar uma conta oficial ou parâmetros expirados requer atualização manual. Como obter parâmetros é mencionado no artigo, leia com atenção.

4. Você não pode fazer pesquisas por palavras-chave (ou seja, função de pesquisa WeChat), como pesquisar todos os artigos que contenham a palavra "tecnologia".

Perguntas e respostas

1. O projeto pode funcionar normalmente?

   Resposta: O projeto pode funcionar normalmente.

2. Como executar/iniciar xxx e quais parâmetros precisam ser obtidos?

   Resposta: Observe o código-fonte e execute-o manualmente para ver o erro de saída.

3. Como obter parâmetros xxx?

   Resposta: A documentação e o blog são muito claros, leia com atenção.

4. Quero xxxx, o que devo fazer?

   Resposta: Leia a documentação e o código fonte

5. Como atualizar a página da web diariamente?

   Resposta: Não é uma chave universal. A solução é muito simples, que consiste em simular cliques + software proxy (Fiddler ou Mitmproxy) para interceptar pacotes e capturá-los uma vez ao dia. Se tiver uma solução melhor, avise-nos. Esta parte não é de código aberto (se você vir o código aberto completo relevante, poderá levantar um problema para saber mais), simplesmente porque é muito problemático configurar o ambiente + personalização e há alguns problemas. Se você ver o que pode ser alcançado aqui, você pode conseguir. Se você me perguntar, não posso responder. É muito demorado e consome muita energia.

6. O WeChat e o software de captura de pacotes Fiddler são necessários no PC?

   Resposta: Não. Isso é exatamente o que eu entendo (acho) que esses dois são relativamente mais fáceis de concluir todo o processo. Alternativas: Você pode capturar o WeChat em telefones celulares (Android e IOS estão disponíveis, o Android requer root para capturar leituras e curtidas, existem muitas alternativas ao software de captura de pacotes Fiddler, desde que ele possa capturar pacotes HTTPS e visualizar os dados); .

7. Como capturar artigos de um grande número de contas públicas?

   Resposta: Este projeto não pode ser realizado. Não há uma boa solução, consulte 5. O tempo gasto para mudar de conta oficial é de cerca de 3 a 5 minutos, dependendo do nível de proficiência.

espaço publicitário

apêndice

Maneira normal de fazer perguntas:

1. Descreva claramente o ambiente do sistema e o ambiente Python em que você está executando... (esta etapa pode ser opcionalmente ignorada)
2. Qual código foi executado (qual parte foi alterada) e qual erro foi relatado (faça uma captura de tela completa)?
3. O que você tentou com base no relatório de erros? (Existe descrição no documento? Quais são as soluções pesquisadas online)

A programação vem da prática. Você pode testar diretamente se a operação está correta ou não. Se houver algum problema durante a operação, siga o processo acima para fazer perguntas, mas somente se você mesmo o tiver executado . Por favor, diga-me suas dúvidas ou necessidades diretamente, sem esperar pela minha resposta. Obrigado! A maioria das perguntas pode ser trocada. Se você fizer perguntas detalhadas, também aceitaremos ensino pago.

Código de apreciação WeChat