Weibo_Hot_Search

Weibo_Hot_Search

Diz-se que as pessoas na Internet têm apenas sete segundos de memória, mas quero gravar esses sete segundos de memória.

O projeto foi implantado no servidor. Ele irá rastrear a lista de pesquisas populares do Weibo regularmente às 11h e 23h todos os dias, salvá-la no formato de arquivo Markdown e, em seguida, carregá-la e fazer backup no GitHub. .

Não me pergunte por que escolhi os dois pontos no tempo de 11, porque sempre sinto que grandes eventos acontecerão em torno desses dois pontos no tempo.

Não importa quais sejam as pesquisas mais populares no Weibo sobre assuntos familiares, assuntos de estado, assuntos mundiais ou fofocas de entretenimento, eu só quero registrá-las fielmente...

Ambiente operacional

Python 3.0+

 pip install requests

pip install lxml

pip install bs4

ou executar

 pip install -r requirements.txt

Ambiente necessário para instalação e operação

correr

• Certifique-se de ter preparado o ambiente de execução necessário
• Método de execução (escolha um)
  1. Execute weibo_Hot_Search_bs4.py (novo) ou weibo_Hot_Search.py ​​​​no diretório do warehouse
  2. Execute python weibo_Hot_Search_bs4.py (novo) ou python weibo_Hot_Search.py ​​​​em cmd
• Executar automaticamente: Use o Agendador de Tarefas do Windows para conseguir isso

Gerar arquivos

Após a execução, uma pasta com o nome do tempo será gerada na pasta atual, conforme segue:

 2019年11月08日

(Atualizado) e será gerado um arquivo Markdown nomeado com um horário específico em horários específicos, conforme segue:

 2019年11月08日15点.md

(Continue atualizando) e um arquivo csv nomeado com um horário específico em horários específicos será gerado, conforme segue:

 2020年08月27日00点.csv

Fonte de interface

O link da lista de pesquisa pública no Sina Weibo é usado: https://s.weibo.com/top/summary/

declaração

Todas as fontes de dados para este projeto vêm do Sina Weibo. O conteúdo dos dados e seus direitos de interpretação pertencem ao Sina Weibo.

Atualizar informações

31 de julho

1. Adicionado método bs4
   • Adicionado novo arquivo weibo_Hot_Search_bs4.py
2. Otimize o formato de armazenamento de dados
   • Os dados do método bs4 são armazenados no diretório ./bs4版数据/ . O formato dos dados de armazenamento é序号-标题-热度（或置顶） . Este formato é fácil de processar e facilita a visualização subsequente dos dados e outras análises.
3. Perceber
   • Os arquivos de dados são todos armazenados no formato .md. Recomenda-se o uso do Notepad ou software semelhante para abri-los.

5 de agosto

1. A versão bs4 foi modificada para o formato de armazenamento .csv, que é mais propício para análise de dados posterior.
2. Os novos arquivos .csv são armazenados bs4[.csv]版数据.

9 de agosto

1. Explicação adicionada: bs4[txt]版数据e lxml版数据bs4[.csv] interrompidos.

Licença

Licença Pública Geral GNU v3.0