Baidu Spider는 웹사이트의 홈 페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다. 무슨 일이 일어나고 있나요? 많은 사람들이 이 문제로 어려움을 겪고 있으며, 특히 새로운 웹사이트가 출시되고 오랫동안 항목 수가 증가하지 않아 더욱 불안해집니다.
우선, "Baidu Spider는 웹사이트의 홈 페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다"라는 것을 어떻게 알 수 있습니까?
스파이더 크롤링 상황은 웹사이트 IIS 로그를 통해 확인할 수 있습니다. 로그에는 스파이더의 크롤링 시간, 크롤링된 페이지, 크롤링된 페이지 및 기타 정보가 명확하게 기록됩니다.
무슨 말입니까? IIS 로그를 읽을 수 없습니까?
인터넷에는 많은 IIS 로그 분석 도구가 있습니다. Baidu에서 확인해 보세요. 여기서는 빠르고 사용하기 쉬운 Lightyear IIS 로그 분석 도구를 사용하는 것이 좋습니다.
다음으로 Nantang은 "Baidu 스파이더는 홈페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다"라는 문제를 분석해 드립니다.
"Baidu Spider는 웹사이트의 홈 페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다"라는 이유는 다음과 같습니다.
1. Robots.txt, 잘못된 작동, 내부 페이지 차단.
2. 대량 메시지 전송 및 기타 부정 행위.
3. 서버 이유.
4. 홈페이지에서 웹사이트 내부 페이지로 연결되는 링크가 너무 적고, 탐색 구조가 혼란스럽고, 탐색이 불분명합니다.
5. 웹사이트의 품질이 너무 나쁘고 무게가 매우 낮습니다.
6. 웹사이트를 유지 관리할 때 3일은 낚시하고 2일은 웹사이트를 건조하는 데 소요됩니다.
7. 웹사이트는 아주 새롭습니다. 새 웹사이트는 엉망입니다.
8. 웹사이트는 여전히 Baidu의 샌드박스에 있습니다. Baidu 스파이더는 이를 크롤링하고 크롤링했지만 페이지의 스냅샷을 넣지 않았습니다.
홈페이지가 Baidu 스파이더에 의해 크롤링될 수 있다는 사실은 해당 웹사이트가 스파이더가 무시하는 것이 아니라는 것을 보여줍니다.
이는 위의 7가지 이유 중 하나 또는 N이어야 하며, 이는 "Baidu 스파이더는 웹사이트의 홈 페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다."로 이어집니다.
이상으로 논의를 마치겠습니다. 위에서 "Baidu Spider가 웹사이트의 홈 페이지만 크롤링하고 내부 페이지는 크롤링하지 않는" 8가지 이유를 분석해 보겠습니다.
1-8 웹사이트를 차례로 확인하고, 하나씩 제외하고, 하나씩 해결해 보세요.
8가지 주요 발파 계획은 다음과 같습니다.
1. robots.txt 문제를 브라우저에 입력하고 확인해보면 한눈에 알 수 있습니다.
속보 2. 웹사이트 관리자로서 귀하는 이 상황을 가장 잘 알고 있습니다. 대규모 SEO 치팅 기술이 있는 경우 Baidu 스파이더가 웹사이트의 홈 페이지만 크롤링하고 내부 페이지는 크롤링하지 않는 것이 매우 일반적입니다.
처리 방법:
대량으로 전송되는 모든 SEO 부정 행위를 중지하십시오.
웹사이트 콘텐츠를 정기적으로 지속적으로 업데이트하세요. 웹사이트 콘텐츠는 원본이어야 하며, 보조 콘텐츠도 고품질의 유사 원본이어야 합니다.
거미를 유인할 수 있는 적절한 외부 링크와 친근한 링크를 만드세요.
이 경우 침착하게 기다리기만 하면 됩니다.
Break 3. "웹페이지 http 상태 코드"를 쿼리하고 웹사이트에서 반환된 코드를 분석하여 문제의 원인을 파악할 수 있습니다.
귀하와 동일한 IP 서버를 가진 웹사이트가 Baidu에 의해 처벌되어 귀하의 웹사이트가 연루되는 상황도 있습니다.
아니면 침착하게 지속하고 기다릴 수 있습니다. 아니면 서버를 바꾸세요.
Break 4. 웹사이트 탐색을 정리하고, 구조를 바로잡고, 웹사이트 탐색을 더욱 명확하게 만듭니다.
기사 제목을 홈페이지에 호출하고 "최신 기사", "기사 추천" 및 기타 섹션을 추가하고 내부 페이지 입구를 추가합니다.
속보 5. 사이트의 기사가 너무 쓰레기여서 Baidu 스파이더가 크롤링하기에는 너무 게으릅니다. 스파이더가 홈페이지 크롤링을 마치고 내부 페이지를 크롤링하기를 어떻게 기도합니까?
Baidu에 포함된 정크 콘텐츠를 정리 및 수정하고, 포함되지 않은 콘텐츠를 정리합니다.
그런 다음 웹사이트 콘텐츠의 품질과 수량을 업데이트하는 동시에 오프사이트 링크도 훌륭하게 수행하세요.
6을 깨고 월초에 기사 하나, 월말에 기사 하나를 업데이트합니다. "바이두 스파이더는 웹사이트 홈페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다."라고 매일 불평합니다.
에너지를 절약하고 몇 가지 기사를 업데이트하세요.
Baidu Spider는 마치 인간과 같습니다. 원래는 하루에 한 번 제공되지만 웹 사이트는 업데이트되지 않습니다. 그러다가 이틀에 한 번씩 왔는데, 귀하의 웹사이트가 아직 업데이트되지 않았습니다. 그러면 5, 10, 15가 있습니다.
Baidu Spider는 지능이 매우 낮지만 무시할 수 없는 고유한 행동 습관을 가지고 있습니다.
Break 7. 새로운 웹사이트로서 눈에 띄지 않게 유지하고 "Baidu 스파이더는 웹사이트의 홈페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다"라는 문제로 매일 어려움을 겪지 마세요.
자신만의 웹사이트 최적화 계획을 개발하고, 관리되는 웹사이트를 유지 및 업데이트하고, 부정 행위 기술을 사용하지 마십시오.
8. 위의 이유로 귀하의 웹사이트가 존재하지 않고, 귀하의 웹사이트도 "바이두 스파이더는 웹사이트의 홈페이지만 크롤링하고 내부 페이지는 크롤링하지 않습니다."인 경우 이유를 판단하기 어렵습니다.
그렇다면 우리는 여전히 Baidu의 샌드박스에 있는 것일 수도 있습니다.
이는 Baidu의 신규 웹사이트 테스트 기간, 또는 웹사이트 처벌 후 관찰 기간입니다.
냉정하게 직면하고 결정된 웹사이트 최적화 계획을 적극적으로 실행해 보세요.
오늘은 여기까지입니다. Nantang의 기사가 도움이 되기를 바랍니다.
이 기사의 출처: Nantang의 웹사이트 최적화 블로그, 주소: http://www.ba77.com/post/15.html , 재인쇄할 때 표시해 주세요!
기여해 주신 Nantang에게 감사드립니다.