웹 사이트의 색인이 잘 되어 있는지 여부는 스파이더 크롤링 빈도 및 크롤링 페이지와 관련이 있다는 것은 잘 알려져 있습니다. 그러나 우리는 스파이더가 어떤 페이지를 크롤링했는지 모르기 때문에 스파이더가 크롤링한 액세스 로그에만 의존할 수 있습니다. 분석용 거미. 우리는 로그에서 많은 데이터를 분석할 수 있으므로 오늘은 스파이더 크롤링 및 크롤링 시간에 영향을 미치는 요소에 대해 주로 설명하겠습니다. 이 로그를 과소평가하지 마십시오. 이 로그는 웹 사이트가 스파이더에게 어떤 의미가 있는지 파악하는 데 도움이 될 수 있습니다. 거미가 귀하의 웹 사이트를 좋아하는지 여부를 확인하십시오. 크롤링 횟수가 많으면 웹 사이트가 며칠 동안 거미에게 매우 적합하다고 결론을 내릴 수 있습니다. 거미가 좋아하는 "음식"은 없습니다. 크롤링에 영향을 미치는 관련 사항은 다음과 같습니다.
스파이더 크롤링에 영향을 미치는 요소 1: 사이트 맵 존재 여부
스파이더의 경우 웹사이트 맵은 크롤링 로드맵입니다. 스파이더가 이 로드맵을 가지고 있으면 웹사이트에서 크롤링하는 것이 그다지 힘들지 않으며 언제든지 현기증을 느끼지 않을 것입니다. 웹사이트 지도는 스파이더가 특별히 사용하는 것입니다. 스파이더 크롤링 시간을 줄이고 스파이더 크롤링 속도를 높이는 것이 목적입니다. 결국 웹사이트에 지도가 없으면 혼자 낯선 곳으로 가는 것과 같습니다. 지도가 없으면 블라인드 검색에 의존해야 하는데, 시간이 얼마나 걸릴지 모르겠습니다. 그러므로 웹사이트 지도도 마찬가지로 거미에게 중요합니다. 지도 없이는 아무것도 저장하지 마십시오. 전쟁 전의 준비, 전쟁 중 방향, 전쟁 후 요약입니다.
스파이더 크롤링에 영향을 미치는 두 번째 요소는 404 페이지 설정 여부입니다.
사실, 저자의 실제 경험에 따르면, 이는 데드 링크가 있는 웹 사이트에 매우 중요합니다. 왜냐하면 웹 사이트가 막다른 골목에 이르렀을 때 스파이더에게 이를 알리는 데 도움이 되기 때문입니다. 다시 살아날 수 있는 방법인 404 페이지는 스파이더가 막다른 골목에 들어가 빠져나올 수 없도록 준비되어 있습니다. 웹사이트에 데드 링크가 없을 것이라고 누가 보장할 수 있습니까? 웹사이트에 죽은 링크가 너무 많고 404 페이지가 부족한 경우 웹마스터 도구를 사용하여 쿼리하고 분석하면 많은 페이지가 잘못 크롤링되는 것을 알 수 있습니다. 거미를 만들어 거미를 만들어 거부감을 느끼게 합니다. 그러므로 웹사이트에 404 페이지를 추가해야 하는데 어차피 공간을 많이 차지하지 않으니 추가해 보는 것은 어떨까요?
스파이더 크롤링에 영향을 미치는 세 번째 요소는 내보낸 링크가 너무 많은지 여부입니다.
웹사이트에 내보내기 링크가 너무 많으면 웹사이트의 가중치 집중에 큰 영향을 미치게 되고 스파이더의 체류 시간에도 큰 영향을 미치게 됩니다. 왜냐하면 스파이더가 귀하의 웹사이트를 크롤링할 때 일반적으로 처음부터 끝까지 크롤링하기 때문입니다. 그러면 스파이더는 때로는 너비 순위 방식으로 크롤링하기도 하고, 때로는 깊이 순위 방식으로 크롤링을 하게 되면 끝까지 크롤링만 하고 아직 내부 페이지에 들어가지 않은 경우가 됩니다. 내보내기 링크가 있으면 스파이더도 내보내기 링크를 따르게 됩니다. 이것이 바로 스파이더가 자주 표시되지만 페이지가 포함되지 않는 이유입니다. 따라서 웹사이트는 너무 많은 내보내기 링크를 설정해서는 안 됩니다. 그렇게 하면 귀하의 웹사이트에 어떤 이점도 가져오지 않기 때문입니다.
스파이더 크롤링에 영향을 미치는 네 번째 요소는 가져온 링크가 너무 적은지 여부입니다.
내보내기 링크와 비교하여 가져오기 링크가 많을수록 좋습니다. 가져오기 링크는 폭과 품질이라는 두 가지 원칙을 따라야 합니다. 품질이 수량보다 먼저입니다. 따라서 수신 링크를 구축할 때 먼저 수신 링크의 품질에 주의를 기울인 다음 수량을 추구해야 합니다. 이를 거꾸로 뒤집으면 웹사이트가 검색 엔진에 친숙해지지 않을 뿐만 아니라 웹사이트가 검색 엔진의 눈에 쏠리지 않게 됩니다. 수량을 추구하다 보면 대개 품질을 잊어버리게 되어 정크 링크가 너무 많고 유효하지 않은 링크가 생성되기 때문입니다. 따라서 들어오는 링크에서 가장 중요한 것은 품질과 폭입니다. 이 둘이 잘 결합되어야 웹 사이트의 순위 가중치가 높아질 수 있습니다.
위의 4가지 사항은 검색 엔진에 대한 웹사이트의 친숙도를 분석하여 정리한 것입니다. 이 4가지 사항은 저자가 실습을 통해 얻은 경험을 바탕으로 웹사이트를 이해하는 데 어느 정도 도움이 되기를 바랍니다. 결과적으로 귀하의 웹사이트는 더 잘 포함되고, 더 높은 가중치를 가지며, 업데이트된 스냅샷 및 더 나은 순위를 갖게 됩니다. 본 글은 http://www.yisoo.org (이수시네마)에서 단독으로 제공하는 글입니다. 재인쇄를 위해 링크를 남겨주시면 감사하겠습니다!
담당 편집자: Chen Long 저자 Yuqing의 개인 공간
-