크롤링 예산 최적화 : Googlebot을 사랑하고 웹 사이트를 더 자주 방문하는 방법.

인생의 실제 문제
새로운 웹 사이트를 해본 적이 있습니까? 아니면 웹 사이트에 대한 장점을 업데이트하지만 가 매우 좋고 SEO를 수행하더라도 Google을 찾을 수 없거나 인덱스가 너무 느리다고 [인용 : 113] Google이 새로운 웹 페이지 정보를 수집하기 위해 일주일을 기다릴 수 있습니다! 또는 때로는 페이지, 페이지, 서비스 또는 플래그십 기사와 같이 얼굴이 중요한 이유를 혼란스럽게 만들었습니다. [인용 : 111]
이것은 단지 실망스러운 일이 아니라 거대한 "비즈니스 기회" ! Google이 중요한 페이지를 모르거나 보지 못하면 고객이 어떻게 우리를 찾을 수 있습니까? [인용 : 111] 어떻게 물건을 팔 수 있습니까? 이 문제를 "크롤링 예산 최적화"또는 관리라고합니다. "Googlebot 크롤링 예산"! [인용 : 2, 93]
삽화를위한 프롬프트 : "사용자의 이미지는 Google이 웹 사이트를 소개하는 것을 거부하고 작은 Googlebot이 빠르게 비행하면서 해당 페이지에주의를 기울이지 않고 혼란스럽고 좌절합니다."
그 문제가 발생한 이유는 무엇입니까?
그리고 왜이 문제가 우리 웹 사이트에서 일어날 수 있습니까? 주된 이유는 Google이 각 웹 사이트에 할당 된 "크롤링 예산" [인용 : 2, 111]
- GoogleBot에는 "제한된 리소스"가 있습니다. GoogleBot은 전 세계 웹 사이트를 탐색하기 위해 실행 해야하는 부지런한 Google 직원으로 상상해보십시오. 웹 웹 사이트의 모든 페이지에 앉아서 볼 시간이 없습니다. 그는 "예산"또는 "할당량"을 가지고 있습니다. 각 웹 사이트에 할당 된 크롤링, 특히 [인용 : 2, 93, 111]
- "큰 웹 사이트 ... 많은 얼굴 ...하지만 그다지 중요하지 않습니다.": 우리 웹 사이트에 웹 페이지가 많으면 (예 : 재고, 재고, 태그에는 콘텐츠가없고, 업데이트되지 않는 오래된 얼굴) Google은 이러한 얼굴 크롤링으로 시간을 낭비합니다. 인덱스를 원하는 중요한 페이지를 충족하는 대신 [Cite : 111, 113]
- "웹 속도가 효과적입니다": 거북이처럼 느리게로드하는 웹 사이트는 Googlebot이 더 많은 시간을 낭비하게 만들고 끝까지 기어 다니는 것을 거부 할 수 있습니다. 또는 크롤링의 빈도를 줄이십시오 [인용 : 111]
- "내부 링크는 충분하지 않습니다": 내부 링크 구조가 "명확하지 않음"또는 "건강에 해로운"GoogleBot이라면 중요한 페이지를 찾지 못하거나 어느 페이지가 더 중요한지 이해하지 못할 수 있습니다. [인용 : 113]
- "숨겨진 기술 문제": Robots.txt 파일, 중요한 페이지 블록, Siteemap과 같은 Siteemap이 업데이트되지 않았거나 GoogleBot을 혼동시키는 리디렉션 체인이 있습니다. [인용 : 111]
이것이 GoogleBot이 웹 사이트에 "간과"또는 "중요성을 제공하는"주된 이유입니다. [인용 : 93, 113]
삽화를위한 프롬프트 : "Googlebot 이미지는 모래 시계를 들고 복잡하고 지저분한 웹 사이트 계획을보고 있습니다. 차단 된 경로와 천천히로드 된 웹 페이지가 있습니다."
남은 경우 어떤 영향을 미칩니 까?
크롤링 예산 최적화를 무시하는 것은 "Mujim"기술에 관한 것이 아닙니다. 그러나 왼쪽이라면 예상치 못한 것처럼 비즈니스에 직접적인 영향을 미칩니다!
- "순위 ... 판매 손실": GoogleBot이 중요한 얼굴을 자주 크롤링하지 않거나 어느 페이지가 중요한지 이해하지 못하는 경우. 이 페이지는 Google 검색에서 순위가 매겨 질 기회가 거의 없어서 고객이 우리를 찾을 수 없도록합니다. 물론 판매도 사라질 것입니다. [인용 : 93]
- "New Face, INDEX가 아닌 ... 즉시 기회를 잃어 버렸다": 방금 새로운 프로모션, 신제품 또는 현재 트렌드 인 기사를 발표했지만 Google은 즉시 그 얼굴에 들어 가지 않는다고 상상해보십시오. 즉, 해당 정보를 검색하는 고객을 잡을 수있는 기회가 없음을 의미합니다. 경쟁사로 가십시오
- "헛된 시간과 자원 낭비": 좋은 콘텐츠를 만들기 위해 투자합니다. 아름다운 웹 페이지를 설계하지만 GoogleBot이 신경 쓰지 않거나 해당 투자에 오지 않으면 거의 즉시 낭비됩니다.
- "사용자 경험 (UX)은 간접적으로 악화됩니다. " 웹 사이트 또는 링크가 느리게로드되는 등 실제 사용자가 나쁜 경험을받을 수 있습니다.
- "라이벌은 더 멀리 추월합니다": 웹 사이트 자체가 순위가 매겨지지 않은 이유는 혼란 스럽지만 혼란스러워합니다. 크롤링 예산 관리에 중요성을 부여하는 경쟁자는 혜택을 수확하고 당신을 떠날 것입니다.
크롤링 예산 최적화의 간과는 작은 문제가 아니라 온라인 비즈니스의 성장에 열리는 "문"이라는 것을 알 수 있습니까?
삽화를위한 프롬프트 : "그래프는 SEO 순위가 지속적으로 감소하는 SEO 순위를 보여줍니다. 그리고 고객이 들어오지 않는 웹 사이트와 함께 가방에서 흘러 나오는 돈."
해결책이 있습니까? 그리고 어디에서 시작해야합니까?
괜찮아요! 크롤링 예산 최적화 문제에는 해결책이 있으며 생각만큼 복잡하지 않습니다. 중요한 것은 GoogleBot이 가장 효과적인 "예산"을 사용하도록 불필요하게 중요한 페이지에 "초점" "제거"하는 [인용 : 2, 93, 111]
실질적인 문제를 해결하는 방법을 살펴 보겠습니다.
- robots.txt 파일을 잘 관리합니다 (불필요한 것들을 차단) :
- 여기에서 시작하십시오 :
robots.txt
파일을 보려면yourwebsite.com/robots.txt
) [Cite : 111] - 수행 방법 : 이 파일을 사용하여 "GoogleBot,"크롤링 할 필요 없음 "을 사용하여 관리 페이지, 로그인 페이지, 감사 페이지, 내부 검색 페이지 또는 컨텐츠가 거의없는 페이지/카테고리와 같이 중요하지 않은 페이지가 중요하지 않습니다 [Cite : 111]
- 결과 : Googlebot은 이러한 얼굴을 기어 다니는 데 시간을 낭비하지 않습니다. 그리고 나머지는 대신 우리의 중요한 페이지를 기어 다니기 위해 [Cite : 111]
- 여기에서 시작하십시오 :
- siteemap.xml을 올바르게 생성하고 업데이트하십시오 (중요한 것이 무엇인지 Google에 알려주십시오) :
- 여기에서 시작하십시오 :
sitemap.xml
있는지 확인하십시오 [Cite : 111] - 방법 :
siteemap.xml은
GoogleBot에게 "내 모든 중요한 페이지"와 "이 페이지가 업데이트되었습니다"라고 말하는 "지도"입니다. 귀중한 페이지 만 넣고 Google 색인을 Siteemap [Cite : 111]에 원합니다. - 결과 : Googlebot은 먼저 기어 올라야하는 페이지를 알고 새로운 색인을 더 빨리 도울 것입니다 [Cite : 111].
- 여기에서 시작하십시오 :
- 웹 사이트의 속도 향상 (사이트 속도를 높이십시오) :
- 여기에서 시작하십시오 : Google Pagespeed Insights 로 웹 속도를 확인하십시오 [Cite : 234]
- 수행 방법 : 이미지 크기를 줄이고, 웹 포맷을 사용하고, 게으른로드를하고, 불필요한 스크립트 사용을 줄이고, 좋은 호스팅을 선택합니다 [Cite : 225, 229, 229, 230, 233]
- 결과 : 더 빨리로드하는 웹 사이트는 Googlebot이 제한된 시간 내에 더 많은 크롤링을 만들고 [인용 : 228] 사용자 경험 (UX)에 직접 도움이됩니다. [인용 : 136]
- 내부 링크를 강하게 관리하고 구조를 갖도록 (내부 링크 강화) :
- 여기에서 시작하십시오 : 웹 사이트의 내부 링크 구조를 분석하십시오.
- 수행 방법 : 관련 앵커 텍스트 [Cite : 113]에서 키워드와 함께 내부 링크와 함께 제공되는 중요한 페이지를 링크 합니다 .
- 결과 : GoogleBot은 창의 우선 순위를 이해하고 더 나은 페이지로 "링크 주스"를 보냅니다. [인용 : 113]
- "낮은 품질"페이지 또는 "콘텐츠 가지 치기 / 중복 컨텐츠 제거를 제거하십시오.
- 여기에서 시작하십시오 : Google 검색 콘솔과 같은 도구를 사용하여 너무 많은 색인 또는 작은 트래픽을 찾으십시오.
- 수행 방법 : 중복 컨텐츠에없는 오래된면을 삭제하거나 Google 색인을 원하지 않기 위해
Noindex를
SEO의 콘텐츠 가지 치기는 매우 중요합니다. - 결과 : Googlebot은 이러한 얼굴을 기어 다니는 데 시간을 낭비하지 않습니다. 대신 우리의 양질의 콘텐츠에 집중하십시오 [Cite : 111]
처음 3 (robots.txt, sitemap.xml, page speed)부터 시작하여 가장 중요한 기초입니다. 이 작업을 잘 할 때 점차적으로 내부 링크 및 콘텐츠 가지 치기로 이동했습니다.
그림을위한 프롬프트 : "이미지, 다이어그램, 처리 프로세스, 간단하고 Robots.txt, siteemap.xml 아이콘, 웹 사이트 속도 및 효과적으로 연결된 내부 링크를 사용한 단계."
성공했던 실제의 예
크롤링 예산 문제와 소개에 직면 한 전자 상거래 웹 사이트의 실제 사례의 예를 제시하고 싶습니다. 처음에는 거의 10,000 페이지가 있었지만 Google Index에서는 약 30%와 신제품이있었습니다. 한 달 만에 순위를 매기기 전에 판매가 증가하지 않도록합니다.
그들이하는 일 :
- 1 단계 : "수술"robots.txt 및 sitemap.xml : 그들은 재고가없는 상태에서 제품을 크롤링하기 위해 GoogleBot, 너무 많은 매개 변수가있는 필터면 및 robots.txt의 모든 관리자/로그인을 차단하고 SiteMap을 조정했습니다. 중요한 제품과 페이지 만 있습니다. [인용 : 111]
- 2 단계 : "속도"웹 사이트 : 개발 팀은 최적화를 통해 웹 사이트 속도를 심각하게 향상시키기 시작했습니다. 모든 이미지, 게으른 하중 및 CSS/JS 코드 향상. [인용 : 225, 229, 229, 230, 231]
- 3 단계 : "정리"내부 링크 : 잘 판매되는 제품 페이지에 카테고리를 연결하여 블로그 검토 페이지에서 제품 페이지에보다 체계적으로 새로운 내부 링크 구조를 구축합니다. Google 로그 파일 분석은 동작을 이해하는 데 도움이됩니다.
놀라운 결과 :
개선 후 3 개월 이내에 "지수의 제품 수는 30%에서 85%로 증가했습니다!" 그리고 가장 중요한 것은 "새로운 페이지는 24-48 시간 이내에 소개 될 수 있습니다!" 한 달 동안 기다려야했던 원본에서. 또한 "유기 트래픽이 60%이상 증가하고 " 총 매출이 40%증가했습니다. " 이것이 올바른 크롤링 예산 관리의 힘입니다. 영업 및 비즈니스에 직접 영향을 미칩니다.
삽화를위한 프롬프트 : "그래프는 빠르게 증가하는 인덱스 페이지의 수를 보여줍니다. 그리고 그 웹 사이트 앞에서 웃고 기어 다니는 GoogleBot으로 상승하는 판매 그래프는 행복합니다."
따르고 싶다면 어떻게해야합니까? (즉시 사용할 수 있음)
실제로 할 시간입니다! 웹 사이트의 크롤링 예산을 최적화하기 위해 즉시 팔로우 할 수있는 간단한 점검 목록입니다.
- Robots.txt를 확인하고 조정합니다.
yourwebsite.com/robots.txt
로 이동하십시오- 찾고 있습니다
.
그리고 GoogleBot이 크롤링하기를 원하지 않는 페이지를 확인하십시오. [인용 : 111] - 추가
:
관리자, 감사 페이지, 검색 결과 또는 중복 태그 페이지와 같은 중요하지 않은 업무 [Cite : 111] - 조심하십시오 : 중요한 페이지를 차단하지 마십시오! 확실하지 않은 경우 전문가에게 문의하십시오 [Cite : 111]
- siteemap.xml 생성 및 제출 :
sitemap.xml
이 있는지 확인하십시오
- 아직 사용할 수없는 경우 Siteemap 도구 또는 플러그인 (WordPress 용)을 사용하십시오 [Cite : 111].
- Siteemap에서는 품질 컨텐츠를 가지고 Google 색인을 원하는 의무 만 있어야합니다. [인용 : 111]
- Google 검색 콘솔> SiteMaps>로 이동하여 사이트 맵 파일을 제출하십시오 [Cite : 111]
- 페이지 속도 최적화 시작 :
- Google Pagespeed Insights 로 이동하여 URL을 작성하십시오. 귀하의 웹 사이트 [인용 : 234]
- Google의 점수 및 조언을 참조하십시오 [Cite : 234]
- 이미지 최적화 (Webp 사용, 압축), 열린 게으른로드 또는 디스플레이 블록에서 JavaScript 감소와 같이 먼저 높은 영향을 미치는 "Optunities"로 시작하십시오 [Cite : 225, 227, 230].
- 웹 사이트 리노베이션 서비스는 속도 를 직접 도울 수 있습니다
- 내부 링크 향상 :
- 새 기사를 작성하거나 다른 중요한 페이지에 연결할 수있는 오래된 찾기 기회를 업데이트하는 동안. 귀하의 웹 사이트 관련 [인용 : 113]
- 키워드와 함께 앵커 텍스트 사용 대상과 관련이 있습니다. [인용 : 113]
- 페이지/서브 서비스에 대한 내부 링크가있는 카테고리 페이지 또는 메인 랜딩 페이지를 확인하십시오. 포괄적이든 아니든
- 콘텐츠 가지 치기 (쓸모없는 콘텐츠 검토 및 제거) :
- Google Search Console> Performance Report를 사용하여 지난 6-12 개월 동안 유기 트래픽이 전혀 없거나 거의없는 페이지를 확인하십시오.
- 페이지를 삭제하거나 다른 페이지와 결합하거나
NoIndex
태그를 추가하는 것을 고려하십시오. 내용이 품질이 아닌 경우 [Cite : 111] - 이것은 웹 사이트를 청소하고 Googlebot에 초점을 맞출 수있는 좋은 기회입니다 [Cite : 111].
이것은 여행이라는 것을 기억하십시오. 단일 편집 일관된 검사 및 개선이 중요하지 않습니다!
삽화를위한 프롬프트 : "각 항목에 올바른 표시가있는 체크리스트 이미지는 크롤링 예산 최적화 과정을 쉽고 따라갈 수있는 과정을 나타냅니다."
사람들이 궁금해하는 경향이있는 질문과 정해진 답변
따라서 크롤링 예산 최적화를 자신감과 이해할 수 있습니다. 명확한 답변으로 인기있는 질문을 작성했습니다.
Q1 : "크롤링 예산"은 SEO에 직접 영향을 미칩니 까?
A : 직접적인 효과가 있습니다! [인용 : 2, 93] Google은 소규모에서 중간 웹 사이트의 경우 대부분의 크롤링 예산이 큰 문제가되지 않을 수 있다고 말합니다. 그러나 종종 업데이트되는 수천 페이지 나 웹 사이트가있는 대형 웹 사이트의 경우. 우수한 크롤링 예산 관리는 GoogleBot이 중요한 페이지를 기어 다니는 데 도움이 될 것입니다. 자주 그리고 더 빠른 [인용 : 93], 그 페이지가 개선되고 더 나은 순위가 향상되었습니다. [인용 : 93, 111]
Q2 : GoogleBot이 내 웹 사이트에서 크롤링 예산을 얼마나 많이 사용하는지 어떻게 알 수 있습니까?
A : Google 검색 콘솔 에서 "크롤링 통계"정보를 볼 수 있습니다 ! [인용 : 93] GoogleBot이 웹 사이트를 자주 기어 다니기 위해, 시간이 얼마나 걸리는지, 하루에 얼마나 많은 얼굴을 기어 다닐 수 있는지 보고서가 있습니다. 트렌드를보고 개선이 효과적인지 아닌지 분석 할 수 있습니다. [인용 : 93]
Q3 : 중요하지 않은 업무를 가진 태그 "Noindex"를 사용하는 경우 SEO에 부정적인 영향을 미칩니 까?
A : 단점이 없습니다! [인용 : 111] NoIndex
태그 사용은 GoogleBot에게 "이러한 얼굴이 색인 일 필요는 없다"고 말하는 좋은 방법입니다. 따라서 Google은 그 얼굴을 기어 다니는 시간을 낭비 할 필요가 없습니다. 대신 다른 중요한 페이지에 초점을 맞추십시오 [Cite : 111]. 크롤링 예산 최적화에 좋습니다.
Q4 : 내부 링크를 얼마나 사용해야합니까?
A : 고정 숫자가 없습니다! [인용 : 113] 그러나 원칙은 "사용자에게 자연스럽고 유용하다"[Cite : 113] 관련 웹 페이지를 합리적으로 연결하려고 노력합니다. 4 개의 랜덤 링크를 착용하지 마십시오. 또는 스팸으로 착용하기에는 너무 많습니다. 크롤링 예산을 돕는 것 외에도 우수한 내부 링크를 사용하면 사용자가 관련 콘텐츠를보다 쉽게 찾는 데 도움이됩니다. [인용 : 113]
삽화를위한 프롬프트 : "디지털 마케팅 이미지는 자신있게 웃고 있습니다. Google 검색 콘솔 아이콘과 그래프를 통해 더 나은 결과를 보여줍니다."
이해하기 쉬운 요약 + 노력하고 싶어
좋아요! 요컨대, "크롤링 예산 최적화" 또는 관리 "Googlebot"예산은 Googlebot을 "Love"를 "사랑"으로 만들어 중요한 페이지를 기어 다니게한다는 것입니다. 우리는 더 자주 그리고 더 효율적입니다. [인용 : 2, 93, 111]
우리가 집을 질서있게 배치하는 것과 같습니다. 중요한 손님을 초대하여 집을 방문하십시오. 자주 돌아와서 오랫동안 우리와 함께 머물고 싶어! Googlebot은 동일합니다. 우리 웹 사이트가 깨끗하고 빠르며 중요한 콘텐츠에 대한 명확한 경로가 있다면 더 자주 올 것이고 새로운 지수가 더 빨라서 "더 나은 순위" , "트래픽 증가" 가장 중요한 것은 "판매가 상승 할 것" 도 있습니다!
"알 수없는"또는 "관심"이 온라인 성공을 방해하도록하지 마십시오! 내가 오늘 주신 기술은 "즉시"가져올 수 있으며 웹 사이트에 "차이"를 생성 할 것입니다!
이제 웹 사이트를 "Magnets Afract GoogleBot"과 "Money Machinery"로 변경해야합니다! 작지만 규칙적으로 시작하면 인상적인 결과가 표시됩니다!
크롤링 예산 관리에서 Vision X Brain이 "전문 보조원"이되기를 원하고 고급 웹 플로우 웹 사이트를 개발 웹 사이트가 첫 페이지로 솟아 오르십니까? 오늘 저희에게 연락하십시오! 무료 상담, 의무 없음!
삽화를위한 프롬프트 : "Googlebot 이미지는 깨끗하고 잘 조직 된 웹 사이트를 포옹하고 있습니다. SEO 순위 그래프와 판매가 빠르게 증가하고 있습니다."
최근 블로그

오프닝 속도, 미용 및 스케일 능력을 강조하는 스타트 업을 위해 충격, 웹 플로우 및 프레이머 사이의 충격을 비교하십시오.

웹 속도는 기술적이지 않습니다! 핵심 웹 생명 (LCP, INP, CLS)은 SEO 순위, 사용자 경험 및 조직 웹의 이익에 영향을 미치는 것입니다.

바닥 글을 내려다 보지 마십시오! UX를 개선하고 SEO를 보충하며 방문자를 리드로 바꾸는 데 도움이되는 웹 사이트 바닥 글 디자인 기술 모음.