SEO에서 크롤링과 인덱싱의 차이점은 무엇인가요?

크롤링과 인덱싱: 이 두 가지 일반적인 검색 엔진 프로세스의 차이점은 무엇인가요?

조사할 때 검색 엔진 최적화 (SEO), "크롤링" 및 "인덱싱"이라는 용어를 접하게 될 것입니다. 검색 엔진은 복잡한 알고리즘을 사용하여 다음과 같은 키워드와 순위를 계산합니다. 어느 웹사이트 순위. Google이든, Bing 또는 하위 계층 검색 엔진에 의존하지만, 모두 크롤링과 인덱싱.

크롤링이란 무엇인가요?

스파이더링이라고도 하는 크롤링은 웹 페이지의 코드를 읽는 검색 엔진 프로세스로, 웹 페이지의 코드를 읽은 다음 콘텐츠. 웹 페이지의 순위와 순위를 결정하려면 검색 엔진은 다음을 수행해야 합니다. 크롤링 크롤링을 통해 검색 엔진은 눈에 보이는 모든 요소는 물론 다음과 같은 숨겨진 요소까지 분석할 수 있습니다. 메타 태그를 추가합니다. 검색 엔진은 이 정보를 사용하여 다음에 대한 적절한 검색 순위를 결정할 수 있습니다.

검색 엔진은 다음을 사용하여 웹 페이지를 방문하여 웹 페이지를 크롤링합니다. 봇. 예를 들어 Google은 Googlebot을 사용하는 반면, Bing은 Bingbot을 사용합니다. 각 크롤링 봇에는 일반적으로 데스크톱과 모바일의 두 가지 변형이 있습니다. 데스크톱 버전은 데스크톱 사용자를 시뮬레이션하는 반면, 모바일 버전은 모바일 사용자를 시뮬레이션합니다. 어쨌든 모든 검색 엔진 봇은 웹 페이지를 크롤링하도록 설계되었습니다.

인덱싱이란 무엇인가요?

반면 인덱싱은 검색 결과에 웹 페이지를 추가하는 작업입니다. 색인화는 크롤링 후에 이루어집니다. 구글이나 빙은 웹사이트를 크롤링한 후에만 색인화합니다.

검색 엔진에는 유기적 목록으로 구성된 인덱스라고 하는 방대하고 끊임없이 변화하는 데이터베이스가 있습니다. 검색 엔진은 웹 페이지의 색인을 생성할 때 해당 웹 페이지에 대한 자연 목록을 하나 이상 생성합니다. 오가닉 목록은 검색 결과에 추가되어 사용자가 관련 키워드를 검색할 때 해당 웹페이지를 찾을 수 있도록 합니다.

검색 엔진이 웹사이트를 크롤링하도록 유도하는 방법

검색 엔진은 일반적으로 웹사이트를 발견한 후 즉시 크롤링을 시작합니다. 구글과 빙이 회원님의 웹사이트를 인지하면 각각 구글봇과 빙봇이라는 봇을 통해 방문해서 코드를 읽습니다. 하지만 검색 엔진이 웹사이트를 크롤링하는 빈도는 변동될 수 있습니다.

웹사이트를 시작한 후 처음 몇 달 동안은 크롤링이 자주 이루어지다가 이후에는 크롤링이 거의 이루어지지 않는 급격한 감소세를 보일 수 있습니다. 구글과 빙이 웹사이트를 크롤링하는 빈도가 줄어들면 변경 사항이 눈에 띄지 않을 수 있습니다. 예를 들어, 웹 페이지의 title 태그가 있지만 구글은 금요일까지 페이지를 크롤링하지 않습니다. old 제목 태그는 4일 동안 추가로 유효합니다.

검색 엔진이 웹사이트를 더 자주 크롤링하도록 유도하려면 다음 팁을 따르세요:

- 생성하기 사이트맵 를 클릭하고 Google에서 웹사이트의 위치를 지정합니다. 검색 콘솔 및 Bing 웹마스터 도구.

- 새 웹 페이지를 게시하고 기존 웹 페이지를 정기적으로 업데이트하세요.

 - 핑고매틱과 같은 핑 서비스를 사용하여 웹사이트의 변경 사항을 검색 엔진에 알립니다.

- 빌드 내부 링크 웹사이트 페이지 연결

- 신뢰할 수 있는 웹 호스팅 서비스를 선택하세요.

- 웹 페이지의 콘텐츠를 설명하는 의미 있는 URL 구조를 사용하세요.

- 웹사이트가 빠르게 로드되도록 최적화하세요.

- 찾기 및 수정 404 오류. 검색 엔진이 404 오류로 연결되는 링크를 따라가면 웹사이트의 다른 웹 페이지를 크롤링하는 데 소요되는 시간이 줄어듭니다.

-   검토 웹사이트의 로봇.txt 파일을 삭제하여 검색 엔진이 웹사이트를 크롤링하는 것을 차단하거나 제한하지 않도록 합니다.

다음을 사용하여 두 가지 주요 검색 엔진이 웹사이트를 크롤링하는 빈도를 확인할 수 있습니다. Google 검색 콘솔 및 Bing 웹마스터 도구. Google의 경우, 로그 에 로그인하고 google.com/webmasters/tools/crawl-stats를 방문합니다. Bing의 경우 Bing 웹마스터 도구 계정에 로그인하고 '보고서 및 데이터' 드롭다운 메뉴에서 '크롤링 정보'를 선택합니다.

검색 엔진이 웹사이트 색인을 생성하도록 유도하는 방법

Google과 Bing이 정기적으로 웹사이트를 크롤링하더라도 모든 웹페이지의 색인을 생성하지는 않을 수 있습니다. 검색 엔진은 하루에 여러 번 웹사이트 전체를 크롤링하지만 페이지의 4분의 3만 색인화할 수 있습니다. 구글이나 빙의 색인에서 누락된 웹 페이지는 오가닉 트래픽을 생성하지 않습니다.

모든 웹 페이지가 색인화의 혜택을 받는 것은 아닙니다. 예를 들어 콘텐츠가 중복된 웹 페이지는 색인화할 필요가 없습니다. 두 웹 페이지에 동일한 콘텐츠가 포함되어 있으면 그 중 하나만 검색 결과에서 높은 순위를 차지합니다. 검색 엔진은 다른 웹 페이지의 색인을 생성할 수 있지만 중복 콘텐츠가 포함되어 있기 때문에 훨씬 적은 수의 키워드에 대해 훨씬 낮은 순위를 차지하게 됩니다. 따라서 중복 콘텐츠 페이지를 제외한 대부분의 웹사이트 페이지가 Google과 Bing에서 색인화되도록 노력해야 합니다.

검색 엔진이 웹사이트와 모든 페이지의 색인을 생성하도록 하려면 다음 팁을 따르세요:

- 여러 웹 페이지에 동일한 콘텐츠를 게시하지 마세요. 각 웹 페이지에는 웹사이트의 다른 곳에서는 볼 수 없는 고유한 콘텐츠가 포함되어야 합니다.

- 가급적이면 관련성 있고 권위 있는 출처에서 웹사이트로 연결되는 백링크를 구축하세요.

- 소셜 미디어에서 웹사이트를 홍보하세요. 웹사이트에 새 콘텐츠를 게시할 때 해당 콘텐츠의 링크를 Facebook 및 Twitter 팔로워와 공유하세요.

- 사이트맵을 만들고 사용합니다. 사이트맵은 검색 엔진이 웹사이트를 크롤링하고 색인을 생성하는 데 도움이 됩니다.

- 웹 페이지의 위치를 변경하지 않도록 하세요. 웹 페이지를 다른 위치로 이동해야 하는 경우, 즉 다른 URL을 사용해야 하는 경우에는 301 리디렉션.

'사이트' 검색 연산자를 사용하여 웹사이트의 어떤 웹 페이지가 Google과 Bing에서 색인화되었는지 확인할 수 있습니다. 웹사이트의 도메인 "사이트"로 진행: 사이트 운영자는 검색 결과에서 지정된 도메인의 목록을 제외한 모든 목록을 필터링하도록 Google과 Bing에 지시합니다. 검색에 다른 단어를 포함하지 않는다고 가정하면 '사이트' 운영자는 Google과 Bing이 색인한 웹사이트의 모든 웹 페이지를 표시합니다.

검색 엔진 최적화(SEO)를 위해서는 검색 엔진의 작동 원리에 대한 이해가 필요합니다. 구글이나 빙의 작동 방식을 모르면 검색 결과에 맞게 웹사이트를 최적화하는 데 어려움을 겪을 수 있습니다. 크롤링은 검색 엔진이 웹페이지를 방문하여 코드를 읽고 분석할 때 발생합니다. 이에 비해 인덱싱은 검색 엔진이 검색 결과에 웹 페이지를 추가할 때 발생합니다.