抓取与索引。这两个常见的搜索引擎过程之间有什么区别?

在研究时 搜索 引擎优化 (搜索引擎优化),你可能会遇到 "抓取 "和 "索引 "这些术语。搜索引擎使用复杂的算法来计算关键词和位置,为 其中 网站 级别.无论是谷歌。 或较低级别的搜索引擎,但它们都依赖于抓取和 指数化.

什么是爬行?

抓取也被称为蜘蛛爬行,是搜索引擎的一种程序,包括读取网页代码,然后读取网页的 内容.要确定网页的排名位置和方式,搜索引擎必须 爬行 它。抓取允许搜索引擎分析所有可见的元素,以及隐藏的元素,如 标签,在一个网页上。利用这些信息,搜索引擎可以确定适当的搜索排名,以便于

搜索引擎通过访问网页来抓取网页 机器人.例如,谷歌使用 Googlebot,而必应使用 Bingbot。每种爬虫机器人通常有两种变体:桌面版和移动版。桌面版模拟桌面用户,而移动版模拟移动用户。无论如何,所有搜索引擎机器人都是为抓取网页而设计的。

什么是索引?

另一方面,索引涉及将一个网页添加到搜索结果中。索引是在抓取之后进行的。只有在谷歌或必应抓取了一个网站之后,他们才会对其进行索引。

搜索引擎有庞大且不断变化的数据库,被称为索引,由有机列表组成。当搜索引擎对一个网页进行索引时,它们为该网页创建一个或多个有机列表。有机列表被添加到搜索结果中,使用户在搜索相关关键词时能够找到该网页。

如何鼓励搜索引擎抓取你的网站

搜索引擎通常会在发现你的网站后立即开始抓取。一旦谷歌和必应意识到你的网站,他们就会用机器人--谷歌机器人和必应机器人--来访问,读取其代码。然而,搜索引擎抓取你的网站的频率可能是波动的。

你可能会注意到,在推出你的网站后的头几个月里,抓取频率很高,随后是急剧下降,你的网站很少被抓取。随着谷歌和必应抓取你的网站的频率降低,可能会导致变化不被注意到。例如,如果你修改了一个网页的 职称 标签,但谷歌直到周五才抓取该网页,那么 标题标签将在另外四天内保持有效。

聘请SEO顾问

为了鼓励搜索引擎更频繁地抓取你的网站,请遵循这些提示。

- 创建一个 网站地图 并在谷歌中指定其在你网站上的位置 搜索控制台 和Bing网站管理员工具。

- 发布新的网页并定期更新现有网页。

 - 使用pingomatic这样的ping服务来通知搜索引擎关于你的网站的变化。

- 构建 内部链接 连接你的网站的页面。

- 选择一个可靠的网络托管服务。

- 使用一个有意义的URL结构来描述你的网页内容。

- 优化你的网站以快速加载。

- 查找和修复 404 错误。当搜索引擎跟踪一个404错误的链接时,他们会花更少的时间来抓取你网站上的其他网页。

-   评论 你的网站的 机器人.txt文件,以确保它不会阻止或以其他方式限制搜索引擎抓取你的网站。

你可以通过以下方式查看两个主要搜索引擎抓取你的网站的频率 谷歌搜索控制台 和Bing网站管理员工具。对于谷歌。 原木 登录您的谷歌搜索控制台账户,访问google.com/webmasters/tools/crawl-stats。对于Bing,登录您的Bing网站管理员工具账户,在 "报告和数据 "下拉菜单中选择 "抓取信息"。

如何鼓励搜索引擎对你的网站进行索引

即使谷歌和必应定期抓取你的网站,他们也可能不会索引其所有的网页。搜索引擎可能每天多次抓取你的整个网站,但只索引其四分之三的网页。任何从谷歌或必应的索引中遗漏的网页都不会产生任何有机流量。

请记住,不是所有的网页都会从被索引中受益。例如,有重复内容的网页就不需要被索引。如果两个网页包含相同的内容,只有其中一个会在搜索结果中排名靠前。搜索引擎可能会索引另一个网页,但由于它包含重复的内容,它的排名将大大降低,而且关键词的数量也少得多。说到这里,你应该努力让你的网站的大部分页面,除了重复内容的页面,被谷歌和必应索引。

为了鼓励搜索引擎对你的网站及其所有页面进行索引,请遵循这些提示。

- 避免在多个网页上发布相同的内容。每个网页都应具有你网站上其他地方没有的独特内容。

- 建立反向链接,最好是来自相关的和权威的来源,到你的网站。

- 在社交媒体上推广你的网站。当你在你的网站上发布新内容时,与你的Facebook和Twitter粉丝分享其链接。

- 创建和使用网站地图。网站地图鼓励搜索引擎抓取和索引你的网站。

- 尽量避免改变网页的位置。如果你必须将一个网页移到一个不同的位置,也就是说它将有一个不同的URL,请使用 301 重定向.

你可以通过使用 "网站 "搜索操作符来查看谷歌和必应已经索引了你网站上的哪些网页。只要搜索你的网站的 领域 通过 "site: "进行。site操作符告诉谷歌和必应在搜索结果中过滤除指定域名以外的所有列表。假设你在搜索中不包括任何其他词,"site "操作符将显示谷歌和必应已索引的你的网站上的所有网页。

搜索引擎优化(SEO)需要了解搜索引擎的运作方式。如果你不知道谷歌或必应是如何运作的,你将很难针对他们的搜索结果优化你的网站。抓取发生在搜索引擎访问一个网页以阅读其代码和分析代码时。相比之下,索引发生在搜索引擎将一个网页添加到他们的搜索结果中。

最后更新于2022-12-28T09:51:37+00:00由 卢卡斯-泽勒兹尼

索引