这个专题介绍了如何控制谷歌搜索和其他谷歌产品发现和解析内容,并在搜索结果和其他谷歌属性中显示它,以及如何防止谷歌对您网站上的特定内容进行抓取。
以下是这个专题里相关子主题的简略描述。要了解爬取和索引的概述,请阅读SEO入门必读——谷歌搜索的实现过程是什么样的?

谷歌广告有哪些出价策略,怎么选?
关于谷歌SEO抓取与索引的小专题
谷歌可以索引的文件类型,URL结构,网站地图,robots.txt,URL规范化,手机站,AMP, javascript等。
SEO爬虫管理
- 请求谷歌重新抓取您的URL
- 降低Googlebot的爬取速率
- 验证Googlebot和其他网络爬虫
- 大型网站所有者管理爬取预算的指南
- HTTP状态码、网络和DNS错误对谷歌搜索的影响
- 谷歌爬虫
SEO页面meta信息
- 使用有效的HTML来指定页面元数据
- 谷歌能理解的所有meta标签
- Robots meta标签、data-nosnippet和X-Robots-Tag规范
- 使用noindex meta标签阻止索引
- SafeSearch和您的网站
- 使您的链接可爬行
- 通过rel属性向谷歌标识您的外链
移除部分页面
- 自由控制哪些内容你决定分享给谷歌,哪些不要
- 从谷歌中移除托管在您网站上的页面
- 移除托管在您页面上的图片,使其不出现在搜索结果中
- 确保被编辑过的信息不会出现在谷歌搜索中
网站迁移与域名更改
- 重定向
- 网站搬迁
- 减少A/B测试对谷歌搜索的影响
- 暂时暂停或禁用一个网站
大略以上内容就是爬行与索引的全部内容。具体您可以点开链接阅读或者收藏此页面。