标签：Google 网页 Googlebot 完美 抓取 兼容 网站 内容
确保网站安全、快速、可供所有用户无障碍使用且可在所有设备上正常运行。
首先，在移动设备适合性测试（https://search.google.com/test/mobile-friendly?hl=zh-cn）中测试网站，查看 Googlebot 所看到的网站样貌。
Googlebot 并不总能看到用户在浏览器中看到的所有内容。
例如，用户看到的内容：
检查链接
Googlebot 通过跟踪链接、站点地图和重定向在网址间导航。Googlebot 会将每个网址都作为在您的网站上看到的第一个也是唯一一个网址来处理。为了确保 Googlebot 能够找到您网站上的所有网址，请执行以下操作：
- 使用包含有效网址的 <a href>。确保网站上的所有网页均能通过其他可找到的网页上的链接找到。确保引荐链接包括与目标网页相关的文字（对于图片，则应包括 Alt 属性）。可抓取的链接是具有 href 属性的标记。
- 构建并提交站点地图，协助 Googlebot 更智能地抓取您的网站。站点地图是一种文件，您可在其中提供与您网站中的网页、视频或其他文件有关的信息，也可以说明这些内容之间的关系。
- 对于只有 1 个 HTML 网页的 JavaScript 应用，请确保每个屏幕或每项具体内容都有一个网址。
检查 JavaScript 使用方式
虽然 Googlebot 能够运行 JavaScript，但您在设计网页和应用时需要考虑一些差异和限制，以适应抓取工具访问和呈现您的内容的方式。
当内容发生更改后及时告知 Google
为确保 Google 能够快速找到您的新网页或更新过的网页，请遵循以下要求：
- 提交站点地图。
- 让 Google 重新抓取您的网址。
- 在适用时使用 Indexing API。
- 如果您的网页仍然无法编入索引，请查看服务器日志中是否有错误。
网页上所用的字词
Googlebot 只能找到以文字形式显示的内容。例如，Googlebot 看不到视频中的文字。为确保 Google 搜索能够理解您的网页主题，请遵循以下要求：
- 确保为您的视觉内容附加文字形式的说明。例如，如果某个商品类别网页包含一系列衬衫图片，但不含任何与每张图片有关的文字内容，那么该网页就会效果欠佳。在商品类别网页中，每张图片都应附有一些文字说明。
- 确保每个网页都有描述性标题和元描述。独特的标题和元描述有助于 Google 显示您的网页与用户的相关程度，从而提升您的搜索流量。
- 使用语义 HTML。尽管 Googlebot 会将 HTML、PDF 内容、图片和视频编入索引，但它不会将那些需要使用插件（例如，Java 或 Silverlight）的内容或在画布中呈现的内容编入索引。请尽可能为您的内容使用语义 HTML 标记，而不要使用插件。
将内容的其他版本告知 Google
Googlebot 无法自动知晓您的网站或内容有多个版本。例如，网站的移动版本、桌面版本或多国语言版本。要确保 Google 向用户提供正确的版本，您可以：
- 整合重复网址。
- 将您网站的本地化版本告知 Google。
- 使您的 AMP 网页可被轻松发现
控制 Google 看到的内容
- 若要禁止 Googlebot 查找您的网页，请仅允许已登录的用户访问您的内容（例如，设置登录页面或使用密码保护您的网页）。
- 若要禁止 Googlebot 抓取您的网页，请创建 robots.txt。
- 若要禁止 Googlebot 将您的网页编入索引，但仍允许抓取，请添加 noindex 标记。
robots.txt可以禁止谷歌爬取某个网页，noindex可以禁止谷歌索引某个网页但是不影响爬取。
如果您的内容未显示在 Google 搜索中，但您想让它显示在其中，请按以下步骤操作：
- 使用网址检查工具检查 Googlebot 能否访问该网页。
- 检查您的 robots.txt 文件，看看您是否在无意中禁止了 Googlebot 抓取自己的网站。
- 检查您的 HTML，看看元标记中是否有 noindex 规则。
为网站启用富媒体搜索结果
富媒体搜索结果可包含样式、图片或其他互动功能，帮助您的网站在搜索结果中脱颖而出。您可以在网页上添加结构化数据，提供与网页含义有关的明确线索，从而帮助 Google 更好地了解您的网页并在 Google 搜索中显示富媒体搜索结果。
标签：Google,网页,Googlebot,完美,抓取,兼容,网站,内容 来源： https://blog.csdn.net/google_SEO_yang/article/details/122354894
本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享； 2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关； 3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关； 4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除； 5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。