当前位置:  开发笔记 > 编程语言 > 正文

Google会抓取AJAX内容吗?

如何解决《Google会抓取AJAX内容吗?》经验,为你挑选了2个好方法。

在我的网站的主页上,我使用JQuery的ajax函数来下载最近的用户活动列表.

最近的活动显示在页面上,最近活动的每一行都包含指向执行活动的用户的用户配置文件的链接.

Google实际上是否会调用ajax调用此信息并将其用于计算页面相关性/链接汁流量?

我希望它不会,因为用户个人资料页面不是非常有价值的Google索引,我不希望所有这些链接到用户个人资料页面,从而稀释我的主页链接汁流远离其他更重要的链接.



1> Chi..:

不,默认情况下它不会抓取AJAX内容.

http://code.google.com/web/ajaxcrawling/ 有关于如何使AJAX内容可抓取的说明,但这些是您需要采取的明确步骤,它不是自动的


该链接说:"此建议已于2015年10月正式弃用".

2> Craig Stuntz..:

也许吧.如果您想保证Google不会抓取您的JSON响应,请将它们放入robots.txt.但这不是安全; 事实上,它是饼干寻找"有趣"页面的第一个地方.而其他爬虫可能会忽略它.

推荐阅读
勤奋的瞌睡猪_715
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有