我的网站的一部分只能由经过身份验证的用户访问.我想知道这些网页是否被谷歌抓取,或者它们对搜索引擎有点"隐藏".
谢谢
如果他们对未经过身份验证的用户关闭,他们当然也对Google不公开.谷歌机器人只是另一个试图访问您的网站的客户端.
一些像报纸这样的网站拥有为付费用户保留的内容,但它们在搜索引擎中可见.即使他们不支付客户费用,这仍然是网站管理员一方有意识地将网站打开到搜索引擎机器人的行为.
搜索引擎没有进入房子的"特殊钥匙".
京公网安备 11010802040832号 | 京ICP备19059560号-6 