我最近使用wordpress插件在我的网站上编辑了robots.txt文件.但是,由于我这样做,谷歌似乎已从他们的搜索页面删除了我的网站.如果我能得到关于为什么会这样,以及可能的解决方案的专家意见,我将不胜感激.我最初是通过限制谷歌访问的页面来增加我的搜索排名.
这是我在wordpress中的robots.txt文件:
User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /trackback Disallow: /feed Disallow: /comments Disallow: /category/*/* Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /*?* Disallow: /*? Allow: /wp-content/uploads Sitemap: http://www.instant-wine-cellar.co.uk/wp-content/themes/Wineconcepts/Sitemap.xml
markratledge.. 5
这是一个很好的WordPress robots.txt指令.添加Allow: /wp-content/uploads
如果您想要上传的索引,但这没有意义,因为您的帖子和页面中都包含所有图像,pdf等,并在那里编入索引.
User-agent: * Allow: / Disallow: /*?s= Disallow: /wp-admin/* Disallow: /wp-content/* Disallow: /wp-includes/* Disallow: /wp-content/cache Disallow: /wp-content/themes/* Disallow: /trackback Disallow: /comments Disallow: /category/ Disallow: */trackback Disallow: */comments
但最关键的信息是在你的页面来源:
这意味着您在仪表板/设置/隐私中设置了隐私,即使在访问robots.txt之前也阻止了所有搜索机器人.
获得一个好的robots.txt文件并更改Wordpress隐私设置后,Google网站管理员工具会提高您的抓取速度,让Google更快地访问该网站.
这是一个很好的WordPress robots.txt指令.添加Allow: /wp-content/uploads
如果您想要上传的索引,但这没有意义,因为您的帖子和页面中都包含所有图像,pdf等,并在那里编入索引.
User-agent: * Allow: / Disallow: /*?s= Disallow: /wp-admin/* Disallow: /wp-content/* Disallow: /wp-includes/* Disallow: /wp-content/cache Disallow: /wp-content/themes/* Disallow: /trackback Disallow: /comments Disallow: /category/ Disallow: */trackback Disallow: */comments
但最关键的信息是在你的页面来源:
这意味着您在仪表板/设置/隐私中设置了隐私,即使在访问robots.txt之前也阻止了所有搜索机器人.
获得一个好的robots.txt文件并更改Wordpress隐私设置后,Google网站管理员工具会提高您的抓取速度,让Google更快地访问该网站.