我的网址是:http://LawMirror.com -(在线法律资源)
我想从谷歌索引中删除内容。谷歌索引包括我的网站数量巨大的页面索引在谷歌索引约5,000,000页,但现在左页面是3,025,000。我的网址是:http://LawMirror.com -(在线法律资源)
我想从谷歌索引中删除内容。谷歌索引包括我的网站数量巨大的页面索引在谷歌索引约5,000,000页,但现在左页面是3,025,000。
我做了以下事情,但是删除页面的速度非常慢。
Robots.txt
User-agent:* Disallow: /
.htaccess
rewriteengine on
rewritecond %{HTTP_USER_AGENT} ^.*Googlebot/2.1.*$
rewriterule .* - [G]
这是当Googlebot尝试爬取内容时返回给它的内容
HTTP/1.1 410过期日期: Sat,05 Jan 2013 12:39:23 GMT服务器: Apache/2.2.23 (Unix) mod_ssl/2.2.23 OpenSSL/0.9.8e-fips-rhel5 mod_fastcgi/2.4.6 mod_jk/1.2.37 mod_auth_passthrough/2.1 mod_bwlimited/1.4 FrontPage/5.0.2.2635 PHP/5.3.19 Content-Length: 661连接:关闭Content-Type: text/html;charset=iso-8859-1
我还使用了html meta标签noindex,没有跟随,但没有效果,如下所示:
我也提交了网站删除,但删除内容的速度非常慢。在过去的35天里,仅有的几个页面被删除。我的网站也从谷歌搜索索引中删除,但谷歌网站管理员-健康->索引状态仍然显示3,025,000页,如果我重新提交网站,他们将显示已经索引的页面。如何提高删除页面的速度。
这是当Googlebot尝试爬取内容时返回给它的内容
HTTP/1.1 410 Gone
Date: Sat, 05 Jan 2013 12:39:23 GMT
Server: Apache/2.2.23 (Unix) mod_ssl/2.2.23 OpenSSL/0.9.8e-fips-rhel5 mod_fastcgi/2.4.6 mod_jk/1.2.37 mod_auth_passthrough/2.1 mod_bwlimited/1.4 FrontPage/5.0.2.2635 PHP/5.3.19
Content-Length: 661
Connection: close
Content-Type: text/html; charset=iso-8859-1
我还使用了html meta标签noindex,没有跟随,但没有效果,如下所示:
<meta name="googlebot" content="noindex,nofollow">
我也提交了网站删除,但删除内容的速度非常慢。在过去的35天里,仅有的几个页面被删除。我的网站也从谷歌搜索索引中删除,但谷歌网站管理员-健康->索引状态仍然显示3,025,000页,如果我重新提交网站,他们将显示已经索引的页面。如何提高删除页面的速度。
发布于 2015-09-10 03:18:32
一种解决方案是在每次请求页面时返回410。它将加速索引的建立。确保您的robots.txt
中没有阻止任何页面。
https://stackoverflow.com/questions/6021035
复制相似问题