通过以下几个教程，我已经更新了我的robots.txt文件。但是现在我的网站根本没有出现在谷歌上，甚至连网站的一个链接都没有出现。Disallow: */trackback/Disallow: /*/feed/rss/$所有的链接，我的网站显
浏览 0提问于2017-05-09得票数 2
我正在尝试解析来自以下网站的页面。然而，抓取的结果脚本与我在Chrome上查看页面源代码时观察到的脚本并不相同。clientprint(soup.prettify())
生成的脚本也要短得多你知道为什么我不能根据页面来源刮掉完整的脚本吗？我读过一些帖子，其中提到，由于页面由使用javascri
浏览 3提问于2020-07-23得票数 0
2回答
我正在尝试编写一个程序，它可以准确地找出我大学的某个班级何时有空位--基本上，我希望能够找出网站上的某个数字何时不是0。然后我希望能够立即注册该课程。我有点不确定从哪里开始这样的任务，但我肯定想试一试。任何链接或起点都会非常感谢。
谢谢!
浏览 0提问于2011-12-12得票数 0
2回答
它是在WordPress，并被黑客攻击，并有数千个垃圾网页注入到网站。这些网页是由谷歌索引，并最终得到的信息，“这个网站可能被黑”的搜索结果。我已经迁移到一个不同的CMS，并确保它是干净的，添加到我的网站管理员工具和新的网页已经索引-问题是谷歌刚刚添加了新的网页到旧的垃圾邮件页面。Googlebot工具发送信息
浏览 0提问于2017-10-08得票数 3
1回答
例如，在我的网站上，我有很多闪存内容。但是，我确保为每个页面添加了大量的关键字，每个页面都有一个描述性的标题，所有图片的alt标记都应该被填充，我使用了h1和h2标记，并使用了一些关键词来描述网站.但我的问题是，我有一个很大的TOS和隐私政策页面，根据谷歌网站管理员的说法，它似乎是从这个页面中获取了我的大部分关键词。所以我最喜欢的关键词看起来，“隐私”，“政策”，“责任”之类的东西与我的</
浏览 0提问于2011-05-27得票数 2
2回答
我在根页面中有这样的代码(例如)： <a ng-href="{{url}}"/>url</a>每个url只是一个SEO友好的子如何使它可索引？
如果可能的话，解决方案不应该依赖第三方服务，如seo4ajax或prerendex.io。
浏览 1提问于2014-08-15得票数 1
回答已采纳
我是一个网络抓取的新手。我正在尝试从获取FASTA文件，但不知何故无法获取。这个类中的FASTA文件，但当我运行这段代码时，我只能看到FASTA标题：
url = "https://www.ncbi.nlm.nih.gov/nuccore/193211599?
浏览 0提问于2017-05-09得票数 0
我的网站每天收到近800个直接家庭档案，因此我的网站的反弹率增加了。通常情况下，我每天只有大约30个家庭档案，这些点击不是来自谷歌，所以我如何阻止他们。事实上，在我的Wordpress Jetpack统计数据中，我的家庭档案每天大约有800份，而过去每天只有30份左右，所以我认为有人在给我的网站提供假点击。因此，我的网站的反弹率在一天一天的增长，因为这些点击不是从任何搜索引擎和这些
浏览 0提问于2013-07-27得票数 0
回答已采纳
我正在尝试弄清楚静态资产是否被路由到/Sitecore CMS，但如果不能通过某种方式跟踪哪些模块/处理程序处理来自asp.net的请求，就很难判断。有没有办法/工具进入IIS，让我知道某个特定请求是如何处理的，它通过了哪些程序集，等等？
浏览 8提问于2011-07-30得票数 1
我的网页是基于HTML的，我需要把它提交给谷歌网站管理员工具和必应。<meta name="description" content=""/>`
这足够了吗?还是我需要为爬虫添加更多的特殊标签？我之所以这样问，是因为
浏览 0提问于2015-04-09得票数 -2
在阅读了关于angularjs和SEO的多个来源(包括google文档)之后，我了解到让google爬上我的网站的两个主要选项是：
2.加入hashbang (#!)我的网址-这样谷歌可以知道它有一个动态呈现的<
浏览 1提问于2015-01-20得票数 0
我想要抓取Chrome扩展所呈现/显示的内容，而不是网站。网页URL触发对这个特定Chrome扩展的请求，然后它们呈现来自其数据库的内容。谢谢&爱。
浏览 0提问于2019-12-13得票数 0
2回答
我正在寻找一种扫描网站并立即检测更新的方法，而不必刷新页面。因此，当一个新的帖子被推送到网页上时，我希望能立即得到通知。有没有一种方法可以做到这一点，而不必不断刷新页面？干杯
浏览 20提问于2020-07-08得票数 1
编辑:我了解到我的错误与robots文件无关。无视。我删除了robots文件，但仍然不能使用Maps。我还尝试创建一个完全许可的文件("Dissallow：")，但还没有解决这个问题。
有人能告诉我下一步吗？如果可能的话，我更希望这个
浏览 0提问于2010-08-26得票数 2
我的网站是公开的(用户可以在没有登录的情况下查看)+私有的(用户必须登录才能使用)。是否有任何可供选择的支持谷歌网站管理员工具的HTTPS网址。如果有一个选项可以支持这些URL，那么我想知
浏览 1提问于2014-05-05得票数 0
我正在与Office 365(SP)集成用于第三方身份验证的SSO，并将我的应用程序作为IDP。通过读取SpecThe use of compression MAY be indicated via metadata目前的情况如何？一旦成功地实现了Office 365，我们就有了集成其他服务的计划。而谷歌则是其他服务之一。来自谷
浏览 3提问于2016-12-27得票数 0
5回答
我想爬行通过，比方说，其他公司的网站，如汽车和提取只读信息在我的本地数据库。然后我希望能够在我的网站上显示这些收集的信息。纯粹从技术的角度来看，有没有一个.net工具、程序等已经足够通用，可以满足我的目的。或者我必须从头开始写？为了有效地做到这一点，我可能需要一个WCF作业，只是在不断的基础上挖掘数据，刷新数据库，然后提供数据给网站。
另外，有没有办法屏蔽我对这些网站的访问？我会给我的目标网站造成“流量负担”吗？如果
浏览 3提问于2010-10-07得票数 0
回答已采纳
我试图通过使用网络爬虫来保存几个网页。通常，我更喜欢使用perl的WWW::Mechanize模块。然而，据我所知，我想爬的站点上有很多javascripts，似乎很难避免。下面是我喜欢从以下来源开始的：
对于几家在“公司”之下的上市公司--截至2011年10月14日--我喜欢保存它们各自的页面。我现在喜欢在本地保存的页面。因此，我想要生成的代码应该访问一些公司的HTML站点，只需保存网页即可。(例如，有三家公司:
浏览 2提问于2011-10-14得票数 4
回答已采纳
云服务器
ICP备案
对象存储
实时音视频
云直播
腾讯云开发者
