2回答
如何用python爬取数据并保存到excel？
python
利用python爬取豆瓣电影排行榜（https://movie.douban.com/chart)的数据并保存到excel中。用相同代码爬取网页豆瓣top250的数据可以爬取到excel中，但将网址及相关信息改为网页豆瓣电影排行榜中的信息时便无法爬取，也找不出问题所在。以下图片为完整代码。
浏览 609提问于2021-01-09
1回答
转换浏览器cookies并在cURL爬网中使用
php、curl、cookies
首先，这样做的目的是爬取我们的一个登录应用程序，并获取有关作业运行的数据，而我可能无法通过任何其他方式获取这些数据。我可以通过浏览器登录，也可以检查我的cookie；那么我如何(及时地)将这些信息添加到cURL调用中，以便我可以使用PHP来解析返回页面(和链接)？
浏览 3提问于2015-11-18得票数 0
2回答
TYPO3: indexed_search -索引所有页面而无需首先访问
search、typo3
通常，indexed_search只对已经访问过的页面进行索引。如果用户没有访问过该页面，则不会有搜索结果。有没有一种不需要访问就能索引所有页面的方法？或者我必须使用另一个扩展？
浏览 0提问于2012-01-16得票数 0
回答已采纳
2回答
如何在没有php的情况下从mysql结果中删除html标签和php序列化信息？
php、mysql、html、sphinx
我正在存储一个PHP数组，其中key=>value对是用于在网站上构建jQuery UI选项卡的信息。
浏览 0提问于2009-09-21得票数 0
回答已采纳
1回答
爬虫脚本php
php、web-crawler
唯一的问题是，如果我尝试爬取深度设置大于4的任何东西，它不起作用。我想知道这是因为服务器缺乏资源还是代码本身。{ if/' . ltrim($href, '/'); crawl_page($href, $depth - 1); ech
浏览 0提问于2011-04-11得票数 1
回答已采纳
2回答
抓取网页信息的内部链接
python、scrapy
我正在尝试爬取页面这是我的代码片段： start_urls = [
'https://www.jobstreet.com.sg/en/job-search/job-vacancy.php
浏览 20提问于2017-08-21得票数 1
1回答
htaccess将带有var的url从无文件扩展名重定向到文件扩展名
php、.htaccess、redirect
问题是，由于某些原因，googlebot在爬取某个页面时会收到一堆错误404，但我认为在我这一端一切都运行得很好。$ /rss/feeds.php?cat=$1 [QSA,NC,L]www.url.com/feeds.php?
浏览 1提问于2012-06-11得票数 0
回答已采纳
1回答
在PHP中未检测到bingbot的URL请求参数
php、apache、web-crawler
USERID: '.getUserid()); }debug()函数每15分钟向我发送一封错误邮件，当微软爬取站点时，我得到:请指定一个id - /programme.phpaction=view&id=2233 : msnbot-NewsBlogs/2.0b (+)：Array () USERID：-1
您可以从URL中看到它有一个id，但是PHP完全忽略了它。
浏览 1提问于2012-01-11得票数 0
1回答
如何为web爬虫设置有效的cron作业
php、web-crawler、cron-task
我已经写了一个php网络爬虫来索引只有180个特定来源的内容，但它平均每页需要2秒来分析，抓取和保存我想要的内容:图片，网址，标题，完整内容，摘录，标签。cron作业类似于：lynx -auth用户名:密码website.com/crawler.php?group=2
lynx -auth用户名:密码website.com/crawler.php?group=3等。爬虫脚本访问数据库中的18个源，
浏览 0提问于2012-09-26得票数 1
1回答
从Google索引中删除整个网站
robots.txt、google-search-console
.* - [G]HTTP/1.1 410过期日期: Sat，05 Jan 2013 12:39:23 GMT服务器: Apache/2.2.230.9.8e-fips-rhel5 mod_fastcgi/2.4.6 mod_jk/1.2.37 mod_auth_passthrough/2.1 mod_bwlimited/1.4 FrontPage/5.0.2.2635 PHP这是当Googlebot尝试爬</
浏览 4提问于2011-05-17得票数 1
4回答
用于html解析的Dom和xpath查询
php、dom、xpath
现在为了解析html，我可以只使用像explode这样的字符串函数，或者regural表达式，但是我发现dom xpath代码要干净得多，所以现在我可以对我必须爬取的所有站点和我必须剥离的标签进行配置，php站点并没有详细说明它的确切结构。不过，我的主要问题是
浏览 2提问于2011-11-21得票数 0
回答已采纳
1回答
如何以编程方式检查WordPress插件是否已被激活？
wordpress
/mypartnerplugin/thepluginsmainfile.php');}
然后，使用Linux命令行工具爬取所有包含此代码的站点，它将强制页面查看。
浏览 1提问于2010-04-20得票数 1
回答已采纳
1回答
如何将响应jquery.ajax()中的表中的最后td值赋值？
jquery、html-table
我有以下问题：，这是我的窗口，
jQuery代码用于发送ID电影以更新和检索总价，以便在列总计($)中进行更新
$('.quantitymovie').live('change/php/processFu
浏览 4提问于2012-06-09得票数 1
回答已采纳
3回答
Wordpress网站似乎没有恶意软件，但点击谷歌搜索结果会重定向到垃圾网站
wordpress、redirect、base64、eval、malware
其他详细信息：
我找到并删除了一些可疑的PHP eval()函数，然后在我的页面和数据库中搜索并替换了所有剩余的代码。
浏览 1提问于2012-03-16得票数 2
回答已采纳
5回答
Flash和PHP，实时用户环境:如何使用套接字？
php、flash、sockets
我想让它成为这样，如果用户1拖动电影剪辑，那么用户2可以看到它被拖动，通过互联网在某种在线交易类型。我一直在尝试在运行时这样做，就像在线游戏一样。到目前为止，我一直在尝试弄清楚，我需要一个用fsockopen创建到服务器的连接的PHP文件，然后我需要创建一个套接字？但我不知道如何让用户1在拖动电影剪辑时写入(x，y)坐标，并让用户2自动拾取相同的坐标。
请相信我，我用这个作为最后的手段，看看是否有人知道我在说什么。谷歌今晚就不会这么做了。
浏览 2提问于2009-04-07得票数 0
5回答
从网站的单个目录下载所有图片
php、javascript、linux、perl、image
我需要从一个网站上获得所有的图像都包含在一个文件夹中。例如，(site.com/images/.*)。这个是可能的吗？如果是这样，最好的方法是什么？
浏览 0提问于2011-01-07得票数 7
回答已采纳
1回答
举个例子，假设我想要从这个网页中检索这部电影的总体评分(7.7
我知道我可能需要使用PHP或JS，但我也不确定如何识别我想要拉取的元素的名称。
浏览 2提问于2017-11-22得票数 0
3回答
访问Metacritic API和/或抓取
api、scrape、scraper
有没有人知道Metacritic api的文档在哪里/它是否仍然有效。曾经有一个Metacritic API，现在已经消失了。
浏览 6提问于2016-01-07得票数 7
回答已采纳
5回答
最好的方式来存储数据的Greasemonkey的爬虫？
persistence、xmlhttprequest、greasemonkey、storage、web-crawler
我想用Greasemonkey抓取一个站点，想知道是否有比GM_setValue更好的临时存储值的方法。我目前的计划是在自己的标签页中打开每个配置文件，这样它看起来更像一个普通的浏览者(即css、scrits和图像将由浏览器加载)。然后用GM_setValue存储Twitter URL。抓取所有配置文件页面后，使用存储的值创建页面。我考虑过将用户配置文件插入到当前页面中，这样我就可以使用相同的脚本实例处理它们，但我不确定XMLHttpRequest
浏览 0提问于2009-01-28得票数 8
回答已采纳
云服务器
ICP备案
对象存储
实时音视频
云点播
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号