腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(528)
视频
沙龙
3
回答
如何让网络爬虫在后台
抓取
网页?
、
我目前正在开发一个网络爬虫在
PHP
中,它仍然是一个简单的,但我想知道的是,我怎样才能使我的爬虫在后台爬行页面,而不使用我的带宽,我必须使用一些cron作业,我想它自动存储在数据库中的数据。
php
ini_set('max_execution_time*>(.*)<\/a>"
浏览 2
提问于2015-08-06
得票数 0
3
回答
Python Beautiful Soup返回Nonetype
、
、
、
我正在尝试开发一个程序,可以为特定的英雄联盟冠军
抓取
符文。遠
程
英雄每次普攻只會提供 1 層效果。<br><br>在疊滿層數後,你對英雄造成的 15% 傷害會轉化為對自身的回復效果(遠
程
英雄則為 8%)。"height="36" width="36" class="requireTooltip"> 我不能碰巧访问这部分并解析它,也找
不到
IMG src。不过,我可以在他们的网站上浏览一下。
浏览 2
提问于2020-04-26
得票数 2
4
回答
使用
PHP
或Python的
PHP
抓取
技术
、
、
应该可以写一个通用的脚本来
抓取
所有的100个网站或在
抓取
技术中只可能为特定的网站编写脚本。(愚蠢的问题。)我想我应该问一下哪种可能性更容易。为每个网站编写100个不同的脚本是很难的。给我一些关于我该怎么做的线索。 对不起,我的英语不好。
浏览 2
提问于2011-01-03
得票数 3
1
回答
如何重写预存储库友好urls?(不是htaccess文件,而是每个产品的url )
、
我试图找到存储在db中的urls的位置来删除它们,并希望presta能够对它们进行签名,但是我找
不到
它们的保存位置。
浏览 2
提问于2018-03-20
得票数 0
回答已采纳
5
回答
用于web
抓取
JAVASCRIPT内容的语言
、
、
、
我想主题问这个问题,我通常使用
PHP
进行解析/ web
抓取
,但我在
抓取
javascript时遇到了很大的麻烦,大多数情况下我做
不到
。 例如:解析执行javascript时出现的div。我读到过RUBY,它有一个用于javascript的解析器库,所以问题是w用于程序的语言是一种web
抓取
,可以有效地删除javascript生成的内容吗?这是一个
PHP
库,就像ruby解析javascript内容的库一样?
浏览 0
提问于2011-07-20
得票数 2
2
回答
我需要帮助使一个网站爬虫使用
php
、
我真的很想做一个网站爬虫,去一个网站,扫描它的链接,把链接放在一个数据库中,并转移到另一个网站。我找到了一个网站,但代码真的有but。如果你见过这样的东西,或者你自己写过这样的东西。
浏览 0
提问于2011-01-19
得票数 0
回答已采纳
2
回答
Google爬行是否在
PHP
中包含/要求文件?
、
、
我是
php
的新手,我正在使用一个具有导航条的
php
网站工作。这个网站将是相当大(超过30页),我不想改变我的导航栏在每一页,如果我有必要改变它。 我也希望谷歌的蜘蛛跟踪导航栏上的链接。
浏览 0
提问于2014-11-14
得票数 0
回答已采纳
1
回答
使用Selenium检索反向链接、HTTP代码和IP地址
、
、
我一直在使用普通的curl来
抓取
,但是curl在JavaScript上玩得并不好(实际上它们根本不能玩)。我在下面的链接中使用
php
的facebook
PHP
webdriver,但我找
不到
如何检索任何标题信息。如果您不知道这个问题的答案,那么您有没有更好的方法来
抓取
或获取HTTP头? 提前谢谢。
浏览 0
提问于2013-04-06
得票数 1
回答已采纳
2
回答
Python
抓取
包含
PHP
的页面源代码
、
我知道如何
抓取
源代码HTML,但不知道
PHP
,有没有可能用内置的函数?
浏览 0
提问于2013-02-25
得票数 0
回答已采纳
1
回答
谷歌无法爬行我的网站
最近,我的google搜索控制台出现了爬行错误: User-agent: * Allow: /wp-admin/admin-ajax.
php
当我尝试像GOOGLE一样
抓取
它时,它说: 暂时达
不到
浏览 2
提问于2017-02-03
得票数 1
2
回答
漂亮的汤-数据不在HTML文件中
、
我试图从一个网站上
抓取
数据,但在浏览器的view > source上看
不到
我想要的数据。它来自另一个文件。是否可以使用Beautifulsoup和Python来
抓取
屏幕上的实际数据?示例站点wwwdotcatleylakemandotco(Dot)uk/cds_ site s.
php
谢谢
浏览 0
提问于2013-05-21
得票数 0
回答已采纳
1
回答
.htaccess和
Php
中的页面标题
、
、
、
、
我已经用头撞墙一整天了,但是我不明白如何让我的URL在URL中显示页面标题,而不是所有的查询参数。我只想得到我的网页的标题,并显示在我的URL。
浏览 3
提问于2015-01-28
得票数 0
回答已采纳
2
回答
使用
PHP
、MySQL和Curl的Crontab Linux
、
、
我正在尝试运行一些
php
与curl在它里面,所以它会从网站检索信息,然后将其插入到我的数据库。我能够让cronjob工作,
php
也能工作,因为我让它在每次运行时都会给我发一封电子邮件,它确实做到了。Cronjob:cronjobs.
php
:$to = '
浏览 0
提问于2013-07-11
得票数 0
回答已采纳
2
回答
Imacro :如果标签与页面上的任何元素都不匹配,如何跳过?
、
、
true)var ret_code = iimPlay("CODE:TAG POS="+counter+" TYPE=A ATTR=HREF:http://www.xxx.com/index.
php
break; result += " "+s; } 标记代码一次又一次地运行,而不是在找
不到
任何匹配的元素时停止自己
浏览 1
提问于2013-04-20
得票数 0
2
回答
PHP
安全,代理文件是解决方案吗?
、
、
因此,如果您有一个
PHP
页面,而如果有人加载该页面,他们可能看
不到
服务器端运行
PHP
代码;如果他们
抓取
源代码,文件本身仍然是公开可用,因为如果您使其不可公开可用,则该人将无法加载该页面。因此,具有正确知识的人可以‘
抓取
’该文件,然后读取服务器端脚本内容。 所以,做一个“代理”不是更安全吗?例如,AJAX post调用
PHP
页面(称为脚本处理程序),并将一个字符串传递给要运行的
PHP
脚本,其中前两个字符是要运行的
PHP
脚本的id,字符串的其余部分是该脚本
浏览 0
提问于2011-08-22
得票数 1
1
回答
使用
php
查找mysql表中的最高票数
、
我正在寻找一种方法,在
php
中从mysql数据库中名为'answers‘的表中
抓取
条目,然后从名为'votes’的表中
抓取
条目并从中计算出投票最高的答案。在这方面我似乎找
不到
任何帮助。
浏览 0
提问于2011-10-23
得票数 0
回答已采纳
2
回答
如何动态更改网页的标题?
、
我有一个网页,实现了一组标签,每个显示不同的内容。标签点击不会刷新页面,而是隐藏/取消隐藏客户端的内容。 现在需要根据页面上选择的标签更改页面标题(出于搜索引擎优化的原因)。这可能吗?有人可以建议一个解决方案,通过JavaScript动态改变页面标题,而无需重新加载页面?
浏览 410
提问于2017-12-25
2
回答
从HTML选择列表中
抓取
所有选项
、
我需要从一个非常大的HTML选择列表创建一个
php
数组。我搜索了"dropdown to array“生成器和程序,但什么也找
不到
。谁能推荐一个
php
代码,我可以用它从HTML下拉列表中
抓取
所有选项并输出它们的数组吗? 更新:
php
或js。任何将输出数组的内容,我可以复制并粘贴到我的脚本中。
浏览 2
提问于2011-11-12
得票数 3
回答已采纳
5
回答
如何确定选择了哪个数据库
在调用mysql_select_db
抓取
数据库之后,有没有办法稍后输出当前选择的数据库的名称?这看起来很基本,但我在
php
.net或stackoverflow上找
不到
任何东西(所有结果都是“没有选择数据库”)。
浏览 68
提问于2011-11-11
得票数 291
回答已采纳
1
回答
让
php
读取通过javascript创建的表单?
、
、
、
我正在使用Javascript创建文本框和一组单选按钮,我的想法是在那之后单击submit,
php
抓取
字段条目并将它们放入mysql数据库中。然而,我发现如果我使用javascript创建表单元素,
php
看
不到
它们。如果我用html创建它们,这是没有问题的。我能做些什么来解决这个问题?
浏览 0
提问于2010-12-13
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
对象存储
云直播
腾讯会议
活动推荐
运营活动
广告
关闭
领券