腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
如何使用PHP在一个网站上显示另一个网站的内容?
我曾经听说使用
Curl
可以做到这一点,但是我不想在我的站点上显示来自外部站点的所有内容,而只想显示来自特定div的内容。如何做到这一点?
浏览 3
提问于2010-04-29
得票数 4
2
回答
CURL
不返回整个
html
源
代码
、
我想
抓取
远程站点的
html
代码
,为此我使用
CURL
,这是我的
代码
curl
_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl
浏览 5
提问于2013-03-28
得票数 0
回答已采纳
1
回答
如何让我的卷发在
抓取
之前等待几秒钟?
、
、
所以我试着从一个网站上
抓取
一些数据。有一系列的名字需要
抓取
。发生的情况是,如果有15个名字需要
抓取
。其中只有5个名字被刮掉了。 $post =
curl
_init();
curl
浏览 0
提问于2013-04-16
得票数 3
1
回答
无法
抓取
Zazzle产品url
、
、
下面是我的
代码
,我试图
抓取
下面的URL,但由于某些原因,
html
源
代码
根本没有被
抓取
。为什么在此URL上没有发生
抓取
?我试着使用File_get_contents和简单的
HTML
DOM库,但是它没有用到。http://www.zazzle.com/protoceratops_t_shirt-235065458404753105 $ch =
curl
_init(
浏览 1
提问于2016-12-13
得票数 0
1
回答
内部simple_
html
_dom访问ul
、
我使用simple_
html
_dom作为
html
类
抓取
脚本,当我试图在div中
抓取
ul时遇到了一个问题 <div class="headline=
curl
_init();
curl
_setopt($
curl
浏览 1
提问于2017-03-14
得票数 0
回答已采纳
4
回答
如何使用
cURL
获取文本
、
、
我正在尝试使用
cURL
从另一个URL获取/获取文本。我
抓取
文本的位置在一个带有动态(而非静态)数据的空白
HTML
文档中,因此没有需要筛选的
HTML
标记。$_POST['username']);
curl
_setopt(CURLOPT_FRESH_CONNECT, true); if (<e
浏览 4
提问于2010-06-25
得票数 1
2
回答
无法使用
CURL
管理会话
我正在尝试用
CURL
()
抓取
一个页面,当这个页面加载时,该页面中有另一个链接(锚文本:描述),我也想
抓取
那个页面。所以,首先我想要
抓取
&然后提取描述按钮中的网址,然后给它加上前缀(),这样它就变成了一个完整的网址,然后我想要
抓取
该网址的内容。我的
代码
是:$ch =
curl
_init($url);
curl
_setopt ($ch, CURL
浏览 1
提问于2011-05-15
得票数 1
回答已采纳
1
回答
如何使用
curl
通过代理使用嵌套循环来
抓取
html
?
、
、
、
、
我正在尝试使用代理来
抓取
页面的源
代码
。它一直运行到我遍历urls并
抓取
源
代码
的时候。但是,一旦我尝试遍历代理,它就会变慢并超时。我没有收到错误消息,它只是一直在工作。这是代理的问题还是
代码
的问题?你可以在pelican cement.com/bbb.
html
上看到这个问题。这个项目是一个从某些页面
抓取
数据的尝试,但我们已经走到了一半。
代码
如下:<body> <?"
浏览 4
提问于2011-03-18
得票数 0
回答已采纳
1
回答
如何保证在php中使用
CURL
准确地
抓取
utf-8字符?
、
、
我正在
抓取
带有重音字符(如"é")的网页(使用php的
curl
)。在这些网页的源
代码
中,这些字符是使用utf-8编写的(它们不是
html
编码的)。但是,当使用以下
代码
生成结果时,我得到的是问号而不是重音字符。$ch =
curl
_init();
curl
_setopt ($ch, CURLOPT_URL, $website);
curl
_setopt ($ch, CURLOPT_RETURNTRANSFE
浏览 2
提问于2009-08-03
得票数 1
1
回答
php dom xpath从站点中的所有文件夹中提取所有链接
、
、
也许它叫别的什么..我有下面的
代码
,它将
抓取
第一个文件夹中的所有内容,但不会从其他文件夹中
抓取
其他项目。例如,它会
抓取
第一个/前面的所有内容,但如果你有一个站点mysite.com/ folder2 /,它就不会
抓取
folder2。一切都是联系在一起的。它也会向后移动。($ch, CURLOPT_RETURNTRANSFER,true); $
html</em
浏览 0
提问于2013-02-19
得票数 0
3
回答
从其他域获取
HTML
、
、
我希望每隔30秒获取某个链接,并在我的程序中解析它的
代码
。有没有办法做到这一点? 我需要获得在它的
代码
中发现的某些东西,这些东西总是以固定的时间间隔变化。
浏览 0
提问于2012-04-24
得票数 0
回答已采纳
4
回答
如何使用DOM和XPath从页面中
抓取
链接?
、
、
、
、
我有一个卷曲页面
抓取
与卷曲,并希望抓住所有的链接与一定的id。据我所知,最好的方法是使用dom和xpath。下面的
代码
抓取
了大量的url,但删除了其中的许多,并
抓取
了不是url的文本。$
curl
_scraped_page是用卷曲
抓取
的页面。$dom = new DOMDocument();$xpath = new DOMXPath($dom); $hrefs =$xpath->eva
浏览 0
提问于2011-03-25
得票数 2
1
回答
动态内容的Web
抓取
、
、
、
、
我试图从几个网站(mega.nz,openlaod.co)
抓取
信息,内容是动态加载的,所以我实际使用的
代码
不起作用
curl
_setopt($ch, CURLOPT_URL,"https://openload.co/f/41I9Ak_QBxw/DPLA.mp4");
浏览 17
提问于2018-08-07
得票数 0
2
回答
获取目录名上有空格的文件的
HTML
内容
、
我正在使用
CURL
抓取
html
内容..下面是我访问以获取
html
代码
的链接的示例正如您所看到的,目录中有一个包含我的index.
h
浏览 0
提问于2012-10-24
得票数 0
回答已采纳
1
回答
如何处理更改URL的web
抓取
、
、
、
最近我一直在做一些关于网络
抓取
的工作。经过一些研究和分析,我可以找到窍门。但我坚持了一些观点,即使在谷歌搜索之后,我也找不到合适的答案。我坚持的一点是,通过web
抓取
,我使用登录用户和密码登录到intranet页面,对于
代码
中的给定URL,我能够获取数据,但是当URL更改时,我的
代码
由于
代码
击中错误的URL而无法登录。现在,点击链接的
代码
是一种Agent,它在刷新命令中点击URL。 我想知道任何好的工具或书籍,可以帮助我理解如何将人工智能应用于Web
抓取
。这样,我就可以
浏览 2
提问于2013-06-19
得票数 4
2
回答
如何重用php
curl
响应cookie并在脚本的后续执行中绕过登录步骤?
、
、
、
我有以下的php
代码
,登录到一个受密码保护的页面并
抓取
受保护的page.The脚本工作正常,但如果我想
抓取
同一域内的另一个受保护的页面,我只想使用登录函数一次。换句话说,我只想绕过
抓取
其他受保护页面的登录步骤。注意:我的登录函数没有创建任何cookie,我没有看到它在同一个文件夹中的脚本!谁能告诉我为什么?$ch=login(); $
html
=downloadUrl('http://www.example.com/page1.as
浏览 3
提问于2013-06-02
得票数 6
2
回答
如何使用php获取url中的meta标记
、
、
、
我写了这样的
代码
:
curl
_setopt($ch, CURLOPT_HEADER, 0);
curl
_setopt($ch, CURLOPT_URL, $url);$data =
curl
_exec($ch);
curl
_close(
浏览 12
提问于2017-12-21
得票数 2
回答已采纳
1
回答
如何通过php从aspx表单post方法中
抓取
数据
我需要从结果页面中
抓取
表单输入的所有排列和组合的数据。有没有办法在php字符串中而不是在页面(Report_For_mthly_avg_Zonewise.aspx)中获得post方法的结果? 谢谢
浏览 2
提问于2014-01-10
得票数 0
3
回答
Curl
抓取
HTML
内容
、
我正在使用
curl
构建HTTP身份验证请求。它可以工作,但我不能从我的链接中
抓取
所有内容。我怀念所有的画面。<?map=Nagvis_CC";$ch =
curl
_init();
curl
_setopt($ch, CURLOPT_URL, $URL); // Load in the de
浏览 0
提问于2009-12-10
得票数 1
2
回答
结合
CURL
和简单的
html
dom
、
、
我使用
CURL
抓取
网站和简单的
HTML
DOM已经有一段时间了。我体验到
CURL
对于
抓取
网站来说要好得多。但是,我真的很喜欢简单的
HTML
DOM的简单性。所以我想为什么不把两者结合起来,我试着: $url = 'http://news.yahoo.com/';$ch =
curl
_init($url
浏览 0
提问于2013-05-18
得票数 6
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
PHP使用Curl实现模拟登录及抓取数据功能示例
源代码编译curl,让其支持nss
利用HTML代码下载配有HTTP
HTML 语言代码 参考手册
PHP模拟浏览器访问,抓取非本地文件的几种方法爬虫
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
云直播
活动推荐
运营活动
广告
关闭
领券