腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(85)
视频
沙龙
2
回答
go:我如何在c.OnResponse中获得HTML,这样我就可以填充这个结构了?
、
、
、
json:"title"`} c.OnResponse(func(r *
colly
.Responsec.OnHTML("title", func(e *
colly
.HTMLElement) { e.Ctx.Put("title",
浏览 0
提问于2020-05-07
得票数 1
回答已采纳
1
回答
使用docker-compose安装软件包
、
、
func(r *
colly
.Request) { }) 如果我在没有
Colly
的情况下运行这个项目,即。github.com/gocolly/
colly
imports github.com/gocolly/
colly
浏览 1
提问于2019-12-16
得票数 2
1
回答
使用gocolly只刮掉一个特定的<div>
、
我正试着用gocolly做一个网络刮刀。我只想在<div>上刮一个id为dailyText的dailyText元素。我该怎么做?
浏览 3
提问于2021-01-30
得票数 0
回答已采纳
1
回答
我怎样才能在一个特定的网站上获得卖家的名字?
、
、
import ( "fmt" "os" defer writer.Flush() c :
浏览 4
提问于2022-08-17
得票数 -1
回答已采纳
1
回答
如何在Go中重用HTTP请求实例
、
、
我正在构建一个API,它可以从网页上抓取一些数据。在此之前,我已经能够使用Python完成此任务:result = session_requests.get(LOGIN_URL)return parser
浏览 14
提问于2022-08-12
得票数 -2
回答已采纳
1
回答
gocolly:如何防止重复抓取,仅限唯一url抓取一次
、
、
我正在用下面的代码尝试go-
colly
,它似乎多次爬行同一个url,我如何限制到一次爬行? c :=
colly
.NewCollector( ) c.Limit(&
colly
.Lim
浏览 9
提问于2020-05-07
得票数 0
回答已采纳
2
回答
我不能用
colly
go在福布斯前亿万网站上搜索
、
package main "encoding/csv""os" ) checkError(err)writer:=csv.NewWriter(file)c:=
colly
.NewCollector(
浏览 26
提问于2021-11-01
得票数 0
回答已采纳
1
回答
在Go中刮取网站时没有回复
、
、
我正试着用Go和
Colly
来搜索Zillow上一些列表的一些细节。 "encoding/csv" "os" "github.com/gocolly/
colly
/proxy" func
浏览 8
提问于2022-05-24
得票数 1
1
回答
如何使用
colly
在属性中抓取属性
、
、
、
、
如何使用
colly
获取此数据?
浏览 89
提问于2021-10-21
得票数 1
回答已采纳
1
回答
如何将url的开头添加到
colly
链接列表中
、
、
我有点新的去,并试图刮几个网页使用
colly
。两个页面有不完整的链接,下面是代码和输出
colly
.AllowedDomains("security.paloaltonetworks.com"), PaloNetlinks := e.ChildA
浏览 44
提问于2022-11-22
得票数 0
回答已采纳
1
回答
在Go中使用cron定期运行
Colly
web scraper
、
、
、
我正在使用
colly
进行一些web抓取,但我想使用cron定期运行它。我确实尝试了一种基本的方法。type scraper struct { rc *redis.Client DB: 0, // use default DB c
浏览 26
提问于2021-11-13
得票数 0
1
回答
Go没有从网站返回任何数据
、
、
我试图在go中制作一个简单的web刮刀,但我似乎无法从
colly
那里获得最简单的功能。我从
colly
文档中拿出了一个基本的例子,虽然它与他们使用的hackernews.org站点一起工作,但它并不适用于我正在尝试的站点。我用https://,www尝试了几次url的迭代。package main "fmt" ) // main function
浏览 10
提问于2021-12-25
得票数 3
1
回答
使用
Colly
框架,我无法登录到Evernote帐户
、
、
我正在使用
colly
框架来抓取网站。我正在尝试登录Evernote帐户,以获取一些东西。但我不能通过它。我使用“用户名”和“密码”标题来提供凭据。这条路对吗? "log") // create a new collectorc :=
colly
.NewCollector() // authen
浏览 1
提问于2018-05-29
得票数 2
1
回答
如何使用go
colly
在一个页面上获得多个元素
、
int64 Content string我卷曲了一个网页,用接收数据,我有两个OnHtml方法,如下: c :=
colly
.NewCollector() Post := Post{ db.Create(&Post) c.OnHTML(&qu
浏览 41
提问于2020-03-09
得票数 0
回答已采纳
1
回答
果冻还空片
、
、
scraper.go: "fmt" "github.com/gocolly/
colly
/extensions" name string urlstring
浏览 13
提问于2022-11-11
得票数 1
回答已采纳
1
回答
Colly
找不到任何链接
、
我以前用基本相同的方式做过几个这样的程序(只是不同的域名),但是这次
colly
没有找到一个链接,只是在访问第一个页面后退出了。有人能看到哪里出了问题吗?但是,我如何将其翻译为
colly
?因为
colly
还在处理301错误。import ( "strings") /* only navigate(
浏览 23
提问于2019-02-15
得票数 0
1
回答
如何勾引果冻去elasticsearch?
、
、
是否有示例go-
colly
代码显示爬行->scraping->产于弹性(例如python框架)的“管道化”输出。即流水线化的框架支持。 c :=
colly
.NewCollector( )
浏览 2
提问于2020-05-07
得票数 0
1
回答
创建一个特定类型的数组并重用它
我被困在c.OnHTML("article", func(e *
colly
.HTMLElement) {}中,无法将数据返回到它之外。Timestamp string `bson:"timestamp"`
colly
.MaxDepth(2),
浏览 24
提问于2021-08-29
得票数 0
回答已采纳
2
回答
使用Go-
Colly
抓取时删除空行
我从Go开始,然后和
Colly
一起抓取。有人能帮我删除输出中的空行吗?这是我的代码: "fmt" ) c :=
colly
.NewCollector()
浏览 22
提问于2020-02-27
得票数 0
1
回答
用go刮取$nbsp
、
、
、
web抓取工具来实现它,下面是代码: "fmt" "time" urlToScrap := "https://www.webpage.de/artikel/69443/index.html" collect :=
co
浏览 5
提问于2021-12-16
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
使用GO开发一个小小的web程序
爬虫最快框架collyx,今天开源了……
使用golang写一个基本的服务器
使用 Go 爬虫要注意什么
解读Go语言的2019:如果惊喜不再 还有哪些值得关注?
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券