我用golang写了一个程序来解析一些网站。它正常工作了。然后我篡改了这个程序并试图运行它。现在,它将显示以下错误:
/ bin / sh:./爬虫:找不到
这是我的Dockerfile
FROM golang:1.16-buster AS build
WORKDIR /github.com/Hudayberdyyev/crawler
COPY . .
RUN go mod download
RUN GOOS=linux go build -o crawler cmd/main.go
FROM alpine:latest
WORKDIR /
COPY --from=buil
今天早上,我收到了大量javascript错误:
ReferenceError: _isMatchingDomain is not defined at parseCookie
at HTMLDocument.set [as cookie]
变量_isMatchingDomain不在我们的网站上,仅来自某些浏览器:
Mozilla/5.0 (X11;Linux x86_64)
AppleWebKit/537.36 (KHTML,类似于壁虎)
Chrome/61.0.3163.100
Safari/537.36
以下是评论意见中的补充资料:
触发这一错
我的团队一直在使用Sharepoint 2010抓取大量外部网站。
Sharepoint web爬虫没有提供足够的可配置性,因此我们一直使用快速web爬虫来运行爬虫。
但是,在Sharepoint 2013中,FAST web crawler似乎已被弃用/与Sharepoint web crawler合并。
我找不到关于如何配置2013 Web Crawler组件的重要文档。它比2010年的Sharepoint爬虫更强大吗?