适合新手学习的360文库采集程序

今天给大家带来的是一个采集360文库的爬虫程序，非常简洁小巧，适合新手使用，在实际使用时还需要根据自身的需求进行修改，先让我们来一起学习一下吧。

```kotlin

import java.net.URL

import java.net.HttpURLConnection

import java.net.InetSocketAddress

import java.net.Proxy

fun main() {

val proxyHost = "https://www.duoip.cn/get_proxy"

val proxyPort = 8000

val proxy = Proxy(Proxy.Type.HTTP, InetSocketAddress(proxyHost, proxyPort))

val url = URL("http://www.360doc.com")

val connection = HttpURLConnection(url.openConnection(proxy))

connection.connect()

val content = connection.readText()

println(content)

}

```

首先，我们需要导入必要的库，包括Kotlin的网络库和代理库。接下来，我们需要创建一个URL对象，这是我们打算爬取的网页的URL。然后，我们需要创建一个请求对象，使用我们的代理对象和URL对象。然后，我们需要发送请求并获取响应。最后，我们需要解析响应，提取我们想要的信息。