Jsoup库数据抓取代码示例

42 阅读1分钟

微信图片_20230808094553.png

// 导入Jsoup库
import org.jsoup.Jsoup
import org.jsoup.nodes.Document
import org.jsoup.nodes.Element
import org.jsoup.select.Elements

fun main() {
    // 设置
    val proxy = Proxy(")

    // 创建Jsoup实例并设置
    val jsoup = Jsoup.connect(").proxy(proxy).get()

    // 获取网页内容
    val content = jsoup.body()

    // 使用Jsoup解析网页内容
    val doc: Document = Jsoup.parse(content)

    // 获取所有视频元素
    val videos = doc.select("video")

    // 遍历每个视频元素
    videos.forEach { video ->
        // 获取视频的URL
        val url = video.attr("src")

        // 打印视频的URL
        println(url)
    }
}

在这个程序中,我们首先导入了Jsoup库。接下来,我们使用这个Jsoup实例获取了网页内容。然后,我们使用Jsoup解析了网页内容,并获取了所有视频元素。 最后,我们遍历了每个视频元素,并打印出了视频的URL。