Java爬取网站的所有图片链接

「爱情、让人受尽委屈。」 2022-09-06 14:27 172阅读 0赞

### 文章目录 ###

*   *  一、准备
     *  二、引入依赖
     *  三、源代码

## 一、准备 ##

jsoup是一个用于处理真实世界 HTML 的 Java 库。它使用最好的 HTML5 DOM 方法和 CSS 选择器提供了一个非常方便的 API，用于获取 URL 以及提取和操作数据。

jsoup实现了WHATWG HTML5规范，并将 HTML 解析为与现代浏览器相同的 DOM。

*  从 URL、文件或字符串中抓取和解析HTML；
 *  使用 DOM 遍历或 CSS 选择器查找和提取数据；
 *  操作HTML 元素、属性和文本；
 *  根据安全列表清理用户提交的内容，以防止 XSS 攻击；
 *  输出整洁的 HTML。

## 二、引入依赖 ##

<dependency>
        <groupId>org.jsoup</groupId>
        <artifactId>jsoup</artifactId>
        <version>${latest.version}</version>
    </dependency>

## 三、源代码 ##

public class JsoupTest { 
        public static void main(String[] args) throws IOException { 
        	// 网址
            String url = "https://www.***.com/";
            Document doc = Jsoup.connect(url)
                    .maxBodySize(Integer.MAX_VALUE)
                    .userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36")
                    .timeout(6000)
                    .get();
                    
    		// 获取img标签的内容，读取属性输出
            Elements imgs = doc.getElementsByTag("img");
            imgs.stream().forEach(s-> { 
                System.out.println(s.attr("src"));
                System.out.println(s.attr("alt"));
            });
        }
    }

发表评论取消回复

表情：

评论列表（有 0 条评论，172人围观）

还没有评论，来说两句吧...

相关阅读

相关 Jsoup爬取网站图片

Jsoup 是一款 Java 的 HTML 解析器，我们可以用它进行网站图片的爬取，然后下载到本地文件夹中。首先在pom.xml中添加依赖。 <dependen

谁践踏了优雅/ 2023年01月21日 13:23/ 0 赞/ 206 阅读

相关 Java爬取网站图片

[Java爬虫-使用爬虫下载千张美女图片！][Java_-] [https://blog.csdn.net/qq\_35402412/article/details/113

ゞ浴缸里的玫瑰/ 2022年09月10日 05:14/ 0 赞/ 238 阅读

相关 Java爬取网站的所有图片链接

文章目录一、准备二、引入依赖三、源代码一、准备 jsoup是一个用于处理真实世界 HTML 的 Java 库。

「爱情、让人受尽委屈。」/ 2022年09月06日 14:27/ 0 赞/ 173 阅读

相关 Python爬虫——爬取网站的图片

爬虫这东西最早出现在我大学计算机网络的课程上面，我们当时的老师人很好，期末不笔试，他说这东西笔试没什么用，对于一个年纪比较大的老师来讲，能提出这种方式，实在难得。当时在考虑

比眉伴天荒/ 2022年08月10日 09:28/ 0 赞/ 369 阅读

相关 Python爬虫(1)------爬取网站图片

初学爬虫的学习流程环境 python 3.6 使用 urlib库进行爬取内容熟悉爬虫首先对百度进行爬取 -- coding: utf-8

刺骨的言语ヽ痛彻心扉/ 2022年05月25日 00:49/ 0 赞/ 340 阅读

相关 python 爬取网站图片例子

import bs4 import requests url = 'http://xkcd.com' os.makedirs('xkc

「爱情、让人受尽委屈。」/ 2022年05月24日 04:56/ 0 赞/ 292 阅读

相关使用scrapy框架爬取带反盗链网站的图片

1、以趣图网为例，首先复制趣图的图片的地址发现图片无法打开，每个图片打开都变成了如下图所示： ![70][] 出现上述情况的原因则是因为该网站采用了防盗链，为了防止爬虫，可

﹏ヽ暗。殇╰゛Y/ 2022年05月21日 03:17/ 0 赞/ 207 阅读

相关 scrapy爬取链接后再爬取链接内容

以下代码是在python3.6环境下测试通过 !/usr/bin/python -- coding:utf-8 -- from scrapy.h

╰+攻爆jí腚メ/ 2022年05月15日 15:10/ 0 赞/ 314 阅读

相关 Node.js爬虫，爬取一个网站，并下载所有图片

这里用 ‘去哪网’ 为例：首先，我们的目标是： 1.爬取一个网站 2.将网站的所有图片下载到本地注释比较清楚了，大家可以直接复制使用； const

待我称王封你为后i/ 2022年03月18日 08:58/ 0 赞/ 166 阅读

相关爬取某个链接里面的所有图片...

直接上代码 -- coding: utf-8 -- import urllib from bs4 import BeautifulSoup

阳光穿透心脏的1/2处/ 2021年09月16日 06:04/ 0 赞/ 245 阅读