python爬虫程序，爬取网页图片

- 日理万妓 2022-04-04 15:14 376阅读 0赞

一段简单的爬取网页图片的python代码

#coding=utf-8
    
    import urllib
    import re
    
    url = "https://bh.sb/post/category/main/"
    
    def getHtml(url):
        page = urllib.urlopen(url)  #urllib.urlopen()方法用于打开一个URL地址
        html = page.read() #read()方法用于读取URL上的数据
        return html
    
    def getImg(html):
        p1 = r'https://.[^\s]+?.jpg|https://.[^\s]+?.png'    #正则表达式，得到图片地址
        imgre = re.compile(p1)     #re.compile() 可以把正则表达式编译成一个正则表达式对象.
        imglist = re.findall(imgre,html)      #re.findall() 方法读取html 中包含 imgre（正则表达式）的    数据
        #把筛选的图片地址通过for循环遍历并保存到本地
        #核心是urllib.urlretrieve()方法,直接将远程数据下载到本地，图片通过x依次递增命名
        x = 0
    
        for imgurl in imglist:
            urllib.urlretrieve(imgurl,'/home/zlee/image-spider/%s.jpg' % x)
            x=x+1
    
    
    html = getHtml(url)
    print getImg(html)

经过爬取之后，指定的存储为会出现下列图片

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0xFRTE4MjU0MjkwNzM2_size_16_color_FFFFFF_t_70][]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0xFRTE4MjU0MjkwNzM2_size_16_color_FFFFFF_t_70]: /images/20220404/102a18c728e04b1dab1bac552adc98ee.png

发表评论取消回复

表情：

评论列表（有 0 条评论，376人围观）

还没有评论，来说两句吧...

相关阅读

相关 python中文爬取网页_使用Python爬虫爬取简单网页（Python爬虫入门）-Go语言中文社区...

今天我们来看一看使用Python爬取一些简单的网页。所用工具：IDLE (Python 3.6 64-bit) 一. 爬取京东商品页面 ![8d0a127b918867

我会带着你远行/ 2022年10月27日 13:50/ 0 赞/ 279 阅读

相关 Python爬虫实战(三):简单爬取网页图片

先上代码: coding=utf-8 import urllib.request for i in range(1,41):

淡淡的烟草味﹌/ 2022年06月09日 10:50/ 0 赞/ 309 阅读

相关 python爬虫实践----爬取京东图片

爬虫思路： 1.分析url: http://list.jd.com/list.html?cat=9987,653,655&page=1 url

╰+攻爆jí腚メ/ 2022年06月08日 02:16/ 0 赞/ 338 阅读

相关 Python爬虫爬取动态网页

系统环境：操作系统：Windows8.1专业版 64bit Python：anaconda、Python2.7 Py

迈不过友情╰/ 2022年05月26日 11:48/ 0 赞/ 437 阅读

相关 node：爬虫爬取网页图片

> 代码地址如下： > [http://www.demodashi.com/demo/13845.html][http_www.demodashi.com_demo_138

素颜马尾好姑娘i/ 2022年05月11日 04:36/ 0 赞/ 330 阅读

相关 Python爬取网页的图片数据

本案例是基于PyCharm开发的，也可以使用idea。 [在项目内新建一个python文件TestCrawlers.py][python_TestCrawlers.py]

你的名字/ 2022年04月18日 06:29/ 0 赞/ 314 阅读

相关 python爬虫程序，爬取网页图片

一段简单的爬取网页图片的python代码 coding=utf-8 import urllib import re url

- 日理万妓/ 2022年04月04日 15:14/ 0 赞/ 377 阅读

相关 python网络爬虫&&爬取图片

爬取学院官网数据 from urllib.request import 导入所有request urllib文件夹，request只是里面的一个模块

绝地灬酷狼/ 2021年12月13日 01:01/ 0 赞/ 491 阅读

相关 python爬取网页文本、图片

从网页爬取文本信息： eg:从[http://computer.swu.edu.cn/s/computer/kxyj2xsky/][http_computer.swu.

蔚落/ 2021年12月10日 07:37/ 0 赞/ 439 阅读

相关爬取网页图片

下载表情包吧指定网页的所有图片 #coding:utf-8 import urllib.request import urllib.parse import urlli...

系统管理员/ 2021年05月03日 05:44/ 0 赞/ 655 阅读