91发文工具获取图片步骤

布满荆棘的人生 2023-01-20 09:46 69阅读 0赞

### 目录 ###

*  程序目录
 *  获取html内容
 *  提取图片url
 *  url去重并添加域名
 *  上传url到数据库

# 程序目录 #

/home/volume/zidongshengchengwejian/scripts

# 获取html内容 #

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVyYmZseQ_size_16_color_FFFFFF_t_70]

上传的图片存放在图片库中，选择其中一个目录打开，获取html内容。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVyYmZseQ_size_16_color_FFFFFF_t_70 1]

cd /home/volume/zidongshengchengwejian/scripts/outputHttp

拷贝内容粘贴到outputHttp下的文件中，文件名随意，建议a,b,c依次延续  
![在这里插入图片描述][2021051212173544.png]

# 提取图片url #

cd /home/volume/zidongshengchengwejian/scripts/
    rm -rf aa
    python picture.py ./aa  ./outputHttp/

aa 目录为存放爬取后图片路径的目录  
outputHttp 目录为存放原始html内容文件的目录

# url去重并添加域名 #

cat aa/picture | sort | uniq | sed 's/^/http:\/\/member.91huoke.com\//g' > aa/pictures

# 上传url到数据库 #

python3 operate_MySQL.py <USER_ID> <PRODECT_ID> ./aa/pictures

<USER\_ID> 和<PRODECT\_ID>分别对应数据库中的用户ID和产品ID，例如

python3 operate_MySQL.py 19 19 ./aa/pictures

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVyYmZseQ_size_16_color_FFFFFF_t_70]: /images/20221021/ec28c94d20f74b86b3cbc013578d4855.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVyYmZseQ_size_16_color_FFFFFF_t_70 1]: /images/20221021/bd0fe8abf66142f3b23c214566de0214.png
[2021051212173544.png]: /images/20221021/ed43f77f1e964f29bd4b19871baecae2.png

发表评论取消回复

表情：

评论列表（有 0 条评论，69人围观）

还没有评论，来说两句吧...

相关阅读

相关 91笔记

.修改项目的步骤：参考网址：[https://blog.csdn.net/weixin\_44129498/article/details/100183756][ht...

怼烎@/ 2024年04月17日 21:32/ 0 赞/ 94 阅读

相关 2020上半年发文汇总「值得收藏」

![format_png][] 不知不觉，2020年上半年就过去了，感觉也没完成了什么重大的目标。假如上半年混的不好，千万不要气馁！因为：七一建党，八一建军，十一建国

朱雀/ 2023年02月23日 08:44/ 0 赞/ 127 阅读

相关 PHP中用ffmpeg获取视频封面图片详细步骤

PHP中用ffmpeg获取视频封面图片详细步骤 -------------------- 一、环境准备官网下载：[https://ffmpeg.org/down

向右看齐/ 2023年02月14日 15:52/ 0 赞/ 49 阅读

相关 91发文工具获取图片步骤

目录程序目录获取html内容提取图片url url去重并添加域名上传url到数据库程序目录 /home/volum

布满荆棘的人生/ 2023年01月20日 09:46/ 0 赞/ 70 阅读

相关 siege发文脚本

./siege -c 100 -t 50H \ --header "POST /search HTTP/1.1 Accept: image/gif, image

怼烎@/ 2023年01月19日 07:21/ 0 赞/ 42 阅读

相关 java快速获取远程图片_java获取远程图片

/\\ \ \/ package com.test; import java.io.DataInputStream; import java.io.DataOutpu

深藏阁楼爱情的钟/ 2022年10月22日 12:00/ 0 赞/ 223 阅读

相关 91. 解码方法

> 一条包含字母 A-Z 的消息通过以下映射进行了编码： > > 'A' -> 1 > 'B' -> 2 > ... > 'Z' -> 26 > 要解码

柔光的暖阳◎/ 2022年10月09日 00:40/ 0 赞/ 215 阅读

相关信息收集工具exiftool获取图片中的exif信息

简介什么是exif信息呢。 EXIF信息，是可交换图像文件的缩写，是专门为数码相机的照片设定的，可以记录数码照片的属性信息和拍摄数据。EXIF可以附加于JPEG、TI

「爱情、让人受尽委屈。」/ 2022年10月01日 09:42/ 0 赞/ 233 阅读

相关 leetcode 91. Decode Ways | 91. 解码方法（动态规划）

题目 [https://leetcode.com/problems/decode-ways/][https_leetcode.com_problems_decode-wa

不念不忘少年蓝@/ 2022年09月06日 00:17/ 0 赞/ 239 阅读

相关实时错误91

![20190219092842969.png][] 一，前言：在做学生系统的时候经常会遇到“实时错误‘91’”这个错误，我们亲切的称呼它为“夺命91”，这

以你之姓@/ 2022年03月18日 03:39/ 0 赞/ 332 阅读