性感美女爬虫 Windows【22.01.26】

2022年1月24日 84 条评论

我增加了几个重要的参数：
****************************************************************************************************
USAGE:
spider -h <help> -a <all> -q <search>
Arguments:
         -a <download all site images>
         -q <query the image with keywords>
         -h <display help text, just this>
Option Arguments:
         -p <image download path>
         -r <random index category list> （该参数会重新排列分类列表，可以开启多个进程同时进行爬取）
         -c <single category url> （支持单分类爬取，如果只想爬取某一个分类请使用该参数）
         -s <site url eg: http://www.xiurenji.vip (no last backslash "/")>
****************************************************************************************************

更新日志：

22.1.24
1.增加-r参数，支持分类重拍，可以开启多个进程进行爬取。说实话就是姐姐太懒了，不想写多线程。
2.增加-c参数，支持爬取特定分类，请直接-c 分类地址。具体参数见下方使用说明。
22.1.26
1.调整timeout参数
2.增加加载失败重试逻辑

效果：

C:\Users\obaby>F:\Pycharm_Projects\sexy_girl_spider\dist\sexy_girl_spider\sexy_girl_spider.exe -a -r
****************************************************************************************************
       _           _             ____
  ___ | |__   __ _| |__  _   _  / __ \ _ __ ___   __ _ _ __ ___
 / _ \| '_ \ / _` | '_ \| | | |/ / _` | '_ ` _ \ / _` | '__/ __|
| (_) | |_) | (_| | |_) | |_| | | (_| | | | | | | (_| | |  \__ \
 \___/|_.__/ \__,_|_.__/ \__, |\ \__,_|_| |_| |_|\__,_|_|  |___/
                         |___/  \____/

性感美女 爬虫
Verson: 22.01.24
Blog: http://www.h4ck.org.cn
****************************************************************************************************
****************************************************************************************************
[*] 2022-01-24 21:45:55 CAT: 开始分析分类信息......
[*] 2022-01-24 21:45:55 CAT: 分析完成，分类数:53
****************************************************************************************************
[*] 2022-01-24 21:45:55 CAT: 重新排列分类信息
[*] 2022-01-24 21:45:55 薄荷叶: https://www.jpxgmn.net/MintYe/
[*] 2022-01-24 21:45:55 嗲囡囡: https://www.jpxgmn.net/FeiLin/
[*] 2022-01-24 21:45:55 画语界: https://www.jpxgmn.net/XiaoYu/
[*] 2022-01-24 21:45:55 国产美女: https://www.jpxgmn.net/Guochanmeinv/
[*] 2022-01-24 21:45:55 艺图语: https://www.jpxgmn.net/Yituyu/
[*] 2022-01-24 21:45:55 推女郎: https://www.jpxgmn.net/Tuigirl/
[*] 2022-01-24 21:45:55 瑞丝馆: https://www.jpxgmn.net/Micat/
[*] 2022-01-24 21:45:55 猎女神: https://www.jpxgmn.net/Slady/
[*] 2022-01-24 21:45:55 秀人系列: https://www.jpxgmn.net/xiuren.html
[*] 2022-01-24 21:45:55 性感尤物: https://www.jpxgmn.net/Xgyw/
[*] 2022-01-24 21:45:55 尤蜜荟: https://www.jpxgmn.net/YouMi/
[*] 2022-01-24 21:45:55 Artgravia: https://www.jpxgmn.net/Artgravia/
[*] 2022-01-24 21:45:55 优星馆: https://www.jpxgmn.net/Uxing/
[*] 2022-01-24 21:45:55 蜜丝: https://www.jpxgmn.net/MissLeg/
[*] 2022-01-24 21:45:55 丝袜美腿: https://www.jpxgmn.net/Siwameitui/
[*] 2022-01-24 21:45:55 尤物馆: https://www.jpxgmn.net/YouWu/
[*] 2022-01-24 21:45:55 Ysweb: https://www.jpxgmn.net/Ysweb/
[*] 2022-01-24 21:45:55 兔几盟: https://www.jpxgmn.net/Tukmo/
[*] 2022-01-24 21:45:55 花漾: https://www.jpxgmn.net/HuaYang/
[*] 2022-01-24 21:45:55 妖精社: https://www.jpxgmn.net/YaoJingShe/
[*] 2022-01-24 21:45:55 丝袜美腿: https://www.jpxgmn.net/Siwameitui/
[*] 2022-01-24 21:45:55 尤果网: https://www.jpxgmn.net/Ugirls/
[*] 2022-01-24 21:45:55 顽味生活: https://www.jpxgmn.net/Taste/
[*] 2022-01-24 21:45:55 头条女神: https://www.jpxgmn.net/TouTiao/
[*] 2022-01-24 21:45:55 网红馆: https://www.jpxgmn.net/Candy/
[*] 2022-01-24 21:45:55 内衣尤物: https://www.jpxgmn.net/Neiyiyouwu/
[*] 2022-01-24 21:45:55 喵糖映画: https://www.jpxgmn.net/Mtcos/
[*] 2022-01-24 21:45:55 蜜桃社: https://www.jpxgmn.net/MiiTao/
[*] 2022-01-24 21:45:55 尤蜜: https://www.jpxgmn.net/YouMei/
[*] 2022-01-24 21:45:55 花の颜: https://www.jpxgmn.net/Huayan/
[*] 2022-01-24 21:45:55 港台美女: https://www.jpxgmn.net/Gangtaimeinv/
[*] 2022-01-24 21:45:55 御女郎: https://www.jpxgmn.net/DKGirl/
[*] 2022-01-24 21:45:55 波萝社: https://www.jpxgmn.net/BoLoli/
[*] 2022-01-24 21:45:55 丝袜美腿: https://www.jpxgmn.net/siwameitui.html
[*] 2022-01-24 21:45:55 模特联盟: https://www.jpxgmn.net/Mtmeng/
[*] 2022-01-24 21:45:55 星颜社: https://www.jpxgmn.net/XingYan/
[*] 2022-01-24 21:45:55 名站系列: https://www.jpxgmn.net/mingzhan.html
[*] 2022-01-24 21:45:55 日韩美女: https://www.jpxgmn.net/Rihanmeinv/
[*] 2022-01-24 21:45:55 美媛馆: https://www.jpxgmn.net/MyGirl/
[*] 2022-01-24 21:45:55 爱蜜社: https://www.jpxgmn.net/IMiss/
[*] 2022-01-24 21:45:55 潘多拉: https://www.jpxgmn.net/Pdl/
[*] 2022-01-24 21:45:55 青豆客: https://www.jpxgmn.net/Tgod/
[*] 2022-01-24 21:45:55 Cosplay: https://www.jpxgmn.net/Cosplay/
[*] 2022-01-24 21:45:55 模范学院: https://www.jpxgmn.net/MFStar/
[*] 2022-01-24 21:45:55 果团网: https://www.jpxgmn.net/Girlt/
[*] 2022-01-24 21:45:55 影私荟: https://www.jpxgmn.net/WingS/
[*] 2022-01-24 21:45:55 魅妍社: https://www.jpxgmn.net/MiStar/
[*] 2022-01-24 21:45:55 美腿宝贝: https://www.jpxgmn.net/LEGBABY/
[*] 2022-01-24 21:45:55 欧美美女: https://www.jpxgmn.net/Oumeimeinv/
[*] 2022-01-24 21:45:55 星乐园: https://www.jpxgmn.net/LeYuan/
[*] 2022-01-24 21:45:55 爱尤物: https://www.jpxgmn.net/Aiyouwu/
[*] 2022-01-24 21:45:55 秀人网: https://www.jpxgmn.net/Xiuren/
[*] 2022-01-24 21:45:55 精品散图: https://www.jpxgmn.net/jingpin.html
[*] 2022-01-24 21:45:55 CAT: 重新索引完成，分类数:53
****************************************************************************************************
****************************************************************************************************
[*] 2022-01-24 21:45:55 CAT: 开始处理分类：薄荷叶
***************************************************************************************************
C:\Users\obaby>F:\Pycharm_Projects\sexy_girl_spider\dist\sexy_girl_spider\sexy_girl_spider.exe -a -r
****************************************************************************************************
       _           _             ____
  ___ | |__   __ _| |__  _   _  / __ \ _ __ ___   __ _ _ __ ___
 / _ \| '_ \ / _` | '_ \| | | |/ / _` | '_ ` _ \ / _` | '__/ __|
| (_) | |_) | (_| | |_) | |_| | | (_| | | | | | | (_| | |  \__ \
 \___/|_.__/ \__,_|_.__/ \__, |\ \__,_|_| |_| |_|\__,_|_|  |___/
                         |___/  \____/

性感美女 爬虫
Verson: 22.01.24
Blog: http://www.h4ck.org.cn
****************************************************************************************************
****************************************************************************************************
[*] 2022-01-24 21:46:34 CAT: 开始分析分类信息......
[*] 2022-01-24 21:46:34 CAT: 分析完成，分类数:53
****************************************************************************************************
[*] 2022-01-24 21:46:34 CAT: 重新排列分类信息
[*] 2022-01-24 21:46:34 妖精社: https://www.jpxgmn.net/YaoJingShe/
[*] 2022-01-24 21:46:34 欧美美女: https://www.jpxgmn.net/Oumeimeinv/
[*] 2022-01-24 21:46:34 果团网: https://www.jpxgmn.net/Girlt/
[*] 2022-01-24 21:46:34 蜜桃社: https://www.jpxgmn.net/MiiTao/
[*] 2022-01-24 21:46:34 星颜社: https://www.jpxgmn.net/XingYan/
[*] 2022-01-24 21:46:34 Artgravia: https://www.jpxgmn.net/Artgravia/
[*] 2022-01-24 21:46:34 精品散图: https://www.jpxgmn.net/jingpin.html
[*] 2022-01-24 21:46:34 画语界: https://www.jpxgmn.net/XiaoYu/
[*] 2022-01-24 21:46:34 Cosplay: https://www.jpxgmn.net/Cosplay/
[*] 2022-01-24 21:46:34 美腿宝贝: https://www.jpxgmn.net/LEGBABY/
[*] 2022-01-24 21:46:34 头条女神: https://www.jpxgmn.net/TouTiao/
[*] 2022-01-24 21:46:34 网红馆: https://www.jpxgmn.net/Candy/
[*] 2022-01-24 21:46:34 尤蜜: https://www.jpxgmn.net/YouMei/
[*] 2022-01-24 21:46:34 秀人系列: https://www.jpxgmn.net/xiuren.html
[*] 2022-01-24 21:46:34 爱蜜社: https://www.jpxgmn.net/IMiss/
[*] 2022-01-24 21:46:34 嗲囡囡: https://www.jpxgmn.net/FeiLin/
[*] 2022-01-24 21:46:34 推女郎: https://www.jpxgmn.net/Tuigirl/
[*] 2022-01-24 21:46:34 模范学院: https://www.jpxgmn.net/MFStar/
[*] 2022-01-24 21:46:34 星乐园: https://www.jpxgmn.net/LeYuan/
[*] 2022-01-24 21:46:34 薄荷叶: https://www.jpxgmn.net/MintYe/
[*] 2022-01-24 21:46:34 兔几盟: https://www.jpxgmn.net/Tukmo/
[*] 2022-01-24 21:46:34 尤果网: https://www.jpxgmn.net/Ugirls/
[*] 2022-01-24 21:46:34 秀人网: https://www.jpxgmn.net/Xiuren/
[*] 2022-01-24 21:46:34 影私荟: https://www.jpxgmn.net/WingS/
[*] 2022-01-24 21:46:34 美媛馆: https://www.jpxgmn.net/MyGirl/
[*] 2022-01-24 21:46:34 御女郎: https://www.jpxgmn.net/DKGirl/
[*] 2022-01-24 21:46:34 丝袜美腿: https://www.jpxgmn.net/siwameitui.html
[*] 2022-01-24 21:46:34 波萝社: https://www.jpxgmn.net/BoLoli/
[*] 2022-01-24 21:46:34 Ysweb: https://www.jpxgmn.net/Ysweb/
[*] 2022-01-24 21:46:34 艺图语: https://www.jpxgmn.net/Yituyu/
[*] 2022-01-24 21:46:34 丝袜美腿: https://www.jpxgmn.net/Siwameitui/
[*] 2022-01-24 21:46:34 喵糖映画: https://www.jpxgmn.net/Mtcos/
[*] 2022-01-24 21:46:34 国产美女: https://www.jpxgmn.net/Guochanmeinv/
[*] 2022-01-24 21:46:34 魅妍社: https://www.jpxgmn.net/MiStar/
[*] 2022-01-24 21:46:34 模特联盟: https://www.jpxgmn.net/Mtmeng/
[*] 2022-01-24 21:46:34 潘多拉: https://www.jpxgmn.net/Pdl/
[*] 2022-01-24 21:46:34 瑞丝馆: https://www.jpxgmn.net/Micat/
[*] 2022-01-24 21:46:34 尤蜜荟: https://www.jpxgmn.net/YouMi/
[*] 2022-01-24 21:46:34 性感尤物: https://www.jpxgmn.net/Xgyw/
[*] 2022-01-24 21:46:34 内衣尤物: https://www.jpxgmn.net/Neiyiyouwu/
[*] 2022-01-24 21:46:34 港台美女: https://www.jpxgmn.net/Gangtaimeinv/
[*] 2022-01-24 21:46:34 爱尤物: https://www.jpxgmn.net/Aiyouwu/
[*] 2022-01-24 21:46:34 尤物馆: https://www.jpxgmn.net/YouWu/
[*] 2022-01-24 21:46:34 蜜丝: https://www.jpxgmn.net/MissLeg/
[*] 2022-01-24 21:46:34 日韩美女: https://www.jpxgmn.net/Rihanmeinv/
[*] 2022-01-24 21:46:34 青豆客: https://www.jpxgmn.net/Tgod/
[*] 2022-01-24 21:46:34 猎女神: https://www.jpxgmn.net/Slady/
[*] 2022-01-24 21:46:34 名站系列: https://www.jpxgmn.net/mingzhan.html
[*] 2022-01-24 21:46:34 花漾: https://www.jpxgmn.net/HuaYang/
[*] 2022-01-24 21:46:34 丝袜美腿: https://www.jpxgmn.net/Siwameitui/
[*] 2022-01-24 21:46:34 花の颜: https://www.jpxgmn.net/Huayan/
[*] 2022-01-24 21:46:34 顽味生活: https://www.jpxgmn.net/Taste/
[*] 2022-01-24 21:46:34 优星馆: https://www.jpxgmn.net/Uxing/
[*] 2022-01-24 21:46:34 CAT: 重新索引完成，分类数:53
****************************************************************************************************
****************************************************************************************************
[*] 2022-01-24 21:46:34 CAT: 开始处理分类：妖精社
https://www.jpxgmn.net/YaoJingShe/page_2.html
****************************************************************************************************
[*] 2022-01-24 21:46:34 PAGE: 开始分析页面链接
[*] 2022-01-24 21:46:34 DOWNLOAD: 开始下载：[妖精社]B2116_模特思文浴室宝宝主题私房薄透连体黑丝秀火辣身材撩人诱惑写真59P
[*] 2022-01-24 21:46:34 DOWNLOAD: https://www.jpxgmn.net/YaoJingShe/YaoJingShe20746.html
[*] 2022-01-24 21:46:34 DOWNLOAD: 下载目录：[妖精社]B2116_模特思文浴室宝宝主题私房薄透连体黑丝秀火辣身材撩人诱惑写真59P
[*] 2022-01-24 21:46:37 IMG: 正在下载:https://www.jpxgmn.net/uploadfile/202201/24/D813645114.jpg
[*] 2022-01-24 21:46:37 IMG: 图片保存路径:G:/xgmn/[妖精社]B2116_模特思文浴室宝宝主题私房薄透连体黑丝秀火辣身材撩人诱惑写真59P\04ad9be6dc46a8c238afbd7b29f6cf8e.jpg

文件哈希：

名称: sexy_girl_spider_20.01.24.7z
大小: 6620441 字节 (6465 KiB)
CRC32: C3EDE382
CRC64: FA621AFE36A74174
SHA256: 109b7cee5aa38f3fc6399a17b99b86efaeb7ff551877b900bfe706a8f83ab3bb
SHA1: a4d1898dad721e0b7b4f4998d409e89a0282491a
BLAKE2sp: 6d6aa995d5e26aa51230fa8d6673d4f8ea8e33bbb026a55b0e8f51cf7ff65836

名称: sexy_girl_spider_22.01.26.7z
大小: 6620686 字节 (6465 KiB)
CRC32: EAB83508
CRC64: AC2D8733A36A7F60
SHA256: 9cdabbe13d07ed9a50f48911913459d2659bfec82da72dba051de3e2f8a81283
SHA1: 6507f43905c517e7373d41c859b7dc385663da83
BLAKE2sp: 27b7677d85f68dde5a346a8e280a846043c48f44133a9876ff7c3c14ea9a7a41

下载地址：

温馨提示: 此处隐藏内容需要发表评论，并且审核通过后才能查看。
（发表评论请勾选 在此浏览器中保存我的显示名称、邮箱地址和网站地址，以便下次评论时使用。）
（请仔细检查自己的昵称和评论内容，以免被识别为垃圾评论而导致无法正常审核。）

进度22.01.26：

进度22.01.28：

进度22.02.07：

进度22.02.12：

爬去过程中为了避免网络超时导致异常停止可以使用下面的脚本启动：

echo "Start spider"
title "sexy girl spider"
echo off
:loop
F:\Pycharm_Projects\sexy_girl_spider\dist\sexy_girl_spider\sexy_girl_spider.exe -a -r //修改这一行对应的路径
goto :loop

下载效果：

☆版权☆

* 网站名称：obaby@mars
* 网址：https://obaby.org.cn/
* 个性：https://oba.by/
* 本文标题：《性感美女爬虫 Windows【22.01.26】》
* 本文链接：https://obaby.org.cn/2022/01/9800
* 短链接：https://oba.by/?p=9800
* 转载文章请标明文章来源，原文标题以及原文链接。请遵从《署名-非商业性使用-相同方式共享 2.5 中国大陆 (CC BY-NC-SA 2.5 CN) 》许可协议。

spider 爬虫

Previous Post Next Post

obaby

爱好广泛的火星小妖精，有问题欢迎留言交流啊~(✪ω✪) 爬虫类工具请先点击这个链接查看用法https://oba.by/?p=12240 闺蜜圈APP下载 https://guimiquan.cn

84 comments

yu说道：

2022年2月24日 16:22

Android Webkit Android 8.0 中国–广东–佛山移动
感谢大佬

回复
大佬牛逼说道：

2022年2月27日 00:09

Microsoft Edge 100 Windows 10 中国–新疆–乌鲁木齐电信
感谢大佬

回复
hebangle说道：

2022年2月28日 21:24

WebView 4 Android 11 中国–安徽–黄山移动
我试试，谢了

回复
玉墨说道：

2022年3月3日 15:46

Google Chrome 98 Windows 10 中国–吉林移动/全省通用
感谢好兄弟，谢谢

回复
moyu0235说道：

2022年3月4日 20:04

Google Chrome 98 Windows 10 中国–吉林–长春电信/吉林大学
第一次使用爬虫，希望一切顺利

回复
电子爬山虎说道：

2022年3月7日 22:39

Google Chrome 78 Android 11 中国–天津–天津联通
给大神点赞

回复
haha说道：

2022年3月11日 17:25

Microsoft Edge 99 Windows 10 中国–辽宁–沈阳联通
感谢分享

回复
3Q说道：

2022年3月11日 17:28

Microsoft Edge 99 Windows 10 中国–辽宁–沈阳联通
太棒了，谢谢！

回复
ff说道：

2022年3月11日 17:57

Microsoft Edge 99 Windows 10 中国–辽宁–沈阳联通
老版本就不错了，帮忙开通权限体验下新版本，THX

回复
测试杆说道：

2022年3月12日 21:37

Google Chrome 96 Windows 10 中国–安徽–合肥–蜀山区电信
载来看看

回复
老猫说道：

2022年3月16日 23:31

Internet Explorer 11 Windows 10 中国–河北–石家庄–辛集市广电网
这是新版么，感谢

回复
1说道：

2022年3月20日 08:43

Microsoft Edge 99 Windows 10 中国–广东–广州移动
牛

回复
ansuu说道：

2022年3月21日 13:24

Google Chrome 86 Windows 10 中国–山东–淄博联通
下载来看看

回复
929126693说道：

2022年3月23日 16:27

Google Chrome 96 Windows 10 中国–湖北–荆州电信
这是啥啊，看看再说

回复
Joker说道：

2022年3月24日 15:00

Google Chrome 86 Windows 10 中国–江苏–常州–溧阳市电信
感谢技术大佬

回复
aLIEz说道：

2022年3月25日 09:30

WebView 4 Android 11 中国–江苏–南京电信
感谢技术大佬

回复
1433223说道：

2022年3月26日 23:06

UC Browser 13 Android 10 中国–江苏移动/数据上网公共出口
感谢

回复
ddai说道：

2022年3月31日 16:23

QQbrowser 10 Windows 10 中国–广西移动/数据上网公共出口
感谢技术大佬

回复
莫莫说道：

2022年4月3日 21:22

Microsoft Edge 99 Windows 10 中国–广东–深圳电信
你好，看到您的文章，非常感兴趣，不知如何下载执行文件？

回复
三金说道：

2022年4月5日 19:52

Google Chrome 99 Windows 10 中国–湖南–长沙电信
大佬牛逼！

回复
779556215说道：

2022年4月6日 18:07

Google Chrome 95 Windows 10 中国–广东–广州–荔湾区电信
lsp 哈哈

回复
1. obaby说道：
  
  2022年4月6日 18:14
  
  美国
  lsp是什么意思啊？
  
  回复
百度一下说道：

2022年4月8日 11:04

Microsoft Edge 100 Windows 10 中国–吉林–辽源电信
大佬牛逼

回复
lkc说道：

2022年4月8日 16:24

Google Chrome 76 Android 10 中国–黑龙江–哈尔滨电信
测试

回复
1. obaby说道：
  
  2022年4月8日 16:41
  
  Google Chrome 98 Mac OS X 10.15 中国–山东–青岛移动
  测试完了给测试报告吗？
  
  回复
百度一下说道：

2022年4月10日 03:49

Microsoft Edge 100 Windows 10 中国–吉林–辽源电信
大佬，有个小问题，下载得评论，评论得审核，审核时间不知道，网页也不能一直不关闭，再来的时候，就得从新评论，完了就是上面的流程再来一次。哈哈

回复
1. obaby说道：
  
  2022年4月10日 08:54
  
  Google Chrome 100 Android 10 中国–山东–临沂联通
  勾选保存信息那个复选框，会在本地cookie记录填写信息。如果没有出现下载页面切换下评论页。刷新一下。
  
  回复
obaby说道：

2022年4月11日 22:22
Google Chrome 100 Windows 10 中国–山东–临沂联通
每日一更~~

不能下载的注意几个参数：
1. 域名 -s
2. 下载路径 -p
务必保证上面两个改成自己能访问的。
回复
胡椒面说道：

2022年5月5日 13:26

Google Chrome 86 Windows 10 中国–上海–上海–嘉定区电信
感谢大佬！能成的话就省了好多的功夫和时间了

回复
alvvv说道：

2022年6月17日 17:37

Google Chrome 102 Windows 10 中国–上海–上海–虹口区电信
感谢大佬！

回复
longchen说道：

2022年7月15日 17:21

Google Chrome 101 Windows 10 中国–福建–厦门电信
学习学习

回复
jj说道：

2022年9月21日 15:35

Google Chrome 105 Mac OS X 10.15 中国–辽宁–大连联通
lsp 点赞

回复
HH说道：

2022年10月6日 03:08

Google Chrome 102 Windows 10 中国–浙江–杭州移动
感谢大佬！

回复