秀人集爬虫 【21.9.21】【Windows】

xiurenji.exe 可执行文件名称
帮助:
-h 显示帮助说明
必选参数:
-a 整站爬取
-q 搜索爬取,针对关键字搜索之后对于搜索结果页进行爬取
可选参数:
-p 指定下载目录,默认下载路径为当前exe所在目录下的images文件夹
-s 指定服务器地址,例如:http://www.xiurenji.vip url不要带最后的/

更新日志:

增加-s 参数支持:
-s 指定服务器地址,例如:http://www.xiurenji.vip url不要带最后的/

执行效果:

PS F:\Pycharm_Projects\meitulu-spider> python .\xiurenji.py -a -s https://www.xiurenji.vip
****************************************************************************************************
       _           _             ____
  ___ | |__   __ _| |__  _   _  / __ \ _ __ ___   __ _ _ __ ___
 / _ \| '_ \ / _` | '_ \| | | |/ / _` | '_ ` _ \ / _` | '__/ __|
| (_) | |_) | (_| | |_) | |_| | | (_| | | | | | | (_| | |  \__ \
 \___/|_.__/ \__,_|_.__/ \__, |\ \__,_|_| |_| |_|\__,_|_|  |___/
                         |___/  \____/

秀人集爬虫
Verson: 21.9.21
Blog: http://www.h4ck.org.cn
****************************************************************************************************
****************************************************************************************************
[*] 2021-09-21 22:31:38 CAT: 开始分析分类信息......
[*] 2021-09-21 22:31:38 秀人网: https://www.xiurenji.vip/XiuRen/
[*] 2021-09-21 22:31:38 模范学院: https://www.xiurenji.vip/MFStar/
[*] 2021-09-21 22:31:38 魅妍社: https://www.xiurenji.vip/MiStar/
[*] 2021-09-21 22:31:38 美媛馆: https://www.xiurenji.vip/MyGirl/
[*] 2021-09-21 22:31:38 爱蜜社: https://www.xiurenji.vip/IMiss/
[*] 2021-09-21 22:31:38 尤物馆: https://www.xiurenji.vip/YouWu/
[*] 2021-09-21 22:31:38 嗲囡囡: https://www.xiurenji.vip/FeiLin/
[*] 2021-09-21 22:31:38 蜜桃社: https://www.xiurenji.vip/MiiTao/
[*] 2021-09-21 22:31:38 尤蜜荟: https://www.xiurenji.vip/YouMi/
[*] 2021-09-21 22:31:38 画语界: https://www.xiurenji.vip/XiaoYu
[*] 2021-09-21 22:31:38 花漾: https://www.xiurenji.vip/HuaYang
[*] 2021-09-21 22:31:38 星颜社: https://www.xiurenji.vip/XingYan
[*] 2021-09-21 22:31:38 CAT: 分析完成,分类数:12
****************************************************************************************************
****************************************************************************************************
[*] 2021-09-21 22:31:38 CAT: 开始处理分类:秀人网
https://www.xiurenji.vip/XiuRen/index2.html
****************************************************************************************************
[*] 2021-09-21 22:31:38 PAGE: 开始分析页面链接
[*] 2021-09-21 22:31:38 DOWNLOAD: 开始下载:[XiuRen秀人网]No.3917_模特唐安琪客户经理主题脱职业装露性感肉色内衣完美诱惑写真79P
[*] 2021-09-21 22:31:38 DOWNLOAD: https://www.xiurenji.vip/XiuRen/9167.html
[*] 2021-09-21 22:31:38 DOWNLOAD: 下载目录:[XiuRen秀人网]No.3917_模特唐安琪客户经理主题脱职业装露性感肉色内衣完美诱惑写真79P
[*] 2021-09-21 22:31:38 SKP: 已经存在该目录,跳过。
****************************************************************************************************
[*] 2021-09-21 22:31:38 DOWNLOAD: 开始下载:[XiuRen秀人网]No.3916_模特熊小诺阳朔旅拍紫色连体蕾丝袜开档秀翘臀情迷诱惑写真58P
[*] 2021-09-21 22:31:38 DOWNLOAD: https://www.xiurenji.vip/XiuRen/9166.html
[*] 2021-09-21 22:31:38 DOWNLOAD: 下载目录:[XiuRen秀人网]No.3916_模特熊小诺阳朔旅拍紫色连体蕾丝袜开档秀翘臀情迷诱惑写真58P
[*] 2021-09-21 22:31:39 IMG: 正在下载:https://www.xiurenji.vip/uploadfile/202109/21/EE10546873.jpg
[*] 2021-09-21 22:31:39 IMG: 图片保存路径:G:/秀人集/[XiuRen秀人网]No.3916_模特熊小诺阳朔旅拍紫色连体蕾丝袜开档秀翘臀情迷诱惑写真58P\c3a503846fc2ea0508503d17e3455da2.jpg
[D] 下载进度: ▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊ 100%(439KB/439KB)
[*] 2021-09-21 22:32:38 IMG: 正在下载:https://www.xiurenji.vip/uploadfile/202109/21/2810546813.jpg
[*] 2021-09-21 22:32:38 IMG: 图片保存路径:G:/秀人集/[XiuRen秀人网]No.3916_模特熊小诺阳朔旅拍紫色连体蕾丝袜开档秀翘臀情迷诱惑写真58P\b06461ac6d9d751c23a36a7185d41640.jpg
[D] 下载进度: ▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊ 100%(412KB/412KB)
[*] 2021-09-21 22:33:15 IMG: 正在下载:https://www.xiurenji.vip/uploadfile/202109/21/4510546809.jpg
[*] 2021-09-21 22:33:15 IMG: 图片保存路径:G:/秀人集/[XiuRen秀人网]No.3916_模特熊小诺阳朔旅拍紫色连体蕾丝袜开档秀翘臀情迷诱惑写真58P\38b5791954dc8fa45b0b673caeccbd1e.jpg
[D] 下载进度: ▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊▊                                                      47%(207KB/438KB)

爬取进度:

下载链接:

温馨提示: 此处隐藏内容需要发表评论,并且审核通过后才能查看。
(发表评论请勾选 在此浏览器中保存我的显示名称、邮箱地址和网站地址,以便下次评论时使用。
(请仔细检查自己的昵称和评论内容,以免被识别为垃圾评论而导致无法正常审核。)

2022.01.03更新。如果执行失败请使用新域名https://www.xiurenji.net (-s参数)参考下图:

简单教程:https://weibo.com/tv/show/1034:4673816081924218?from=old_pc_videoshow

旧版本:

http://h4ck.org.cn/2021/06/%E7%A7%80%E4%BA%BA%E9%9B%86%E7%88%AC%E8%99%AB/

 

2022.1.18更新:

页面布局改变,请下载新版本:http://h4ck.org.cn/2022/01/%E7%A7%80%E4%BA%BA%E9%9B%86%E7%88%AC%E8%99%AB-%E3%80%9022-1-18%E3%80%91%E3%80%90windows%E3%80%91/

☆版权☆

* 网站名称:obaby@mars
* 网址:https://h4ck.org.cn/
* 个性:https://oba.by/
* 本文标题: 《秀人集爬虫 【21.9.21】【Windows】》
* 本文链接:https://h4ck.org.cn/2021/09/9036
* 短链接:https://oba.by/?p=9036
* 转载文章请标明文章来源,原文标题以及原文链接。请遵从 《署名-非商业性使用-相同方式共享 2.5 中国大陆 (CC BY-NC-SA 2.5 CN) 》许可协议。


猜你喜欢:

132 comments

  1.  Level 1
    Microsoft Edge 96 Microsoft Edge 96 Windows 10 Windows 10 cn浙江省宁波市 移动

    可以 很赞 6.21不能用了

  2.  Level 1
    Microsoft Edge 96 Microsoft Edge 96 Windows 10 Windows 10 cn浙江省宁波市 移动

    可以 很赞 6.21不能用 还没显示 再评论下

  3. Level 1
    Google Chrome 78 Google Chrome 78 Android 12 Android 12 cn江苏省苏州市 联通

    为什么评论通过了还是看不见下载地址

  4. Level 1
    Google Chrome 78 Google Chrome 78 Android 12 Android 12 cn江苏省苏州市 联通

    可以了 大佬能不能付费定制一下 能不按照网站原目录名下载下来 且不更改图片名呢 这样我上传到服务器替换下地址就能用

    1. 公主 Queen 
      Google Chrome 96 Google Chrome 96 Windows 10 Windows 10 cn山东省青岛市 联通

      sorry,这个东西本身是针对下载之后方便查看的,不是为了复制网站哈~~,如果要实现这个功能可以尝试其他的爬虫工具。暂时不支持定制~~

  5. Level 1
    Google Chrome 80 Google Chrome 80 Windows 10 Windows 10 cn重庆市 重庆有线电视网络有限公司

    大佬能不能做一个这个网站的爬虫啊,感觉比秀人集的资源更全一些!https://www.jpxgmn.net/new.html
    辛苦大佬!

  6. Level 3
    IBrowse r IBrowse r Android 10 Android 10 cn浙江省杭州市上城区 移动

    大佬,昨天秀人集更新以后就拉不了了是啥情况呀

  7. Level 3
    Google Chrome 97 Google Chrome 97 Windows 10 Windows 10 cn安徽省合肥市 电信

    大佬,xiurenji似乎改版了,不能用了,期待更新
    ****************************************************************************************************
    Traceback (most recent call last):
    File “xiurenji.py”, line 376, in
    File “xiurenji.py”, line 366, in main
    File “xiurenji.py”, line 272, in site_crawler
    File “xiurenji.py”, line 98, in get_all_cat_list
    AttributeError: ‘NoneType’ object has no attribute ‘find_all’

  8. Level 1
    Mozilla Compatible Mozilla Compatible iPad iOS 15.2.1 iPad iOS 15.2.1 cn广东省广州市白云区 移动

    学习,,,,,感谢

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注