.:. 草榴社區 » 技術討論區 » 无聊写了个爬虫软件,爬取秀人网妹子图,下载到本地,谁也无法阻挡我欣赏艺术的脚步[24P]
--> 本頁主題: 无聊写了个爬虫软件,爬取秀人网妹子图,下载到本地,谁也无法阻挡我欣赏艺术的脚步[24P] 字體大小 寬屏顯示 只看樓主 最新點評 熱門評論 時間順序
erguotou345


級別:俠客 ( 9 )
發帖:509
威望:238 點
金錢:679 USD
貢獻:22 點
註冊:2020-04-30


无聊写了个爬虫软件,爬取秀人网妹子图,下载到本地,谁也无法阻挡我欣赏艺术的脚步[24P]



版主大大手下留情,如果违规请删掉帖子,请不要关我小黑屋,谢谢大大~
先来点福利图,这就是下载的图片,无漏点~不喜勿喷谢谢~
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

个人的口味,偶尔欣赏一些不漏点的图片,也习惯下载到本地,这样看的时候也不用等图片加载了,。
之前分享过一次自己写的爬虫软件,htm_data/2107/7/4581594.html 爬取一个网站的图片下载到本地,结果呢,聚聚们可能用力过猛,一个月那个网站就倒闭了。(我刚刚登陆那个网站,发现又好了,不过图片都是16年的了)
后来我也在陆陆续续的找了几个网站,要么就要充VIP,要么就更新不及时。最近找到了个不错的网站,更新还挺快,也适合图片下载。
https://www.bdsmcn.com/category/xr/xiuren
然后呢,就写了个小爬虫,把前50页的东西都下载了,大约20G,另一个电脑爬了后50页,失效的挺多的,大约15个G吧(说G就不吧,文明你我他)。
先展示下成果。
 
 
 
 
这就是爬虫,软件运行之后呢,
 
这里的四位数字应该都会填写吧?输入完按回车
 
设计思路就是,先获取下列表,输入1回车,爬完之后呢,会在软件的目录下面建一个download文件夹,软件会自动退出。
 
 
然后呢,再启动下软件,然后输入2,回车,这个是多线程下载的,大约就是说,同时下载几十个页面,速度卡卡的。多线程选择100就可以,当然可能出现卡顿,卡的话呢,自己改一下多线程数量就可以了。
 
下载完成呢,打开download目录,就开始吧~(图片有点刺激,稍微等我三分钟)
 
我回来了~
然后呢,我也是挺喜欢这个网站的,毕竟可以白嫖嘛,所以软件呢,我就只允许爬取前10页的图片了。差不多240个主题呢~ 因为大家下载的多了,给妹子图片网站的压力就大,没多久网站就倒闭了,不好不好。所以大家不要用力过猛,容易弄疼妹子。
然后呢,我把所有我下载的图片上传到度盘了,总共100页的图片,三十多个G,山水画鉴赏,每部分都可以单独下载解压。

所有压缩文件都加了密码,是社区四位数字,请不要在线解压,谢谢。
爬虫软件地址:
链接:https://pan.baidu.com/s/1-tmo6Cib4v9EQuaeCYaGMg
提取码:b9j9
(上传就失效了,名字wei gui了,度盘牛逼!)

4:
链接:https://pan.baidu.com/s/1ADTsYrsJr6yBVJiX1D9PMA
提取码:2snq
5:
链接:https://pan.baidu.com/s/1PQqvY8-Z97LtuhAdR_Zf0Q
提取码:auvy
6.
链接:https://pan.baidu.com/s/1vM16lcYMVODXaU1CwD7JcA
提取码:oljw
7.
链接:https://pan.baidu.com/s/1NnKs6EYw4ZKN8mQmLCYZUQ
提取码:60pe
8.
链接:https://pan.baidu.com/s/1wPefvOiiqwZTA9LuGE3JSQ
提取码:qe9y
9.
链接:https://pan.baidu.com/s/1iTG1z3a-HetFAl6tHjlOIQ
提取码:0elk
10.
链接:https://pan.baidu.com/s/10HpsuLI_dveLWkZwutWvQw
提取码:196s

PS:想起来个问题,有可能会因为网络原因断掉,但是呢,我在文件夹里面加了个2.txt文件,就是说本资源已经下载完了,不会再次下载。
所以断开的话,重新运行软件,输入2继续下载就OK了。

PS单独下载也是只支持我说的这个网站里的网页,不支持其他网站。

补个链接:
1.链接: https://pan.baidu.com/s/1Q91lNP_y5gDTdY1g8fSARQ 提取码: n7l0
2.链接: https://pan.baidu.com/s/1tMXdWI5METtN7kWw7ePQoA 提取码: hiob
3.链接: https://pan.baidu.com/s/1SPzS01-Nz23drMwmSC5uUw 提取码: 0qe9


[ 此貼被erguotou345在2022-06-18 17:04重新編輯 ]

赞(74)
TOP Posted:2022-06-04 17:41 樓主 引用 | 發表評論
爱喝凉水的树


級別:風雲使者 ( 13 )
發帖:9491
威望:951 點
金錢:1049 USD
貢獻:222222 點
註冊:2015-07-29


紐幣大了


點評

    TOP Posted:2022-06-04 17:42 #1樓 引用 | 點評
    猎人不孤独


    級別:俠客 ( 9 )
    發帖:1213
    威望:256 點
    金錢:184 USD
    貢獻:2 點
    註冊:2022-01-08

    感谢分享!


    點評

      TOP Posted:2022-06-04 17:43 #2樓 引用 | 點評
      天使狩猎区


      級別:聖騎士 ( 11 )
      精華:1
      發帖:1099
      威望:250 點
      金錢:1021483 USD
      貢獻:25011 點
      註冊:2015-06-24

      我去,上个月求助区还有人求这个东西
      ------------------------
      L


      點評

        TOP Posted:2022-06-04 17:45 #3樓 引用 | 點評
        andy凉介


        級別:新手上路 ( 8 )
        發帖:340
        威望:38 點
        金錢:125 USD
        貢獻:0 點
        註冊:2012-02-16

        1024
        TOP Posted:2022-06-04 17:46 #4樓 引用 | 點評
        woaipiao88


        級別:俠客 ( 9 )
        發帖:936
        威望:101 點
        金錢:14911278 USD
        貢獻:705 點
        註冊:2011-09-21

        1024
        TOP Posted:2022-06-04 17:50 #5樓 引用 | 點評
        tornes


        級別:新手上路 ( 8 )
        發帖:89
        威望:9 點
        金錢:99 USD
        貢獻:0 點
        註冊:2012-01-11

        1024
        TOP Posted:2022-06-04 17:56 #6樓 引用 | 點評
        木子西红柿


        級別:新手上路 ( 8 )
        發帖:122
        威望:13 點
        金錢:154 USD
        貢獻:0 點
        註冊:2022-04-29

        太牛了,平时都用手机的,用不了啊,也就看看,哇塞一声
        TOP Posted:2022-06-04 17:58 #7樓 引用 | 點評
        快让我学习


        級別:聖騎士 ( 11 )
        發帖:1283
        威望:129 點
        金錢:165435 USD
        貢獻:30000 點
        註冊:2020-07-02

        你把下载的时间间隔调大点,服务器不会遭不住的
        TOP Posted:2022-06-04 17:58 #8樓 引用 | 點評
        渔夫捕鱼


        級別:新手上路 ( 8 )
        發帖:122
        威望:13 點
        金錢:101310 USD
        貢獻:86 點
        註冊:2011-06-06

        感谢分享!
        TOP Posted:2022-06-04 18:01 #9樓 引用 | 點評
        想带上你私奔


        級別:騎士 ( 10 )
        發帖:2601
        威望:266 點
        金錢:2417286 USD
        貢獻:9062 點
        註冊:2018-11-02

        露点才是王道
        TOP Posted:2022-06-04 18:07 #10樓 引用 | 點評
        蓝色渊源


        級別:新手上路 ( 8 )
        發帖:595
        威望:60 點
        金錢:22 USD
        貢獻:0 點
        註冊:2007-10-02


        1024
        TOP Posted:2022-06-04 18:08 #11樓 引用 | 點評
        斗木


        級別:騎士 ( 10 )
        發帖:4880
        威望:357 點
        金錢:13104 USD
        貢獻:300 點
        註冊:2020-12-31

        牛逼
        TOP Posted:2022-06-04 18:12 #12樓 引用 | 點評
        独孤剑魂


        級別:精靈王 ( 12 )
        發帖:1905
        威望:373 點
        金錢:4334 USD
        貢獻:44444 點
        註冊:2008-04-30

        真大佬,技术贴
        TOP Posted:2022-06-04 18:15 #13樓 引用 | 點評
        新君豪


        級別:聖騎士 ( 11 )
        發帖:5845
        威望:605 點
        金錢:2316 USD
        貢獻:9999 點
        註冊:2022-01-01

        爬虫软件百度盘已失效!!换个盘分享呗,谢谢大佬!
        TOP Posted:2022-06-04 18:16 #14樓 引用 | 點評
        niko3389


        級別:新手上路 ( 8 )
        發帖:404
        威望:41 點
        金錢:418 USD
        貢獻:0 點
        註冊:2013-06-21

        这个很早就有,一点也不稳定,中途挂了还得从来,我后来都自己去写,用IDM批量下


        點評

          TOP Posted:2022-06-04 18:19 #15樓 引用 | 點評
          蛋上有你唇印


          級別:聖騎士 ( 11 )
          發帖:514
          威望:137 點
          金錢:830076 USD
          貢獻:33333 點
          註冊:2022-02-16

          楼上说网盘失效了,楼主快快更新网盘资源,我要爬起来
          TOP Posted:2022-06-04 18:19 #16樓 引用 | 點評
          erguotou345 [樓主]


          級別:俠客 ( 9 )
          發帖:509
          威望:238 點
          金錢:679 USD
          貢獻:22 點
          註冊:2020-04-30


          引用
          引用第14樓新君豪於2022-06-04 18:16發表的 :
          爬虫软件百度盘已失效!!换个盘分享呗,谢谢大佬!

          上传的时候用的“秀人”这个名字,直接wei gui 给我删了,重新上传了


          點評

            TOP Posted:2022-06-04 18:19 #17樓 引用 | 點評
            尋雾啟示


            級別:新手上路 ( 8 )
            發帖:240
            威望:25 點
            金錢:458 USD
            貢獻:0 點
            註冊:2022-05-17

            1024
            TOP Posted:2022-06-04 18:24 #18樓 引用 | 點評
            青色小绵羊


            級別:精靈王 ( 12 )
            發帖:2639
            威望:314 點
            金錢:6509 USD
            貢獻:123456 點
            註冊:2022-03-14

            感谢分享
            ------------------------
            F
            TOP Posted:2022-06-04 18:26 #19樓 引用 | 點評
            无上尊者


            級別:俠客 ( 9 )
            發帖:829
            威望:111 點
            金錢:888 USD
            貢獻:53 點
            註冊:2016-07-01

            1024
            TOP Posted:2022-06-04 18:26 #20樓 引用 | 點評
            枸杞当饭吃


            級別:精靈王 ( 12 )
            發帖:3709
            威望:371 點
            金錢:572823 USD
            貢獻:33333 點
            註冊:2022-01-31

            谢谢分享
            TOP Posted:2022-06-04 18:28 #21樓 引用 | 點評
            niko3389


            級別:新手上路 ( 8 )
            發帖:404
            威望:41 點
            金錢:418 USD
            貢獻:0 點
            註冊:2013-06-21

            那看来是后面得改建版,支持,支持,点赞
            TOP Posted:2022-06-04 18:37 #22樓 引用 | 點評
            willtea


            級別:精靈王 ( 12 )
            發帖:1829
            威望:183 點
            金錢:228390614 USD
            貢獻:145911 點
            註冊:2014-04-09


            这个下载的是原图 清晰的吗


            點評

              TOP Posted:2022-06-04 18:47 #23樓 引用 | 點評
              指南者


              級別:光明使者 ( 14 )
              發帖:3614
              威望:193 點
              金錢:1360618651 USD
              貢獻:641024 點
              註冊:2012-09-10

              感谢分享,赞
              TOP Posted:2022-06-04 18:57 #24樓 引用 | 點評

              .:. 草榴社區 -> 技術討論區

              快速回帖 頂端
              內容
              HTML 代碼不可用

              使用簽名
              Wind Code自動轉換

              按 Ctrl+Enter 直接提交