,文章

kissgoddess网站所有图片写真爬虫发布公告

今天又有网友留言请求爬取一个网址:https://tw.kissgoddess.com/

我看了一下,这个站确实很多资源,然后其实就是各种模特的写真这样子

好像还是写真很受欢迎,这个站写的爬虫可以实现搜索女优的名字进行女友专辑的下载

是比较方便的

另外对于爬取这样的站点意义不是很大了,大家可以发一些小说站啊什么的,其实这些图片真没什么好看的

这个站点的爬虫预计将在本月发布吧,暂时没空
我已经做了2天了,这个网站真的把我给做毛了,不知道是谁开发的,专辑页面需要点击加载更多才出现所有的专辑
研究我半天绕来绕去,最后搞定了,就进去抓图,发现每一页就5张,需要翻页,于是获取所有页面一一访问再去抓取,
然后抓下来发现每一页永远都少2张,再跑去看,发现xpath做了手脚,于是又来改,总算现在改完了,发现尼玛...
之前获取的所有页面,点击到最后一页的时候,其实还会出现更多的页面,也没有全部展示,我发现这个站做的真是无语,自己影响seo
既然你这么想玩,陪你玩...

今晚解决你
已完成,等我自己下完了我就把程序发布,并且同步发布我已经下载的内容(夏西cici的所有写真)
本来想一气之下加个多线程,让广大网友陪你这样恶心的站点玩玩,后来想想自己也算是个站长了,别人也并不希望自己被爬,所以,就这样吧,单线程自己玩吧
源码改来改去写的比较乱了,所以加了很多备注,再回头看已经是一塌糊涂,就不发布源码了.

爬虫程序下载地址:
链接: https://pan.baidu.com/s/1ZfUvUTRvxXDKJgnC0-ncaw 提取码: jhv5 复制这段内容后打开百度网盘手机App,操作更方便哦
--来自百度网盘超级会员v5的分享

如果你只需要夏西cici的专辑,直接这里下载

链接: https://pan.baidu.com/s/1-3xewXszS2eKSh7EKF1RXg 提取码: rg1e 复制这段内容后打开百度网盘手机App,操作更方便哦
--来自百度网盘超级会员v5的分享

已经下载好的写真集被百度删了,你们自己下程序爬吧,搜索cici即可

原文来自:kissgoddess网站所有图片写真爬虫发布公告,尊重自己,尊重每一个人;转发请注明来源!
0 0

发表评论