晚上收拾衣服的时候,忽然传来了门铃声。也没有人点外卖或者快递,猜测可能是对门的大姐或者阿姨。打开猫眼看了一下,果然是对门大姐,手里还提着一大袋子东西。赶紧打开房门,发现她提的是一大袋子玉米,大约得有十来个。赶紧请大姐进屋,“你把这个拿进去,我再给你拿点别的东西”,大姐说完就往自己屋里走。
稍微一会儿大姐拿着一摞排列整齐的盒子走了过来,我还以为是香烟。接到手上一看竟然是一摞小雨衣,这,哈哈哈,有点离谱了喂。大姐解释道,这个是社区免费领的,自己也用不完,放着也没啥用,就给你们点吧。
嗯,第一次收到这么奇怪的投喂,有点出乎意料。虽然小雨衣消耗还是比较快的,但是之前从来没受过这个啊。
前天的时候,打开之前爬取的视频资源,点击播放的时候提示数据出错了。昨天晚上看了一下目标网站,已经改了m3u8的链接地址了。并且新url加入了两个变量:
https://****/get_file/7/8d8c46ce0375c0a08907ec82532b839e/161000/161967/161967.mp4/
看了下链接,里面有两个字段7/8d8c46ce0375c0a08907ec82532b839e无法确定,后面的内容可能是md5,但是至于是哪一段的md5无法确认。分析了一下无果,这个东西猜测应该有一定的规律,只是现在还不知道这个规律是什么。而后续自己也不准备在继续分析各种色情网站了。跟豚鼠一样囤积了太多的数据跟影片,而这些影片自己看过的则屈指可数。就在前天刚刚删除了接近1T的数据,既然不准备继续爬取了,那么我准备分享一部分数据,大家感兴趣的话可以自己研究一下(为了避免被抓,所有的视频地址已经删除)。
数据内容:网站、分类、标签、上传者、影片数据、关联表。统计数据见下图:
数据来源包括:网站、app,这两个是主要数据来源,数据获取方式参考以下几篇文章(能力需求:安卓逆向,js逆向,密码学):
网站数据分析可以参考以下几篇文章(能力需求:hadoop,spark)此处内容带上述组件的简单教程,都说兴趣是最好的老师,可能姐姐我是第一个用色情网站数据来学习大数据的,哈哈哈:
视频文件下载(能力需求:python,命令行工具),上述资料无下载链接,需要的可以看一下,工具比较粗糙:
关于色情的一些思考:
至此,对于色情网站的爬取分析就算告一段了,最早的数据开始于2020年,期间网站数据有增加也有删除,最多的时候通过在服务器以及本地启动爬虫大约十来个左右。后续随着网站以及app的密钥变化,也懒得再去追踪相关算法,最终爬取网站app越来越少,到昨天最后一个网站爬虫也停掉了。这段经历就算结束了,爬取数据四十多万条,如果统计视频在这些网站播放次数的话大约几千万是有的,这还是统计数据不更新的情况下。
到这里就结束啦,之前在一片文章还提过橙人体验馆的一个东西,这个现在看来也是很火的产业,抖音上都能看到各种相关视频。等再有时间,我会发文章,哈哈哈。发视频肯定就被抓了。
好啦,爬虫本篇文章没有,这个也确实不怎么高级,大家可以自己研究。
需要数据的从这里获取哦:
网站没了就没了,反正有那么多小雨衣了,看视频哪有跟真人玩好玩,是叭?嘻嘻
88 comments
大姐肯定想着对门的小姐姐年轻!给年轻人吧 哈哈
哈哈哈,就是这个意思呢
这给的还不少,哈哈哈
话说基层工作不鼓励多生孩子么?高多么多安全措施
应该发点儿其他的~
这个嘛,当然,直接给钱我也不介意的,哈哈哈
大姐好6,还能送这。
是啊,有点那啥,哈哈哈
雨衣这玩意送人第一次听说哈,话说这玩意靠谱吗免费发的,会不会国家为鼓励生育,做了点手段,期待实测后分享哈
这,哈哈哈。其实很多地方都能免费领呢,例如医院的妇科门诊一般都有免费领取的机器,刷身份证就可以领取一盒,好像每周都能领一次。
社区也会免费发放,嘻嘻。不过说实话就是杜蕾斯、冈本的小雨衣还是挺贵的呢。
做点手段不至于吧,那就过分啦。
我这两天的评论你又没收到吗?我一条都没看到呢。
感觉你的登录是限制单点登录了,我在另外一台电脑访问就要求重新登录。登录完感觉我发的评论也失踪了
以前都是发的,现在医院也有免费领的
嗯嗯
其实老年人更需要,小雨衣不仅仅是避孕,还能避免传染x病,现在x病老年人高发啊……
这哈哈哈 不至于哒
呃…这,路过进来看看😂
真的是路过吗 嘻嘻
可能是吧😂
我没用过这种公益的,也没看到哪里可以领。以前一块钱的路边机也都没有了。
我也很久不下载了,由于宽带的发展,现在在线的也不用等待。而硬盘里的 50 多 G 好像提不起兴趣去看了。下过等于看过?平时还是看在线的新片。
在线的新片片 这个不错
勾起好奇心了,小雨伞消耗的有多快
小孩子乖 别乱打听
啊这,第一次听说送小雨衣的🤣
大千世界吗,开放思想,😂
我这有一大纸箱子过期了的,退给厂家厂家说不要。
啊?你这批发啊?怎么会这么多
我们是经销商
酱紫 那就河狸了
看到小雨衣消耗比较快,心碎了。
第一遍:嗯?有点不对劲,再看一遍🫠🫠🫠
第二遍:耶?哇靠姐姐你开车!
open mind~~
嘀嘀,没用过可以试试。
大姐真热情,可是“虽然小雨衣消耗还是比较快的”,这是不花钱能听到的吗
有技术就是不一样,百度什么都搜不到
这些都不是百度能搜的啦
……小雨衣消耗还是比较快的
灵妹妹这么强的吗,有些人身体被掏空
哈哈,还有什么不能送的!!
什么都送,早晚会害了我。😂
你们评论都聊的啥?虽然我看不懂,但是感觉好腻害的样子。
你看,是吧,得多跟他们学习,😂
哈哈,每次逛obaby的博客,都有种打开TG群组的既视感…..
小雨衣消耗,我一年也用不了几个,嗯…..懂得自然懂
90后还年轻啊。要多努力才行。
嘘,🤫,别瞎说,我要是被抓进去你们就没得看了。
我用php爬虫爬某个广告很黄很暴力的小说网站,是为了老婆要看。
我也要看~~
你们在想啥?我是只爬文字,去掉所有广告,生成纯文本而已。小说网活不了几年的,早就没了
不是很黄很暴力吗?这个词形容的不是小说?
某个 广告很黄很暴力 的小说网站
阅读理解啊!!
你懂得。盗版小说没收你钱,可不得上广告吗?啥广告来钱快,你说呢?
酱紫的吗?
这个自然正常啦,跟免费的色情网站一样。
有很黄很暴力的小说推荐吗?
离谱!很黄很暴力没有。
很黄有。
快删了。谢谢你哦
我想说的是,我没看懂这段话什么意思~~
哈哈哈,搜了一下,发现我都没看过,都是长篇小说啊。厉害了
不是吧。这么纯洁。
都是上古时代赫赫有名的呢。尤其是金麟 and sf白*,混迹互联网十几二十年的,没看过也听过吧。
这,真没怎么看看过小说
都看片去了
你羞羞不要带上我们php
你们在想啥?我是只爬文字,去掉所有广告,生成纯文本而已。并没有羞羞。
送小气球这事,果然你不尴尬,尴尬的就是别人,哈哈哈
哈哈哈,有啥尴尬啊。大不了就当气球🎈吹,哈哈哈
我就想看看需要评论才能看的是什么东东
看叭
嗯!哼~ 这个 嘛 对,还是只看前半部分,后边看不懂
学习一下就看懂啦
还有这种投喂,
主打出其不意
完全看不懂
来自程序媛的浪漫。哈哈哈
好奇问下,那么多盒,多久能消耗完
也用不了多久,三个月?
3个月用6盒,就是1个月用2盒=20个,每个月除去大姨妈7天,就是每天都要用一个,是当面膜一样敷着用的吗?
你这算数学题呢!
年轻人,身体好
【那个网站】连续几天更新秀人模特的视频。不过倒是没什么意思。我感觉这是我的恶趣味,在等着喜欢的艺人下海的感觉。
哈哈哈。酱紫的吗?
我准备更新下m3u8下载工具,支持【那个网站】的下载。
他更新太快了,看都看不过来,下载只能吃灰。
豚鼠,收集++
我想到一个问题。临死时要销毁的数据有点多。要留清白在人间。但是那个时候已经痴呆了可怎么办。
是时候让他们看清楚真实的自己了~~
哈哈哈
看过这个新闻 or 段子没有。
是什么让男子被车撞飞三米远,还能艰难起身格式化了手机?
这的吗?这么坚强?😂
就这意志,撞一下都不是什么大问题。
更新下载工具了,哈哈哈。
啊这
真好,评论最多的一篇文章
哈哈哈,还有更多的哦
有一年的公司年会,阳光普照奖就是人手一盒…
这,哈哈哈。这阳光好啊
灵妹妹,注意身体