Artificial Intelligence / Reverse Engineering / Internet of Things / Full Stack Developer
不知道有没有和姐姐我一样把所有美女的图片都下载下来的，如果没有下载的话可以通过博客的搜索功能搜索爬虫去下载妹子图片了哦。通过爬取的乱七八糟的各种网站，目前粗略的估计所有下载的图片大约有1T左右了。由于各个网站都是分别的下载的，所有下载后的图片会有很多重复的。想找一个图片处理工具，找了半天有个什么推荐的eagle的工具，还是收费的，可以免费试用一个月。结果我把下载的图片目录加进去直接卡死了。啊哈哈。这就离谱，所以如果没有图片处理需求的还是推荐picasa3，我也有发布一个补丁工具，真的是一代神器。
既然没有现成的工具，那就写一个吧，具体的要求：
1.能够把所有文件复制到同一个目录下（这不是废话嘛，就是为了干这个的啊） 2.能够过滤10k以下的非图片文件（多数是由于被爬取网站不稳定导致的下载失败，其实不是图片文件） 3.对于不同网站下载的同一个图片不要重复复制（通过计算文件md5的方法进行规避） 4.能够记录整理日志（当然啊，不然那么多文件中间关机了，岂不是得全部再来一遍） 主要就是上面的几个要求啦~~~
后台做数据分析汇总的时候需要处理各种时间段，每天的零点、每周的第一天最后一天、每月的第一天最后一天等，不知道有没有现成的可用库来处理。搜索的基本也是各种其他人写的方法，我这里汇总了一下（抄了一些代码）。
日期处理一般会用到下面几个库：time，datetime，calendar。一般通过这几个库来处理时间也够用了。
该模块包括使用时间执行各种操作所需的所有与时间相关的功能，它还允许我们访问多种用途所需的时钟类型。
2023年第一天啦，祝大家新年快乐啊。
精品美女吧 爬虫
Verson: 22.12.23
Blog: http://www.h4ck.org.cn
****************************************************************************************************
USAGE:
spider -h <help> -a <all> -q <search> -e <early stop>
Arguments:
-a <download all site images>
-q <query the image with keywords>
-h <display help text, just this>
****************************************************************************************************
《中国男科杂志》2022年第36卷第5期刊文，《新冠肺炎对男性生殖和性功能影响的研究进展》，作者李望、谢弘，来自上海交通大学附属第六人民医院泌尿外科。
世卫组织于 2020 年 1 月 31 日将新型冠状病毒 ( SARS-CoV-2 )引起的新冠肺炎(COVID- 19 )确定为国 际关注的突发公共卫生事件[ 1] 。新冠肺炎临床表现除 肺部症状外，还存在不同程度的肺外器官损伤[2] 。 自疫 情爆发以来，越来越多的证据证明了 COVID- 19影响着 男性生殖和性功能 。 目前，COVID- 19仍在全球蔓延， 因此我们必须了解 SARS-CoV-2对男性健康方面的不 利影响，从而采取相应的预防措施和治疗手段[3] 。本文 对新冠肺炎在男性生殖和性功能方面影响的可能机 制、临床表现等的研究进展综述如下。
更新日志： 调整超时时间为30秒，解决由于服务器解析导致的下载失败。如果效果不好，请下载旧版本。
今天在windows电脑上安装django-export-xls的时候报错了：
(venv) PS F:\Pycharm_Projects\Ruoyi-Energy> pip3 install django-export-xls
Collecting django-export-xls
Using cached django-export-xls-0.1.1.tar.gz (3.2 kB)
Preparing metadata (setup.py) ... error
ERROR: Command errored out with exit status 1:
obaby\AppData\Local\Temp\pip-pip-egg-info-u0lvqod1'
cwd: C:\Users\obaby\AppData\Local\Temp\pip-install-xrhra6sx\django-export-xls_d72b66d322264c26b516fda785f307fd\
Complete output (5 lines):
Traceback (most recent call last):
File "<string>", line 1, in <module>
File "C:\Users\obaby\AppData\Local\Temp\pip-install-xrhra6sx\django-export-xls_d72b66d322264c26b516fda785f307fd\setup.py", line 4, in <module>
README = open(os.path.join(os.path.dirname(__file__), 'README.rst')).read()
UnicodeDecodeError: 'gbk' codec can't decode byte 0x80 in position 918: illegal multibyte sequence
----------------------------------------