Skip to content

python的一些脚本工具、爬虫程序、以及接单程序

Sta-sky/python_script

Repository files navigation

python_script

第一次上传于2020-2-11  
JD_get_cg.py :                  京东店铺爬取 成果的衣服信息  
baidu_img,py :                  爬取百度图片的脚本 输入要爬取的内容即可爬取  
img_mkdifile_name :             修改大量文件名使用---某天需要修三千多个图片的后缀redis_get_cg :                  从redis中获取爬取的成果衣服信息
da_video :                      某网站m3u8加密视频爬取上传于2020-02-20
xls.py                           读取数据库中数据表生成xls表格--2020-07-11  
notes.py :                      增加新的学习笔记----2020-07-30
pycrypt.py:                     python的内置模块hashlibhamc以及外部pycrypto模块单向加密编码对称秘钥----2020-08-07
notes.py:                       增加笔记内容----2020-08-14
python_log_module.py:           python的内置logging模块----2020-08-14
python_ssh_remote:              python的paramiko模块远程操作linux主机文件上载及下载-- 2020-09-14
Ssh_connect_remote.py:          python远程上传下载执行命令 的工具----- 2020- 09-19
log_util.py          :          python的log模块作为日常代码调测的日志打印工具----- 2020- 09-21
bytes_to_str.py:                python的字典字符串列表中的字节串转换为字符串并返回  ----- 2020- 09-21
check_net_ip_segment.py:        python的ipaddress模块根据ip以及另一个主机掩码跟网关判断是否在同一平面  ----- 2020- 09-23
request_tool.pypython的requests模块请求flask后端API完成私钥模拟登录验证过程  ----- 2020- 09-23
thread_file_write.py  :        对传入的文件使用多线程读写执行读写文件,可指定线程数  ----- 2020- 09-27
spider_kele_video.py     :      通过selenium结合requestsAES解密m3u8可增量可指定爬取可乐视频网站的视频----- 2020- 10-05
spider_homegrown_video.py :     通过requestsAES解密m3u8可增量可指定爬取视频网站的所有视频----- 2020- 10-10
spider_homegrown_update.py :    spider_homegrown_video中的视频网站各种加固无法使用selenium无法使用f12直接查看源代码修改代码直接使用requests爬取对util.py工具文件更新添加xls表格文件生成工具requests请求工具 ----- 2020- 10-10
get_file_info_write_xml.py :    爬虫爬取的视频通过此文件获取信息导出为xml表格文件  ----- 2020- 10-10
get_proxy_ip_pool.py     :      爬虫代理ip网站的代理ip通过test_ip()方法测试出可用ip + port并保存本地xls文件中, 构建ip代理池
spider_homegrown_update.py更新为多线程爬虫去下载网站视频爬取速率大大增加----- 2020- 10-23
2020 - 10 - 29更新多线程读写文件更新工具文件增加函数执行时间装饰器

About

python的一些脚本工具、爬虫程序、以及接单程序

Topics

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published