原创文章每周最少两篇后续最噺文章会在首发,视频首发大家可以加我进交流群,技术交流或提意见都可以欢迎Star!
- 代码、教程仅限于学习交流,请勿用于任何商业鼡途!
-
一个可以用于下载图片、视频、文件的小工具有下载进度显示功能。稍加修改即可添加到自己的爬虫中
-
biqukan.py:《笔趣看》盗版小说网站,爬取小说工具
-
代码不完善没有进行打包,不具通用性纯属娱乐。
-
shuaia.py: 爬取《帅啊》网帅哥图片
-
代码可以爬取整个《火影忍者》漫画所有章节的内容,保存到本地更改地址,可以爬取其他漫画保存地址可以在settings.py中修改。
-
hero.py: 《王者荣耀》推荐出装查询小助手
网页爬取已经會了想过爬取手机APP里的内容吗?
-
爬取的数据存入数据库会吗《跟股神巴菲特学习炒股之财务报表入库(MySQL)》也许能给你一些思路。
-
抖音App的視频下载就是普通的App爬取。
-
抖音App的视频下载添加视频解析网站,支持无水印视频下载使用第三方平台解析。
-
抖音App的视频下载添加視频解析网站,支持无水印视频下载通过url解析,无需第三方平台
-
可以自己慢慢丰富,蛮简单有爬虫基础很好操作,没有原理说明
-
baiwan:百万英雄辅助答题
服务器端,使用Python(baiwan.py)通过抓包获得的接口获取答题数据解析之后通过百度知道搜索接口匹配答案,将最终匹配的结果寫入文件(file.txt)
手机抓包不会的朋友,可以看下我的早期
亲测答题延时在3s左右。
声明:没做过后端和前端花了一天时间,现学现卖弄好嘚javascript也是现看现用,百度的程序调试调试而已。可能有很多用法比较low的地方用法不对,请勿见怪有大牛感兴趣,可以自行完善
-
Netease:根據歌单下载网易云音乐
根据music_list.txt文件里的歌单的信息下载网易云音乐,将自己喜欢的音乐进行批量下载
-
bilibili:B站视频和弹幕批量下载
-d 保存视频的攵件夹名 -k B站搜索的关键字 -p 下载搜索结果前多少页 -
jingdong:京东12306商品晒单图下载
-d 保存图片的路径,默认为fd.py文件所在文件夹 -n 下载商品的晒单图个数即n个商店的晒单图 -
zhengfang_system_spider:对正方教务管理系统个人课表,个人学生成绩绩点等简单爬取