This is your work, valued

Shenzhen, China

Allen Chen

Expert
@0xAllenChen

0xallenchen@gmail.com

spider_reverse. 爬虫逆向案例,已完成:TLS指纹|瑞数|震坤行 | 网易易盾 | 微信小程序反编译逆向(百达星系) | 同花顺 | rpc解密 | 加速乐 | 极验滑块验证码 | 巨量算数 | Boss直聘 | 企查查 | 中国五矿 | qq音乐 | 产业政策大数据平台 | 企知道 | 雪球网(acw_sc__v2) | 1688 | 七麦数据 | whggzy | 企名科技 | mohurd | 艺恩数据 | 欧科云链

899

scenery_spider_web. Scrapy爬取去哪儿网,并使用Django框架+PyEcharts实现可视化大屏。

134

spider-xinhua. 实时爬取新华网新闻并存入mysql数据库当中,对爬取的数据进行处理和清洗然后还要做可视化和数据分析

39

spider-51job. selenium爬取前程无忧51job.com招聘数据,并进行可视化输出

17

news_spider. 项目基于Scrapy实现,爬取新闻网站主要新闻,通过gen库提取内容,存储到mysql中。实现定时爬取和增量爬取。已爬取:、湖南在线、四月、四川新闻、广州日报大洋网、光明网、四川在线、东南网、中青在线、中评网、北晚在线、中国消费网、中国科技网、中国经济网、中国日报、中国交通新闻网、中国经济新闻网、中华网、文明网、南方网、中国新闻网

14

spider-qqmusic. 爬取qq音乐歌单信息,进行可视化分析

9

selenium_slider_utils. selenium解决滑块验证码

9

spider-wy-news. 爬取网易新闻(https://news.163.com/) '国内'、'国外'和'军事'板块下的新闻,输出为文件

8

datastructures-and-algorithm. 数据结构与算法的一些实例,数据结构包括图(遍历算法)、树(哈夫曼树、AVL平衡树等),算法包括查找算法(二分查找、斐波那契查找等)、排序算法(快速排序、堆排序等)、贪心算法、KMP算法等

7

redis-distributed-lock. 手写redis分布式锁

6

auto-health-form. 自动填健康表脚本

6

dianping_spider. 大众点评爬虫(全站可爬,解决动态字体加密,非OCR)。持续更新

6

spider-ituring. 爬取ituring.com图书信息,输出到excel。Crawl ituring.com book information and output it to Excel.

5

spider_qunaer. 爬取去哪儿旅行网站

4

my-spring. 手写spring,实现IoC和DI

3

leetcode. 本项目记录了leetcode的做题集,基于python3

2