PythonCrawler Python各种练手爬虫 ##freebuf-WEB.py 这是更新式爬虫,主要用来爬取freebuf更新的文章并通过qq机器人发送到qq群里,这里使用的redis进行去重 此次更新了反爬机制,使用了github大佬提供的代理池,代理池地址:https://github.com/jhao104/proxy_pool