課程連結 https://mastertalks.tw/products/python-dfa?ref=sam
折扣碼 sam200
隨著資料量級上升及反爬蟲技術的進步,以自動化分散式的進行資料搜集早已成為無可避免的趨勢,我們將帶你打造一站式分散資料搜集監控系統。 學員將學到如何部署分散式爬蟲來大大拓展爬蟲效率,不再受限於單一機器上,並使用關聯式資料庫存放,最後還有完整的監控系統。
課程內容是關於
- Rabbitmq、Celery 分散式架構
- MySQL 資料庫
- Docker Swarm
- Linode 雲端(一個月最低只要 5 美金,就有一台雲端機器)
- Grafana 監控系統
- Google reCAPTCHA 與驗證碼破解
- 公開分享 20~30 隻台股金融資料爬蟲