深圳 python 招聘（工資待遇要求）

要求：一定要有海外站點經(jīng)驗！！！

崗位職責(zé)：
1、負責(zé)公司爬蟲系統(tǒng)的設(shè)計、研發(fā)與維護；
2、設(shè)計爬蟲策略與算法，提升抓取效果；
3、持續(xù)優(yōu)化系統(tǒng)，提高系統(tǒng)的穩(wěn)定性及性能。
4、負責(zé)網(wǎng)絡(luò)數(shù)據(jù)抓取規(guī)劃、定期爬取指定網(wǎng)站的數(shù)據(jù)。
5、設(shè)計爬蟲策略和防屏蔽規(guī)則，提升網(wǎng)頁抓取的效率和質(zhì)量。

崗位要求：
（全站爬取站點：scholar.google.com、?-?鏈接存在風(fēng)險---------、www.?-?鏈接存在風(fēng)險-、www.?-?鏈接存在風(fēng)險----、m.facebook.com）
1、深入了解Http協(xié)議和web登錄認證機制；
2、有扎實的計算機基礎(chǔ)、熟悉常用數(shù)據(jù)結(jié)構(gòu)，精通python爬蟲開發(fā)，具有實際爬蟲開發(fā)經(jīng)驗；
3、熟悉高并發(fā)、高性能的分布式系統(tǒng)的設(shè)計及應(yīng)用，熟悉常用數(shù)據(jù)存儲；
4、熟悉linux環(huán)境爬蟲運維部署，熟練使用docker集群部署爬蟲；
5、熟練使用AI編程工具
6、加分項：django、flask、mysql等后臺相關(guān)知識