賽博威 python 招聘（工資待遇要求）

近期日采達(dá)到其中一項(xiàng)就行

1. 近期淘寶商品采集5w+

2.PDD商品近期采集5000+

3.抖音商品近期采集1w+



雙休+五險(xiǎn)一金+餐補(bǔ)

彈性上下班



【工作職責(zé)】：

1、負(fù)責(zé)分布式網(wǎng)絡(luò)爬蟲(chóng)系統(tǒng)及數(shù)據(jù)庫(kù)的設(shè)計(jì)與開(kāi)發(fā)；

2、研究及破解電商及自媒體app反爬策略，保證爬取的穩(wěn)定性；

3、維護(hù)和優(yōu)化已有的爬蟲(chóng)服務(wù)；

4、負(fù)責(zé)爬蟲(chóng)核心算法的策略?xún)?yōu)化研究，設(shè)計(jì)爬蟲(chóng)策略和防屏蔽規(guī)則，充分利用資源，提升網(wǎng)頁(yè)抓取的效率和質(zhì)量；

5、負(fù)責(zé)數(shù)據(jù)平臺(tái)建設(shè)，數(shù)據(jù)清洗、處理,提供數(shù)據(jù)服務(wù)以及數(shù)據(jù)管理；

6、分析、理解大數(shù)據(jù)業(yè)務(wù)需求,設(shè)計(jì)技術(shù)方案并落地實(shí)施;

7、處理各個(gè)業(yè)務(wù)在使用數(shù)據(jù)平臺(tái)過(guò)程中的各種問(wèn)題，分析并給出優(yōu)化方案；

8、可以獨(dú)立跟進(jìn)需求項(xiàng)目開(kāi)發(fā)進(jìn)度。



【任職要求】：

1、計(jì)算機(jī)相關(guān)專(zhuān)業(yè)，3年以上Python爬蟲(chóng)工作經(jīng)驗(yàn)；

2、熟悉爬蟲(chóng)原理及常用的反扒技術(shù)，包括但不限于JS防護(hù)、混淆、逆向分析、加密、App破解、防逆向、加固、代理等技能，具備較好的前端分析技能；

2、熟悉各類(lèi)HOOK框架包括單不限于frida、xposed；

3、有天貓、京東、抖音等國(guó)內(nèi)主流平臺(tái)任意一個(gè)平臺(tái)的項(xiàng)目經(jīng)驗(yàn)，有App端數(shù)據(jù)采集經(jīng)驗(yàn)；

4、熟悉網(wǎng)絡(luò)爬蟲(chóng)開(kāi)發(fā)原理，對(duì)互聯(lián)網(wǎng)各種類(lèi)型數(shù)據(jù)交互模式熟悉，知道如何處理需登錄網(wǎng)站、動(dòng)態(tài)網(wǎng)頁(yè)等各種情況下的數(shù)據(jù)采集方法；

5、熟悉selenium、Appnium、Airtest、Scrapy、pyspider等爬蟲(chóng)相關(guān)框架；

6、熟悉常用數(shù)據(jù)庫(kù)(MySQL/Oracle/SQLSever/Redis) ，熟悉索引技術(shù)和SQL優(yōu)化，了解RabbitMQ、InfluxDB。