職位描述
1、負(fù)責(zé)垂直領(lǐng)域數(shù)據(jù)爬取和分析2、負(fù)責(zé)爬蟲系統(tǒng)的設(shè)計(jì)與開發(fā)及日常系統(tǒng)監(jiān)控維護(hù)3、負(fù)責(zé)研究?jī)?yōu)化爬蟲算法,提升爬蟲系統(tǒng)的穩(wěn)定性、可擴(kuò)展性4、負(fù)責(zé)設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則,提升效率和質(zhì)量5、能獨(dú)立解決實(shí)際過程中碰到的各種問題!6、負(fù)責(zé)日常數(shù)據(jù)采集系統(tǒng)的迭代,積極響應(yīng)業(yè)務(wù)要求。任職要求:1、3年以上的數(shù)據(jù)爬取相關(guān)工作經(jīng)驗(yàn),2、熟練掌握 Python, NodeJS, numpy、pandas3、熟練掌握 is逆向,斷點(diǎn)調(diào)試,hook等技能4、有解決決復(fù)雜的反爬限制實(shí)踐經(jīng)驗(yàn),能解決如圖片驗(yàn)證碼、滑塊、賬號(hào)限制、ip限制等問題5、良好的團(tuán)隊(duì)合作意識(shí),對(duì)技術(shù)飽有熱情。
企業(yè)介紹
上海熔晟信息技術(shù)有限公司是一家不斷追求創(chuàng)新的互聯(lián)網(wǎng)企業(yè),公司總部位于中原大地河南鄭州,行業(yè)內(nèi)位居全國(guó)前三。目前已經(jīng)是騰訊、網(wǎng)易、字節(jié)跳動(dòng)、盛大等公司的核心供應(yīng)商。我們的員工文化:?jiǎn)T工與公司共同成長(zhǎng),一起體驗(yàn)成功者的樂趣