崗位職責(zé):1、負(fù)責(zé)設(shè)計(jì)和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng),進(jìn)行多平臺(tái)信息的抓取和分析工作;2、對(duì)相關(guān)爬蟲項(xiàng)目進(jìn)行深度封裝和優(yōu)化,以便能夠應(yīng)付不定時(shí)的網(wǎng)站變化;3、搭建數(shù)據(jù)分析和數(shù)據(jù)管理平臺(tái),以便進(jìn)行數(shù)據(jù)分析;任職要求:1、計(jì)算機(jī)、信息技術(shù)或相關(guān)專業(yè)專科或以上學(xué)歷;??2、精通Python語(yǔ)言開發(fā),有Python項(xiàng)目開發(fā)經(jīng)驗(yàn),能夠獨(dú)立分析解決問題3、熟悉爬蟲技術(shù),熟悉基礎(chǔ)的網(wǎng)絡(luò)通信協(xié)議,有Django框架1年開發(fā)經(jīng)歷;4、熟悉SQL語(yǔ)言,并有實(shí)際應(yīng)用和開發(fā)經(jīng)驗(yàn);?5、具有數(shù)據(jù)處理經(jīng)驗(yàn)的優(yōu)先;?6、熟悉各種Python的爬蟲技術(shù)和框架,如:urllib\selenium\scrapy\pyspyder等7、熟悉各種網(wǎng)頁(yè)源代碼解析工具,如:正則\BeautifulSoup\xpath等