久久精品电影还看视频,久青青视频精品免费观看,亚洲国产精品二区三区,曰肥老太视频日本

招聘崗位：工程技術(shù)人員

招聘人數(shù)：1名聘用方式

項目聘用a

招聘條件

大學(xué)?？坪蛯？茖W(xué)校及以上學(xué)歷,無學(xué)位要求

大專以上學(xué)歷，985/211優(yōu)先。1.從事數(shù)據(jù)爬蟲領(lǐng)域至少3年以上，專科及以上學(xué)歷，有較為系統(tǒng)的海量數(shù)據(jù)爬蟲、反爬蟲研發(fā)經(jīng)驗；2.有從事分布式數(shù)據(jù)獲取經(jīng)驗，精通python開發(fā)，熟悉使用scrapy、selenuim等常用開源爬蟲框架；；3.熟悉http協(xié)議、html、dom，并有一定的javascript能力；4.熟練使用xpath、正則表達(dá)式或beautifulsoup任一種解析框架；5.有豐富的應(yīng)對反爬蟲的經(jīng)驗，例如合理使用ip池、驗證碼識別技術(shù)等；6.熟練使用splash、瀏覽器內(nèi)核等工具解析動態(tài)頁面；7.熟悉多線程、網(wǎng)絡(luò)編程以及分布式爬蟲架構(gòu)開發(fā)場景8.熟悉使用redis和任意一種常見的分布式消息隊列；9.熟練使用模擬登陸、ua池、動態(tài)代理、ip池等常規(guī)偽裝手段；10.熟悉常規(guī)反爬蟲手段以及常見的解決方案，有一定的逆向工程能力；11.熟練使用mysql，熟悉nosql數(shù)據(jù)庫等，有大數(shù)據(jù)開發(fā)相關(guān)經(jīng)驗更佳；12.熟悉ubuntu等linux系統(tǒng)，熟練使用shell工具；13.有業(yè)務(wù)sense，責(zé)任心強(qiáng)，做事細(xì)致，具備較強(qiáng)的溝通協(xié)作能力、自我驅(qū)動能力，能夠通過梳理設(shè)計業(yè)務(wù)模型發(fā)現(xiàn)業(yè)務(wù)問題，并驅(qū)動業(yè)務(wù)目標(biāo)實現(xiàn)；14.有學(xué)術(shù)、科研經(jīng)驗優(yōu)先。

崗位職責(zé)

1.管理建設(shè)數(shù)據(jù)獲取、爬蟲平臺框架，負(fù)責(zé)爬蟲系統(tǒng)規(guī)劃以及相應(yīng)架構(gòu)設(shè)計；2.負(fù)責(zé)設(shè)計和開發(fā)網(wǎng)絡(luò)爬蟲應(yīng)用，包括調(diào)度、抓取、入庫等內(nèi)容；2.負(fù)責(zé)現(xiàn)有爬蟲核心算法和策略優(yōu)化；3.網(wǎng)絡(luò)爬蟲架構(gòu)設(shè)計、功能開發(fā)及優(yōu)化；4.參與建設(shè)平臺治理統(tǒng)一的數(shù)據(jù)體系，能獨(dú)立完成項目的系統(tǒng)分析，根據(jù)開發(fā)規(guī)范和數(shù)據(jù)模型設(shè)計實現(xiàn)數(shù)據(jù)開發(fā)任務(wù)，保證數(shù)據(jù)質(zhì)量；5.參與數(shù)據(jù)倉庫的設(shè)計和研發(fā)，進(jìn)行海量數(shù)據(jù)模型設(shè)計、數(shù)據(jù)etl開發(fā)；7.參與數(shù)據(jù)產(chǎn)品及應(yīng)用的數(shù)據(jù)研發(fā)，發(fā)覺數(shù)據(jù)業(yè)務(wù)價值，助力數(shù)據(jù)化運(yùn)營業(yè)務(wù)。

崗位待遇

提供競爭性的薪酬待遇，可面議。與師生共同工作，繳納五險一金。研究中心將視情況提供額外的激勵措施和必要的工作開展條件。

其他

有意者請網(wǎng)上應(yīng)聘，同時請將“崗位名稱+姓名+個人簡歷+高校人才網(wǎng)”發(fā)送至聯(lián)系人郵箱：wangfeng07@sjtu.edu.cn

聯(lián)系方式

聯(lián)系人：甘老師

tel：；e-mail：wangfeng07@sjtu.edu.cn

聯(lián)系地址：

報名地址：