久久精品电影还看视频,久青青视频精品免费观看,亚洲国产精品二区三区,曰肥老太视频日本

招聘崗位：工程技術人員

招聘人數(shù)：1名聘用方式

項目聘用a

招聘條件

大學?？坪蛯？茖W校及以上學歷,無學位要求

大專以上學歷，985/211優(yōu)先。1.從事數(shù)據(jù)爬蟲領域至少3年以上，?？萍耙陨蠈W歷，有較為系統(tǒng)的海量數(shù)據(jù)爬蟲、反爬蟲研發(fā)經(jīng)驗；2.有從事分布式數(shù)據(jù)獲取經(jīng)驗，精通python開發(fā)，熟悉使用scrapy、selenuim等常用開源爬蟲框架；；3.熟悉http協(xié)議、html、dom，并有一定的javascript能力；4.熟練使用xpath、正則表達式或beautifulsoup任一種解析框架；5.有豐富的應對反爬蟲的經(jīng)驗，例如合理使用ip池、驗證碼識別技術等；6.熟練使用splash、瀏覽器內(nèi)核等工具解析動態(tài)頁面；7.熟悉多線程、網(wǎng)絡編程以及分布式爬蟲架構開發(fā)場景8.熟悉使用redis和任意一種常見的分布式消息隊列；9.熟練使用模擬登陸、ua池、動態(tài)代理、ip池等常規(guī)偽裝手段；10.熟悉常規(guī)反爬蟲手段以及常見的解決方案，有一定的逆向工程能力；11.熟練使用mysql，熟悉nosql數(shù)據(jù)庫等，有大數(shù)據(jù)開發(fā)相關經(jīng)驗更佳；12.熟悉ubuntu等linux系統(tǒng)，熟練使用shell工具；13.有業(yè)務sense，責任心強，做事細致，具備較強的溝通協(xié)作能力、自我驅動能力，能夠通過梳理設計業(yè)務模型發(fā)現(xiàn)業(yè)務問題，并驅動業(yè)務目標實現(xiàn)；14.有學術、科研經(jīng)驗優(yōu)先。

崗位職責

1.管理建設數(shù)據(jù)獲取、爬蟲平臺框架，負責爬蟲系統(tǒng)規(guī)劃以及相應架構設計；2.負責設計和開發(fā)網(wǎng)絡爬蟲應用，包括調(diào)度、抓取、入庫等內(nèi)容；2.負責現(xiàn)有爬蟲核心算法和策略優(yōu)化；3.網(wǎng)絡爬蟲架構設計、功能開發(fā)及優(yōu)化；4.參與建設平臺治理統(tǒng)一的數(shù)據(jù)體系，能獨立完成項目的系統(tǒng)分析，根據(jù)開發(fā)規(guī)范和數(shù)據(jù)模型設計實現(xiàn)數(shù)據(jù)開發(fā)任務，保證數(shù)據(jù)質(zhì)量；5.參與數(shù)據(jù)倉庫的設計和研發(fā)，進行海量數(shù)據(jù)模型設計、數(shù)據(jù)etl開發(fā)；7.參與數(shù)據(jù)產(chǎn)品及應用的數(shù)據(jù)研發(fā)，發(fā)覺數(shù)據(jù)業(yè)務價值，助力數(shù)據(jù)化運營業(yè)務。

崗位待遇

提供競爭性的薪酬待遇，可面議。與師生共同工作，繳納五險一金。研究中心將視情況提供額外的激勵措施和必要的工作開展條件。

其他

有意者請網(wǎng)上應聘，同時請將“崗位名稱+姓名+個人簡歷+高校人才網(wǎng)”發(fā)送至聯(lián)系人郵箱：wangfeng07@sjtu.edu.cn

聯(lián)系方式

聯(lián)系人：甘老師

tel：；e-mail：wangfeng07@sjtu.edu.cn

聯(lián)系地址：

報名地址：