日日噜夜夜草|一级黄色录像高清版|调教白富美加勒比久久|亚洲欧洲精品婷婷|日韩综合无码色色|日韩精品一区妖精视频|亚洲无码中文字幕hd|99亚洲思思丝袜|手机看片国产精品大胆亚洲|成人无码视频一区二区在线播放

該職位已失效,看看其他機(jī)會吧

數(shù)據(jù)采集開發(fā)工程師

1-1.2萬
  • 北京海淀區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招1人

職位描述

PythonPCAndroid
【崗位職責(zé)】
1、參與數(shù)據(jù)采集平臺架構(gòu)設(shè)計(jì)和開發(fā)工作。
2、負(fù)責(zé)設(shè)計(jì)和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng)、技術(shù)選型。
3、持續(xù)對系統(tǒng)進(jìn)行架構(gòu)改造和優(yōu)化,提升系統(tǒng)的穩(wěn)定性與可擴(kuò)展性,保障系統(tǒng)穩(wěn)定,高效,安全。
4、負(fù)責(zé)多平臺信息(視頻、音頻、圖片、文章等)爬取,包括APP端采集,agent相關(guān)數(shù)據(jù)采集等。
【崗位要求】
1、本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè)。3年及以上網(wǎng)絡(luò)爬蟲相關(guān)、采集平臺、rpa相關(guān)開發(fā)經(jīng)驗(yàn)。
2、熟練掌握Python編程語言及常用采集框架,深入了解框架提供的特性及其實(shí)現(xiàn)原理細(xì)節(jié)。
3、熟練掌握PC/Android自動化采集技術(shù),如playwright,selenium、dirssionpage等。
4、研究爬蟲策略和防屏蔽規(guī)則,解決封賬號、封IP、驗(yàn)證碼、混淆加密,頁面跳轉(zhuǎn)等難點(diǎn)攻克,提升網(wǎng)頁抓取的效率和質(zhì)量。
5、熟悉風(fēng)控逆向相關(guān)技術(shù),國內(nèi)外驗(yàn)證碼破解等;熟悉如何TLS 指紋、逆向、混淆、JS補(bǔ)環(huán)境等技術(shù),以及各類加密算法,譬如(AES、RSA、Base64,Md5、SHA 系列等)。
6、具有良好的溝通能力、學(xué)習(xí)能力、分析解決問題能力,有較強(qiáng)的責(zé)任心、自驅(qū)力和成長型思維;
7、有長期規(guī)?;杉到y(tǒng)建設(shè)經(jīng)驗(yàn)優(yōu)先;有國外人機(jī)驗(yàn)證碼破解經(jīng)驗(yàn)優(yōu)先;有computer use/phone use等agent相關(guān)數(shù)據(jù)采集經(jīng)驗(yàn)優(yōu)先。
查看全部

工作地點(diǎn)

北京智視數(shù)策科技發(fā)展有限公司-海淀區(qū)海泰大廈17F1741室

職位發(fā)布者

張女士/HRM

昨日活躍
立即溝通
公司Logo北京智視數(shù)策科技發(fā)展有限公司
北京智視數(shù)策科技發(fā)展有限公司(VDI)成立于2019年,公司立足于廣播電視與網(wǎng)絡(luò)視聽行業(yè),是一家主要為政府客戶和互聯(lián)網(wǎng)客戶提供網(wǎng)絡(luò)視聽節(jié)目內(nèi)容監(jiān)管解決方案的專業(yè)技術(shù)服務(wù)公司。公司團(tuán)隊(duì)累計(jì)中標(biāo)政府部門 150個(gè)項(xiàng)目,具有 10年以上政府部門服務(wù)經(jīng)驗(yàn),從音視頻內(nèi)容監(jiān)管、數(shù)據(jù)、技術(shù)軟件提供服務(wù)閉環(huán)業(yè)態(tài)產(chǎn)品。內(nèi)容涉及廣播電視與網(wǎng)絡(luò)視聽節(jié)目內(nèi)容監(jiān)測、風(fēng)險(xiǎn)預(yù)警、輿情報(bào)告、預(yù)警報(bào)告、宣傳矩陣搭建、數(shù)據(jù)平臺搭建、監(jiān)測平臺搭建、政府?dāng)?shù)據(jù)結(jié)構(gòu)化、大數(shù)據(jù)分析解決方案等。主要服務(wù)客戶:中宣部、國家廣電總局、北京市政府、北京廣電局,上海廣電局等 15個(gè)客戶單位,30余個(gè)部門?;ヂ?lián)網(wǎng)客戶:抖音、愛奇藝、快手、微博、B站,滴滴等。
公司主頁