職位描述
崗位職責(zé):1、根據(jù)業(yè)務(wù)需求負(fù)責(zé)爬蟲(chóng)開(kāi)發(fā),設(shè)計(jì)和優(yōu)化爬蟲(chóng)集群系統(tǒng);2、實(shí)時(shí)監(jiān)控?cái)?shù)據(jù)采集進(jìn)度和預(yù)警,提供解決方案;3、與業(yè)務(wù)團(tuán)隊(duì)緊密協(xié)作,提供支持業(yè)務(wù)發(fā)展的解決方案。崗位要求:1、計(jì)算機(jī)及相關(guān)專(zhuān)業(yè)本科或以上學(xué)歷,掌握Python/Java/C中任意一種編程語(yǔ)言;2、精通web/app抓取原理;熟悉主流web爬蟲(chóng)對(duì)抗技術(shù),掌握web/app常見(jiàn)逆向分析技能;3、熟悉至少一種開(kāi)源爬蟲(chóng)框架,了解各組件工作流;熟悉多進(jìn)程、分布式工作架構(gòu),有能力開(kāi)發(fā)系統(tǒng)化的解決方案;4、熟悉抓包、hook技術(shù),具備一定的app抓包實(shí)戰(zhàn)經(jīng)驗(yàn);5、有python后端開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先。
企業(yè)介紹
大箴公司是一家運(yùn)用大數(shù)據(jù)、人工智能技術(shù)為政府機(jī)構(gòu)和大型商業(yè)機(jī)構(gòu)輸出數(shù)字動(dòng)力及技術(shù)解決方案的高科技企業(yè)。重點(diǎn)為公安、國(guó)安、檢察院、法院、情報(bào)等政法領(lǐng)域客戶,建立數(shù)據(jù)交換和價(jià)值共享體系,提供以實(shí)時(shí)決策為核心邏輯的人工智能實(shí)戰(zhàn)場(chǎng)景和數(shù)字智能中臺(tái)解決方案。在數(shù)字警務(wù)領(lǐng)域,大箴公司對(duì)于數(shù)字智能感知、警務(wù)數(shù)據(jù)治理、違法犯罪監(jiān)測(cè)、社會(huì)治安預(yù)警等方面有著非常專(zhuān)注的算法與技術(shù)積累,能提供核心關(guān)鍵的技術(shù)支撐與系統(tǒng)解決方案。在商業(yè)應(yīng)用領(lǐng)域,我們以業(yè)務(wù)場(chǎng)景為樞紐,提供以數(shù)字安全、數(shù)字信用、數(shù)字營(yíng)銷(xiāo)、數(shù)字決策和數(shù)字跟蹤等服務(wù)為核心的數(shù)據(jù)中臺(tái)、AI中臺(tái)、業(yè)務(wù)中臺(tái)建設(shè)和運(yùn)營(yíng)服務(wù)。