雇員點(diǎn)評(píng)標(biāo)簽
職位描述
PythonHTMLCSSJavaScriptXPathAJAXMySQLMongoDBRedislinux
崗位職責(zé)：
1、負(fù)責(zé)設(shè)計(jì)、開(kāi)發(fā)和維護(hù)分布式爬蟲(chóng)系統(tǒng)，提升爬蟲(chóng)效率并提高爬蟲(chóng)穩(wěn)定性；2、維護(hù)并對(duì)現(xiàn)有爬蟲(chóng)程序進(jìn)行性能調(diào)優(yōu)，提升爬蟲(chóng)效率；
3、根據(jù)業(yè)務(wù)需求，抓取多平臺(tái)網(wǎng)頁(yè)、小程序等數(shù)據(jù)，并進(jìn)行簡(jiǎn)單的數(shù)據(jù)處理及存儲(chǔ)；
4、設(shè)計(jì)爬蟲(chóng)策略和防屏蔽規(guī)則，解決反爬問(wèn)題，提升數(shù)據(jù)抓取效率和質(zhì)量；
5、對(duì)抓取的數(shù)據(jù)進(jìn)行深度提取和挖掘，為業(yè)務(wù)提供數(shù)據(jù)支持；
6、參與數(shù)據(jù)層建設(shè)，解決技術(shù)疑難問(wèn)題，如復(fù)雜驗(yàn)證碼破解、動(dòng)態(tài)網(wǎng)頁(yè)抓取等。
崗位要求：
教育水平：本科及以上；專業(yè)：計(jì)算機(jī)相關(guān)；從事相關(guān)行業(yè)3年以上經(jīng)驗(yàn)者優(yōu)先。
專業(yè)能力要求：
1、精通Python語(yǔ)言，熟悉HTML、CSS、JavaScript、XPath、Ajax、正則表達(dá)式等技術(shù)；
2、熟悉網(wǎng)頁(yè)、小程序、APP抓取原理及技術(shù)，熟悉常用的爬蟲(chóng)網(wǎng)絡(luò)框架及組件；
3、熟悉MySQL、MongoDB、Redis等數(shù)據(jù)庫(kù)，有數(shù)據(jù)清洗、存儲(chǔ)經(jīng)驗(yàn)；
4、熟悉反爬機(jī)制，能夠解決賬號(hào)限制、IP限制、驗(yàn)證碼等問(wèn)題；
5、熟悉分布式爬蟲(chóng)架構(gòu)，具有搭建分布式爬蟲(chóng)系統(tǒng)的能力；
6、具備JavaScript逆向能力，驗(yàn)證碼破解能力；
7、熟悉Linux系統(tǒng)，有數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)、自然語(yǔ)言處理（NLP）技術(shù)背景者優(yōu)先；
8、具有帆軟平臺(tái)數(shù)據(jù)爬取經(jīng)驗(yàn)優(yōu)先；
9、了解SM2、SM4等國(guó)密算法優(yōu)先；
10、具備良好的團(tuán)隊(duì)合作精神、溝通能力和問(wèn)題解決能力。
工作地點(diǎn)
北京朝陽(yáng)區(qū)安華發(fā)展大廈
相似職位
北京 - 朝陽(yáng)
中軟國(guó)際- Python互聯(lián)網(wǎng)數(shù)據(jù)采集（爬蟲(chóng)）高級(jí)開(kāi)發(fā)工程師1.5-2.5萬(wàn)·13薪
北京 - 海淀
北京萬(wàn)智信達(dá)智能科技有限公司 - 惡意網(wǎng)站規(guī)則提取崗1.8-3萬(wàn)
北京 - 昌平
工信通(北京)信息技術(shù)有限公司 - 初級(jí)爬蟲(chóng)開(kāi)發(fā)工程師1-1.5萬(wàn)
北京 - 海淀
拓爾思信息技術(shù)股份有限公司 北京 - 昌平
科大國(guó)創(chuàng)軟件股份有限公司- python爬蟲(chóng)工程師1.6-3萬(wàn)
北京 - 朝陽(yáng)
北京保盛航空服務(wù)有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
張芳/HRBP
立即溝通
金風(fēng)科技股份有限公司
新疆金風(fēng)科技股份有限公司成立于1998年，是中國(guó)風(fēng)電事業(yè)蓬勃發(fā)展的親歷者和推動(dòng)者，致力于成為全球清潔能源和節(jié)能環(huán)保解決方案的行業(yè)領(lǐng)跑者。作為在深交所、港交所兩地上市的公司，金風(fēng)科技多次入選“氣候領(lǐng)袖企業(yè)”、“亞洲地區(qū)最受尊敬公司”、“最佳投資者關(guān)系公司”，并榮登“全球最具創(chuàng)新能力企業(yè)50強(qiáng)”、“全球最環(huán)保企業(yè)200強(qiáng)榜單”、“全球新能源企業(yè)500強(qiáng)榜單”、“新財(cái)富最佳上市公司榜單”、“《財(cái)富》中國(guó)500強(qiáng)”等多個(gè)影響力榜單。2019年，憑借其在質(zhì)量、經(jīng)濟(jì)、社會(huì)效益等方面的顯著成績(jī)，金風(fēng)科技榮獲質(zhì)量領(lǐng)域全國(guó)性最高榮譽(yù)“全國(guó)質(zhì)量獎(jiǎng)”，成為風(fēng)電行業(yè)首家榮獲該獎(jiǎng)項(xiàng)的企業(yè)。自成立至今，金風(fēng)科技已實(shí)現(xiàn)全球風(fēng)電裝機(jī)容量超過(guò)60GW，35,000臺(tái)風(fēng)電機(jī)組（直驅(qū)機(jī)組超過(guò)31,000臺(tái)）在全球6大洲、27個(gè)國(guó)家穩(wěn)定運(yùn)行。金風(fēng)科技全球員工近9,000人，其中研發(fā)和技術(shù)人員近3,000名。公司具備國(guó)際市場(chǎng)深度開(kāi)發(fā)能力，已在北美、南美、歐洲、非洲、澳洲、亞洲、中東北非、中亞俄語(yǔ)區(qū)設(shè)立8大海外區(qū)域中心，全面實(shí)現(xiàn)資本、市場(chǎng)、技術(shù)、人才、管理的國(guó)際化。公司深度聚焦風(fēng)電、能源互聯(lián)網(wǎng)、水務(wù)環(huán)保三大領(lǐng)域，并逐步培育智慧園區(qū)、智慧農(nóng)業(yè)、智慧運(yùn)動(dòng)健康等領(lǐng)域的創(chuàng)新業(yè)務(wù)。公司已在全球布局 7大研發(fā)中心，并與多所全球頂級(jí)院校深度合作，以強(qiáng)大科研實(shí)力和持續(xù)創(chuàng)新驅(qū)動(dòng)發(fā)展。目前，公司累計(jì)擁有全球?qū)＠夹g(shù)申請(qǐng)4,500余項(xiàng)、全球授權(quán)專利2,700余項(xiàng)、軟件著作權(quán)700余件，承擔(dān)國(guó)家重點(diǎn)科研項(xiàng)目46項(xiàng)。面對(duì)全球產(chǎn)業(yè)變革，金風(fēng)科技加快數(shù)字化進(jìn)程，打造跨行業(yè)智慧解決方案，以數(shù)字化能力鞏固行業(yè)優(yōu)勢(shì)，支持國(guó)際化進(jìn)程以及業(yè)務(wù)多元化發(fā)展。金風(fēng)科技長(zhǎng)期致力于推動(dòng)全球能源轉(zhuǎn)型，發(fā)展人人可負(fù)擔(dān)、可靠、可持續(xù)的未來(lái)能源。今天，金風(fēng)科技在全球的風(fēng)電機(jī)組每年幫助人類社會(huì)節(jié)約3,742萬(wàn)噸標(biāo)準(zhǔn)煤，減少12,283萬(wàn)噸二氧化碳排放，再造森林6,712萬(wàn)立方米。成立22年來(lái)，金風(fēng)科技始終不忘初心，持續(xù)踐行“為人類奉獻(xiàn)碧水藍(lán)天，給未來(lái)留下更多資源”的企業(yè)使命。
公司主頁(yè)