職位描述
PythonJava爬蟲開發(fā)
后端開發(fā)工程師Python、java語言
工作職責：
1、設計和實現(xiàn)高效穩(wěn)定的爬蟲程序，收集海量數(shù)據(jù)并進行處理和分析。
2、負責多平臺信息抽取、數(shù)據(jù)清洗、入庫、服務化等研發(fā)和優(yōu)化工作。
3、解決實際開發(fā)過程中碰到的各類數(shù)據(jù)需求和接口問題。
4、參與業(yè)務需求討論，負責業(yè)務需求到技術實現(xiàn)的方案落地與實施。
5、監(jiān)控爬蟲運行狀態(tài)，日常處理數(shù)據(jù)抓取的穩(wěn)定性和準確性問題。
任職要求
1、負責設計、開發(fā)和維護高效、穩(wěn)定的爬蟲系統(tǒng)，提升數(shù)據(jù)采集的效率和質量。
2、負責多平臺信息抽取、數(shù)據(jù)清洗、入庫、服務化等研發(fā)和優(yōu)化工作。
3、熟悉各種爬蟲框架和工具，把握網(wǎng)絡爬蟲核心技術研究方向,研究優(yōu)化算法,提升爬蟲系統(tǒng)的穩(wěn)定性、可擴展性。
4、熟練掌握 Python語言編程。 5、熟悉Linux基礎命令。
6、精通python編程語言，熟悉scrapy等常用數(shù)據(jù)抓取框架以及原理，熟悉網(wǎng)頁信息和APP數(shù)據(jù)抽取，能夠設計分布式爬蟲系統(tǒng)框架。
7、熟悉分布式系統(tǒng)的設計和應用，熟悉分布式、緩存、消息等機制。
8、精通 Charles等抓包工具，精通網(wǎng)頁抓取原理及技術，精通正則表達式，熟練從結構化和非結構化的數(shù)據(jù)中獲取信息。9、精通 selenium 、DrissionPage 等自動化抓取技術。
工作地點
北京朝陽區(qū)金地中心A座801
相似職位
- python爬蟲工程師1.6-3萬
北京 - 朝陽
北京保盛航空服務有限公司 - 中高級python爬蟲工程師2-3萬
北京 - 石景山
北京大享科技有限公司 北京 - 海淀
北京萬智信達智能科技有限公司北京 - 朝陽
中軟國際- Python互聯(lián)網(wǎng)數(shù)據(jù)采集（爬蟲）開發(fā)工程師8000-16000元·13薪
北京 - 海淀
北京萬智信達智能科技有限公司 - 后端開發(fā)工程師1-1.8萬
北京 - 朝陽
美通社
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
張女士/HR
三日內(nèi)活躍立即溝通
美通社美通社（PR Newswire）1954年開創(chuàng)了企業(yè)新聞稿發(fā)布行業(yè)的先河，于2016年成為Cision旗下公司。在過去六十多年里，美通社不斷拓展，逐步打造了遍及全球一百七十多個國家、覆蓋著數(shù)十萬家各類傳統(tǒng)和新興的媒體的信息發(fā)布網(wǎng)絡?，F(xiàn)在，美通社服務著全球七萬多家企業(yè)和機構，每天以四十多種語言，幫助客戶把他們的最新文字，圖片和視頻資訊發(fā)布給世界各地的目標受眾，幫助他們和媒體，業(yè)界，投資者，有影響力人群以及普通公眾溝通，為他們提高知名度，打造品牌、推動銷售，吸引投資。此外，美通社還提供全球媒體數(shù)據(jù)，監(jiān)測和分析服務，為客戶的傳播策略制定，效果評估，競爭分析，公關危機等日常傳播工作提供數(shù)據(jù)，技術等專業(yè)支持。
公司主頁