工作經(jīng)驗1:部分崗位要求 5年以上相關(guān)工作經(jīng)驗,
技術(shù)能力:編程語言需熟練掌握 Python、Java、Scala 等編程語言中的至少一種,能夠運用其進行系統(tǒng)平臺、功能組件等開發(fā)。
數(shù)據(jù)庫知識:至少熟悉一種關(guān)系型數(shù)據(jù)庫如 Oracle、MySQL 等,熟練使用 SQL,同時要熟練掌握 Hive/SQL,熟悉 Hadoop/Map - Reduce/MPI 等分布式計算框架,有海量數(shù)據(jù)處理經(jīng)驗者優(yōu)先。
大數(shù)據(jù)平臺:熟悉 Hadoop、Spark 系統(tǒng)平臺的搭建和日常維護,掌握 Hadoop/Spark 生態(tài)體系內(nèi)的常用組件開發(fā)應(yīng)用。
數(shù)據(jù)處理與建模4:熟悉大數(shù)據(jù)開發(fā)相關(guān)技術(shù),如實時數(shù)倉、實時 ETL、消息中間件等,掌握關(guān)系數(shù)據(jù)建模、維度數(shù)據(jù)建模等方法。