大數(shù)據(jù)開發(fā)工程師15-30k
發(fā)布人：
高邦獵頭 發(fā)布時間:2021-09-07
公司名稱：某大型研究院
工作地點：北京
崗位職責(zé)：
1. 負(fù)責(zé)大數(shù)據(jù)產(chǎn)品需求分析、開發(fā)和建設(shè)
2. 負(fù)責(zé)提供數(shù)據(jù)分析處理解決方案
3. 參與公司大數(shù)據(jù)平臺的設(shè)計和建設(shè)
4. 參與數(shù)據(jù)倉庫建設(shè)工作，完成數(shù)據(jù)集成、處理。
任職要求：
1. 有3年以上實際工作經(jīng)驗，熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖據(jù)、機器學(xué)習(xí)和數(shù)據(jù)可視化;
2. 對大數(shù)據(jù)基礎(chǔ)架構(gòu)和平臺有深刻理解，對大數(shù)據(jù)的發(fā)展方向具備前瞻性、對大數(shù)據(jù)生態(tài)體系有深入認(rèn)識，熟悉Hadoop相關(guān)各種開源項目，掌握Hive、Spark、Streaming、Storm、Kafka等數(shù)據(jù)處理核心組件。
3. 熟悉各種離線采集和實時采集組件的使用和組合搭配方案;
4. 熟悉各種存儲和計算組件的使用和組合搭配方式;
5. 對Linux操作系統(tǒng)熟練掌握，熟悉shell腳本編程;
6. 至少熟練使用Java、Python、C++的一種，能夠完成數(shù)據(jù)預(yù)處理等常規(guī)工作.
