崗位職責：1.負責大數據平臺的搭建、發布部署及相關維護工作；2.負責系統的運維和主動預防，搭建監控機制以及及時發現集群問題，持續提升系統可用性與穩定性；3.跟進并處理系統事件，對系統問題及故障解決跟蹤優化，負責服務狀況與服務質量報告，不斷提升集群服務質量；4.梳理優化業務使用集群的流程和規范，使集群使用在資源利用、質量等方面均達到較高水平；5.日常跟蹤業界技術發展動態，并結合業務發展需求，研究引入合適的技術。任職要求：1.3年以上中等規模集群環境下的Hadoop/Impala/Hive/Spark集群相關運維經驗；2.對各種HDFS/Yarn/Hive/Impala/Spark/Hbase等相關參數調優, 性能優化等有實際經驗；3.有實際踩坑經歷, 對于相關組件的版本跟進, 補丁跟蹤, bug追蹤等有相關經驗；4.了解如何處理過各種集群在線版本升級, 數據遷移, 集群擴容, 穩定性監控等工作；5.了解計算機網絡，熟悉linux，熟悉shell、perl或python等語言；6.熟悉Oracle數據庫技術，熟悉Data Stage等ETL工具優先；7.熟悉中間件技術，如KafKa、weblogic、MQ等技術；8.積極主動、學習能力強、溝通能力強、肯吃苦耐勞；
舉報
舉報
大數據開發工程師職業大全：
- 所在地區：廣東-深圳市
- 聯系人：薛小姐
- 手機：會員登錄后才可查看
- 郵箱：會員登錄后才可查看
- 郵政編碼：
工作地址
- 地址：深圳市福田區天安數碼城天祥大廈AB座10A 、5B2
