當前位置:簡歷模板館>職責>工程師職責>

數據運維工程師崗位職責

工程師職責 閱讀(2.53W)
數據運維工程師是做什麼的?本文提供數據運維工程師的崗位職責例子,包括詳細的工作內容及任職要求。

崗位職責
1、負責大數據環境的部署維護和技術支持;
2、現場系統的問題定位和分析解決;
3、負責應用安全,數據的日常備份和應急恢復;
4、負責大數據外其他日常運維工作。

任職要求:
1、熟悉Linux/Unix系統,兩年以上Linux系統運維或開發經驗;
2、熟練掌握數據庫,有海量數據處理和並行計算平臺運維或開發經驗;
3、有較強的實現能力及學習能力,擁有實際的Hadoop項目經驗;
4、本科及以上學歷,英語四級;
5、良好的團隊合作,較強的溝通能力,強大的解決問題能力。

數據運維工程師崗位職責
工作職責:
1. 負責Hadoop及相關組件的部署和維護,保證其穩定運行;
2. 開發和使用Hadoop大數據自動化運維與監控工具;
3. 基於大數據應用需求,不斷調整和優化Hadoop框架及組件的配置,提升性能;
4. 爲數據倉庫、數據挖掘建模等數據應用項目提供運行環境支持;

任職要求:
1. 本科及以上學歷,計算機相關專業,2年以上相關工作經驗;
2. 熟悉Linux開發環境和shell腳本;
3. 熟悉Hadoop及其相關組件部署維護,有實際大數據集羣運維經驗;
4. 熟悉IT系統基礎架構及網絡原理,具備大型集羣運維經驗;
5. 熟悉數據倉庫。

崗位職責1.負責企業大數據平臺解決方案的指定、設計、實施、開發、優化2.精通Hadoop生態圈,熟悉HDFS、Spark、Storm、Kylin、Hive、HBase等組件3.負責公司大數據平臺的架構設計、調整、運維工作任職要求1.精通Hadoop生態圈各個工具原理,有一定的hql/sql性能調優工作2.精通java、python、go等語言開發3.對大數據技術棧有一定理解,能夠根據不同場景構建對應的解決方案

崗位職責:


1、負責數據平臺的實時及離線計算的運維管理工作(部署、監控、優化、故障處理);


2.參與數據平臺的相關工具開發(包括自動化部署、關鍵指標監控等)。


3、負責系統的運維與主動預防,搭建監控機制以及時發現集羣問題,持續提升系統可用性與穩定性;


4、跟進並處理系統事件,對系統問題及故障解決跟蹤優化,負責服務狀況與服務質量報告,不斷提升集羣服務質量;


5、梳理優化業務使用集羣的流程及規範,使集羣使用在資源利用、質量等方面均達到較高水平;


6、日常跟蹤業界技術發展動態,並結合業務發展需要,研究引入合適的技術。


任職要求:


1、本科以上學歷,有2年以上Hadoop相關運維經驗,瞭解Hadoop各組件的原理,並有實際部署維護經驗;


2.深入理解linux系統,計算機網絡,運維體系結構,精於容量規劃、架構設計、性能優化;


3、熟悉一門以上腳本語言(shell/perl/python等),熟練掌握自動化運維技術;


4、熟悉docker操作、實施,能通過kuberneter、swarm技術管理docker集羣,熟悉灰度發佈;


5、熟悉hadoop、hive、hbase、yarn、spark等大數據生態圈之組件的原理及運維方式;


6、熟悉數據庫基本原理,能對Mysql進行性能優化,監控Mysql日常運行情況,熟悉主備、主從、安全機制;


7、有敏銳的技術洞察力和較強的問題分析能力,故障排查能力,有很好的技術敏感度和風險識別能力;


8、良好的溝通技巧和推動能力,良好的服務意識和團隊協作意識,細緻周到的做事風格,責任心強;


9、熟悉公有云及架構,如AWS優先考慮。