大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)

大數(shù)據(jù)運(yùn)維工程師需要明確工作范圍，定期與客戶溝通工作量，并獲取客戶回執(zhí)，及時(shí)歸檔。以下是小編整理的大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)。

大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)1

職責(zé)：

1、負(fù)責(zé)公司大數(shù)據(jù)集群的構(gòu)建，任務(wù)調(diào)度、監(jiān)控預(yù)警，持續(xù)完善大數(shù)據(jù)平臺(tái)，保證穩(wěn)定性、安全性;

2、負(fù)責(zé)集群容量規(guī)劃、擴(kuò)容、集群性能優(yōu)化及日常巡檢和應(yīng)急值守，參與大數(shù)據(jù)基礎(chǔ)環(huán)境的架構(gòu)設(shè)計(jì)與改進(jìn);

3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)自動(dòng)化運(yùn)維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的大數(shù)據(jù)運(yùn)維技術(shù)及發(fā)展方向;

任職要求：

1、熟悉Linux系統(tǒng)及基礎(chǔ)命令操作，能夠獨(dú)立編寫(xiě)Shell或Python腳本，開(kāi)展日常服務(wù)器的運(yùn)維工作;

2、熟悉并不限于大數(shù)據(jù)生態(tài)圈Hadoop、Strom、Spark、HDFS、Kafka、Zookeeper、Hbase、Redis、ElasticSearch、fastdfs

等相關(guān)基礎(chǔ)組件的框架知識(shí)和運(yùn)行原理;

3、熟悉軟硬件設(shè)備，網(wǎng)絡(luò)原理，有豐富的大數(shù)據(jù)平臺(tái)(CDH、HDP)部署、集群運(yùn)維和性能優(yōu)化等經(jīng)驗(yàn);

4、具備一定的系統(tǒng)自動(dòng)化運(yùn)維理論體系和實(shí)際經(jīng)驗(yàn)，能夠利用各種開(kāi)源監(jiān)控工具、運(yùn)維工具，HA、負(fù)載均衡軟件完成工作任務(wù);

5、具備較強(qiáng)的學(xué)習(xí)能力、抗壓能力、動(dòng)手能力和分析解決問(wèn)題的能力;

6、熟悉JVM虛擬機(jī)調(diào)優(yōu);

7、熟悉jenkins持續(xù)集成;

8、有一定的文檔編寫(xiě)能力;

9、能適應(yīng)短期出差,有公安視頻圖像偵查業(yè)務(wù)方向經(jīng)驗(yàn)者優(yōu)先;

大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)2

職責(zé)：

1.負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的運(yùn)維保障;

2.負(fù)責(zé)大數(shù)據(jù)平臺(tái)的架構(gòu)審核、業(yè)務(wù)監(jiān)控、持續(xù)交付、應(yīng)急響應(yīng)、容量規(guī)劃等;

3.為線上服務(wù)高效穩(wěn)定運(yùn)行負(fù)責(zé)，支撐業(yè)務(wù)和數(shù)據(jù)量的快速擴(kuò)張;

4.負(fù)責(zé)生產(chǎn)及測(cè)試集群諸如故障定位恢復(fù)、系統(tǒng)安全、性能優(yōu)化等;

任職要求：

1.計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷，3年以上相關(guān)工作經(jīng)驗(yàn)

2.精通Hadoop大數(shù)據(jù)生態(tài)圈，熟悉Hadoop各組件的原理，并有實(shí)際部署維護(hù)經(jīng)驗(yàn);包括但不限于HDFS、YARN、Kafka、Spark、HBase、Kerberos、Hive、Kudu、Zookeeper等;

3.具備很強(qiáng)故障排查能力，有很好的技術(shù)敏感度和風(fēng)險(xiǎn)識(shí)別能力,良好的服務(wù)意識(shí)，善于團(tuán)隊(duì)協(xié)作，項(xiàng)目管理，主動(dòng)思考，自我驅(qū)動(dòng)力強(qiáng);

4.有相關(guān)動(dòng)態(tài)編排容器技術(shù)和虛擬化技術(shù)工作經(jīng)驗(yàn)者優(yōu)先;

5.深入理解Hadoop各組件的原理和實(shí)現(xiàn)，有閱讀源碼能力者優(yōu)先;

6.具備很強(qiáng)的ownership，故障排查能力，有很好的技術(shù)敏感度和風(fēng)險(xiǎn)識(shí)別能力。

大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)3

1、負(fù)責(zé)建設(shè)大數(shù)據(jù)平臺(tái)的規(guī)劃、架構(gòu)設(shè)計(jì)和技術(shù)選型;

2、開(kāi)發(fā)和使用Hadoop大數(shù)據(jù)自動(dòng)化運(yùn)維與監(jiān)控工具;

3、基于大數(shù)據(jù)應(yīng)用需求，負(fù)責(zé)優(yōu)化平臺(tái)的性能，消除性能瓶頸，解決業(yè)務(wù)的疑難問(wèn)題;

4、熟悉Hadoop、Hive、Hbase、Storm、Spark等技術(shù)框架; 熟悉java、scala、sqllite等相關(guān)技術(shù);具備軟件設(shè)計(jì)、編碼開(kāi)發(fā)測(cè)試、文檔編寫(xiě)的能力;

5、積極了解業(yè)界發(fā)展、互聯(lián)網(wǎng)相關(guān)新技術(shù)及趨勢(shì)，參與規(guī)劃公司大數(shù)據(jù)產(chǎn)品未來(lái)技術(shù)架構(gòu)方向;

6、負(fù)責(zé)大數(shù)據(jù)平臺(tái)內(nèi)部所涉及到的各類數(shù)據(jù)庫(kù)、數(shù)據(jù)存儲(chǔ)的搭建、備份、日常維護(hù)、性能調(diào)優(yōu);以及大數(shù)據(jù)平臺(tái)系統(tǒng)運(yùn)維、監(jiān)控和故障分析與處理;

7、能夠很好的和其它團(tuán)隊(duì)的同事溝通協(xié)作;

8、負(fù)責(zé)文檔的書(shū)寫(xiě)和完善，保證文檔的及時(shí)更新;

9、有大型開(kāi)源系統(tǒng)維護(hù)經(jīng)驗(yàn)優(yōu)先。

大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)4

職責(zé)

1、負(fù)責(zé)企業(yè)大數(shù)據(jù)平臺(tái)的運(yùn)行監(jiān)控維護(hù)，及時(shí)發(fā)現(xiàn)并解決平臺(tái)故障和數(shù)據(jù)處理異常;

2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的數(shù)據(jù)運(yùn)營(yíng)，開(kāi)展數(shù)據(jù)采集和數(shù)據(jù)清洗稽核，保障數(shù)據(jù)質(zhì)量，支撐應(yīng)用開(kāi)展需要，為數(shù)據(jù)應(yīng)用開(kāi)發(fā)團(tuán)隊(duì)提供支撐;

3、負(fù)責(zé)完善數(shù)據(jù)平臺(tái)的運(yùn)維監(jiān)控和數(shù)據(jù)質(zhì)量保障手段，負(fù)責(zé)相應(yīng)運(yùn)維腳本、數(shù)據(jù)分析腳本的開(kāi)發(fā)和部署;

4、對(duì)數(shù)據(jù)平臺(tái)運(yùn)營(yíng)情況進(jìn)行分析和總結(jié)，并提出優(yōu)化建議。

應(yīng)聘資格要求

1.屆全日制統(tǒng)招應(yīng)屆碩士及以上(特別優(yōu)秀的可放寬至本科)(不含專升本、二級(jí)學(xué)院)。

2.英語(yǔ)水平：達(dá)到國(guó)家四級(jí)或四級(jí)考試425分以上。

3.身體健康，舉止大方，具備良好的素質(zhì)修養(yǎng)。

4、較強(qiáng)的執(zhí)行能力、組織協(xié)調(diào)能力、學(xué)習(xí)分析能力、溝通協(xié)調(diào)能力及良好的文字表達(dá)能力。

5具有較高的企業(yè)忠誠(chéng)度和良好的道德修養(yǎng)，愛(ài)崗敬業(yè)，有事業(yè)心、責(zé)任心、團(tuán)隊(duì)合作精神。

大數(shù)據(jù)運(yùn)維工程師工作的崗位職責(zé)5

職責(zé)：

1、負(fù)責(zé)大數(shù)據(jù)環(huán)境的現(xiàn)場(chǎng)運(yùn)維和實(shí)施。

2、負(fù)責(zé)大數(shù)據(jù)環(huán)境的故障分析、問(wèn)題排除;

3、負(fù)責(zé)大數(shù)據(jù)環(huán)境(hadoop生態(tài))集群環(huán)境安裝、維護(hù)、部署、優(yōu)化。

任職要求：

1、精通Hadoop生態(tài)圈各個(gè)組件原理。

2、具備Hadoop/Kafka/Zookeeper/Spark/Storm/Flume/Hive等集群運(yùn)維經(jīng)驗(yàn)者優(yōu)先。

3、熟悉mysql、Oracle等主流數(shù)據(jù)庫(kù)

4、熟悉linux操作系統(tǒng)、shell腳本

5、掌握Python/Shell/Java中至少1種開(kāi)發(fā)語(yǔ)言;

相關(guān)