大數(shù)據(jù)架構師工作的職責

大數(shù)據(jù)架構師負責大數(shù)據(jù)系統(tǒng)設計、功能模塊設計，數(shù)據(jù)平臺的搭建、維護和優(yōu)化。下面是小編整理的大數(shù)據(jù)架構師工作的職責。

大數(shù)據(jù)架構師工作的職責1

職責：

1、負責大數(shù)據(jù)項目平臺架構的評估、規(guī)劃和設計

2、開發(fā)大數(shù)據(jù)平臺的核心模塊代碼，負責大數(shù)據(jù)平臺的搭建，完成系統(tǒng)調(diào)試、集成與實施，保證大數(shù)據(jù)產(chǎn)品的上線運行

3、根據(jù)業(yè)務需求整合優(yōu)化數(shù)據(jù)架構，保證產(chǎn)品的可靠性、穩(wěn)定性

4、指導開發(fā)人員完成數(shù)據(jù)模型規(guī)劃建設，分析模型構建及分析呈現(xiàn)

5、深入研究大數(shù)據(jù)相關技術和產(chǎn)品，跟進業(yè)界先進技術;

6、根據(jù)項目要求編寫相關技術文檔;

7、負責大數(shù)據(jù)平臺的架構評審，代碼評審，上線評審;參與數(shù)據(jù)應用需求、設計、審核和評審;

8、負責核心模塊研發(fā)，負責大數(shù)據(jù)平臺的搭建，完成系統(tǒng)調(diào)試、集成與實施;

9. 負責關鍵功能的開發(fā)，技術難題的解決，以及輸出代碼的關鍵把控;

10. 負責對使用關鍵技術的預研和選型，完成 PoC ;

11. 指導工程師完成開發(fā)工作，并能分享技術經(jīng)驗。

任職資格:

1、精通Linux操作系統(tǒng)，熟練使用Java;

2、3年以上大數(shù)據(jù)項目實戰(zhàn)經(jīng)驗，兩個項目的架構設計經(jīng)驗，熟悉Hadoop、Hbase、Storm、Spark、Pig等開源框架，并熟悉其工作原理;

3、有Hadoop、Spark、Hbase平臺性能調(diào)優(yōu)經(jīng)驗;

4、熟悉其它分布式存儲相關技術，包括HDFS，Hive、Redis、Mongodb、 Flume、Kafaka、Sqoop、Zookeeper、ElasticSearch等;

5、熟悉Java開發(fā)常用框架.如Spring、MyBatis等;

6、熟悉關系型數(shù)據(jù)庫如oracle及數(shù)據(jù)庫編程。

7、能夠根據(jù)項目情況安排人力、分配任務，具有較強的團隊管理能力。

8、碩士以上學歷，10年以上的工作經(jīng)驗。

大數(shù)據(jù)架構師工作的職責2

職責：

1. 負責設計企業(yè)級大數(shù)據(jù)平臺的整體架構，從技術層面制定清晰的大數(shù)據(jù)產(chǎn)品與系統(tǒng)技術架構，并負責實現(xiàn)關鍵技術和產(chǎn)品。

2. 負責設計具有創(chuàng)新價值的大數(shù)據(jù)底層平臺、大數(shù)據(jù)上層應用系統(tǒng)等，帶領團隊完成有質(zhì)變的技術解決方案。

3. 負責組織同事研究行內(nèi)最前沿的技術發(fā)展方向，突破現(xiàn)有的技術難題。

4. 負責研究院對外項目合作協(xié)調(diào)與支持，編寫項目建設方案及后期項目建設支持。

任職要求：

1. 碩士及以上學歷，計算機相關專業(yè)。

2. JAVA基礎扎實,不少于8年的一線開發(fā)經(jīng)驗，精通Spring boot/MyBatis/Restful API的開發(fā)與管理. 熟悉ReactJS/Angular/Vue之一前端開發(fā)技術，熟悉Maven或Ant.，熟悉Python語言開發(fā)加分。

3. 不少于4年大數(shù)據(jù)的直接研發(fā)經(jīng)驗，精通Hadoop/Spark系統(tǒng)，有hands-on的架構設計、性能調(diào)優(yōu)、開發(fā)經(jīng)驗。有MongoDB、Kafka、Hbase/Cassandra/Storm/Hive 等系統(tǒng)的開發(fā)經(jīng)驗。

4. 掌握分布式系統(tǒng)原理，對分布式存儲、流式計算、消息隊列中的一項或多項有深入的理解和認識。

5. 熟悉分布式系統(tǒng)的監(jiān)控、運維、故障恢復，高可用原理和設計理念。

6. 算法基礎扎實，熟悉常見的數(shù)據(jù)結構，掌握大規(guī)模高并發(fā)訪問、大數(shù)據(jù)開發(fā)等處理經(jīng)驗;熟練的Linux系統(tǒng), 網(wǎng)絡, 內(nèi)存和存儲等方面知識。

7. 必須要有千萬級別的項目管理經(jīng)驗，包括但不限于前期需求溝通，建設方案編寫，中期項目實施，進度匯報，后期項目維護。

大數(shù)據(jù)架構師工作的職責3

職責：

把控大數(shù)據(jù)系統(tǒng)及全公司的產(chǎn)品做技術選型和架構設計;

負責公司產(chǎn)品需求技術解決方案的編制設計工作,并能夠將解決方案清晰地傳達給項目組成員;

主導項目關鍵技術問題的攻關,協(xié)助項目管理對技術問題進行跟進;

協(xié)助解決具體研發(fā)過程中的問題;

定期進行新技術研究和匯報;

對產(chǎn)品線進行技術方案支持，及客戶、市場技術調(diào)研

任職要求：

1. 全日制綜合類大學本科及以上學歷，計算機科學與技術、信息工程、大數(shù)據(jù)、通訊相關專業(yè)(如有特殊經(jīng)歷者酌情考慮);

2. 擁有多年系統(tǒng)設計與開發(fā)工作經(jīng)驗，深刻理解計算機、互聯(lián)網(wǎng)有關技術與理論、設計模式，深刻理解多線程、內(nèi)存數(shù)據(jù)庫、分布式系統(tǒng)、大數(shù)據(jù)相關的設計、架構規(guī)劃、開發(fā)經(jīng)驗者優(yōu)先;

3. 深入理解各類技術與產(chǎn)品的原理與思想，有較強需求分析和技術設計與實現(xiàn)能力;

大數(shù)據(jù)架構師工作的職責4

職責：

1、正確理解業(yè)務需求，對需求進行工作量評估;

2、參與項目相關的需求、設計、投產(chǎn)手冊等文檔的編寫;

3、根據(jù)進度計劃，完成所承擔功能模塊的設計、開發(fā)、單元測試、聯(lián)調(diào)測試;

4、配合測試組修復代碼缺陷，確保功能實現(xiàn)與代碼質(zhì)量;

5、負責所承擔功能模塊投產(chǎn)、部署，及上線后的日常維護;

6、完成項目經(jīng)理或者架構師安排的其他工作;

任職資格：

1、本科以上學歷，計算機相關專業(yè)，兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗;

2、熟悉Linux 環(huán)境，掌握shell或python;

3、熟練使用hadoop，hive，HBase，YARN，kafka，spark等大數(shù)據(jù)開發(fā)組件;

4、精通 ETL，數(shù)據(jù)倉庫的設計和開發(fā);

5、有大數(shù)據(jù)處理實戰(zhàn)經(jīng)驗，熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲;

6、較強的動手能力和學習能力，良好的溝通能力、團隊協(xié)調(diào)能力;

7、具有銀行、金融行業(yè)從業(yè)背景者優(yōu)先。

大數(shù)據(jù)架構師工作的職責5

職責：

1. 負責大數(shù)據(jù)基礎平臺、海量數(shù)據(jù)存儲/處理分布式平臺、數(shù)據(jù)分析系統(tǒng)架構設計和研發(fā);

2. 負責實時計算平臺基礎架構設計、部署、監(jiān)控、優(yōu)化升級;

3. 制定項目/數(shù)據(jù)倉庫設計及實現(xiàn)規(guī)范，指導設計研發(fā)和部署;

4. 協(xié)助策略和算法團隊工作，保障數(shù)據(jù)挖掘建模和工程化;

5. 深入研究大數(shù)據(jù)相關技術和產(chǎn)品，跟進業(yè)界先進技術。

任職要求：

1. 全日制本科及以上學歷，5年以上軟件和分布式系統(tǒng)研發(fā)經(jīng)驗，3年以上大數(shù)據(jù)系統(tǒng)架構經(jīng)驗;

2. 精通Hadoop/HBase/Spark/Storm/Redis技術及其生態(tài)圈;

3. 具備Java/C++/Scala等開發(fā)經(jīng)驗，熟悉數(shù)據(jù)挖掘和分析的策略與算法;

4. 具備良好的系統(tǒng)分析能力、故障診斷能力;

5. 有大數(shù)據(jù)策略、算法、可視化經(jīng)驗優(yōu)先;

6、211/985 重點學校畢業(yè)優(yōu)先。