大資料開發工程師的工作職責模板（精選17篇）

大資料開發工程師的工作職責模板 篇1

職責：

1、獨立負責工作小組，並對下級成員進行監督;

2、具備資源整合以及對軟體專案全域性把控的能力;

3、負責軟體專案的系統設計和需求分析;

4、制定軟體專案開發計劃，並按時完成功能模組的設計、開發以及程式設計任務;

5、積極配合並完成主管下達的任務，並能夠對軟體部門的發展規劃提出意見;

任職條件

1、大資料相關開發經驗3年以上，至少具備2年以上java開發經驗;

2、有基於hadoop的資料抽取、轉換、載入的開發相關經驗;

3、熟練掌握hadoop生態的相關知識，如hive,hbase,a,storm,spark，mapreduce等;

4、熟悉Linux作業系統。熟悉linux各項基本操作，至少掌握一門指令碼語言;

5、熟練資料倉庫，對多維資料建模有深入理解;

6、有BI資料平臺、資料倉庫、日誌採集、多維資料倉庫設計、開發、架構經驗者優先;

7、思維敏捷，有較強的鑽研學習能力，較好的溝通能力、團隊合作;

大資料開發工程師的工作職責模板 篇2

職責

1、負責公司大資料平臺建設工作，完成Hdaoop/Spark搭建部署，根據業務需要進行開發;

2、開發實現網路爬蟲並爬取所需資料，有效儲存到大資料平臺;

3、對平臺數據做預處理，滿足資料展現及後續機器學習等系統使用;

4、根據業務需要，應用大資料實時分析技術、視覺化技術等，並對平臺發展規劃進行設計。

任職資格

1、本科及以上學歷，計算機相關專業;

2、熟悉資料倉庫和資料建模相關技術細節，有程式設計經驗，熟悉SQL/Hadoop/Hive/Hbase/Spark等大資料工具;

3、具備海量資料處理經驗，或有網際網路行業資料探勘工作經驗;

4、1年以上崗位經驗優先，本科應屆有意向的，可優先培養。

大資料開發工程師的工作職責模板 篇3

職責：

1、 參與ODS系統或Hadoop 系統資料庫相關開發,包括資料倉庫的資料模型設計(ODS層設計、基礎資料層設計、彙總層設計等);

2、 參與ETL Mapping設計及開發工作;

3、 參與客戶/使用者畫像、經營管理、產品畫像、營銷活動等主題域建設工作。

資質要求：

1.計算機相關專業本科及以上學歷，優秀者放寬至大專;

2.有大型資料庫(ORALCE/MSSQL SERVER等)開發經驗，有Sybase IQHIVESpark SQL開發經驗者優先;

3、有較強的SQL程式設計能力,熟練編寫儲存過程，能設計各種複雜的業務處理、統計分析語句，精通sql效能優化;

4、具有資料倉庫、ods、BI商務智慧專案經驗者優先，具有金融行業專案背景者優先;

5、較好的溝通理解能力，態度踏實，積極上進。

大資料開發工程師的工作職責模板 篇4

1、負責資料倉庫和大資料處理模組的架構設計和開發;

2、負責實現基於Spark框架的分散式計算框架的設計和開發工作;

3、負責Spark技術研究和通用資料平臺的效能調優;

4、負責大資料專案中，基於kafka、flume、spark streaming、Spark SQL等相關技術的海量資料的處理、分析、統計、挖掘工作。

5、熟悉Scala/Java語言，對Scala/Java原理、底層技術有深入研究者優先;

6、有過海量資料系統開發經驗者優先;

7、熟悉Hadoop/Spark生態系統元件的使用，至少有2年以上的Spark開發經驗;

8、寫過推薦系統的優先考慮

大資料開發工程師的工作職責模板 篇5

職責：

1.負責金融銀行大資料系統相關模組的資料架構及研發實施工作

2.依據業務場景、分析需求提供技術解決方案並加以實現;

3.與客戶業務部門對接，解決資料建模、報表和報告在系統開發遇到的問題;

任職資格：

1.具備3年以上DW系統建設經驗，瞭解BI系統，有資料管理經驗，有維度建模相關經驗，瞭解資料倉庫建設過程中的挑戰與問題

2.精通多系統資料融合、清洗、轉換、整合，具備海量資料加工處理相關經驗

3.熟悉業界資料倉庫建模方法、元資料管理、資料質量體系管理

4.掌握大型資料庫開發技術(ORACLE/DB2等)，有豐富的資料庫模型設計和優化經驗

5.熟練掌握Unix/Linux常規命令、工具及Shell程式設計

6.掌握一門或多門程式語言優先，如Java、Python、scala等

7.熟悉Hadoop、spark、kafka等大資料生態相關技術，有相關實踐經驗著優先8.良好的語言溝通與表達能力和自我驅動動力9.具備銀行專案設計、開發、優化等經驗者加分

大資料開發工程師的工作職責模板 篇6

職責：

1、負責平臺系統的開發工作;

2、參與系統設計以及核心程式碼的編寫;

3、處理日常發現的問題，配合各部門需求完成系統流程優化工作;

4、 參與重大專案的技術方案設計及技術評審，把握複雜系統的設計，確保系統的架構質量;

5、 為團隊引入創新的技術、創新的解決方案，用創新的思路解決問題。

任職要求：

1、大專及以上學歷，計算機相關專業，具有2年以上Web/PHP開發經驗;

2、熟練掌握 HTML/CSS 和 JavaScript 等 WEB 開發技術，熟練掌握 PHP語言，熟悉資料庫Mysql，擁有優秀的資料庫設計能力，熟悉php安全開發規範;

3、有線上教育類專案開發經驗優先，能處理高併發;

4、熟悉設計模式和演算法，深入瞭解PHP的效能最優化和安全最大化;

5、為人誠實正直，工作主動，有強烈的責任感和事業心。

大資料開發工程師的工作職責模板 篇7

職責：

1、參與大型網際網路Web系統的持續開發迭代，包括手機及PC的前後端開發工作

2、快速分析理解業務場景和產品需求，根據業務流程和原型圖、高保真設計方案等開展功能設計和程式碼開發工作，並檢測成果進行交付

3、遵循系統架構和資料模型架構，進行功能設計和編碼，嚴格遵循開發規範的要求

技能要求：

1、本科及以上學歷(學歷不符合請勿投遞)，一年以上經驗，有較紮實的Java基礎

2、熟悉SpringMVC，MyBatis等常用框架

3、熟悉MySQL資料庫，熟悉SQL

4、熟悉HTML、JavaScript、CSS等Web前端開發技術

大資料開發工程師的工作職責模板 篇8

職責：

1. PHP類專案和網站平臺開發專案管理;負責專案或產品的需求分析、架構設計和技術實施服務;

2. 對產品部門提出的需求進行系統分析和設計; 制定開發規範，參與制定技術標準，編寫相應的技術文件。

3. 負責產品研發/實施過程中的模組核心編碼、文件編寫、效能調優等;

4. 負責整個專案的架構設計，任務分配，專案管理等工作。

崗位要求：

1、3年以上的PHP/MySQL開發經驗，熟悉面向物件，具備資料庫應用系統的規劃及設計能力;

2、熟悉大型網站構架和效能優化，熟悉各種WEB快取技術，對web安全有豐富的認識和經驗;

3、熟悉Linux/Unix基本操作，熟悉Apache、MySQL、PHP等軟體的編譯安裝和最優化配置;

4、能熟練使用HTML，CSS，JavaScript，ajax，jQuery等技術進行web應用開發

5、具備強烈的進取心、求知慾及團隊合作精神;

6、優化並遵守團隊的程式碼格式、結構的規定，編寫易讀、易維護、高質量、高效率的程式碼;

7、邏輯思維能力強，做事有條理，具備較強的分析問題和解決問題的能力，工作積極主動、嚴謹負責;

8、有大型入口網站、社群網站等的開發經驗者優先;有豐富的專案管理經驗者優先。

大資料開發工程師的工作職責模板 篇9

職責：

1、根據專案要求，承擔開發任務，按計劃完成任務目標;

2、獨立完成軟體模組的編碼;

3、協助測試人員完成軟體系統及模組測試;

4、編制與專案相關的技術文件;

5、對已有系統進行系統維護及bug跟蹤修改。

任職要求：

1、計算機或相關專業本科及以上學歷;有意從事資訊系統管理軟體的開發維護。

2、熟悉JAVA 程式設計或從事B/S開發一年以上工作經驗者優先;

3、熟悉MVC設計模式、J2EE架構等java相關技術;

大資料開發工程師的工作職責模板 篇10

職責：

1、負責公司基礎平臺的自動化指令碼搭建、優化及日常維護工作、系統整合測試

2、負責系統性能調優及系統異常的排查

3、負責監控體系部署和優化，參與公司網路、硬體、系統等層面的標準化及自動化工作

4、其他系統相關的日常維護工作

任職要求：

(一)基本要求

1、學歷要求：本科及以上學歷

2、專業要求：計算機或相關專業，較好的英文閱讀能力

3、工作經驗：2年以上自動化指令碼開發工作經驗

(二)技術要求

1、計算機相關專業本科或以上學歷、2年以上運維工作經驗，熟悉TCP/IP協議、Linux系統及核心相關知識;

2、熟練掌握運用1種以上的指令碼語言，包括：golong,Shell、Python、perl等;

3、熟練Linux下常規軟體的使用，如LNMP、LVS、NTP、DNS等，善於部署與優化;

4、能夠熟練排查運維過程中出現的服務故障、系統故障、網路故障等;

5、熟悉KVM、LXC等虛擬化技術優先，有docker、K8S的運維經驗者優先;

6、熟悉公有云、混合雲、私有云，使用過阿里雲相關中介軟體產品(EDAS、DRDS、MQ、OceanBase)者優先;

7、搭建自動化測試環境，同時能夠承擔部分軟體測試工作。

(三)能力要求

1、熟練使用docker容器工具和linux系統命令

2、喜歡去看及嘗試新技術，樂於分享，能有效的表達。

大資料開發工程師的工作職責模板 篇11

職責：

1、負責APP或網站後臺程式計、開發和維護;

2、構建穩定、安全、高效、可擴充套件的海量服務後臺架構;

3、進行軟體需求分析，架構設計，制定開發計劃;

4、完成軟體程式碼的詳細設計、編寫、整合與測試;

5、解決專案實施過程中出現的技術問題;

6. 組織及帶領開發組員完成開發任務。

任職要求：

1、計算機或相關專業專科或以上學歷;

2、2年以上PHP開發經驗，能夠獨立編寫中等規模PHP應用程式;

3、熟悉Mysql、Memcached、Mongodb、Activemq、Redis等元件的使用;

4、熟悉ThinkPHP框架或YII框架;

5、具備良好的程式設計習慣和規範;

大資料開發工程師的工作職責模板 篇12

職責：

1.參與需求分析。負責專案整體規劃、功能設計、程式開發工作。

2.對所編寫的程式進行嚴格的綜合測試，進行軟體故障的診斷、定位、分析和除錯。

3.負責專案完善及必要的二次開發。

4.與團隊協作進行系統級的程式碼優化，保證程式的安全、效率和可擴充套件性。

5.負責系統性能優化和技術攻關。

6.按照要求完成相關開發文件的整理與編寫。

任職要求：

1. 三年及以上後端開發經驗;

2. 精通PHP開發語言，熟悉常用的框架等;

3有大中型規模的產品架構設計和獨立開發經驗優先;

3. 具有一定的MySql優化經驗，精通PHP+MYSQL程式設計和MySQL資料庫

4瞭解HTML5、CSS3、Jquery、Ajax等前端技術; 具有一定的前端開發能力;

5、精通常見第三方平臺介面的開發流程;

6. 具有很好的團隊合作意識、工作協同意識;

7、具備根據業務和團隊進行技術選型架構能力。

大資料開發工程師的工作職責模板 篇13

職責：

1、負責架構需求分析，功能設計，程式碼結構設計;

2、負責組織編寫開發文件，使用說明文件;

3、負責核心程式碼設計，開發，優化;

4、負責BUG修復，新功能開發，現有模組功能優化或程式碼重構;

5、負責某塊功能或者站點的後續維護，程式碼或結構優化。

任職要求：

1.本科以上學歷，3-5年或以上PHP開發經驗;

2.熟悉LNMP環境的使用及搭建、除錯、排錯、優化、部署等;

3.熟悉MySQL資料庫開發及常用優化方法;

4.熟悉Redis，等快取技術;

5.熟悉Laravel、Phalcon、ThinkPHP中至少一種框架;

6.熟悉Linux常用命令;

7.掌握常見場景設計，如訊息佇列、快取、高併發、高可用、高負載等(有千萬級流量網站開發經驗優先);

8.熟悉html/css/js及jQuery等框架者優先;

9.熟悉Lua、GoLang、Python、Kafka等技術者優先。

大資料開發工程師的工作職責模板 篇14

職責：

1、負責資料中心和大資料處理平臺的搭建

2、線上和離線海量資料分析平臺的開發;

3、研究大資料前沿技術，提升系統的運維效率;

4、參與大資料的採集、儲存、處理，分析等開發

5、參與資料探勘演算法的設計、對海量資料進行挖掘分析和發掘資料價值及演算法學習及實現

【任職要求】：

1、計算機或相關專業本科學歷及以上，2年工作經驗以上

2、熟悉Java/Scala等至少一門語言，能對分散式常用技術進行合理應用，解決實際架構問題

3、熟練使用hadoop，hive，HBase，YARN，kafka，spark，Storm,Flume等大資料開發元件

4、熟悉整個大資料的完整處理流程，包括資料的採集、清洗、儲存、分析和視覺化及報表開發;

5、熟悉分散式系統概念、架構，有大規模分散式系統設計、實現、部署等經驗;

6. 具有優秀的學習能力、獨立分析和解決問題能力，良好的團隊合作精神。

7. 有BI開發經驗的優化考慮。

大資料開發工程師的工作職責模板 篇15

職責：

1. 負責公司產品資料庫的整合，從多個供應商的資料庫中獲取所有的產品和使用者資訊;

2. 負責同亞馬遜AWS溝通，合理搭建，配置API資料的對接，保證資料庫的完整和正常執行;

3. 負責對資料庫資料的統計分析，開發對應的統計分析系統;

4. 負責資料庫同應用軟體的開發設計，除錯;

5. 負責日常資料庫的維護，及時處理不良故障。

任職資格：

1. 熟悉oracle的體系結構，精通oracle資料開發能力;

2. 熟悉mysql，sqlserver，DB2的日常維護，熟悉mysql的主從複製，sqlserver的備份恢復等技術;

3. 有5年資料開發工作經驗;

4. 有獨立開發MySQL資料庫者，優先;

5. 溝通能力強，能充分與周邊團隊合作，可承擔一定的工作強度，能滿足突發事件的處置及加班要求。

大資料開發工程師的工作職責模板 篇16

職責：

1、負責公司資訊平臺系統、移動端應用介面的後臺開發及維護;

2、負責對接產品的開發需求;

3、與移動端的技術銜接，完成產品的迭代更新;

4、負責平臺系統的後臺維護、優化;

5、負責平臺系統的資料庫設計以及優化;

6、支援運營部門工作，根據小工具開發需求，進行技術實現;

7、帶領團隊按照需求完成系統開發的週期評定、過程監督。

要求：

1、大專及以上學歷，具有 5 年以上PHP軟體開發實際工作經驗，懂Web前端或H5更佳;

2、具備帶領技術團隊的經驗;

3、熟練使用ThinkPHP等框架，熟練掌握OOP開發、MVC模式;

4、熟練運用DIV+CSS等前端技術，尤其是對 VUE2.0 框架較為熟悉;

5、熟悉MySQL資料庫以及效能優化，對資料庫效能表現各方面有較深入瞭解;

6、熟悉PHP的快取技術，對Linux系統能獨立安裝配置Apache、Nginx等應用伺服器;

7、良好的溝通能力並具備極強的責任心，主動性強。

大資料開發工程師的工作職責模板 篇17

職責：

1、負責公司內部業務系統的開發;

2、參與需求分析，與使用者溝通，為使用者問題提供解決方案;

3、參與系統設計、編寫文件;

4、按照工作流程，完成開發過程中的單元測試、評審、程式碼或文件交付等工作。

任職資格:

1、本科及以上學歷，2年及以上JAVA開發經驗

2,、Java基礎紮實，理解IO、多執行緒、集合等基礎知識，對JVM有一定了解;

3、熟練使用Eclipse開發工具;熟悉JSP、Servlet等Web開發相關技術;

4、熟練使用Struts、Spring、Hibernate/Mybatis等常用開發框架;熟悉主流應用伺服器如WebLogic、Tomcat中至少一種;

5、熟練HTML、CSS、JavaScript和Ajax技術;

6、熟悉主流資料庫(如Oracle，Mysql)，熟練使用SQL語言;

7、有從事保險相關係統開發經驗或者有相關保險業務知識的優先。