網站首頁 工作範例 辦公範例 個人範例 黨團範例 簡歷範例 學生範例 其他範例 專題範例
當前位置:三優範文網 > 文祕 > 崗位職責

大資料開發工程師的職責文字(精選17篇)

欄目: 崗位職責 / 釋出於: / 人氣:1.7W

大資料開發工程師的職責文字 篇1

職責:

大資料開發工程師的職責文字(精選17篇)

1、負責資料中心和大資料處理平臺的搭建

2、線上和離線海量資料分析平臺的開發;

3、研究大資料前沿技術,提升系統的運維效率;

4、參與大資料的採集、儲存、處理,分析等開發

5、參與資料探勘演算法的設計、對海量資料進行挖掘分析和發掘資料價值及演算法學習及實現

【任職要求】:

1、計算機或相關專業本科學歷及以上,2年工作經驗以上

2、熟悉Java/Scala等至少一門語言,能對分散式常用技術進行合理應用,解決實際架構問題

3、熟練使用hadoop,hive,HBase,YARN,kafka,spark,Storm,Flume等大資料開發元件

4、熟悉整個大資料的完整處理流程,包括資料的採集、清洗、儲存、分析和視覺化及報表開發;

5、熟悉分散式系統概念、架構,有大規模分散式系統設計、實現、部署等經驗;

6. 具有優秀的學習能力、獨立分析和解決問題能力,良好的團隊合作精神。

7. 有BI開發經驗的優化考慮。

大資料開發工程師的職責文字 篇2

職責:

1、負責完成業務和產品的對接,支援業務需求研發;

2、負責完成產品的迭代升級以及底層架構的升級研發;

3、完成團隊安排的其他相關日常工作任職要求;

4、負責產品的實時業務和離線業務的研發;

5、支援開源大資料技術在資料系統中的使用,修復、優化增強大資料技術;

崗位要求:

1、具有分散式系統架構開發能力,熟練使用storm、spark hbase者優先。

2、能夠使用實時計算平臺,進行實時業務資料的研發。

3、能夠基於已有平臺進行離線業務的開發。

4、有大資料應用產品研發經驗,具有資料決策產品研發經驗者優先。

大資料開發工程師的職責文字 篇3

職責:

1、負責資料採集、資料儲存、資料查詢、資料計算等基礎平臺的設計和開發工作;

2、利用Hadoop、Spark、Flink等技術進行離線和實時資料開發 ;

3、負責大資料平臺的規劃升級、平臺維護和優化 ;

4、和其他部門或團隊溝通、資源協調並落實工作。

任職要求

1、本科及以上學歷;

2、3年以上大型大資料平臺建設實施經驗 ;

3、掌握常用大資料元件hadoop、Hive、spark、Flink、hbase、elasticsearch等原理、使用和調優 ;

4、具備較強技術功底,精通Java、Scala、Python等至少一種開發語言,能根據需求給出技術架構 ;

5、有資料倉庫、元資料管理和治理的開發經驗優先 ;

6、善於溝通,思維活躍、責任感強、工作積極主動,有良好的團隊協作意識。

大資料開發工程師的職責文字 篇4

職責:

1、負責該領域的業務需求討論,完成技術方案及資料開發;

2、負責資料倉庫的體系建設及落地實現;

3、負責大資料平臺各類環境的部署及運維、並參與架構優化、效能優化等工作;

4、負責該領域所屬模組的程式碼開發、除錯與維護工作,並進行技術沉澱和文件輸出。

招聘要求:

1、計算機、電子通訊、自動化等專業,本科及以上學歷;

2、五年以上研發經驗,其中二年以上大資料開發的相關工作經驗;

3、熟練JAVA開發語言;熟悉微服務及Spring框架;

4、熟練熟練Hive、Impala、ES效能調優,關注細節,學習能力強;

5、能配合團隊完成該領域的工作,自我管理能力強,能承受工作中的各種壓力,具備很好的團隊意識

6、熟練主流大資料平臺產品部署及運維,如CDH、HDP平臺。

7、對機器學習和深度學習等方面有一定的瞭解;

8、有汽車製造業及相關行業的大資料開發經驗優先。

大資料開發工程師的職責文字 篇5

職責:

1.結合專案或產品涉及的具體業務場景,對資料進行清洗、計算與加工;

2.思路清晰,可快速響應資料處理的需求,評估並給出合理的解決方案,並採用合理的方式處理需求;

3.積極主動,能夠與團隊成員進行有效溝通,並完成資料處理結果的核對與對接;

4.完成上級交辦的工作或任務。

崗位要求

1.計算機相關專業大專以上學歷;

2.2年以上大資料產品或專案開發經驗,精通Hadoop生態圈,熟練使用Spark,HBase、Hive、Kafka、Redis等;

3.精通SQL,熟練使用HSQL實現複雜資料處理邏輯,並具備資料處理調優的能力;

4.熟悉Linux開發環境,熟悉Linux的shell命令。

5.具有良好的邏輯思維能力和嚴謹的程式開發思想,具備獨立問題排查與處理的能力;

6.良好的團隊精神和合作意識,強烈的責任心,對工作有激情,良好的溝通能力,能吃苦耐勞;

7.有大資料專案或產品背景者優先;

8.有使用Spark SQL進行資料處理,並具有Spark SQL優化經驗者優先。

9.有Python或者Shell指令碼開發經驗優先

大資料開發工程師的職責文字 篇6

職責:

1、負責根據需求調研結果,進行功能設計、詳細設計;

2、負責需求和設計過程中相關文件的編制;

3、負責核心程式碼的編碼和單元測試;

4、對技術難點進行攻關,並負責知識釋出和知識傳遞。

任職要求:

1、全日制公立本科以上學歷,計算機相關專業;

2、有3年以上基於J2EE B/S結構軟體的開發經驗;

3、熟悉HTML、JavaScript、AJAX等相關WEB技術,熟練掌握JQuery類庫;

4、熟悉Servlet、JSP、JavaBean、XML等知識;

5、熟悉spring、springMVC、mybatis框架;

6、熟悉資料庫開發,熟悉ORACLE等;

7、有良好的學習能力、團隊協作能力,主動溝通能力;

8、愛崗敬業,服從指揮,認真負責;

大資料開發工程師的職責文字 篇7

職責:

1、負責參與資料庫選型、給出資料庫設計方案、優化方案;

2、負責資料庫故障恢復、備份、調優;

3、負責監控資料庫資源消耗情況、資料庫執行日誌、故障日誌,給出解決方案;

4、負責資料庫安裝和配置管理;

5、負責解決資料庫、資料方面的問題。

任職要求:

1、本科以上學歷,計算機及相關專業;

2、兩年以上的資料庫開發經驗;

3、熟悉oracle或者greenplum等常見關係型資料庫,有開發儲存過程(PL/SQL)的經驗;

4、熟悉SQL調優;

5、熟悉資料庫叢集、分庫、分表等操作的優先考慮;

6、有greenplum資料開發的經驗優先考慮。

大資料開發工程師的職責文字 篇8

1. 進行UE4影象效果方面的技術研發,有很強的邏輯思維和獨立解決問題的能力;

2. 使用UE4進行核心功能模組開發,框架搭建,演算法編寫等工作;

3. 精通UE4引擎中的功能模組,精通C++以及藍圖,有技術攻關能力;

4. 紮實的圖形學和3D數學能力;

5. 開發實現unreal4引擎中的各種圖形效果,包含海水系統、模型shader、毛髮系統、布料系統、光照系統

6. 建立工具外掛,以優化引擎視訊效果和美術資源製作流程

7. 瞭解虛幻4渲染管線基本原理

8. 有虛幻4遊戲底層架構經驗者優先(網路層,資料層,邏輯層,UI架構)

大資料開發工程師的職責文字 篇9

職責:

1、開發網站新功能、新模組;

2、負責專案產品各個功能的完善與維護,新功能程式碼編寫及測試;

3、對現有專案進行效能分析、效率優化;

4、參與需求分析、系統設計以及核心程式碼的編寫和架構設計;

5、根據不同的業務需求,靈活快速地完成具有挑戰性的專案;

任職資格:

1、從事PHP程式設計工作3年以上,有大型網站開發經驗、大資料操作經驗者優先;

2、深入理解oop思想,熟悉常見設計模式,熟悉常用框架thinkphp或CI或YII其中一種;

3、優秀的資料庫設計和優化能力,精通Mysql資料庫應用;

4、熟悉Javascript/Ajax/Jquery等相關技術,熟悉前後端技術動向;

5、熟練掌握redis,MongoDB等NoSql, 掌握Elasticsearch

大資料開發工程師的職責文字 篇10

跟客戶溝通,整理分析需求;

制定設計文件進行開發,測試;

撰寫必要的文件。

工作要求:

1年以上MES開發或實施經驗;

2年以上專案開發經驗,熟悉SpringMVC/Struts,Hibernate/MyBatis等開發框架;

熟練掌握面向物件的分析及設計方法,以及關係型資料庫結構設計;

熟悉HTML,CSS,Javascript,jQuery等指令碼語言,瞭解Ajax原理;

有良好的表達和溝通能力,能整理和撰寫設計和開發文件;

樂於學習新技術,有團隊合作精神與集體榮譽感。

大資料開發工程師的職責文字 篇11

職責:

1、根據開發進度和任務分配,完成相應模組的開發、程式設計任務;

2、參與維護並不斷髮現和改進存在的問題、不斷提升系統性能;

3、積極參與產品、功能與技術架構的改進、參與技術規範的實施。

任職要求:

1.、1-3年以上PHP開發經驗,熱愛軟體開發工作;

2、精通PHP語言,熟悉常用主流框架Laravel、thinkphp等;

3、熟悉MVC開發模式,深入瞭解php的效能和安全,能獨立完成模組設計和開發;

4、精通MySQL資料庫,熟悉資料庫設計和效能優化;

5、熟練使用linux系統,熟悉nginx等web伺服器的配置和優化。

6、熟悉並開發過微信公眾平臺的優先

大資料開發工程師的職責文字 篇12

職責:

1. 對資料進行結構化、標準化處理,對處理流程進行自動化搭建

2. 通過ETL/Cube資料建模,構建基於資料倉庫的分析工具;

3. 參與資料與公司軟體產品及第三軟體的API對接;

4. 搭建與優化,資料採集、處理、視覺化流程中所需的框架與模組開發;

5. 協同內外部力量完成需求的表達與技術攻關。

任職要求:

1. 熟悉資料庫的設計和開發如:Oracle/Mysql/MSSQL/Redis等,有處理大量資料經驗的優先;

3. 熟練使用ETL工具進行資料抽取,清洗,轉換,關聯等操作;

4. 熟練使用Linux作業系統,具備編寫shell的能力;

5. 熟練使用主流的開發框架,掌握以下語言:Java、Python;瞭解過原始碼的優先;

6. 具有2年以上資料倉庫(DW)、商務智慧(BI)、大資料等方面的軟體或專案開發經驗;

7. 瞭解視覺化及BI工具者優先;

大資料開發工程師的職責文字 篇13

職責:

1、負責專案相關模組功能的開發;

2、維護及優化線上系統性能,提升其穩定性;

3、及時響應並解決系統突發問題。

任職要求:

1、大專及以上學歷,2年以上PHP為主的中大型網際網路產品軟體的開發及維護工作經驗;

2、熟練掌握Laravel、 Thinkphp 框架使用開發;

3、熟悉Linux的基本使用;

4、熟悉Mysql資料庫,熟悉redis、memcached使用及應用場景;

5、熟悉http協議、html/xhtml、javascript等前端技術棧;

6、有微信公眾號、微信小程式相關開發經驗優先。

大資料開發工程師的職責文字 篇14

職責:

1、負責公司CMS系統優化和新產品開發;

2、按照專案計劃,與專案組其他成員協同工作實現開發目的;

3、協助工程師測試和釋出系統,準備相關的技術文件,協助解決各種技術問題;

4、負責文件撰寫,在前期期間設計交付URL介面文件、模板資料描述文件,在編碼期間能撰寫清晰明瞭的註釋。

任職資格:

1、熟練基於windows/Linux系統的 PHP+MySQL 開發;

2、相關專業畢業,1年以上PHP程式設計經驗,熟悉Ajax的前臺技術;

3、擁有良好的程式碼習慣,要求結構清晰,命名規範,邏輯性強,程式碼冗餘率低;

4、熟悉ThinkPHP框架開發或者二次開發的優先;

5、能獨立用php開發一般的專案,對軟體程式設計有較透徹的瞭解;

6、良好的溝通能力和團隊合作精神。

大資料開發工程師的職責文字 篇15

職責:

1、 與UI設計師、互動設計師、產品經理協作,分析並給出較優的移動介面前端結構解決方案和效果實現;

2、 與後臺開發工程師協作,完成各種資料互動、動態資訊展現和使用者的互動;

3、 維護及優化移動端前端頁面執行效能和載入效能,優化前端程式碼規範;

4、 負責解決產品在不同移動裝置端及不同版本下的相容問題;

5、 根據產品開發需要,配合相關人員完成產品各部分設計的更新和修改;

任職要求

1、 熟悉微信小程式開發,有實際專案經驗的優先;

2、 熟悉微信H5開發,瞭解微信jssdk;

2、 熟練運用HTML5、CSS3、Javascript/Jquery/zepto構建高效能的Web應用程式;

3、 熟練使用CSS3動畫,並有一定的專案經驗;

4、 熟悉前端相關標準,對前端語義化、瀏覽器相容性問題有深入理解;

5、 良好的程式碼習慣,結構清晰。命名規範,邏輯性強;

6、 良好的人際溝通與團隊創作能力,能夠按時完成安排的任務。

大資料開發工程師的職責文字 篇16

職責:

1.進行產品需求分析和系統架構設計,負責公司核心業務模組開發,能獨立攻關係統難點問題。

2.編寫系統架構文件、介面說明文件及主要業務流程圖等開發文件。

3.進行團隊技術管理,為每個版本制定準確的開發計劃並分配給下屬人員進行開發。

4.程式碼審計,指導國中級開發人員編碼,協助參與程式碼設計、稽核和檢查。

5.參與系統穩定性、效能和擴充套件性除錯。

任職要求:

1.計算機、電子、通訊、資訊處理、電子商務、辦公自動化等相關專業大專以上學歷,有5年以上相關軟體開發經驗;

2.精通web mvc框架、Java、JavaScript,熟悉JSP/Servlet、JavaScript、Ajax、Jquery等WEB技術,至少精通Struts、Spring、Hibernate、iBatis等主流的開源框架之一;

3.有分散式、高可用、高併發系統開發經驗,熟悉Dubbo等分散式框架並有應用經驗;

4.熟練使用Oracle、MySQL、SQL Server資料庫之一,有資料庫效能問題診斷及SQL語句調優經驗;

5.熟悉Linux作業系統,熟悉Shell指令碼,熟練使用SVN或Git版本管理工具;

6.熟練使用WebLogic、Tomcat、WebSphere等web應用伺服器之一,熟悉nginx、Apache等的安裝、配置;

7.參與過大型專案軟體的開發,有團隊精神和敬業精神,具備良好的自我學習能力和獨立的解決問題能力,能夠帶領小團隊在指定時間內完成高質量程式;

大資料開發工程師的職責文字 篇17

職責:

1.、負責平臺web前端和webapp端設計和開發;

2.、設計和實現面向開發者的平臺套件和功能元件;

3、通過前端自動化構建工具和測試工具,對現有模組進行完整構建和測試;

4、完成前端核心模組的相關文件;

5、2年以上web應用程式開發經驗,至少1年web站點的實際開發經歷;

6、與設計師、產品工程師緊密工作在一起,負責產出高質量的產品前端層;

7、在理解前端開發流程的基礎上,結合前端實際建立或優化提升工作效率的工具;

8、參與多種平臺的應用開發,包括Web及Mobile等產品,負責前端互動的實現。

任職要求:

1、熟練掌握Web及H5前端開發技術,有複雜應用開發及效能調優經驗;

2、能充分理解專案需求和設計需求,具有一定研發精神,能解決各種未知問題;

3、能熟練高效手工編寫HTML及CSS、JS程式碼,熟悉DIV+CSS佈局,確保程式碼對各種

瀏覽器的良好相容性;

4、熟練掌握一種以上js框架Vue或是React 技術棧,瞭解 webpack的使用和原理,對

http協議有一定理解;

5、熟悉Git版本管理和了解Git-flow;

6、熟悉、redux、React Native;

7、有開源專案經驗優先,熟悉伺服器端語言者優先;

8、瞭解模組化、前端編譯和構建工具;