網站首頁 工作範例 辦公範例 個人範例 黨團範例 簡歷範例 學生範例 其他範例 專題範例
當前位置:三優範文網 > 文祕 > 崗位職責

大資料開發工程師崗位的職責描述(通用23篇)

欄目: 崗位職責 / 釋出於: / 人氣:1.86W

大資料開發工程師崗位的職責描述 篇1

職責

大資料開發工程師崗位的職責描述(通用23篇)

1、負責大資料分析平臺的建設,基於歷史和業務實時資料構建資料探勘模型;

2、根據需求設計和實現資料分析展示平臺;

3、負責建立、維護和改進大資料分析流程、規範、方法;

4、負責基於大資料的資料分析演算法研究,基於資料分析結果優化現有應用並探索新的應用。

任職要求:

1、本科及以上學歷,統計、數學、計算機或相關專業/方向,3年以上資料分析、資料探勘相關工作經驗;

2、精通MATLAB、Python等大資料涉及的語言和工具,並能熟練運用相關資料分析工具實現資料分析方法;

3、對機器學習、資料探勘演算法及其應用有比較全面的認識和理解,熟悉主流資料探勘框架;

4、熟悉分散式資料庫、資料倉庫和資料集市,熟悉資料庫相關操作和程式設計;

5、具有優秀的發現、分析並解決問題的能力,積極性高,具有嚴謹縝密的工作習慣、較強的溝通能力及團隊合作精神;

6、有旅遊行業資料分析與挖掘從業經驗者優先。有主導完成優秀應用、大型資料平臺專案、有資料探勘,演算法設計等開發經驗者優先。

大資料開發工程師崗位的職責描述 篇2

職責:

1、參與南方電網軟體產品(專案)前/後臺服務開發,要求高效能、高可用、高併發;

2、獨立完成產品模組(專案)核心程式碼開發、業務程式碼開發、系統效能調優等工作;

3、根據分配任務制定開發計劃並按時完成相應模組的設計、開發和單元測試;

4、參與產品(專案)相關係統需求分析以及撰寫相關係統設計文件;

要求:

1. 五年左右大資料研發崗位工作經驗

2、豐富大資料開發經驗:熟悉企業大資料常用技術,熟悉Spark、Flume、Hbase、Hadoop、Kafka,ES技術;

3、具有大型應用系統開發經驗,具有分散式、高併發、高效能等架構經驗,具有一定團隊管理經驗者優先;

4、瞭解J2EE技術平臺及主流框架,具有SpingMVC、SpringBoot、Spring cloud、Mybatis、Redis等框架開發經驗;

5、瞭解HTML5,CSS3,JavaScript,Ajax,jQuery等Web前端技術,熟悉jQuery、Bootstrap、AngularJS,VUE等主流前端JS框架中的一種;

大資料開發工程師崗位的職責描述 篇3

職責:

1、負責異構資料系統和大資料平臺的整合與融合;

2、負責資料探勘演算法的設計及對海量資料進行挖掘分析;

3、負責分散式資料倉庫平臺、海量資料批處理平臺、實時資料處理平臺等系統開發;

4、參與海量資料處理,業務資料體系的設計、資料統計、分析及資料建模;

5、參與資料平臺各系統的效能分析與系統優化,不斷提高系統執行效率;

6、完成領導交辦的其他任務。

任職資格:

1、計算機及其相關專業,大專及以上學歷。兩年以上大資料應用經驗;

2、具備實時處理框架的設計和開發能力,熟練掌握Storm、Spark streaming等大資料實時處理框架中的一種;

3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相關技術;

4、熟悉Scala、熟悉Linux開發環境,能進行shell指令碼的編寫;

5、具有較強的邏輯分析能力,高度的責任心及團隊合作精神;

6、具有實際大資料專案的成功經驗者優先考慮。

大資料開發工程師崗位的職責描述 篇4

職責:

1、負責大資料ETL開發與維護;

2、負責大資料平臺數據庫的設計以及開發;

3、負責大資料計算框架的選型與計算流程的設計與開發;

4、負責資料服務的設計與開發。

任職資格:

1、本科及以上學歷;

2、熟悉Flink、flume、jstorm、sparkstream、hive、spark等分散式開源軟體,具備系統優化與效能調優能力者優先;

3、精通JAVA等面向物件程式設計,有分散式平行計算的開發經驗優先;

4、熟練掌握至少一種MySQL、SQL Server、Oracle等關係型資料庫或MongoDB、Redis等NoSQL資料庫 ,有hive等資料倉庫研發經驗優先;

5、熟悉大資料、雲端計算概念,瞭解Hadoop、Hive、Hbase等大資料主流技術及開源框架者優先;

6、自學能力強,溝通能力較好,有一定獨立分析,技術研究能力,具有良好的團隊合作精神;

7、資料意識強,有較好的文件編寫能力,以及踏實的工作作風。

大資料開發工程師崗位的職責描述 篇5

1. 負責Android產品的功能研發和效能優化,完成高質量編碼工作;

2. 與產品經理配合,深度參與手機產品需求討論,功能定義等 ;

3. 設計編寫良好的程式碼結構,不斷迭代重構 ;

4. 需有即時通訊類產品研發經驗,可快速適應工作內容。

大資料開發工程師崗位的職責描述 篇6

職責:

1、大資料日誌分析系統的設計,選型和開發;

2、配合各業務給予資料支援,對產品和運營資料總結和優化;

3、處理使用者海量資料,提取、分析、歸納使用者屬性,行為等資訊,完成分析結果;

4、發現並指出資料異常情況,分析資料合理性;

5、公司大資料基礎架構平臺的運維,保障資料平臺服務的穩定性和可用性;

6、大資料基礎架構平臺的監控、資源管理、資料流管理;

7、基於資料分析的可預測的雲平臺彈性擴充套件解決方案。

任職要求:

1、日誌分析資料系統實際經驗;

2、3年以上網際網路行業研發經驗,有使用Hadoop/hive/spark分析海量資料的能力;

3、掌握 Hadoop、Flume,Kafka、Zookeeper、HBase、Spark 的安裝與除錯;

4、熟悉大資料周邊相關的資料庫系統,關係型資料庫和 NoSQL。

5、掌握 Linux 作業系統的配置,管理及優化,能夠獨立排查及解決作業系統層的各類問題;

6、有良好的溝通能力,具備出色的規劃、執行力,強烈的責任感,以及優秀的學習能力。

大資料開發工程師崗位的職責描述 篇7

職責

1.資料庫安裝、配置、故障處理、備份與恢復;

2.資料庫效能監控與優化、資料庫安全加固、資料庫空間管理等(包括線上、線下環境);

3.負責專案資料ETL整合與資料庫設計;

4.稽核資料庫設計方案和SQL語句,對上線資料庫質量進行管理;

5.負責資料庫操作標準化流程制定,並遵照執行;(如資料庫設計規範、資料庫變更管理規範)

6.負責跟進、試用廈門資料組產出的工具、資料整合方案,以及在重慶團隊中推廣使用;

7.提升實施團隊資料庫運維相關技能。

崗位要求

1、計算機或相關專業本科以上學歷,2年以上資料處理工作經驗;

2、精通關係型資料庫體系架構和原理,精通儲存過程、觸發器、動態SQL的編寫;

3、精通資料庫的效能優化及SQL語句的優化;

4、精通MySql/oracle資料庫的規劃、設計、優化及運維;

5、熟悉Linux常用命令,熟悉shell/python/perl(其中一種)指令碼開發;

6、熟悉資料庫的負載解決方案,如分庫、分表、主從;

7、高度的責任心、良好的溝通技巧和團隊合作精神;

大資料開發工程師崗位的職責描述 篇8

職責:

1、從事Hadoop、Spark、Hbase、hive等分散式大資料產品的設計和開發;

2、針對部門大資料業務進行大資料分析、挖掘等產品應用的開發;

3、大資料平臺各類資料業務抽象及模型化;

4、參與大資料管理平臺的開發及維護;

5、負責大資料平臺數據及相關的應用開發,調優及維護;

6、為專案相關開發人員提供大資料技術指導及解決大資料平臺應用中遇到的技術難題;

7、良好的團隊合作與溝通能力。

任職要求:

1、本科及以上學歷,2年以上大資料應用開發經驗;

2、具備Java、Python、Scala其中兩種語言的開發經驗;

3、瞭解泛Hadoop大資料生態圈,熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術,並有實際的專案開發經驗,有相關原始碼研究者優先;

4、具備ETL開發與運維能力,有Flume、kettle經驗優先;

5、熟悉大資料平臺的搭建過程,熟悉資料處理流程,有TB級以上資料處理經驗優先,有實時資料處理經驗者優先;

6、熟悉離線和實時資料處理流程,熟練使用Spark,Flink處理TB級資料優先;

7、熟悉Linux系統環境,有shell等指令碼編寫經驗,熟悉Mysql、PostgreSql、Oracle等常用關係資料庫,熟練編寫SQL語句;

8、熟悉Yarn,Kubernetes,Azkaban等資源排程框架者優先;

9、熟悉Datax的二次開發,並有實際開發經驗優先。

大資料開發工程師崗位的職責描述 篇9

職責:

1、利用HTML5相關技術開發移動平臺的web前端頁面效果實現;

2、根據產品設計實現頁面互動,與後臺工程師共同實現產品功能,完成資料互動、動態資訊展現;

3、協助設計師實現頁面及互動,協助產品完善需求,提供技術實現方案;

4、優化程式碼及實現技術,提高頁面效能。

任職要求:

兩年以上JavaScript開發工作經驗;

熟悉HTTP協議、W3C標準,能書寫相容主流瀏覽器並且能夠良好的適配各個尺寸移動裝置;

熟練掌握前端開發技術(HTML5、JS、Ajax、Json、XHTML、CSS),瞭解各項技術的相關標準,並嚴格按照標準進行開發;

熟悉javascript設計模式 能以模組化進行程式開發;熟悉主流Javascript MVC框架,如reactjs AngularJS ,有 開發經驗者優先錄用;

對任意一門非Web前端指令碼的語言(如Java、PHP、C、Python )有一定的瞭解程度;

6、對HTML5技術領域、新興Web標準和Web發展趨勢有良好洞察力和極高的關注度,有強烈的求知慾;

7、具有android、iphone、ipad等智慧手機和平板開發經驗優先考慮

8、良好的程式設計習慣和團隊協作精神,工作積極上;

大資料開發工程師崗位的職責描述 篇10

職責:

1、計算機相關專業專科及以上學歷,畢業後1-2年工作經驗

2、輔助進行系統的功能定義,程式設計;

3、具有良好的程式設計習慣,熱愛程式設計

4、具有良好的溝通能力和團隊協作能力

崗位要求:

1、具有紮實的Java基礎,理解多執行緒、網路等基礎框架

2、熟練使用SSH框架,瞭解Spring工作機制

3、熟悉使用oracle/sqlserver/mysql至少一種資料庫,熟練使用sql開發;

4、熟練使用javascript,有一定的前端知識;

5、瞭解linux,能夠進行基本的操作

6、具有強烈的進取心和責任感,有良好的邏輯思維能力

大資料開發工程師崗位的職責描述 篇11

職責

1、負責遊戲伺服器的日常運維;

2、負責資料備份、恢復、冗餘設定,安全防範;

3、負責Web服務,MySQL等資料庫安裝和調優;

4、負責遊戲專案等生產伺服器的日常更新等操作;

5、負責伺服器工具的開發部署。

任職要求

1、計算機相關專業,本科以上學歷,三年以上工作經驗;

2、熟悉linux作業系統的常用命令,工具,配置,熟悉shell/python任一語言的編寫;

3、熟練搭建優化apache、nginx、tomcat、iis、lamp等web服務環境;

4、熟悉mysql資料庫,sql語句,及備份,恢復;

5、瞭解linux上的叢集構架服務如LVS、Keepalived、NFS、MFS的相關知識;

6、瞭解OpenStack、CloudStack、KVM等虛擬化實現技術;

7、熟悉網路架構,具備基本的網路故障排錯能力,對網路安全有一定的瞭解。

大資料開發工程師崗位的職責描述 篇12

1、根據公司產品發展方向,負責/參與新產品開發;

2、負責產品的頁面製作及維護,根據設計圖完成頁面html5應用的編碼;

3、根據產品需求,分析並給出最優的頁面前端結構解決方案;

4、根據產品設計,利用HTML5相關技術開發網站、手機、平板電腦等多平臺上的前端應用;

5、編寫可複用的使用者介面元件;

6、協助後臺程式設計師完成功能鑲嵌和除錯;

7、有微信小程式開發經驗者優先。

大資料開發工程師崗位的職責描述 篇13

職責:

1. 負責同程藝龍核心系統的可靠、穩定、高效執行;

2. 參與系統架構設計與優化,不斷提高系統性能與穩定性;

3. 設計、開發提高同程藝龍穩定性、工程效率、資源效率的運維自動化工具與平臺;

4. 探索運維自動化和智慧化的技術和方向。

任職要求:

1. 計算機或相關專業;

2. 熟悉Linux作業系統原理、網路原理;

3. 掌握JAVA/C/Go/Shell/Python等1至2種語言;

4. 良好的溝通、組織協調能力和強烈的責任心,具備很強的分析和解決問題的能力;

5. 對行業技術敏感度高且細緻,善於思考,樂於發現,對解決具有挑戰性問題充滿激情。

大資料開發工程師崗位的職責描述 篇14

職責:

1、負責平臺PHP開發工作;

2、團隊協作與分工,按時完成每週進度要求;

3、根據資料介面文件開發介面,與前端進行資料互動。

4、負責微信小程式專案開發

任職資格:

1、 精通PHP開發語言,1年PHP經驗

2、 熟練掌握HTML、熟悉DIV+CSS佈局,熟悉Ajax,熟練掌握jquery;

3、 具有MySql索引、查詢、儲存優化;PHP快取技術、靜態化方面的經驗;

4、對程式設計充滿熱情,愛搗鼓程式,有程式碼潔癖,樂於瞭解和掌握新鮮知識;

5、對前後端合作開發有一定的認知,對互動體驗有較為深入的瞭解;

6、具備OOP程式設計思想,熟悉MVC,有專案案例,有Laravel開發框架經驗者優先;

7、對網際網路產品熟悉,關注使用者體驗,對使用者體驗有自己的獨到見解。

8、有小程式經驗者優先

大資料開發工程師崗位的職責描述 篇15

1、負責公司基礎產品框架和開發環境的設計搭建和研發;

2、編寫開發平臺和工具,解決實際業務開發問題,提高公司專案開發效率;

3、建立和健全公司技術體系,使產品具備技術競爭性;

4、參與專案需求調研、專案可行性分析、技術可行性分析和需求分析;

5、負責公司專案的後端資料庫設計、程式碼編寫、前後端整合;

大資料開發工程師崗位的職責描述 篇16

職責:

1、專案的需求分析、系統設計,相關過程文件編寫;

2、專案的計劃制定,進度把控,人員關係的協調溝通;

3、專案的編譯、構建、部署,技術疑難問題解決;

4、專案的單元測試和整合測試;

5、專案的培訓、驗收、總結。

任職要求:

1、精通Java,有2年以上Java深層次開發經驗(有豐富專案開發經驗者,可以破格錄用),具備深厚的Java功底;

2、精通面向物件軟體結構知識,熟悉設計模式、OOA/D、UML,能熟練使用Rose建模工具完成軟體設計;

3、熟悉Struts,Hibernate,Spring等開源框架,有架構設計經驗者優先;

4、精通J2EE體系結構,熟悉JBoss, weblogic, Tomcat等應用伺服器系統的開發;

5、為人誠信,思維嚴謹,工作主動,能承受一定的工作壓力;

6、工作勤奮,責任心強,有良好的質量意識,具有良好的溝通能力和團隊合作意識。

7、具備PMP或中高階專案管理認證資質優先;

大資料開發工程師崗位的職責描述 篇17

職責

1、負責客戶端應用邏輯的編寫,與專案組美術、策劃人員深入溝通,準確實現開發需求,完成所負責模組系統的設計、開發和程式設計;

2.持續優化產品效能,提高使用者體驗;

3.負責遊戲的上線釋出和維護。

任職資格

1、本科及以上學歷,至少有參與過一款H5專案的研發;

2、熟悉TypeScript/JavaScript/ActionScript,熟悉MVC,有良好的OOP思想;

3、熟悉WebSocket網路程式設計,瞭解ProtoBuf序列化方式,能獨立開發業務邏輯;

4、需有1年或以上使用Egret/Laya 開發專案經驗;

5、踏實上進,善於鑽研技術,具備良好的程式設計習慣和程式碼規範;有較強的獨立解決問題能力,富於團隊精神,喜歡遊戲行業。

大資料開發工程師崗位的職責描述 篇18

職責:

1.負責公司專案開發與維護;

2.負責公司專案核心程式碼編寫;

3.負責程式碼的單元測試,保證開發質量,提交符合規範的成果;

4.針對業務場景的應用要求,不斷優化系統設計和前臺表現,提升系統效能和安全性。

任職要求

1.3年以上的PHP開發經驗,有獨立開發經驗者優先;

2.瞭解HTML5、CSS3、JAVASCRIPT等前端程式碼;

3.具有MySQL索引優化、查詢優化和儲存優化經驗,熟練使用redis;

4.具有良好的PHP基礎,熟悉ThinkPHP開源框架;

5.熟悉微擎二開者優先,做過微信公眾號優先,接過各平臺支付SDK優先,熟悉對高併發業務的處理;

6.有遊戲開發經驗者優先,計算機專業優先,熟悉linux伺服器操作的優先;

7.有良好的面向物件分析、設計能力、規範的程式設計風格和良好的文件習慣;

8.有良好的團隊精神、敬業精神,有高效的執行力,能主動學習鑽研與工作相關的知識和技術;

大資料開發工程師崗位的職責描述 篇19

職責

1、負責公司產品的軟體系統的開發與維護,對整個平臺的安全、穩定、效能和架構先進性負責;

2、負責公司環境管理運營平臺的開發管理,伺服器實施;

3、負責公司軟體系統的架構設計,核心程式碼編寫,與系統日常維護;

4、按照部門經理制定的專案計劃,按時並高質量的完成開發任務;

5、參與技術難題攻關,對相關係統的介面進行設計和規劃;

6、按時完成領導交辦的其他工作事項。

任職資格:

1、計算機相關專業,具有三年以上PHP專案開發經驗;

2、熟悉PHP+MySQL,熟練掌握主流的PHP開發框架;

3、熟練使用mysqL等資料庫,熟悉sql語言,掌握mysql的常規優化;

4、優秀的程式碼程式設計習慣及文件編寫能力。

大資料開發工程師崗位的職責描述 篇20

職責:

1.熟悉thinkcmf5框架優先錄取

2.核心業務功能開發和程式碼維護;

3.負責網站後端程式開發、資料庫結構設計和搭建;

4.參與網站產品的設計和開發,配合產品經理進行技術決策。

崗位要求:

1.有開發商城系統/微信定製開發優先;1-2年工作經驗也可考慮;

2.熟練掌握PHP,熟悉面向物件的軟體設計方法; 熟悉MVC三層架構的開發,熟練應用PHP框架Thinkphp5。

3.熟悉HTML、CSS、Javascript等前端技術,熟悉jquery者優先;

4.熟悉Linux常用命令;MySQL資料庫開發及常用優化方法;

5.有良好的程式碼習慣,要求結構清晰、命名規範、邏輯性強、程式碼冗餘率低,程式碼註釋清晰;

6.性格開朗、喜歡鑽研技術,具有較強的分析和解決問題的能力。

大資料開發工程師崗位的職責描述 篇21

職責:

1、獨立負責工作小組,並對下級成員進行監督;

2、具備資源整合以及對軟體專案全域性把控的能力;

3、負責軟體專案的系統設計和需求分析;

4、制定軟體專案開發計劃,並按時完成功能模組的設計、開發以及程式設計任務;

5、積極配合並完成主管下達的任務,並能夠對軟體部門的發展規劃提出意見;

任職條件

1、大資料相關開發經驗3年以上,至少具備2年以上java開發經驗;

2、有基於hadoop的資料抽取、轉換、載入的開發相關經驗;

3、熟練掌握hadoop生態的相關知識,如hive,hbase,a,storm,spark,mapreduce等;

4、熟悉Linux作業系統。熟悉linux各項基本操作,至少掌握一門指令碼語言;

5、熟練資料倉庫,對多維資料建模有深入理解;

6、有BI資料平臺、資料倉庫、日誌採集、多維資料倉庫設計、開發、架構經驗者優先;

7、思維敏捷,有較強的鑽研學習能力,較好的溝通能力、團隊合作;

大資料開發工程師崗位的職責描述 篇22

職責:

1.針對專案需求,進行基於JAVA的web後臺開發;

2.按照專案計劃,與專案組其他成員協同工作,在保證質量的前提下,按時完成開發任務;

3.對接簡訊通道,維護優化簡訊平臺;

4.積極、認真地根據測試人員提出的問題對程式進行修改,確保產品的高品質。

任職資格:

1.2年以上Java開發實際工作經驗;

2.熟練使用Java語言,熟悉JavaEE體系架構,具有B/S應用開發經驗;

3.熟悉應用開發框架SSH及其他主流JavaEE開發技術;熟悉jQuery等框架;

4:熟練掌握sqlserver資料庫技術,熟練掌握sql語句 ;

5.對使用者體驗、互動操作流程及使用者需求有深入理解;

6.具有規範的程式設計習慣與文件編寫能力,積極配合公司各項規範化建設工作;

7.有簡訊平臺開發維護經驗優先。

大資料開發工程師崗位的職責描述 篇23

1.負責網際網路系統後端模組的開發和測試;

2.與前端開發、運營、測試團隊合作完成整個專案開發;

3.編寫及維護軟體功能規格說明書,設計及開發過程中產生的系列文件;

4.參與系統架構設計和核心程式碼的編寫,可指導初級開發人員參與工作;

5.參與網站效能優化、產品體驗優化以及產品功能迭代;與前端開發團隊緊密配合,確保程式碼有效對接,優化前端效能。