網站首頁 工作範例 辦公範例 個人範例 黨團範例 簡歷範例 學生範例 其他範例 專題範例
當前位置:三優範文網 > 文祕 > 崗位職責

大數據開發工程師的崗位職責(精選19篇)

欄目: 崗位職責 / 發佈於: / 人氣:2.25W

大數據開發工程師的崗位職責 篇1

職責:

大數據開發工程師的崗位職責(精選19篇)

1、負責所分管團隊的團隊建設和日常管理工作;

2、負責核心技術問題攻關和性能優化,持續維護和引進最新的大數據技術到城市大數據平台中,支撐城市級大數據平台業務;

3、承擔城市數據標準編制和數據模型的設計;

4、承擔項目中數據相關方案設計及數據團隊管理;

5、參與城市大數據項目中數據採集、加工過程、分析挖掘模型算法的實施工作。

任職資格:

1、1年以上數據開發工作經驗,熟練使用SQL查詢引擎;

2、熟悉Hadoop、Mpp、Oracle等至少一種數據倉庫工具

3、具備良好的編程語言基礎如:java/python/scala/c++/shell等

4、二本以上學歷,計算機相關專業或者有相關培訓經歷者優先

5、 個人素質要求:目光長遠、態度誠懇、崗位有穩定性,能夠長期培養、具備很強的自學能力、承壓能力強、接受出差支援項目等工作。對數據工作具備濃厚的興趣並有明確職業規劃,優秀的學習能力和團隊溝通協作能力,對新技術有濃厚興趣並有鑽研精神。

大數據開發工程師的崗位職責 篇2

職責:

1、負責數據分析、加工、清理,相關處理腳本和程序的開發;

2、負責開發大數據工具,如報表平台、多維度分析工具、ETL平台、調度平台的研發;

3、負責分佈式大數據平台應用開發(Hadoop/Spark/Hive/HBase等);

4、負責大數據相關平台的維護、優化。

任職要求:

1、本科及以上學歷,計算機相關專業,具有5年及以上的大數據ETL或數據開發經驗,熟悉大數據組件的維護以及調優;

2、熟練掌握Java或Python編程語言,熟悉大數據架構體系,熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技術中的一個或者多個,熟悉Sqoop、DataX等數據導入工具;

3、能熟練使用Hive、HBase、Spark等加工和處理數據,有海量數據處理經驗;

4、有數據倉庫開發經驗/BI系統開發經驗優先;

5、有電商行業數據處理與分析平台開發經驗者優先。

大數據開發工程師的崗位職責 篇3

職責:

1、從事Hadoop、Spark、Hbase、hive等分佈式大數據產品的設計和開發;

2、針對部門大數據業務進行大數據分析、挖掘等產品應用的開發;

3、大數據平台各類數據業務抽象及模型化;

4、參與大數據管理平台的開發及維護;

5、負責大數據平台數據及相關的應用開發,調優及維護;

6、為項目相關開發人員提供大數據技術指導及解決大數據平台應用中遇到的技術難題;

7、良好的團隊合作與溝通能力。

任職要求:

1、本科及以上學歷,2年以上大數據應用開發經驗;

2、具備Java、Python、Scala其中兩種語言的開發經驗;

3、瞭解泛Hadoop大數據生態圈,熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術,並有實際的項目開發經驗,有相關源碼研究者優先;

4、具備ETL開發與運維能力,有Flume、kettle經驗優先;

5、熟悉大數據平台的搭建過程,熟悉數據處理流程,有TB級以上數據處理經驗優先,有實時數據處理經驗者優先;

6、熟悉離線和實時數據處理流程,熟練使用Spark,Flink處理TB級數據優先;

7、熟悉Linux系統環境,有shell等腳本編寫經驗,熟悉Mysql、PostgreSql、Oracle等常用關係數據庫,熟練編寫SQL語句;

8、熟悉Yarn,Kubernetes,Azkaban等資源調度框架者優先;

9、熟悉Datax的二次開發,並有實際開發經驗優先。

大數據開發工程師的崗位職責 篇4

職責

1、負責基於hadoop/spark生態系統、億級別數據的全文檢索,搜索引擎的產品研發;

2、基於海量用户行為數據和其他數據,分析和研究數據與實際業務的關聯關係,並與實際業務應用相結合開發;

3、負責大數據分析需求設計和開發,承擔數據抽取、清洗、轉化等數據處理程序開發。

任職要求:

1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技術及其生態圈,具備相關項目開發經驗,有數據實時計算項目經驗優先;

2、有搜索引擎全文檢索開發經驗 ,如:elasticsearch、solr;

3、熟悉python、R任意一門開發語言;

4、有SAAS,PAAS企業級應用平台或者互聯網,金融等大型應用平台開發經驗優先考慮;

5、 本科及以上學歷,計算機/軟件工程/統計學/數學等相關專業,互聯網/金融等行業3年以上工作經驗;

6、擁有良好的代碼習慣,要求結構清晰、命名規範、邏輯性強、代碼宂餘率低,代碼註釋清晰;

7、熟悉使用svn,禪道等項目管理工具,有良好的團隊協作開發經驗.

大數據開發工程師的崗位職責 篇5

職責:

1、依據客户需求完成大數據項目的數據分析及建模;

2、進行大數據核心算法的編寫;

3、參與項目的需求分析、系統設計、編碼工作;

4、參與開發過程中相關新技術的研究和驗證。

5.協助承擔架構性的體系設計和改造工作,配合制定技術實施方案,按照總體設計組織子系統的設計和開發。

任職要求:

1、精通數據建模、數據體系建設,具備數據倉庫架構設計、模型設計和處理性能調優等相關經驗;

2、具有豐富的基於hadoop體系的數據平台、數據倉庫建設經驗,精通基於hadoop源碼的開發、優化改造及成功應用案例;

3、精通hadoop生態體系各項技術,如kafka、flume、hive、impala、hbase、spark等,具有100+節點hadoop集羣的開發、運維經驗;

4、具有對大型hadoop集羣的硬件規劃能力;

大數據開發工程師的崗位職責 篇6

職責:

1、根據產品設計文檔和UI原型,利用HTML5相關技術開發移動端的web前端頁面;

2、基於HTML5.0標準進行頁面製作,編寫可複用的用户界面組件;

3、持續的優化前端體驗和頁面響應速度,並保證兼容性和執行效率。

崗位要求:

1、計算機或相關專業專科及以上學歷,1年以上的HTML5開發經驗;

2、具有獨立完成前端開發工作的能力;

3、熟悉移動端的前端開發、多瀏覽器兼容及移動端機型適配方式;

4、熟練掌握web系統開發技術,熟悉javascript、jquery、CSS3、HTML5、Ajax,能快速定位解決瀏覽器兼容性問題;

5、熟悉常見頁面佈局方式,移動端響應式頁面佈局方式,熟悉css性能優化方式。

大數據開發工程師的崗位職責 篇7

職責:

1、 參與軟件自動化測試等系統的開發、測試等過程,負責工程中主要功能的代碼實現。

2、 具有良好的協調、溝通能力,並能夠根據規劃需求制定相關技術與產品的解決方案。

3、 研究新技術,積極進取,對新技能容易上手。

4、 協助項目經理完成系統的構建和運維。

5、 服從公司的工作安排。

技能要求:

1、本科或以上學歷,計算機相關專業,3年以上Java開發工作經驗。

3、熟練使用 Java後端開發語言和技術框架:Spring Boot、Spring Data、Spring MVC等技術。

4、熟悉J2EE技術架構體系,具備面向對象設計思維與能力。

5、熟練使用JavaBean、Servlet、Jsp、WebService等開發技術。

6、具有強烈的責任心和良好的溝通能力,優秀的團隊合作精神,抗壓能力強。

7、有微服務DevOps模式開發經驗優先,有ext js項目開發經驗優先,有解決跨域問題的經驗優先。

大數據開發工程師的崗位職責 篇8

職責:

1、參與銀行、支付、保險等系統的開發工作;

2、參與需求分析,系統設計和開發等各項工作;

3、能按時、獨立、高質量的完成工作,對自己的代碼嚴格要求;

4、能指導初級程序員工作,並負責CodeReview;

5、能解決複雜的技術問題;

任職要求:

1、3-5年JAVA實際開發經驗,計算機相關專業大專以上學歷(硬性要求:學歷必須學信網可查)

2、熟悉Java主流框架,能夠獨立完成功能模塊設計和開發;

3、掌握HTML、JavaScript、CSS、Ajax、JQuery等前端技術;

4、熟悉Oracle、MySql等主流數據庫的使用,熟悉存儲過程及SQL的性能優化;

5、熟悉Tomcat、JBoss等應用服務器的應用部署和配置,有Linux操作經驗;

6、具備良好的表達和溝通能力,能很好的融入團隊工作;

7、有銀行、支付、保險等相關係統開發經驗優先;

大數據開發工程師的崗位職責 篇9

職責:

1、負責保理業務系統的需求設計、開發、測試驗收和升級完善。

2、負責與軟件系統開發商對接,制定項目計劃,合理控制項目實施進度,確保按時、高質量的完成符合業務需求和高質量的產品;

3、負責對應用運維崗位人員的進行培訓、協調解決使用中遇到的技術問題。

任職資格:

1、3年左右保理、供應鏈金融、小貸網貸系統等開發經驗;

2、有熟悉新技術和成熟技術,對系統在金融業務應用方面有較深入的瞭解;

3、熟悉金融業務系統架構,具有較強的用户需求分析能力和系統研發能力;

4、有金融公司系統運維經驗,對銀行業務較熟悉,有在金融機構工作的經歷,懂金融保理業務更佳。

大數據開發工程師的崗位職責 篇10

職責:

1.獨立完成項目的系統分析、設計、並主導完成詳細設計和編碼的任務,確保項目的進度和質量;

2.針對業務,進行數據庫設計和優化;

3.時刻關注並學習新技術,並能夠在實踐中應用,帶領後端團隊共同進步,完成每月的常規發佈任務;

4.能夠帶領團隊解析需求,商討具體開發方案,對技術團隊的開發質量把關 。

任職要求:

1.3-5年java開發經驗,java基礎紮實,熟悉I/O、多線程、集合等基礎框架。

2.熟悉linux、虛擬化以及容器技術及雲服務的發展方向。

3.熟悉web開發、熟練使用Spring家族框架。

4.精通使用常用的設計模式。

5.責任心一定要強,逆商要高。

6.能接受保險項目的外包(工作地還是在本公司)。

7.要有一定的管理、協調能力,能夠迅速定位問題並推進直至解決。

大數據開發工程師的崗位職責 篇11

1.依據產品需求完成高質量的Web前端開發和維護;

2.對具體的產品進行性能優化,實現極致的Web加載、執行和渲染時間;

3.在理解前端開發流程的基礎上,結合前端實際建立或優化提升工作效率的工具;

4.負責微信開放平台和騰訊雲相關應用的開發;

5.在理解產品業務的基礎上,結合前端技術建立或優化Web的交互方式。

6.負責H5和android/ios原生代碼的對接和開發。

大數據開發工程師的崗位職責 篇12

職責:

1、負責電商平台Java Web系統的開發編碼工作;

2、負責重點難點技術問題的研究及解決,編寫較規範和高質量的設計文檔;

3、對國中級開發人員提供技術上的指導,幫助項目組成員進行詳細設計和開發。

任職要求:

1、計算機或相關專業優先;

2、三年以上JAVA研發和軟件設計經驗;

3、熟練html5、javaScript,jquery等web前端技術;

4、參與過大中型項目的核心功能開發工作,有良好的系統規劃能力,制定系統架構,編寫技術規範和項目開發文檔;

5、熟悉SpringBoot、SpringCloud、SpringMVC、MyBatis、hibernate等開源框架;

6、熟悉MySQL、Oracle或NoSQL數據庫技術,熟悉SQL調優機制,有大型數據庫軟件開發經驗者優先;

7、熟悉分佈式、緩存、消息、數據分析等工作機制,具有大型分佈式、高併發、高負載、高穩定性的系統設計開發經驗優;

8、表達能力好,思維清晰敏捷,工作認真負責,善於學習、具有分析、解決問題的能力,創新意識強,有團隊精神;

9、有參與過醫藥行業項目經驗優先。

大數據開發工程師的崗位職責 篇13

職責:

1)負責後台系統的研發,及時解決項目涉及到的技術問題。

2)參與架構設計、方案討論和技術調研;

3)參與系統需求分析與設計,負責完成核心代碼編寫,接口規範制定

4)帶領3至4人團隊,進行日常開發和測試工作,解決開發中的技術問題;

崗位要求:

1)計算機相關專業畢業,精通spring框架,閲讀過spring源碼,熟悉其事務機制

2)有良好的編碼習慣及嚴謹的邏輯思維,熟悉GIT等版本管理軟件

3)熟練掌握Spring、SpringMVC、mybatis、JavaScript、JQuery、CSS3、XML、AJAX等知識,能夠靈活運用

4)熟悉軟件設計流程和軟件工程規範,具備編寫良好而規範的設計和技術文檔的能力

5)數據建模經驗豐富,能夠獨立完成單個項目的數據建模工作

6)熟悉Oracle、sql server、mysql等大型數據庫一種或多種,熟練編寫SQL語句及sql優化,能夠跟蹤診斷典型的線上問題

7)對技術有激情,喜歡鑽研,能快速接受和掌握新技術,有較強的獨立、主動的學習能力,良好的溝通表達能力和團隊協作能力。

大數據開發工程師的崗位職責 篇14

1、從事軟件產品模塊的功能設計、數據庫設計工作;

2、從事軟件功能的代碼開發及測試;

3、從事項目在現場環境的安裝、部署與調試;

4、從事項目開發過程所需的文檔編寫工作。

大數據開發工程師的崗位職責 篇15

職責:

1.電商平台技術架構設計和系統框架搭建;

2.電商平台核心代碼編寫,注重編碼規範和系統性能;

3.搭建小程序訂單系統+即使通訊系統,有關商城及即時通訊經驗優先考慮。

4.參與開發過程的代碼設計、審核和檢查。

職位要求:

熟練掌握PHP開發語言;熟悉PHP/Ajax/JavaScript/XML/Webservice;

對B2B,B2C等電商平台系統有深入的瞭解,有過1個以上電商平台系統的開發經驗,並帶領過項目組完成過至少一個電商平台系統的開發工作;

掌握架構設計理論,實踐,掌握多種可重用架構機制和模式,掌握流行技術框架和工具;

有大型分佈式項目開發經驗、微服務架構經驗優先、有高併發的系統核心研發經驗優先。熟悉門户網站的基本系統架構,對內容發佈系統、視頻直播點播技術、網站統計分析系統、網站電子商務系統有深入瞭解;

有良好的溝通能力,具有跨部門協作的經驗、推進能力強,責任心強;

熟練掌握緩存技術,網站優化,服務器優化,分佈式集羣技術,負載均衡,消息中間件等;

掌握PHP及MVC架構技術,具備在Linux平台下使用PHP開發網站的經驗,可在服務器系統配置php+mysql運行環境;

具有PHP緩存技術、靜態化設計方面的經驗;

學習能力強, 能快速上手新接觸的技術. 積極挑戰技術難題, 積極向上, 有團隊合作精神.

大數據開發工程師的崗位職責 篇16

職責:

1. 設計並開發持續交付、資產管理、系統監控等自動化運維平台;

2. 負責運維平台和相關運維工具的開發;

3. 提高自動化運維水平、故障響應能力、提升迭代效率、降低運維人力成本;

4. 運維相關的新技術的研究。

任職資格:

1. 計算機相關專業專科(以上)畢業,3-5年以上的工作經驗。(大型互聯網企業背景優先);

2. 有一定實際運維工作經驗,具有Linux系統管理基本知識和1年以上實際開發經驗;

3. 掌握shell/python/perl/php其中一種腳本語言;

4. 掌握Javascript、CSS、html前端開發。

大數據開發工程師的崗位職責 篇17

1、 負責醫療器械設備的機械方案設計、項目評估;現有儀器設備的改進設計;

2、 完成相關圖紙繪製、3D模型及加工圖紙的轉化、設計數據的輸出;機械相關零部件的選型、採購清單的編制與輸出;

3、 製作設備的機械BOM表;

4、 產品的安裝、調試及驗證。

大數據開發工程師的崗位職責 篇18

職責:

1、公司產品無線線端web端的製作、開發和優化

2、根據設計稿,編寫靜態頁面和交互、特效等功能的腳本程序

3、優化前端組件的靈活性和可擴展性

4、跟蹤研究前沿的前端技術,並應用到公司的產品開發當中

任職要求:

1、3-5年工作經驗,瞭解react框架前端技術,熟悉流行的前端ui庫,能夠設計開發工具型網站,如:碼工助手;

2、熟練掌握DIV+CSS網頁佈局,並且對模板化、模塊化有一定理解,精通HTML/HTML5、CSS/CSS3等前端開發技術;

3、熟練掌握JavaScript語言核心技術DOM、Ajax、JSON等,對javascript框架(如react/jQuery/jq ui 等)有一定的經驗;

4、對css/JavaScript性能優化、解決多瀏覽器兼容性問題有一定的經驗;

5、對無線端開發有一定經驗,能夠較好解決ios,Android端兼容問題;

6、具備良好的責任心、邏輯思維強、善於交流和表達、較強的學習能力、優秀的團隊溝通與協作能力。

7、愛思考,溝通能力強。

大數據開發工程師的崗位職責 篇19

1. 精通PHP語言,能夠獨立開發中型項目,能夠協作開發大型項目

2. 精通MySql數據庫,能夠獨立搭建中型項目所需數據庫,能夠協作搭建大型項目 所需數據庫

3. 熟悉Linux系統,能夠進行簡單的服務器配置,能夠獨立部署項目

4. 熟練使用svn等版本管理及團隊合作工具

5. 瞭解JavaScript,能夠編寫簡單的JavaScript代碼

6. 瞭解CSS,能夠進行簡單的頁面佈局調整

7. 使用過多個PHP框架,瞭解Yii 2.0框架