網站首頁 工作範例 辦公範例 個人範例 黨團範例 簡歷範例 學生範例 其他範例 專題範例
當前位置:三優範文網 > 文祕 > 崗位職責

大資料運維工程師的具體職責描述(精選20篇)

欄目: 崗位職責 / 釋出於: / 人氣:5.57K

大資料運維工程師的具體職責描述 篇1

職責

大資料運維工程師的具體職責描述(精選20篇)

1. 負責大資料ETL系統,運維及保障服務穩定可用;

2. 負責資料採集交換方案以及聯調測試;

3. 負責採集交換任務的評審和上線;

4. 負責及時排除ETL流程故障,形成知識庫,完善運維文件;

5. 負責監控和優化ETL的效能,持續性地提出改進自動化運維平臺建議

技能要求

1. 電腦科學或相關專業本科及以上學歷;

2. 熟悉Linux系統,熟練編寫shell/perl/python一種或多種指令碼語言;

3. 熟悉Hive、Hadoop、MapReduce叢集原理,有hadoop大資料平臺運維經驗者優先;

4. 熟悉資料庫的效能優化、SQL調優,有相應經驗;

5. 抗壓能力強,有強烈的責任心,良好的溝通能力、學習能力及團隊合作能力。

大資料運維工程師的具體職責描述 篇2

職責:

1、負責大資料叢集的日常維護、監控、異常處理等工作,保障叢集穩定執行;

2、負責大資料批處理管理以及運維;

3、負責大資料叢集的使用者管理、許可權管理、資源管理、效能優化等;

4、深入理解資料平臺架構,發現並解決重大故障及效能瓶頸,打造一流的資料平臺;

5、跟進大資料前沿技術,不斷優化資料叢集;

6、有華為大資料平臺運維經驗優先;

崗位要求:

1、1年以上大資料運維或開發經驗;

2、有良好的計算機和網路基礎,熟悉linux檔案系統、核心、效能調優,TCP/IP、HTTP等協議;

3、熟悉大資料生態,有相關(HDFS、Hive、Hbase、Sqoop、Spark、Flume、Zookeeper、ES、Kafka)的運維及開發經驗;

4、熟練使用shell、python等指令碼語言開發相關運維管理工具;

5、良好的文件撰寫習慣;

大資料運維工程師的具體職責描述 篇3

職責:

1、負責公司內部及專案中大資料叢集的構建,任務排程、監控預警,持續完善大資料平臺,保證穩定性、安全性;

2、負責叢集容量規劃、擴容、叢集效能優化及日常巡檢和應急值守,參與大資料基礎環境的架構設計與改進;

3、深入研究大資料業務相關運維技術,探索新的運維技術及發展方向。

任職要求:

1、熟悉Linux基礎命令操作,能夠獨立編寫Shell指令碼開展日常伺服器的運維;

2、熟悉Hadoop生態圈Hadoop、Kafka、Zookeeper、Hbase、Spark的安裝與調優;

3、熟悉軟硬體裝置,網路原理,有豐富的大資料平臺部署,效能優化和運維經驗;

4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;

5、能夠利用各種開源監控工具、運維工具,HA、負載均衡軟體完成工作任務;

6、熟悉JVM虛擬機器調優;

8、1年及以上相關崗位經驗,要有良好的安全和責任意識。

大資料運維工程師的具體職責描述 篇4

職責:

1、負責分散式大資料平臺產品的運維和運維開發,保證其高可用和穩定性;

2、負責大資料系統架構的可運維性設計、容量規劃、服務監控,持續優化服務架構、叢集效能;

3、通過技術手段控制和優化成本,通過自動化工具及流程提升大資料平臺運維效率;

4、為專案開發人員提供大資料技術指導及解決大資料平臺應用中遇到的技術難題;

任職資格:

1、三年以上大資料運維相關工作經驗,有大型網際網路公司工作經驗者優先,全日制本科及以上學歷;

2、熟練掌握至少一門開發語言,有Java或Python語言開發經驗優先;

3、精通Hadoop生態及高效能快取相關的各種工具並有實戰經驗,包括但不限於Hadoop、HBase、Hive、Presto、Kafka、Spark、Yarn、Flink、Logstash、Flume、ClickHouse等;

4、熟悉Mysql等常用關係資料庫,熟練編寫SQL語句,有分散式nosql資料庫應用、效能調優經驗優先;

5、熟悉Linux環境,能夠熟悉使用shell指令碼;

6、對大資料技術有強烈興趣,有志於往大資料方向深層次發展;

7、具有很強的責任心、執行力、服務意識、學習能力和抗壓能力;

8、具備較好的溝通能力、主動性及責任感。

大資料運維工程師的具體職責描述 篇5

職責:

1、負責資料平臺的運維管理工作(部署、監控、優化、故障處理);

2、負責Hadoop/Spark/Flink/Elasticsearch/Kafka等系統的架構稽核、容量規劃、成本優化;

3、負責大資料平臺的使用者管理、許可權分配、資源分配;

4、參與資料探勘、機器學習平臺的設計、並給出可執行的運維方案;

5、參與資料平臺的相關工具開發(包括自動化部署、監控、ETL等);

6、深入理解資料平臺架構,發現並解決故障隱患及效能瓶頸;

7、ETL工具、排程工具、關係型資料庫的運維。

任職資格:

1、本科以上學歷,計算機軟體相關專業;

2、1年以上大資料相關元件運維經驗(hadoop/yarn/hbase/hive/spark/kafka等),1年以上的CDH或HDP維護經驗,3年以上系統運維相關經驗;

3、深入理解Linux系統,能獨立部署開源軟體,熟練掌握一門以上指令碼語言(shell/perl/python等),熟悉python開發語言優先;

4、邏輯思維能力強,做事有條理,責任心強,工作積極主動,執行力強,有良好的團隊協作意識。

大資料運維工程師的具體職責描述 篇6

職責:

1、執行和監督執行伺服器系統管理制度;

2、日常駐場維護工作:PC伺服器裝置維護,發現異常後的應急處理以及故障的排查和解決;針對PC伺服器系統提出相應的軟硬體優化方案;

3、客戶服務、系統整合及相關工作;

4、運維服務文件,總結報告撰寫等相關工作。

任職條件:

1、大專或以上學歷;

2、兩年以上PC伺服器系統維護經驗;

3、精通PC伺服器硬體架構、Windows server、Linux等作業系統配置;

4、熟悉VMWARE虛擬機器系統和配置。

大資料運維工程師的具體職責描述 篇7

職責:

1、負責線上系統的部署、維護和容量規劃;

2、負責業務伺服器的配置,維護,監控,調優,故障排除等,保障執行環境的穩定執行;

3、負責線上系統的上線、變更、優化等的方案制定及實施;

4、推動及開發高效的自動化運維、管理工具,提升運維工作效率;

5、負責伺服器安全規劃及實施;

6、日常運維文件的撰寫整理工作。

崗位要求:

1、有大型網站運維經驗,3-5年運維或系統管理經驗;

2、有熟練的MYSQL操作及優化經驗;

3、熟練掌握shell,python,等任一種語言;

4、熟悉常用服務軟體(tomcat,nginx, redis,rabbitMQ等)的安裝、配置、管理及優化;

5、熟悉Haproxy,LVS等負載均衡的配置與應用;

6、熟練zabbix,Nagios,catci等常用的監控軟體;

7、對docker有實操經驗者優先;

8、有較好的溝通能力和團隊協作精神,具有高度責任心,能夠嚴格遵守職業操守。

大資料運維工程師的具體職責描述 篇8

1) 熟悉 Windows 各種桌面作業系統,以及 Windows 系統下常用軟體的安裝除錯和配置。

2) 熟悉蘋果系統(包括 MAC OS、 Ipad 及手機 IOS 等系統)的相關配置及問題處理。

3) 瞭解 Windows Server 20xx&20xx 的安裝,除錯,配置和使用, 熟練配置 AD 管理端及客戶端、 DNS

服務, DHCP 服務,檔案共享,檔案備份等 server 功能。

4) 熟悉桌上型電腦和筆記本基本硬體組成和配置,熟悉各種電腦外接裝置和 OA 裝置,瞭解影印機、網路打

印機和傳真機簡單的故障處理,故障判斷,替客戶報修。

5) 瞭解各種網路相關裝置(路由器,交換機,防火牆, 無線 AP 等)的安裝,除錯和配置。

6) 瞭解語音電話交換系統,熟悉網路與電話水晶頭製作、網路和電話交換機跳線及電話機維護,語音交

換機系統會另有語音專業人員進行維護。

7) 豐富的電腦終端桌面維護經驗,和較強的終端故障解決能力,具備很好的網路常識和網路故障排除能

力。

8) 熟悉 ITSM

大資料運維工程師的具體職責描述 篇9

1、資料中心伺服器計算與儲存規劃、建設和運維,

2、系統建設和優化專案管理,制訂和實施網路優化方案,提升平臺指標,提高業務系統的網路效能和速度,提升使用效率。

3、負責故障排查和應急處理,確保任何突發情況都能高效響應,保證系統7x24小時正常穩定執行;

4、制訂伺服器和儲存相關係統建設標準,推進實現平臺運維標準化管理。

5、網路安全推進和協同。

大資料運維工程師的具體職責描述 篇10

職責:

1.負責特定版塊的內容採編、內容管理、網站釋出和網站內容監控以及相關處理;

2.參與網站特定版塊的策劃、運營及推;

3.負責微信公眾賬號的日常運營和維護工作;

4.負責微信公眾賬號的內容更新、人群聚焦、話題發起、客戶管理等工作;

5.完成部門主管安排的工作任務;

任職要求:

1、18-28週歲,大專及以上學歷;

2、瞭解網站開發、執行及維護的相關知識,;

3、對運營有濃厚的興趣、文筆優秀並有志於在此行業長遠發展

4、有較強的邏輯推理能力,善於學習鑽研,做事認真嚴謹;

5、有良好的溝通能力和執行能力,能獨立解決問題;態度積極,工作認真負責,具有一定的應變能力及團隊協作精神;

6、.服從上級安排,有良好的職業操守以及較強的客戶服務意識。

大資料運維工程師的具體職責描述 篇11

1.負責公司網站的設計、改版、伺服器;

2.負責公司產品的介面進行設計、編輯、美化等工作;

3.對公司的宣傳產品進行美工設計,品牌設計。

4.負責公司微博、微信和官網的建設和日常運營,包括內容編輯和釋出,活動策劃,粉絲互動,資訊監測等;

5.撰寫各類專案推廣宣傳稿件(新聞稿、邀請函、合作函)、策劃方案、報告等建立自己的企業文化、形象品牌;

6.編寫公司用PPT稿件、方案、軟文、公關稿件、新聞材料等資料;

7.公司業務方面的文字材料編寫、宣傳資料編寫;

8.收集行業發展動態,新聞資料,制定營銷方案、推廣計劃;

9.熟悉新媒體及移動網際網路發展趨勢,並對這一行業十分熱衷者;

10.做好企業宣傳、形象建立、品牌推廣等方面的其他工作;

11.完成領導分配的其他工作任務。

大資料運維工程師的具體職責描述 篇12

職責:

1、設計和實施公司業務系統、搭建自動化測試、程式碼管理和正式執行等系統;

2、負責雲平臺的監控、應急響應等,及時定位及解決效能瓶頸和疑難問題;

3、負責研發自動化運維平臺,提高運維、開發協作效率,規範操作流程;

3、負責docker、k8s、gitlab、jenkins的定製和調優工作,負責提升公司雲平臺整體穩定、安全、高可用等,優化平臺效能;

4、負責編寫相關的技術文件、單元測試;

崗位要求

1、統招本科及以上學歷,很強的自學與操控能力;

2、精通Git/GitHab,通訊協議 TCP/HTTP 及 RESTful 標準;

3、精通jenkins、harbor的管理,具備搭建和管理gitlab+jenkins+harbor+k8s自動化服務環境;

4、精通openvpn,具備獨立管理vpn的網路服務;

5、至少一年及以上開發運維經驗,至少熟悉 Python/Shell 其中一種指令碼語言;

6、熟悉mysql資料庫運維管理,熟悉SQL的編寫優先考慮;

7、有豐富的 Linux 系統管理經驗,有在生產環境使用 Kubernetes 容器技術經驗優先考慮;

8、有使用 Aliyun, 騰訊或京東等國內、外主流雲平臺的經驗。

大資料運維工程師的具體職責描述 篇13

職責:

1. 負責公司遊戲專案的伺服器接入、上線、新版本釋出、維護等;

2. 負責與遊戲運營專案組的日常溝通交流,接受並處理專案組提出的運維需求;

3. 負責專案組相關運營支撐工具的開發(python,shell)

4. 負責日常運維工作的自動化、工具化建設;

5. 負責監控網路遊戲業務的執行狀況並及時處理遊戲執行中出現的故障。

職位要求:

1. 本科及以上學歷,計算機類及相關專業;

2. 2年以上網際網路行業經驗,3年以上伺服器維護經驗;

3. 熟悉linux系統管理;

4. 熟悉apache,iptables,nginx,mysql,php,ftp的基本配置和維護;

5. 熟悉mysql,redis,mongodb等基礎應用;

6. 熟悉shell,perl,python至少一門指令碼語言;

7. 有遊戲行業運維經驗優先;

8. 有較強的抗壓能力,溝通能力,推動能力;

大資料運維工程師的具體職責描述 篇14

職責

1、熟悉公司運維流程和系統,對於系統性的問題處理流程具有概念性的理解。

2、熟練掌握公司各個應用系統,為使用者提供技術支援,解決使用者問題,並完善作業指導書;

3、定期分析和總結使用者請求,不斷完善常見問題解決方法;

4、執行和反饋,維護公司的各個新、舊系統上線或升級工作,並推動實施;

5、定期及時的提供資料報表或提取相應的分析資料;

任職資格:

1.計算機、電子及相關專業,大學本科以上學歷,英語CET-4以上;

2.具有計算機軟體領域1年以上的工作經驗,具有大型IT系統實施和運維管理經驗者優先考慮;

3.專業技能: 熟練主流的主機、網路、安全、資料庫系統產品,精通各種辦公軟體;

4.具備較強的分析、判斷能力;較強文字、語言表達能力;以及善於團隊管理和培訓工作;

5.能夠承受較強的工作壓力,能適應團隊協作工作環境,適應快節奏的工作;

以下經驗者優先考慮:

1.能夠使用中文和英語進行流利的書面溝通和口頭溝通。

2.具有IoT物聯網,Java軟體部署實施經驗為佳;

3.有相關開發經驗,瞭解J2EE架構,或有自動化測試經驗者為佳;

4.對於Linux系統運維和系統架構有相關監控和維護的經驗。

5.具有撰寫公司內部文件和流程的經驗和能力。

大資料運維工程師的具體職責描述 篇15

職責:

1.負責軟體系統日常維護工作,確保系統安全執行;應用環境的各類服務軟體的搭建和維護工作;

2.負責參與軟體的培訓與實施上線工作;

3.負責系統運維,日常軟體故障排除、系統優化、安全優化、網路故障診斷及排除等各類技術故障處理;

4.負責對客戶線上支援、軟體執行過程中問題解答、應急現場支援等;

5.對已有的運維專案進行維護、更新及管理;

任職要求:

1.計算機相關專業,大專及以上學歷;1-3年相關經驗

2.瞭解計算機網路、硬體及常用軟體的相關知識;熟悉資料庫的基礎知識;

3.具備較強的溝通、合作能力;有強烈的責任心,工作踏實認真、積極主動;善於思考,學習能力強,能夠快速掌握專業知識;

4.熟練操作oracle或者Mysql者優先。

5.熟悉一門開發語言者優先,如java等。

大資料運維工程師的具體職責描述 篇16

職責:

1、負責公司大資料/Hadoop/hive/hbase/flink等離線實時資料平臺運維保障;

2、負責內部大資料自動化運維以及資料化運營平臺開發工作;

3、負責Hadoop/Hbase等系統的業務監控、持續交付、應急響應、容量規劃等;

4、深入理解資料平臺架構,發現並解決故障及效能瓶頸,打造一流的資料平臺;

5、持續的創新和優化能力,提升產品整體質量,改善使用者體驗,控制系統成本。

6、善於表達、理解客戶資料服務需求,具備資料需求轉化落地能力。

任職要求:

1、大學本科及以上學歷,計算機或者相關專業;

2、深入理解linux系統,運維體系結構,精於容量規劃、效能優化;

3、具備一定的開發能力,精通一門以上指令碼語言;(shell/perl/python等),熟悉java等開發語言一種及以上優先;

4、具備很強的故障排查能力,有很好的技術敏感度和風險識別能力;

5、能夠承受較大的工作壓力,以結果和行動為準則,努力追求成功;

6、熟悉hadoop、hbase、hive、spark、tez等原理並具備管理,配置,運維經驗;

7、熟悉分散式系統設計範型,有大規模系統設計和工程實現的瞭解者優先。

8、具有運營商流量資料加工處理經驗者優先。

大資料運維工程師的具體職責描述 篇17

職責:

1、制定並實施公司產品的SEO優化方案

2、有效提升網站的收錄、權重及PR值,提升網站關鍵詞的搜尋排名;

3、搜尋引擎廣告推廣賬戶維護工作,包括推廣資料統計、分析,關鍵詞跟蹤,推廣效果監測等;

4、分析制定新媒體公眾賬號的關鍵詞解決方案;

任職要求:

1、大專及以上學歷,1年以上網際網路行業SEM/SEO推廣工作經驗,有技術背景優先;

2、精通搜尋引擎優化的原理和策略,擅長開發工具來驅動排名及流量的增長,併為資料分析提供強有 力的技術保障,有成功案例;

3、能夠快速地監控各種搜尋引擎的微觀調整變化,從而採取更好的應對手段;

4、較強的學習能力,團隊合作意識強,擅於溝通;

5、打字速度60字/分鐘以上者優先;

大資料運維工程師的具體職責描述 篇18

職責

1、進行業務系統的維護

2、指導使用者正確使用操作軟體各業務模組;

3、分析並解決軟體使用過程中的問題,對軟體故障進行測試定位;

4、處理相關資料;

5、配合專案經理完成相關任務目標;

任職資格:

1、計算機相關專業,本科以上學歷;

2、優秀應屆畢業生可考慮;有稅務行業資訊化相關工作經驗者可破格錄取;具備軟體開發能力者優先。

3、熟悉JAVA程式語言及熟練操作SQL,具備一定資料庫知識。

4、能熟練使用所負責的軟體模組;

5、良好的良好的溝通能力、團隊合作精神。

大資料運維工程師的具體職責描述 篇19

職責:

負責提供IBM/HP/SUN等品牌的小型機、X86伺服器、儲存及相關作業系統、軟體等產品的維保服務和技術支援工作。

負責IBM/HP/SUN等品牌產品的故障維修,硬體更換以及現場排錯。

負責售前和售後的安裝,配置,巡檢和交付工作;

負責日常客戶的月度或者季度巡檢並完成巡檢報告。

任職要求:

大專及以上學歷,具有3-5年相關小型機運維工作經驗,SUN小機或者HP小機工作經歷優先考慮;

精通SUN-solaris作業系統,有豐富的系統問題解決經驗和系統維護經驗;同時瞭解HP-UNIX、IBM-AIX架構及運維技術的優先考慮;

精通SUN、IBM、HP等軟硬體操作,能獨立進行作業系統安裝配置,雙機配置與維護,處理故障、變更操作、效能調優;

良好的硬體故障定位、分析以及問題解決能力;

責任心強,具有良好的溝通協調能力及團隊協作精神,有較強的客戶服務意識和創新學習能力,能接受短期出差;

大資料運維工程師的具體職責描述 篇20

職責:

1、參與測試網路的規劃、建設、實施和維護;

2、參與公有云生產環境規範編寫、制定及建設運維工作;

3、參與資料中心日常網路變更需求的評審;

4、參與網路運維自動化體系建設,致力於實現網路運維標準化、工具化、自動化;

5、參與下一代新資料中心的設計和建設;

6、其他運維性事務的工作

任職要求:

1、計算機網路及相關專業本科以上畢業;

2、熟悉主流交換機、路由器、防火牆、負載均衡等網路裝置。有2年以上網路維護相關工作經驗,掌握多種網路環境搭建,具備較強的技術基礎;

3、熟悉思科、華為等主流網路產品的規劃,安裝,設定和維護,有CCIE/CCNP及同等證書優先;有較強的溝通協調能力及高度責任心。

4、熟悉思科、華為SDN的配置和管理的優先考慮;

5、熟悉vmware、kvm、openstack、docker、kubernetes的優先考慮;

6、熟悉公有云優先;