大數據運維工程師的具體職責描述(精選20篇)

來源:瑞文範文網 5.78K

大數據運維工程師的具體職責描述 篇1

職責

大數據運維工程師的具體職責描述(精選20篇)

1. 負責大數據ETL系統,運維及保障服務穩定可用;

2. 負責數據採集交換方案以及聯調測試;

3. 負責採集交換任務的評審和上線;

4. 負責及時排除ETL流程故障,形成知識庫,完善運維文檔;

5. 負責監控和優化ETL的性能,持續性地提出改進自動化運維平臺建議

技能要求

1. 計算機科學或相關專業本科及以上學歷;

2. 熟悉Linux系統,熟練編寫shell/perl/python一種或多種腳本語言;

3. 熟悉Hive、Hadoop、MapReduce集羣原理,有hadoop大數據平臺運維經驗者優先;

4. 熟悉數據庫的性能優化、SQL調優,有相應經驗;

5. 抗壓能力強,有強烈的責任心,良好的溝通能力、學習能力及團隊合作能力。

大數據運維工程師的具體職責描述 篇2

職責:

1、負責大數據集羣的日常維護、監控、異常處理等工作,保障集羣穩定運行;

2、負責大數據批處理管理以及運維;

3、負責大數據集羣的用戶管理、權限管理、資源管理、性能優化等;

4、深入理解數據平臺架構,發現並解決重大故障及性能瓶頸,打造一流的數據平臺;

5、跟進大數據前沿技術,不斷優化數據集羣;

6、有華爲大數據平臺運維經驗優先;

崗位要求:

1、1年以上大數據運維或開發經驗;

2、有良好的計算機和網絡基礎,熟悉linux文件系統、內核、性能調優,TCP/IP、HTTP等協議;

3、熟悉大數據生態,有相關(HDFS、Hive、Hbase、Sqoop、Spark、Flume、Zookeeper、ES、Kafka)的運維及開發經驗;

4、熟練使用shell、python等腳本語言開發相關運維管理工具;

5、良好的文檔撰寫習慣;

大數據運維工程師的具體職責描述 篇3

職責:

1、負責公司內部及項目中大數據集羣的構建,任務調度、監控預警,持續完善大數據平臺,保證穩定性、安全性;

2、負責集羣容量規劃、擴容、集羣性能優化及日常巡檢和應急值守,參與大數據基礎環境的架構設計與改進;

3、深入研究大數據業務相關運維技術,探索新的運維技術及發展方向。

任職要求:

1、熟悉Linux基礎命令操作,能夠獨立編寫Shell腳本開展日常服務器的運維;

2、熟悉Hadoop生態圈Hadoop、Kafka、Zookeeper、Hbase、Spark的安裝與調優;

3、熟悉軟硬件設備,網絡原理,有豐富的大數據平臺部署,性能優化和運維經驗;

4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;

5、能夠利用各種開源監控工具、運維工具,HA、負載均衡軟件完成工作任務;

6、熟悉JVM虛擬機調優;

8、1年及以上相關崗位經驗,要有良好的安全和責任意識。

大數據運維工程師的具體職責描述 篇4

職責:

1、負責分佈式大數據平臺產品的運維和運維開發,保證其高可用和穩定性;

2、負責大數據系統架構的可運維性設計、容量規劃、服務監控,持續優化服務架構、集羣性能;

3、通過技術手段控制和優化成本,通過自動化工具及流程提升大數據平臺運維效率;

4、爲項目開發人員提供大數據技術指導及解決大數據平臺應用中遇到的技術難題;

任職資格:

1、三年以上大數據運維相關工作經驗,有大型互聯網公司工作經驗者優先,全日制本科及以上學歷;

2、熟練掌握至少一門開發語言,有Java或Python語言開發經驗優先;

3、精通Hadoop生態及高性能緩存相關的各種工具並有實戰經驗,包括但不限於Hadoop、HBase、Hive、Presto、Kafka、Spark、Yarn、Flink、Logstash、Flume、ClickHouse等;

4、熟悉Mysql等常用關係數據庫,熟練編寫SQL語句,有分佈式nosql數據庫應用、性能調優經驗優先;

5、熟悉Linux環境,能夠熟悉使用shell腳本;

6、對大數據技術有強烈興趣,有志於往大數據方向深層次發展;

7、具有很強的責任心、執行力、服務意識、學習能力和抗壓能力;

8、具備較好的溝通能力、主動性及責任感。

大數據運維工程師的具體職責描述 篇5

職責:

1、負責數據平臺的運維管理工作(部署、監控、優化、故障處理);

2、負責Hadoop/Spark/Flink/Elasticsearch/Kafka等系統的架構審覈、容量規劃、成本優化;

3、負責大數據平臺的用戶管理、權限分配、資源分配;

4、參與數據挖掘、機器學習平臺的設計、並給出可執行的運維方案;

5、參與數據平臺的相關工具開發(包括自動化部署、監控、ETL等);

6、深入理解數據平臺架構,發現並解決故障隱患及性能瓶頸;

7、ETL工具、調度工具、關係型數據庫的運維。

任職資格:

1、本科以上學歷,計算機軟件相關專業;

2、1年以上大數據相關組件運維經驗(hadoop/yarn/hbase/hive/spark/kafka等),1年以上的CDH或HDP維護經驗,3年以上系統運維相關經驗;

3、深入理解Linux系統,能獨立部署開源軟件,熟練掌握一門以上腳本語言(shell/perl/python等),熟悉python開發語言優先;

4、邏輯思維能力強,做事有條理,責任心強,工作積極主動,執行力強,有良好的團隊協作意識。

大數據運維工程師的具體職責描述 篇6

職責:

1、執行和監督執行服務器系統管理制度;

2、日常駐場維護工作:PC服務器設備維護,發現異常後的應急處理以及故障的排查和解決;針對PC服務器系統提出相應的軟硬件優化方案;

3、客戶服務、系統集成及相關工作;

4、運維服務文檔,總結報告撰寫等相關工作。

任職條件:

1、大專或以上學歷;

2、兩年以上PC服務器系統維護經驗;

3、精通PC服務器硬件架構、Windows server、Linux等操作系統配置;

4、熟悉VMWARE虛擬機系統和配置。

大數據運維工程師的具體職責描述 篇7

職責:

1、負責在線系統的部署、維護和容量規劃;

2、負責業務服務器的配置,維護,監控,調優,故障排除等,保障運行環境的穩定運行;

3、負責在線系統的上線、變更、優化等的方案制定及實施;

4、推動及開發高效的自動化運維、管理工具,提升運維工作效率;

5、負責服務器安全規劃及實施;

6、日常運維文檔的撰寫整理工作。

崗位要求:

1、有大型網站運維經驗,3-5年運維或系統管理經驗;

2、有熟練的MYSQL操作及優化經驗;

3、熟練掌握shell,python,等任一種語言;

4、熟悉常用服務軟件(tomcat,nginx, redis,rabbitMQ等)的安裝、配置、管理及優化;

5、熟悉Haproxy,LVS等負載均衡的配置與應用;

6、熟練zabbix,Nagios,catci等常用的監控軟件;

7、對docker有實操經驗者優先;

8、有較好的溝通能力和團隊協作精神,具有高度責任心,能夠嚴格遵守職業操守。

大數據運維工程師的具體職責描述 篇8

1) 熟悉 Windows 各種桌面操作系統,以及 Windows 系統下常用軟件的安裝調試和配置。

2) 熟悉蘋果系統(包括 MAC OS、 Ipad 及手機 IOS 等系統)的相關配置及問題處理。

3) 瞭解 Windows Server 20xx&20xx 的安裝,調試,配置和使用, 熟練配置 AD 管理端及客戶端、 DNS

服務, DHCP 服務,文件共享,文件備份等 server 功能。

4) 熟悉臺式機和筆記本基本硬件組成和配置,熟悉各種電腦外接設備和 OA 設備,瞭解複印機、網絡打

印機和傳真機簡單的故障處理,故障判斷,替客戶報修。

5) 瞭解各種網絡相關設備(路由器,交換機,防火牆, 無線 AP 等)的安裝,調試和配置。

6) 瞭解語音電話交換系統,熟悉網絡與電話水晶頭製作、網絡和電話交換機跳線及電話機維護,語音交

換機系統會另有語音專業人員進行維護。

7) 豐富的電腦終端桌面維護經驗,和較強的終端故障解決能力,具備很好的網絡常識和網絡故障排除能

力。

8) 熟悉 ITSM

大數據運維工程師的具體職責描述 篇9

1、數據中心服務器計算與存儲規劃、建設和運維,

2、系統建設和優化項目管理,制訂和實施網絡優化方案,提升平臺指標,提高業務系統的網絡性能和速度,提升使用效率。

3、負責故障排查和應急處理,確保任何突發情況都能高效響應,保證系統7x24小時正常穩定運行;

4、制訂服務器和存儲相關係統建設標準,推進實現平臺運維標準化管理。

5、網絡安全推進和協同。

大數據運維工程師的具體職責描述 篇10

職責:

1.負責特定版塊的內容採編、內容管理、網站發佈和網站內容監控以及相關處理;

2.參與網站特定版塊的策劃、運營及推;

3.負責微信公衆賬號的日常運營和維護工作;

4.負責微信公衆賬號的內容更新、人羣聚焦、話題發起、客戶管理等工作;

5.完成部門主管安排的工作任務;

任職要求:

1、18-28週歲,大專及以上學歷;

2、瞭解網站開發、運行及維護的相關知識,;

3、對運營有濃厚的興趣、文筆優秀並有志於在此行業長遠發展

4、有較強的邏輯推理能力,善於學習鑽研,做事認真嚴謹;

5、有良好的溝通能力和執行能力,能獨立解決問題;態度積極,工作認真負責,具有一定的應變能力及團隊協作精神;

6、.服從上級安排,有良好的職業操守以及較強的客戶服務意識。

大數據運維工程師的具體職責描述 篇11

1.負責公司網站的設計、改版、服務器;

2.負責公司產品的界面進行設計、編輯、美化等工作;

3.對公司的宣傳產品進行美工設計,品牌設計。

4.負責公司微博、微信和官網的建設和日常運營,包括內容編輯和發佈,活動策劃,粉絲互動,信息監測等;

5.撰寫各類項目推廣宣傳稿件(新聞稿、邀請函、合作函)、策劃方案、報告等建立自己的企業文化、形象品牌;

6.編寫公司用PPT稿件、方案、軟文、公關稿件、新聞材料等資料;

7.公司業務方面的文字材料編寫、宣傳資料編寫;

8.收集行業發展動態,新聞資料,制定營銷方案、推廣計劃;

9.熟悉新媒體及移動互聯網發展趨勢,並對這一行業十分熱衷者;

10.做好企業宣傳、形象建立、品牌推廣等方面的其他工作;

11.完成領導分配的其他工作任務。

大數據運維工程師的具體職責描述 篇12

職責:

1、設計和實施公司業務系統、搭建自動化測試、代碼管理和正式運行等系統;

2、負責雲平臺的監控、應急響應等,及時定位及解決性能瓶頸和疑難問題;

3、負責研發自動化運維平臺,提高運維、開發協作效率,規範操作流程;

3、負責docker、k8s、gitlab、jenkins的定製和調優工作,負責提升公司雲平臺整體穩定、安全、高可用等,優化平臺性能;

4、負責編寫相關的技術文檔、單元測試;

崗位要求

1、統招本科及以上學歷,很強的自學與操控能力;

2、精通Git/GitHab,通信協議 TCP/HTTP 及 RESTful 標準;

3、精通jenkins、harbor的管理,具備搭建和管理gitlab+jenkins+harbor+k8s自動化服務環境;

4、精通openvpn,具備獨立管理vpn的網絡服務;

5、至少一年及以上開發運維經驗,至少熟悉 Python/Shell 其中一種腳本語言;

6、熟悉mysql數據庫運維管理,熟悉SQL的編寫優先考慮;

7、有豐富的 Linux 系統管理經驗,有在生產環境使用 Kubernetes 容器技術經驗優先考慮;

8、有使用 Aliyun, 騰訊或京東等國內、外主流雲平臺的經驗。

大數據運維工程師的具體職責描述 篇13

職責:

1. 負責公司遊戲項目的服務器接入、上線、新版本發佈、維護等;

2. 負責與遊戲運營項目組的日常溝通交流,接受並處理項目組提出的運維需求;

3. 負責項目組相關運營支撐工具的開發(python,shell)

4. 負責日常運維工作的自動化、工具化建設;

5. 負責監控網絡遊戲業務的運行狀況並及時處理遊戲運行中出現的故障。

職位要求:

1. 本科及以上學歷,計算機類及相關專業;

2. 2年以上互聯網行業經驗,3年以上服務器維護經驗;

3. 熟悉linux系統管理;

4. 熟悉apache,iptables,nginx,mysql,php,ftp的基本配置和維護;

5. 熟悉mysql,redis,mongodb等基礎應用;

6. 熟悉shell,perl,python至少一門腳本語言;

7. 有遊戲行業運維經驗優先;

8. 有較強的抗壓能力,溝通能力,推動能力;

大數據運維工程師的具體職責描述 篇14

職責

1、熟悉公司運維流程和系統,對於系統性的問題處理流程具有概念性的理解。

2、熟練掌握公司各個應用系統,爲用戶提供技術支持,解決用戶問題,並完善作業指導書;

3、定期分析和總結用戶請求,不斷完善常見問題解決方法;

4、執行和反饋,維護公司的各個新、舊系統上線或升級工作,並推動實施;

5、定期及時的提供數據報表或提取相應的分析數據;

任職資格:

1.計算機、電子及相關專業,大學本科以上學歷,英語CET-4以上;

2.具有計算機軟件領域1年以上的工作經驗,具有大型IT系統實施和運維管理經驗者優先考慮;

3.專業技能: 熟練主流的主機、網絡、安全、數據庫系統產品,精通各種辦公軟件;

4.具備較強的分析、判斷能力;較強文字、語言表達能力;以及善於團隊管理和培訓工作;

5.能夠承受較強的工作壓力,能適應團隊協作工作環境,適應快節奏的工作;

以下經驗者優先考慮:

1.能夠使用中文和英語進行流利的書面溝通和口頭溝通。

2.具有IoT物聯網,Java軟件部署實施經驗爲佳;

3.有相關開發經驗,瞭解J2EE架構,或有自動化測試經驗者爲佳;

4.對於Linux系統運維和系統架構有相關監控和維護的經驗。

5.具有撰寫公司內部文檔和流程的經驗和能力。

大數據運維工程師的具體職責描述 篇15

職責:

1.負責軟件系統日常維護工作,確保系統安全運行;應用環境的各類服務軟件的搭建和維護工作;

2.負責參與軟件的培訓與實施上線工作;

3.負責系統運維,日常軟件故障排除、系統優化、安全優化、網絡故障診斷及排除等各類技術故障處理;

4.負責對客戶在線支持、軟件運行過程中問題解答、應急現場支持等;

5.對已有的運維項目進行維護、更新及管理;

任職要求:

1.計算機相關專業,大專及以上學歷;1-3年相關經驗

2.瞭解計算機網絡、硬件及常用軟件的相關知識;熟悉數據庫的基礎知識;

3.具備較強的溝通、合作能力;有強烈的責任心,工作踏實認真、積極主動;善於思考,學習能力強,能夠快速掌握專業知識;

4.熟練操作oracle或者Mysql者優先。

5.熟悉一門開發語言者優先,如java等。

大數據運維工程師的具體職責描述 篇16

職責:

1、負責公司大數據/Hadoop/hive/hbase/flink等離線實時數據平臺運維保障;

2、負責內部大數據自動化運維以及數據化運營平臺開發工作;

3、負責Hadoop/Hbase等系統的業務監控、持續交付、應急響應、容量規劃等;

4、深入理解數據平臺架構,發現並解決故障及性能瓶頸,打造一流的數據平臺;

5、持續的創新和優化能力,提升產品整體質量,改善用戶體驗,控制系統成本。

6、善於表達、理解客戶數據服務需求,具備數據需求轉化落地能力。

任職要求:

1、大學本科及以上學歷,計算機或者相關專業;

2、深入理解linux系統,運維體系結構,精於容量規劃、性能優化;

3、具備一定的開發能力,精通一門以上腳本語言;(shell/perl/python等),熟悉java等開發語言一種及以上優先;

4、具備很強的故障排查能力,有很好的技術敏感度和風險識別能力;

5、能夠承受較大的工作壓力,以結果和行動爲準則,努力追求成功;

6、熟悉hadoop、hbase、hive、spark、tez等原理並具備管理,配置,運維經驗;

7、熟悉分佈式系統設計範型,有大規模系統設計和工程實現的瞭解者優先。

8、具有運營商流量數據加工處理經驗者優先。

大數據運維工程師的具體職責描述 篇17

職責:

1、制定並實施公司產品的SEO優化方案

2、有效提升網站的收錄、權重及PR值,提升網站關鍵詞的搜索排名;

3、搜索引擎廣告推廣賬戶維護工作,包括推廣數據統計、分析,關鍵詞跟蹤,推廣效果監測等;

4、分析制定新媒體公衆賬號的關鍵詞解決方案;

任職要求:

1、大專及以上學歷,1年以上互聯網行業SEM/SEO推廣工作經驗,有技術背景優先;

2、精通搜索引擎優化的原理和策略,擅長開發工具來驅動排名及流量的增長,併爲數據分析提供強有 力的技術保障,有成功案例;

3、能夠快速地監控各種搜索引擎的微觀調整變化,從而採取更好的應對手段;

4、較強的學習能力,團隊合作意識強,擅於溝通;

5、打字速度60字/分鐘以上者優先;

大數據運維工程師的具體職責描述 篇18

職責

1、進行業務系統的維護

2、指導用戶正確使用操作軟件各業務模塊;

3、分析並解決軟件使用過程中的問題,對軟件故障進行測試定位;

4、處理相關數據;

5、配合項目經理完成相關任務目標;

任職資格:

1、計算機相關專業,本科以上學歷;

2、優秀應屆畢業生可考慮;有稅務行業信息化相關工作經驗者可破格錄取;具備軟件開發能力者優先。

3、熟悉JAVA編程語言及熟練操作SQL,具備一定數據庫知識。

4、能熟練使用所負責的軟件模塊;

5、良好的良好的溝通能力、團隊合作精神。

大數據運維工程師的具體職責描述 篇19

職責:

負責提供IBM/HP/SUN等品牌的小型機、X86服務器、存儲及相關操作系統、軟件等產品的維保服務和技術支持工作。

負責IBM/HP/SUN等品牌產品的故障維修,硬件更換以及現場排錯。

負責售前和售後的安裝,配置,巡檢和交付工作;

負責日常客戶的月度或者季度巡檢並完成巡檢報告。

任職要求:

大專及以上學歷,具有3-5年相關小型機運維工作經驗,SUN小機或者HP小機工作經歷優先考慮;

精通SUN-solaris操作系統,有豐富的系統問題解決經驗和系統維護經驗;同時瞭解HP-UNIX、IBM-AIX架構及運維技術的優先考慮;

精通SUN、IBM、HP等軟硬件操作,能獨立進行操作系統安裝配置,雙機配置與維護,處理故障、變更操作、性能調優;

良好的硬件故障定位、分析以及問題解決能力;

責任心強,具有良好的溝通協調能力及團隊協作精神,有較強的客戶服務意識和創新學習能力,能接受短期出差;

大數據運維工程師的具體職責描述 篇20

職責:

1、參與測試網絡的規劃、建設、實施和維護;

2、參與公有云生產環境規範編寫、制定及建設運維工作;

3、參與數據中心日常網絡變更需求的評審;

4、參與網絡運維自動化體系建設,致力於實現網絡運維標準化、工具化、自動化;

5、參與下一代新數據中心的設計和建設;

6、其他運維性事務的工作

任職要求:

1、計算機網絡及相關專業本科以上畢業;

2、熟悉主流交換機、路由器、防火牆、負載均衡等網絡設備。有2年以上網絡維護相關工作經驗,掌握多種網絡環境搭建,具備較強的技術基礎;

3、熟悉思科、華爲等主流網絡產品的規劃,安裝,設置和維護,有CCIE/CCNP及同等證書優先;有較強的溝通協調能力及高度責任心。

4、熟悉思科、華爲SDN的配置和管理的優先考慮;

5、熟悉vmware、kvm、openstack、docker、kubernetes的優先考慮;

6、熟悉公有云優先;

熱門標籤