大數據運維工程師的主要職責說明(精選17篇)
大數據運維工程師的主要職責說明 篇1
職責:
1、負責大數據運維體系中的監控工作;
2、負責處理用戶服務請求事件;
3、負責監控報警事件的處理;
4、負責協助完善監控體系;
5、負責監控平臺運維工作,持續優化監控體系;
6、按時完成領導交辦的其他相關工作。
任職要求:
1、大專及以上學歷,計算機相關專業,1年以上大數據系統運維經驗;
2、熟悉linux操作系統,熟悉hadoop、hive、hbase、yarn、spark、storm等組件的原理及運維方式;
3、熟悉中間件工作原理,對TOMCAT/jetty/nginx/微服務有一定了解,具備一定的操作能力;
4、至少熟悉python/bash/shell一種或多種語言,可獨立編寫維護及監控腳本;
5、有強烈的求知慾和鑽研技巧,具有良好的獨立分析問題與迅速解決問題的能力;
6、有良好的職業責任心和團隊協作意識;
7、能適應7*24小時三班倒工作時間。
大數據運維工程師的主要職責說明 篇2
職責:
1、響應及解決客戶的技術要求、疑問以及系統使用過程中的各種問題;
2、負責服務過程中問題現象和處理方案的收集撰寫,形成知識庫,並對知識庫進行維護更新;
3、及時反饋技術處理過程中的異常情況,及時向上級反饋告警,同時主動協調資源推動問題解決;
4、定期對所有服務問題進行分析,並對服務效率有影響的問題提供反饋意見,提升服務支撐團隊專業度。
5、能夠獨當一面,具備獨立思考和處理問題的能力,並能夠與客戶建立良好的關係。
6、明確工作範圍,定期與客戶溝通工作量,並獲取客戶回執,及時歸檔。
7、能夠快速熟悉參與項目中的業務,總結後與研發定期溝通。
崗位要求:
1、3年及以上工作經驗,計算機相關專業本科及以上學歷;
2、熟悉weblogic中間件的安裝部署;
3、熟悉Oracle數據庫的增刪改查操作;
4、瞭解ETL相關內容,如Informatica、kettle等,具備基礎操作技能;
5、瞭解BI報表相關內容,如cognos、tableau、自助式分析工具等,具備基礎操作技能;
6、掌握基本的windows/linux操作命令;
7、熟練操作Office辦公軟件;具有較強的文檔理解與編寫能力,具有較強的語言表達及溝通協調能力;
8、熟悉電網業務優先。
大數據運維工程師的主要職責說明 篇3
職責:
1、負責公司大數據集羣的構建,任務調度、監控預警,持續完善大數據平臺,保證穩定性、安全性;
2、負責集羣容量規劃、擴容、集羣性能優化及日常巡檢和應急值守,參與大數據基礎環境的架構設計與改進;
3、深入研究大數據業務相關運維技術,持續優化集羣服務架構,探索新的Hadoop、Spark運維技術及發展方向;
4、具備ownership,故障排查能力,有很好的技術敏感度和風險識別能力;
5、良好的服務意識,主動思考,自我驅動力。
任職資格:
1、熟悉RedHat、CentOS、Ubuntu系列Linux系統的配置、管理、內核優化。能夠獨立編寫(Shell/Python)腳本語言,腳本開展日常服務器的運維;
2、熟悉hadoop生態圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調試和運維經驗; 熟悉分佈式日誌分析系統ELK及相關技術;
3、熟悉軟硬件設備,網絡原理,有豐富的大數據平臺部署,性能優化和運維經驗; 瞭解運維高容量、大流量、大併發Web系統的業務知識以及解決方案;
4、工作認真負責,有較強的學習能力,動手能力和分析解決問題的能力;
5、能夠利用各種開源監控工具、運維工具,HA、負載均衡軟件完成工作任務;
6、mongodb、mysql等配置、調優和備份。
大數據運維工程師的主要職責說明 篇4
職責:
1. 管理公司大數據集羣,提供高可用、高性能大數據集羣系統,並保障系統穩定運行
2. 負責大數據集羣性能監控與優化,故障處理,數據備份及災難恢復
3. 負責大數據集羣自助平臺的高可用架構設計和負載均衡的設計和實現
4. 負責業務系統大數據集羣管理,包括數據庫日常維護,系統數據安全以及權限管理、故障處理、日常錯誤情況處理等
5. 負責依據業務需求優化數據存儲結構,負責數據庫系統部署方案的計劃、設計和實施
6. 負責系統大數據集羣定期檢查,進行性能分析與調優,充分保證信息系統數據的安全及系統高效運行
任職資格:
1. 全日制本科及以上學歷,計算機或相關專業,1年以上hadoop運維經驗
2. 熟悉Hadoop生態圈Hadoop、Kafka、Zookeeper、HBase、Spark、hive等的安裝配置和優化
3. 熟悉MySQL等關係型數據庫的部署與優化,瞭解MongoDB或Cassandra等NoSQL數據庫
4. 熟悉Linux類操作系統的基礎命令操作,能夠編寫腳本開展日常運維工作
5. 熟悉Linux開發環境,會使用Shell/Java/Python中的一門腳本語言
6. 熟悉常見開源工具如Nginx、Zabbix、Grafana等的安裝配置和使用
大數據運維工程師的主要職責說明 篇5
職責:
1.負責參與公司大數據基礎架構平臺規劃,運維,監控和優化工作,保障數據平臺服務的穩定性和可用性;
2.研究大數據前沿技術,改進現有系統的服務和運維架構,提升系統可靠性和可運維性;
3.負責公司Hadoop核心技術組件HDFS、Yarn、MapReduce、HBase、Storm大數據存儲計算核心的監控和日常運維工作。
4.獨立完成大數據運維過程中問題定位、問題解決、並進行總結及部門的大數據基礎技能培訓;
任職要求:
1. 計算機、信息系統、數學或相近專業本科以上學歷;
2. 擁有至少3年以上Hadoop運維經驗、具備基於CDH與HDP的維護經驗;
3. 熟悉Hadoop大數據生態圈服務的工作原理,具備相關實戰維護經驗,包括但不限於HDFS、YARN、Hive、HBase、ELK、Spark、Kafka、Zookeeper、Flume等;
4. 至少獨立維護過中大型Hadoop集羣系統服務;
5. 至少精通Python,shell中的一種,瞭解JAVA;有良好的系統性能優化及故障排除能力;
6. 有大數據架構師工作經驗更佳;
大數據運維工程師的主要職責說明 篇6
職責:
1、網絡與電話線路搭建與維護;
2、機房設備、視頻會議系統維護;
3、計算機、打印等日常辦公設備維護與維修;
4、服務器、AD域、DNS、文件共享、IIS服務管理與維護;
5、固定資產日常管理及臺賬更新登記;
6、上級領導交辦的其他工作。
任職資格:
1、本科及以上學歷,計算機、網絡維護等相關專業,兩年以上大中型企業同崗位工作經驗,熟悉建築設計行業相關軟件者優先。
2、工作責任心強,認真負責,具有良好的溝通協調及邏輯思維能力、踏實認真的工作態度。
3、具有良好的組織、協調能力和較強的團隊管理能力。
大數據運維工程師的主要職責說明 篇7
職責:
1、負責銀行各類應用系統的運維標準制定和運維管理等工作;
2、負責銀行各類應用系統的運行情況及相關技術的整理、分析和總結等工作;
3、負責銀行各類應用系統的應用監控、應用運維體系工具的建設和維護工作;
4、負責銀行各類應用系統的自動化腳本編寫和測試工作。
招聘要求:
1、全日制一本以及以上學歷,理工類專業;
2、具備2年及以上應用系統運維或應用系統開發經驗,有銀行應用系統運維或開發經驗者優先;
3、具備較強的文檔編寫、英語文檔閱讀能力;
4、具備良好的溝通表達能力和團隊合作精神,具有較強的工作責任心和主動性;
5、至少具備以下二項技能:
(1)熟悉銀行應用系統體系架構、應用運維標準化流程;
(2)熟悉AIX、LInux操作系統相關運維工作,具備熟練的SHELL腳本編程能力;
(3)熟悉應用軟件持續集成和持續發佈交付項目的整體流程,熟悉Jenkins、Nexus等相關Devops工具;
(4)熟練使用容器平臺相關技術,有容器平臺管理工作、應用容器打包的相關經驗;
(5)熟練使用Golang或者Python編程。
大數據運維工程師的主要職責說明 篇8
職責:
1、負責建設、調試和維護公司的網絡系統,包括網絡相關的軟硬件系統負責解決網絡故障、優化網絡性能;
2、對各種應用支持軟件如數據庫、中間件以及各種通用服務或特定服務的監控管理,如郵件系統、DNS、Web 等的監控與管理;
3、管理企業中各 IT 系統的資源資產情況,這些資源資產可以是物理存在的,也可以是邏輯存在的;
4、推行信息技術中心的軟件配置化管理,保證公司主要業務系統配置安全;
5、負責業務系統SIT/PRE/PRD的環境的部署發佈工作;
6、負責維護公司機房和服務器資源;
7、推行Devops,實現適合公司IT環境的持續集成、持續部署等自動化運維;
任職資格:
1、大學本科及以上學歷,計算機或相關專業畢業,具有大型互聯網公司三年以上運維經驗;
2、精通Linux系統,熟悉常用的web服務器/數據庫/中間件等軟件的應用及運維管理,熟悉TCP/IP及常用應用層協議;
3、精通一門以上腳本語言(shell/perl/python等),具備自動化運維、CI/CD、DevOps項目實踐等相關經驗,熟悉Kubernetes、Docker等容器相關技術;
4、熟悉大型分佈式系統(計算/存儲)的架構設計及運維管理,具備QEMU/KVM、libvirt、openstack等虛擬化技術的開發/運維經驗者優先;
5. 具備較強Trouble-shooting能力,能夠快速排查系統各種異常、瓶頸等,並推動平臺和產品的優化改進;
6、具備較強的客戶服務意識,能夠快速響應客戶諮詢、技術支持等問題,提供相關解決方案,協助客戶進行應用系統架構設計、快速上雲和遷移等相關工作;
7、積極主動,善於溝通與持續學習,擁有較強的責任心與團隊協作意識,敢於接受挑戰並能承受較強工作壓力。
大數據運維工程師的主要職責說明 篇9
職責:
1、負責開發、測試、模擬、正式等環境中數據庫環境搭建。
2、負責業務平臺的上線、版本更新中數據庫支撐工作。
3、負責制定數據庫備份計劃,撰寫備份腳本,對各環境下數據庫進行備份,定期檢查備份結果及備份有效性測試。
4、負責撰寫數據庫巡檢腳本,定期對數據庫進行巡檢,並監控數據庫運行狀態,及時處理數據庫告警。
5、維護和更新開發、測試、模擬、正式等環境數據庫用戶資源,確保資料準確性。
6、負責業務系統平臺的數據庫故障診斷及優化數據存儲結構,對性能有問題的SQL語句提出優化方案。
7、負責業務平臺部分數據統計工作,爲業務部門提供需要的數據。
8、完成領導安排的其他工作
技能:
(1)熟悉Oracle 11g數據庫原理,能獨立完成單機、RAC、DG的部署和日常維護,具有OCP或者以上相關證書;
(2)深入理解mysql InnoDB引擎,熟悉MySQL數據庫應用運行體系及高可用解決方案;
(3)熟悉NOSQL數據庫,至少掌握mongodb、redis中的一種,獨立完成單機、集羣安裝部署、備份等;
(4)精通數據庫運維監控,熟悉zabbix、nagios、cacti中至少一種,有Oracle、mysql數據庫性能調優經驗,對於Oracle會借用AWR報告分析定位問題;
(5)熟練掌握sql語言,有較強的SQL編寫和調優能力,可以根據數據庫設計文檔等資料,完成特定的報表統計;
(6)熟練掌握shell、perl、python等腳本編程,熟練使用shell 腳本執行備份、巡檢等數據庫日常維護工作;
大數據運維工程師的主要職責說明 篇10
1.負責桌面計算機軟硬件(計算機、顯示器、電話、網絡設施和其他附屬硬件設施,如打印機、掃描儀)安裝、配置、升級、運行維護與管理,保障桌面系統正常運行,滿足日常工作的需要。
2.負責對網絡設備、服務器及安全系統等運行監控與管理,負責對公司綜合佈線系統的維護與管理。
3.負責電話、視頻會議系統的運行維護與管理。
4.撰寫運維技術文檔,統計整理運維數據。
大數據運維工程師的主要職責說明 篇11
職責:
1.維護數據庫服務正常運行和應急響應。
2.爲開發和業務人員提供相關數據庫支持。
3.負責維護數據庫的日常變更、備份、恢復校驗、擴容、數據遷移和安全管理。
4.負責數據庫性能分析及系統優化、問題跟蹤和管理。
5.制定數據庫規範流程、文檔建設。
任職要求:
1.3年以上大型oracle、mysql數據庫管理經驗。
2.瞭解linux系統,掌握使用centos、Ubuntu等發行版本,可全linux環境工作。
3.熟練掌握oracle高可用架構,具備快速定位故障能力和優化能力。
4.熟練掌握mysql高可用架構,具備實際運維管理經驗 。
5.熟悉EMC、HDS、DELL等存儲硬件管理經驗優先。
6.熟悉Golang, Python等系統開發語言,可以對數據庫相關工具進行二次開發;有數據庫開發經驗優先。
大數據運維工程師的主要職責說明 篇12
職責:
1、負責項目內主機系統的日常運維、故障處理等工作,並提交相關報告;
2、負責中間件(如:Tomcat、nginx等)的部署、故障排除和調優等工作;
3、負責操作系統層面安全整改工作;
4、配合業務系統軟件發佈及客戶定期進行的應急演練;
職位要求:
1、具有1年以上運維經驗,計算機及相關專業專科以上學歷;
2、精通Linux、Windows等操作系統的運維管理;
3、熟悉中間件產品,如:Tomcat、nginx,能熟練進行這些產品的安裝、配置和調優等;
4、能夠熟練使用shell、Python等任意一種語言編寫自動化運維腳本;
5、積極主動,責任心強,有團隊合作精神,有良好的人際溝通和表達能力;
大數據運維工程師的主要職責說明 篇13
職責:
1、負責計算機、局域網絡、以及機房設備維護工作;
2、負責辦公設備的日常維護及管理工作;
3、負責病毒的查殺,維護網絡系統安全;
4、負責設備資產及配置信息登記與更新;
任職資格:
1、大專及以上學歷,計算機相關專業;
2、具有運維管理、服務器網管工作經驗;
3、具有較好的網絡基礎知識,熟悉網絡搭建及常用設備的使用;
4、熟練使用主流電腦操作系統,能夠處理常見的軟件問題;
5、通過國家軟考初、中級優先。
大數據運維工程師的主要職責說明 篇14
職責:
1. 負責大數據平臺的穩定性和性能優化;
2. 負責大數據項目的運維工作;
3. 針對業務需求制定統一的運維解決方案;
4. 完善自動監控報警系統,對業務層面關鍵指標進行監控與報警通知;
任職要求:
1、熟練掌握hadoop平臺搭建、維護,有平臺優化經驗;
2、熟悉HDFS、Hive、Spark、HBbase、Kafka、Flume等組件的原理,有閱讀源碼能力者優先;
3、熟悉騰訊雲產品,有騰訊雲EMR使用經驗者優先考慮;
4、熟練掌握java、python語言,熟練使用SQL,並有一定的優化能力
大數據運維工程師的主要職責說明 篇15
職責:
1. 負責X86服務器、Suse Linux系統設備硬、軟件的安裝、問題分析、升級等運維工作;
2. 負責根據需求規劃設備硬件配置,完成系統資源規劃以及實施工作;
3. 負責根據硬件架構,對操作系統性能進行調優或者升級;
4. 相關技術文檔的編寫;
任職資格:
1. 全日制本科以上學歷,計算機相關專業畢業;
2. 3年以上相關工作經驗,有金融行業運維工作經驗優先;
3. 具備Linux等操作系統的安裝、問題分析、升級等工作經驗,以及X86、儲存等相關硬件的運維經驗;
4. 熟悉Vmware等虛擬化技術,熟悉操作系統原理,熟練使用Shell腳本語言;
5. 有較強的邏輯思維能力,善於分析、歸納、解決問題, 能夠獨立或帶隊進行技術難題公關;
大數據運維工程師的主要職責說明 篇16
職責:
1.負責本部門系統運維管理工作,常見的維護,搭建,監控響應、負責系統的變更與發佈工作,線上服務漏洞的排查,版本升級工作處理等等
2.參於解決系統技術方面的瓶頸,尋找可行的改進方案等突破性工作
3. 負責海外業務系統的方案設計、溝通協調等
4.負責領導交辦的其他工作;
任職要求:
1. 計算機應用、網絡管理、信息管理、計算機科學與技術等計算機相關專業;
2. 至少具備4年以上企業IT運維經驗;
3 對Linux系統下的各類典型應用軟件的性能、使用場景有深刻的認識;
4 精通Python/Shell等任意一種腳本語言,能高效進行日常維護工具開發;
5 對主流數據庫(Mysql/Mongodb/Redis等)有深入瞭解,有實際部署與常見管理經驗;
6 做事情嚴謹踏實,有責任心,團隊協作能力強,能承受較強的工作壓力,有服務意識式;
7 熟悉Java、Tomcat、Nginx、Mysql等軟件的安裝、配置、故障排查、性能調優等;
8 具備良好的思維邏輯,以及文檔編制能力。
9 要求英文流利,能和外方用英文進行技術溝通、探討,並能查看或編寫英文技術文檔。有外資公司技術工作經驗者優先。
大數據運維工程師的主要職責說明 篇17
職責:
1.負責IT日常桌面運維工作,處理電腦及打印機、投影儀等辦公設備各種軟硬件故障,以及軟件系統的安裝配置等;
2.負責辦公網絡(包括有線網絡、無線網絡)的維護與支持;
3.配合進行IT資產管理,機房日常檢查等工作 。
任職要求:
1、大專及以上學歷,計算機相關專業;
2、具備優秀的計算機軟、硬件知識,熟練掌握Windows、Mac及常用辦公軟件的安裝配置和維護管理;
3、能獨立分析處理常見的故障;
4、 具備網絡基礎知識,熟悉路由交換技術,並能對Cisco、華爲、H3C等廠商設備安裝與調試,瞭解弱電工程及綜合佈線。