大資料運維工程師崗位的主要職責（精選19篇）

大資料運維工程師崗位的主要職責 篇1

1) 承擔團隊的日常管理，如值班安排、工作分配、日常考評等;

2) 組織制訂、完善與本部門相關的管理制度、標準操作手冊SOP、維護操作MOP和應急預案等;

3) 組織制定中心基礎設施保養計劃，做好相關計劃的實現、控制及優化工作;

4) 稽核、報批、組織實施各類變更申請、事件報告工作，做好相關應急工作的指揮與處理;

5) 組織開展資料中心基礎設施執行維護相關培訓、訓練與演練;

6) 協助商務部與外包服務商洽談相關維護服務合同，監督服務實施並要求進行稽核與考評，確保相關基礎設施的穩定執行;

7) 負責資料中心基礎設施資源統計、容量預警工作，做好每月用水用電統計、PUE統計與分析;

8) 配合資料中心進駐客戶的場地選址、平面佈局、改造實施、進駐管理等支援協調工作;

9) 基礎設施月報、環境報告的編寫和提交;

10) 資料中心基礎設施的持續優化和改善;

11) 負責上級主管領導交辦的其它工作。

大資料運維工程師崗位的主要職責 篇2

職責：

根據產品需求，完成產品功能的設計、編碼、測試和釋出;

現場專案支援工作，對現場反饋工單問題進行分析、定位和解決;

對現場專案提出的新需求進行分析、設計並完成;

根據產品和技術發展要求，完成平臺的設計、開發和支援維護工作。

職位要求：

本科及以上學歷，計算機、軟體工程相關專業，3年以上相關工作經驗;

精通sql、greenplum/postgresql、impala、oracle、mysql至少1種技術、可融匯貫通靈活轉換使用;

熟悉hadoop平臺zookeeper、hdfs、spark、MR及hbase等常用元件的執行原理;

基於linux/unix平臺進行shell、python的常用指令碼開發。

大資料運維工程師崗位的主要職責 篇3

職責：

1、負責Hadoop、HBase、Hive、Spark等大資料平臺 規劃、部署、監控、系統優化等，確保高可用;

2、負責公司大資料平臺的運維管理工作，叢集容量規劃、擴容及效能優化;

3、處理公司大資料平臺各類異常和故障，確保系統平臺的穩定執行;

4、設計實現大規模分散式叢集的運維、監控和管理平臺;

5、深入研究大資料業務相關運維技術，持續優化叢集服務架構，探索新的大資料運維技及發展方向。

任職要求：

1、熟悉Hadoop/HBase/Hive/Spark/Kafka/Zookeeper等開源專案的安裝與除錯,升級擴容;

2、熟悉Hadoop大資料生態圈，包括但不限於HDFS、YARN、Hive、HBase、Spark、Kafka、Flume等;

3、精通一門以上指令碼語言(shell/perl/python等),熟練掌握Linux系統及常規命令與工具，熟練的Shell指令碼編寫能力。

大資料運維工程師崗位的主要職責 篇4

職責：

1、負責公司大資料平臺自動化運維開發、監控和優化工作，保障資料平臺服務的穩定性和可用性;

2、負責公司Hadoop核心技術元件日常運維工作 ;

3、負責公司大資料平臺現場故障處理和排查工作;

4、研究大資料前沿技術，改進現有系統的服務和運維架構，提升系統可靠性和可運維性;

任職要求：

1、本科或以上學歷，計算機、軟體工程等相關專業，3年以上相關從業經驗

2、精通Linux運維命令，熟悉Linux的維護和管理，熟悉Shell/Python指令碼開發，掌握Scala/JAVA優先;

3、熟悉大資料專案實施：包括不限於Kafka、Hadoop、Hive、Hbase、Spark等大資料生態的平臺搭建，監控和調優;

4、良好團隊精神服務意識，溝通協調能力;

大資料運維工程師崗位的主要職責 篇5

職責：

1.負責大資料管理平臺產品的運維支撐工作，包括專案實施(安裝、調優、培訓)、專案聯調以及其他日常維護等;

2.負責大資料管理平臺產品的自動化運維相關指令碼的開發、維護等;

3.參與大資料管理平臺其他相關工作;

4.領導交付的其他事宜任職要求

任職要求：

1.熟悉Linux(redhat/centos)軟硬體環境、系統管理和優化，熟練部署、優化各種常用服務，熟練使用Linux 命令;

2.具備一定的故障排查能力，能夠獨立排查及解決作業系統層的各類問題，有良好的技術敏感度和風險識別能力，熟悉一門以上指令碼語言(Shell/Python等);

3.熟悉Hadoop大資料生態圈，包括但不限於Zookeeper、HDFS、YARN、Hive、Hbase、Spark、Kafka、Flume、ES、MySQL等;

4.熟悉Hadoop各元件的原理和實現，有實際部署維護、管理( 包括元資料管理)及優化經驗，並擁有持續調優能力，運維管理過大規模資料平臺經驗者優先考慮;

5.熟悉掌握常用的安全協議和元件服務，對hadoop各元件的許可權、安全、kerberos進行配置管理。熟悉SSL、ACL、kerberos等在大資料環境場景的使用;

6.大型節假日需低頻次維護各專案，可以調休;

7.具備良好的服務意識，善於主動思考，自我驅動力強。有良好的溝通、協調能力，富有團隊精神，有較強的文件編寫能力;

8.本科或碩士畢業於211、985等國內知名高校者優先(注意，僅是加分項，不是必須);

9.有實際工作經驗者優先;

大資料運維工程師崗位的主要職責 篇6

職責：

1、負責公司大資料/Hadoop/hive/hbase/flink等離線實時資料平臺運維保障;

2、負責內部大資料自動化運維以及資料化運營平臺開發工作;

3、負責Hadoop/Hbase等系統的業務監控、持續交付、應急響應、容量規劃等;

4、深入理解資料平臺架構，發現並解決故障及效能瓶頸，打造一流的資料平臺;

5、持續的創新和優化能力，提升產品整體質量，改善使用者體驗，控制系統成本。

6、善於表達、理解客戶資料服務需求，具備資料需求轉化落地能力。

任職要求：

1、大學本科及以上學歷，計算機或者相關專業;

2、深入理解linux系統，運維體系結構，精於容量規劃、效能優化;

3、具備一定的開發能力，精通一門以上指令碼語言;(shell/perl/python等)，熟悉java等開發語言一種及以上優先;

4、具備很強的故障排查能力，有很好的技術敏感度和風險識別能力;

5、能夠承受較大的工作壓力，以結果和行動為準則，努力追求成功;

6、熟悉hadoop、hbase、hive、spark、tez等原理並具備管理，配置，運維經驗;

7、熟悉分散式系統設計範型，有大規模系統設計和工程實現的瞭解者優先。

8、具有運營商流量資料加工處理經驗者優先。

大資料運維工程師崗位的主要職責 篇7

職責：

1、負責應用系統的日常管理與執行維護;

2、負責日常計算機及網路維護，提供IT軟硬體軟體方面的服務與支援;

3、負責伺服器系統、資料庫、常用服務支撐軟體的安裝、維護、遷移、故障處理;

4、負責不同開發環境持續整合搭建、優化及維護;

任職要求：

1、3年以上相關經驗，大專以上學歷，二年以上大中型線上系統運維的工經驗，會python優先

2、至少掌握一門指令碼語言，如shell、perl、python等等;

3、熟悉Mysql資料庫的管理，熟悉Mysql備份和恢復、Mysql MMM複製以及Mysql的效能調優;

4、有一定的Mysql資料庫的運維經驗，瞭解Redis/ActiveMQ/Kafka/Tomcat/Nginx等開源軟體;

5、熟悉SVN/git等原始碼管理工具，至少熟悉一種主流的持續整合工具(Jenkins、TeamCity、Crusecontrol等);

6、熟悉運維監控工具，如Zabbix等;

7、有較好的團隊管理和組織協調能力，具有良好的職業道德和團隊協作精神，具備積極主

大資料運維工程師崗位的主要職責 篇8

職責：

1、負責客戶提供現場生產問題支援、執行環境部署和系統日常執行維護工作;

2、接聽使用者電話、解答回覆使用者反饋的問題;

3、做好客戶跟蹤、回訪及支援、維護工作，及時解答處理客戶使用系統過程中出現的問題;

4、記錄問題跟蹤日誌，定期總結問題報告，配合開發部門完善系統功能。

任職資格：

1、大專及以上學歷，計算機或網路相關專業畢業。

2、熟悉Oracle資料庫和Unix/Linux 系統，具有一定的資料庫操作能力;

3、具備較強的客戶溝通能力，能夠耐心、迅速的分析並理解客戶提出的問題和需求;

4、具備良好的團隊合作精神、高度的責任感，對工作積極嚴謹;

5、注重細節，工作細心，有良好的規範化文件書寫能力。

6、能夠出差到客戶現場進行維護工作

大資料運維工程師崗位的主要職責 篇9

職責：

1、負責智慧化菜場專案上的網路安全執行與維護;

2、根據業務需求進行除錯、優化和部署;

3、負責弱電的設計與裝置配置;

4、現場的技術支援及運維服務。

崗位要求：

1、專科及以上學歷，計算機相關專業;

2、1年及以上IT相關工作經驗，有專案經驗的優先考慮;

3、熟練掌握網路裝置的配置及網路維護知識;

4、熟練掌握Windows Server或Linux;

5、優秀的溝通能力，較強的服務意識。

大資料運維工程師崗位的主要職責 篇10

職責

1、熟悉公司運維流程和系統，對於系統性的問題處理流程具有概念性的理解。

2、熟練掌握公司各個應用系統，為使用者提供技術支援，解決使用者問題，並完善作業指導書;

3、定期分析和總結使用者請求，不斷完善常見問題解決方法;

4、執行和反饋，維護公司的各個新、舊系統上線或升級工作，並推動實施;

5、定期及時的提供資料報表或提取相應的分析資料;

任職資格：

1.計算機、電子及相關專業，大學本科以上學歷，英語CET-4以上;

2.具有計算機軟體領域1年以上的工作經驗，具有大型IT系統實施和運維管理經驗者優先考慮;

3.專業技能： 熟練主流的主機、網路、安全、資料庫系統產品，精通各種辦公軟體;

4.具備較強的分析、判斷能力;較強文字、語言表達能力;以及善於團隊管理和培訓工作;

5.能夠承受較強的工作壓力，能適應團隊協作工作環境，適應快節奏的工作;

以下經驗者優先考慮：

1.能夠使用中文和英語進行流利的書面溝通和口頭溝通。

2.具有IoT物聯網，Java軟體部署實施經驗為佳;

3.有相關開發經驗，瞭解J2EE架構，或有自動化測試經驗者為佳;

4.對於Linux系統運維和系統架構有相關監控和維護的經驗。

5.具有撰寫公司內部文件和流程的經驗和能力。

大資料運維工程師崗位的主要職責 篇11

職責：

1、熟悉基礎網路知識，熟悉TCP/IP協議工作原理;

2、熟悉WEB相關技術，包括Apache/Nginx/tomcat、Memcached/redis/mysql等應用服務的安裝、配置和維護;

3、熟悉伺服器硬體，具備系統、應用軟體的報錯及故障定位、處理的能力;

4、檢測、跟蹤和分析流行安全漏洞、設計和實施防禦方案。

任職要求：

1、專科及以上學歷，專業不限;

2、有linux理論基礎，熱愛技術崗位，能夠及時補充自己技術缺陷;

3、有團隊意識，責任心強，對自己有一定的規劃;

4、至少掌握Shell/Python其中一種指令碼程式設計;

5、批量、自動化管理伺服器叢集的能力，有較強的技術文件總結性工作的經驗。

大資料運維工程師崗位的主要職責 篇12

職責：

1.監控並分析系統的執行狀況，監控結果並定期報告，提出系統的優化方案與建設建議。

2.系統事件響應與系統維護：進行系統事件的響應，分析，進行系統故障的判斷並與供應商商討合理解決方案，並提供定期報告。

3.系統變更(含上線前測試與上線)：完成公司資訊系統的系統變更/升級，進行應用系統軟體相關廠商進行稽核，上線前測試等，確保服務質量。

4.系統非功能測試(效能與容量)與維護。參與集中交易類系統非功能的測試與調優。

5.容災維護與演練：參與資料備份、容災方案的維護與演練。

崗位要求：

1.大專或以上學歷，至少1年以上券商工作經驗;優秀的應屆本科畢業生也可以考慮;

2.有良好的協調溝通能力，負責與系統供應商之間進行溝通

3.熟悉“工作系統”所列舉的部分相關係統;

4.熟悉LINUX系統基本操作;

5.熟悉TOMCAT應用及部署

6.熟悉ORACLE、SQLSERVER資料庫基本操作。

7.學習能力強，有較強的責任心、團隊合作意識及敬業精神;

大資料運維工程師崗位的主要職責 篇13

職責：

1、負責zabbix監控優化、日常告警分析處理;

2、協助開發構建管理系統環境，不斷優化系統架構、提升部署效率、優化資源利用率;

3、虛擬化管理，主動協調資源推動問題解決;

4、參與系統的監控方案、容災方案、自動化運維方案的制定和實施。

5、完成協作團隊領導分配任務。

任職要求：

1、大專以上學歷，具有5年以上運維工作經驗;

2、專業知識與技能要求：

A、熟悉常用的linux命令，具有Shell或Python指令碼編寫能力;

B、熟悉mysql、mongodb、 ,elasticsearch 等資料庫常用的操作;

C、熟悉zabbix,Prometheus監控系統;

D、有騰訊雲等雲平臺使用經驗者優先。

3、有 ，k8s經驗;

4、較好的抗壓能力、問題分析與解決能力;

5、較強的責任感，良好的溝通與協調能力。

大資料運維工程師崗位的主要職責 篇14

職責：

1、遊戲伺服器的日常系統運維工作，包括：環境部署搭建，伺服器的監控、升級、安全、效能優化，遊戲資料庫管理等;

2、研究系統的服務架構，實現效能優化和提高系統的健壯性;參與制定和改進應急預案、策略和流程，提高服務執行質量;

3、配合開發人員進行軟體系統、伺服器環境部署，參與運維支撐平臺的建設;

4、保障遊戲伺服器長期，安全，穩定的執行。

任職要求：

1、對CentOS、windows、SUSE等作業系統有一定的理解和把握，至少一年以上相關經驗;

2、掌握Linux下shell，Perl或Python等一種以上的系統環境程式語言;

3、熟悉常用資料庫(MSSQL/Mysql等)的操作管理及引數配置, 熟悉常用WEB軟體(nginx, tomcat等)操作管理及引數配置;

4、對技術敏感而細緻，樂於發現，對解決具有挑戰性問題充滿激情;

5、具備良好的敬業精神和高度的責任心，能適應高強度工作;

6、瞭解自動化運維或有遊戲運維經驗者優先。

大資料運維工程師崗位的主要職責 篇15

職責：

I、負責Hadoop叢集的安裝部署、維護及調優:

2、負責spark的安裝郵署、維護及調優:

3、負責基於大資料平臺開發的應用系統的部署、日常維護、調優和問題處理

4、負責ELK 平臺的部署及維護。

技能要求：

1 、2年以上大資料運維工仵經驗;

2、熟悉Hadoop生態圈技術棧及各個元件原理:

⒊、熟練掌握HDFS、Hive、HBase、sρark、sqooρ 等元件，具備部署、維護、調優的能力:

4、熱悉kylin技術原理,有一定的維護經驗優先:

5、掌掇ELK的日常維護技能·有一定的維護.經驗優先:

6、有一定的HQL/sql 效能調優經驗;

7、具備基本的 java、python等語言開發能力優先:

8、有較強的溝通、團隊協作及學習能力。

大資料運維工程師崗位的主要職責 篇16

職責：

1、負責專案現場的運維工作，及時響應使用者的現場問題、需求及相關工作;

2、配合公司的開發、測試、服務部門，進行現場的支撐工作;

3、配合公司商務及銷售部門完成相關技術工作;

任職要求：

1、熟練掌握並配置windows、linux、AD域、中介軟體等相關知識;

2、熟悉oracle、mysql、DB2資料庫的安裝及維護，熟練掌握SQL語言;

3、有較強的溝通協調能力，較強的文件協作功底;

4、有較強的抗壓能力，能適應一定程度的加班工作。

大資料運維工程師崗位的主要職責 篇17

職責：

1、負責應用的測試、執行保障，版本釋出、變更、監控、測試環境維護;

2、負責業務系統故障處理、定位並解決網路、硬體、作業系統及應用程式的各種異常;

3、負責應用系統的效能分析與系統優化，不斷提高系統執行效率;

4、負責映象倉庫和版本釋出的管理工作，制定映象、產品的釋出和部署相關流程;

5、負責開發運維繫統的自動化和標準化工作;

6、響應和支撐開發部門進行伺服器/虛擬機器的設定和管理。

任職要求：

1、精通作業系統管理(Centos/redhat/winserver);

2、熟悉shell、python;

3、熟悉常用的開源監控工具，如zabbix、cacti、nagios等;

4、熟悉lvs、haproxy等負載均衡技術;

5、熟悉如下應用的安裝、配置、效能調優、備份/恢復：nginx、apache、oracle、mysql、neo4j、redis、tomcat;

6、熟悉常規的虛擬化技術，如xen、kvm、lxc、vmware、vSphere。

大資料運維工程師崗位的主要職責 篇18

職責：

1.負責伺服器的搭建、部署、監控、調優、升級、日常維護和管理工作;

2.負責處理系統方面日常變更、控制突發情況，對疑難問題進行分析並解決;

3.支援伺服器系統部署、應用調整和優化，提高操作效率，增強系統可用性;

4.雲臺與產品釋出迭代，升級部署。

【任職要求】

1.瞭解各種計算機軟硬體，可獨立進行安裝、除錯及故障排除;

2.瞭解區域網的維護及網路安全知識，可熟練進行區域網的搭建和網路裝置的基本維護和故障處理;

3.知道運用LINUX伺服器進行維護與管理;

4.瞭解nginx,tomcat等相關服務部署;

5.瞭解MySQL資料庫管理、監控和備份優先;

6.瞭解常見雲如阿里雲使用。

大資料運維工程師崗位的主要職責 篇19

1、負責資料中心日常巡檢工作，並根據要求形成相關統計報告。

2、每週按照要求製作機房執行引數等的統計分析。

3、能夠部署相關的作業系統(windows、linux)以及一些基本服務，例如AD、DNS、DHCP、AAA、IIS、檔案系統等。

4、能夠配置交換機的基礎配置(MSTP、RSTP、主從VLAN、動態VLAN等基礎配置)

5、路由協議(靜態、RIP、ospf路由)。

6、瞭解防火牆的工作原理，能夠進行簡單的策略下發。