當前位置:萬佳範文網 >

文祕 >崗位職責 >

大數據開發工程師的主要職責(通用19篇)

大數據開發工程師的主要職責(通用19篇)

大數據開發工程師的主要職責 篇1

職責:

大數據開發工程師的主要職責(通用19篇)

1、負責公司大數據平台建設;

2、根據業務需求,制定數據倉庫和數據分析平台的實施和持續更新;

3、攻克技術難關,保證大數據系統的穩定運行;

4、完成大數據產品的開發。

職位要求:

1、計算機相關專業全日制專科及以上學歷,大數據相關經驗;

2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數據相關技術;

3、精通SQL語句並對Redis,Mongodb等NoSQL數據庫有一定經驗;

4、對於高併發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;

5、責任心強,工作踏實,有團隊協作精神,溝通能力強者優先。

大數據開發工程師的主要職責 篇2

職責:

1.負責公司環保大數據平台的架構與搭建;

2.負責需求分析,根據客户應用需求規劃大數據平台架構;

3.負責將大數據平台部署至私有服務器羣、私有云或公有云;

4.負責在企業內部進行數據平台原型開發與數據實時交互、存儲性能測試;

5.負責與數據挖掘算法交互的架構設計與開發。

任職要求:

1.計算機相關專業,全日制本科以上學歷;

2.具有3年以上大數據相關應用開發經驗,有Java開發經驗更佳;

3.至少熟悉一種流行的大數據編程框架,如Spark,Storm,Flink等;

4.熟悉大數據生態圈常用技術如RocketMQ,Kafka,Flume,Zookeeper等;

5.熟悉Hadoop安裝、調試、發佈配置應用,熟悉Linux操作系統更佳;

6.至少熟悉TIDB,MySQL,SQLServer其中一種數據庫;

7.學習能力強,對技術有熱情,關注技術發展方向;

8.具有工業物聯網、智慧型環保項目背景者優先。

大數據開發工程師的主要職責 篇3

職責:

1、 負責基於Hadoop/Spark平台架構的開發、設計和佈局 ;

2、 完成系統框架的設計和核心代碼的編寫;

3、 針對海量的用户行為數據進行統計、分析與挖掘,不斷提高系統運行效率;

4、 負責對數據進行分析,為項目組提供大數據技術指導及分析手段支撐;

5、 負責大數據平台的性能監控和持續優化;針對需求提供大數據分析技術解決方案 ;

6、 大數據平台的運維工作,持續完善大數據平台,保證穩定性、安全性;

7、 熟練使用大數據ETL數據抽取工具;

8、領導安排的其他工作。

任職資格:

1、 3年互聯網行業開發經驗,計算機或相關專業本科以上學歷;

2、 精通Hadoop大數據平台架構,具有紮實的Java/Python等開發語言;並可以開發高效可靠的代碼;

3、 具有較強的數據分析、數據挖掘的能力;

4、 熟悉spark、Hive、storm等計算框架者優先,對分佈式存儲和計算原理有較深的理解;

5、 嚴密的數學思維、突出的分析和歸納能力、優秀的溝通表達能;

6、 個性開朗,對技術鑽研好學、邏輯思維能力強,溝通能力優秀,有團隊合作精神。

大數據開發工程師的主要職責 篇4

職責:

1. 負責機票酒店大數據項目的評估、設計及關鍵模塊研發;

2. 參與公司大數據平台及聯機分析系統的建設;

3. 機器學習算法討論、評估及算法的最終編碼實現;

4. 數據平台開發規範制定,數據建模及核心框架研發;

任職要求:

1. 本科及以上學歷,計算機或數學相關專業,三年以上相關工作經驗;

2. 掌握Java、Python、Scala等 中的一到兩種語言;

3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL數據庫開發和調優;

4. 熟悉數據相關開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;

5. 對數據結構和機器學習算法有一定的瞭解;

6. 具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先;

7. 有機票酒店等旅遊行業數據開發經驗者優先。

大數據開發工程師的主要職責 篇5

職責:

1、負責公司項目應用監測數據,分析軟件大數據平台的代碼開發;

2、負責大數據體系架構設計和應用產品的研究;

3、負責大數據平台及應用場景的構建、部署、測試;

4、編寫軟件研發相關技術文檔;

5、編寫產品研發相關任務單計劃,階段性代碼、技術方案和軟件產品及時提交至配置管理理庫;

6、Spark程序的研發,sqoop腳本開發和商家用户行為等離線分析數據;

7、kudu,kylin等技術調研,編寫軟件研發相關技術文檔;

8、SUNMI數倉設計架構以及ETL流程開發;

9、建立多維度,多體系的用户標籤體系以及用户行為數據庫。

崗位要求 :

1、本科以上學歷,4年以上?工作經驗,2年以上Hadoop平台的相關研發經驗,具有良好的需求分析,方案設計,架構設計,程序編寫、測試能力;

2、熟悉J2EE或Python平台開發,有良好的Java或Python語言功底;

3、瞭解Linux/Unix操作系統,瞭解腳本編程(Shell/Python其中一種);

4、具備數據中心資源管理(YARN)、監控(ClouderaManage)、調度(Azkaban)等系統研發經驗者優先,具備分佈式系統研發經驗者優先;

5、熟悉hadoop以及其?生態圈系統上的hive、hbase、sqoop、spark、spark-streaming等技

術,懂hadoop源碼者優先;

6、熟悉Kylin有OLAP平台設計和開發經驗優先;

7、具有應用大數據技術處理TB級以上數據的項目開發經驗者優先;

8、有較清晰的代碼編寫規範,邏輯性強,工作態度認真,良好溝通能力和團隊合作精神。

大數據開發工程師的主要職責 篇6

職責

1、負責網站開發、平台應用、移動後台設計編寫;

2、參與相關頁面的Web前後台架構設計、核心代碼的編寫及後台服務程序的研發和編寫;

3、協助總架構師及部門主管測試和發佈系統,準備相關的技術文檔,協助解決各種技術問題;

4、進行詳細設計、代碼開發,配合測試,高質量完成項目;

5、按照項目計劃,按時提交高質量代碼,完成開發任務;

6、參與公司新產品研發。

任職資格

1、專科及以上學歷,五年左右PHP開發經驗;

2、熟悉二種以上PHP開發框架,瞭解設計模式;

3、熟悉MYSQL數據庫設計和性能優化;

4、精通PHP語言,熟悉JavaScript,AJAX,JSON,XML等Web相關技術;

5、具備良好的代碼編程習慣及較強的文檔編寫能力;

6、熟悉使用SVN版本控制;

7、嚴謹的邏輯思維,強烈的技術熱情,善於合作,喜歡有挑戰性的工作;

8、熱愛互聯網產品,工作態度積極,對產品細節敏感。

大數據開發工程師的主要職責 篇7

職責:

1.參與大數據平台搭建以及項目技術架構。

2.數據分析,挖掘,模型具體的產品化;

3.根據產品需求,分析編寫和制定大數據相關解決方案

崗位要求:

1、計算機相關專業本科以上學歷,編程基礎紮實,有2年以上大數據開發經驗

2、熟悉Hadoop生態和體系架構,熟悉Flink、Spark,Hive等常用開源工具

3、熟悉Flume,kakfa,scribe等日誌收集體系

4、熟悉主流數據庫(Oracle、postgresql、Mysql、Sql Server)中的1種及以上,有較好的SQL性能調優經驗

5、有數據倉庫ETL經驗者優先

6、有用户行為日誌採集、海量數據處理、數據建模方面經驗者優先

7、有持續學習的能力;喜歡開源軟件,樂於知識分享;對工作認真負責;可以獨立承擔較大工作壓力

大數據開發工程師的主要職責 篇8

1、負責電商平台Android客户端研發工作,能獨立進行產品開發和迭代工作;

2、將設計師的視覺設計工程化並高兼容度實現;

3、對已有代碼進行優化和重構;

大數據開發工程師的主要職責 篇9

職責:

1、負責根據需求調研結果,進行功能設計、詳細設計;

2、負責需求和設計過程中相關文檔的編制;

3、負責核心代碼的編碼和單元測試;

4、對技術難點進行攻關,並負責知識發佈和知識傳遞。

任職要求:

1、全日制公立本科以上學歷,計算機相關專業;

2、有3年以上基於J2EE B/S結構軟件的開發經驗;

3、熟悉HTML、JavaScript、AJAX等相關WEB技術,熟練掌握JQuery類庫;

4、熟悉Servlet、JSP、JavaBean、XML等知識;

5、熟悉spring、springMVC、mybatis框架;

6、熟悉數據庫開發,熟悉ORACLE等;

7、有良好的學習能力、團隊協作能力,主動溝通能力;

8、愛崗敬業,服從指揮,認真負責;

大數據開發工程師的主要職責 篇10

職責 :

1、參與需求評審,根據需求分析報告和需求規格説明書主導技術方案。

2.負責項目的開發與維護,能獨立處理和解決所負責的任務;

3.制定軟件開發階段的工作計劃,協調開發、測試的工作,做好日常代碼審查工作,保證項目的進度和質量。

崗位要求:

1、本科以上學歷,5年及以上java語言開發經驗; 編程基礎紮實,精通JSP、Servlet等開發技術。

2、熟悉前端框架:如Easyui、Bootstrap等。

3、熟悉主流數據庫:Oracle、MySQL等的應用系統的數據庫設計、開發經驗,熟練掌握SQL。

4、熟悉J2EE體系架構,熟悉Spring、Hibernate、MyBatis等主流開發框架。

5、有主流應用服務器,如Tomcat、WebLogic至少一種的部署配置及性能調試經驗,熟悉使用svn,git版本管理工具;。

6、瞭解webservice、socketMQ等接口框架。

7、熟悉Linux系統常用命令;

8、能承受壓力,個性成熟穩重,具備良好的溝通協調能力,工作積極主動認真負責,富於團隊精神,具有良好的自學能力和獨立解決問題的能力。

大數據開發工程師的主要職責 篇11

職責:

1、與項目經理溝通和確認某個模塊的需求和實現方法。

2、負責自己範圍內的功能代碼編寫

3、負責自己範圍內的功能模塊的單元測試以及階段測試工作

4、對自己開發的功能模塊進行維護工作

5、部分現場支撐問題解答以及處理

6、合理編制技術文件,改進和規範工藝流程;

崗位要求

1、計算機及相關專業本科及以上學歷

2、2年以上大型互聯網電子商務系統或者其他大型企業應用系統開發相關經驗;

3、精通Java EE相關技術和框架

(包括Java語言基礎/多線程/Spring/MyBatis/Cache/Workflow/zookeeper/dubbo等)

4、有Web及前端技術開發經驗

(包括Javascript,ajax,jason,HTML,XML,MVC 類Web開發框架);

5、熟悉基於Mysql、Oracle等數據庫的設計和開發、Linux操作系統和某種腳本語言編程(如Shell等)

6、熟悉大容量、高性能的數據庫系統的應用開發,對各種開源的軟件有深入的瞭解,

有1年以上的大規模高併發訪問的Web應用開發經驗;

7、熟悉企業應用設計模式、面向對象的分析和設計技術,包括設計模式、UML建模等

大數據開發工程師的主要職責 篇12

職責:

1、負責網站後台程序開發(PHP+Mysql)與網站運營人員、美工人員配合完成網站以及需求功能構建;

2、負責服務器的維護和保障安全運行;

3、WAP手機端網站的開發與維護;

4、負責網站安全監控與應急處理,維護網站使之保持可用性和穩定性;

5、根據項目任務計劃按時完成開發任務。

任職要求:

1、計算機相關專業,至少1年以上的PHP開發工作經驗,需要有微信小程序或微商城開發經驗;

2、有過實際的電商網站開發和部署經驗;

3、熟悉JS,PHP+Mysql等語言,能獨立完成開發任務;

4、熟悉至少一種PHP框架,如CodeIgniter/ThinkPHP/ZF

5、熟悉主流第三方支付接口,如支付寶,微信開發;

6、良好的編程習慣,結構清晰、命名規範、代碼宂餘率低;

7、瞭解apache及apache配置,瞭解linux系統;瞭解IIS+PHP+Mysql配置;

8、會寫移動端接口,會H5頁面編寫。

9、工作經驗豐富者,

大數據開發工程師的主要職責 篇13

職責:

1.根據產品或項目開發進度和任務分配,負責相應軟件模塊的設計開發;

2.根據開發規範和流程獨立完成模塊的設計、編碼及相關文檔;

3.服務器環境的搭建和系統的部署等。

4.協助編寫需求文檔,編寫概要設計文檔、詳細設計文檔、數據文檔等相關文檔。

5.能夠參與系統架構設計、性能優化、重構的討論及給出解決方案的建議。

任職要求:

1、計算機或相關專業背景,大專以上學歷,2年以上工作經驗。

2、精通一種或多種主流的關係型數據庫如Mysql、Oracle。

3、熟練使用java編程語言,有良好的編程風格。

4、熟悉java的基礎知識,如數據類型、集合、異常處理、多線程、緩存、事務等。

5、熟悉一種或多種nosql數據庫,如Mongodb、Redis。

6、熟練使用Spring、SpringMVC、Hibernate等常用後端框架。

7、熟悉linux等操作系統。

8、熟悉SpringBoot框架。

9、熟悉微服務架構。

10、熟悉數據結構、設計模式、UML等知識。

11、熟悉一種或多種消息隊列如RocketMQ、Kafka。

大數據開發工程師的主要職責 篇14

職責:

1、負責公司產品的開發工作;

2、負責系統相關業務模塊的設計與開發;

3、負責相關開發文檔的整理與編寫;

4、與前端配合開發公司APP以及其他項目;

任職資格:

1、大專及以上學歷,兩年以上 PHP工作經驗,自學能力強;

2、至少熟悉一種數據庫開發MySQL/SQL/ORCAL。 對數據庫性能有開發、配置、維護、性能優化經驗;

3、有打包封裝APP開發經驗(必須);

4、熟悉主流PHP開發框架,熟悉Laravel 優先。;

5、良好的溝通,理解和邏輯能力;

6、具有Web前端開發經驗優先;

大數據開發工程師的主要職責 篇15

1、負責飛機結構工程管理、工程設計開發工作,並要求供應商嚴格按工藝、圖紙、制度進行生產,確保產品符合要求

2、協助銷售中心或產品經理開展結構專業技術支援工作

3、負責飛機結構的改裝設計方案的評估、消化和建立設計能力等工作

4、負責客改貨及VIP改裝的改裝包的技術消化

5、負責外委產品的工程技術指導

6、控制產品在供應商處的加工過程,積極配合、參與對不合格品的評審、處置、控制工作;

7、確保設計按照既定的民航規章要求和產品質量與質量體系要求。如歐洲民用航空局關於設計單位批准許可的所有各項要求

8、跟蹤產品在外協供應商處狀態,要求供應商嚴格按工藝、圖紙、制度進行生產,確保產品符合要求

大數據開發工程師的主要職責 篇16

1、負責RightCloud CMP混合雲管平台系統相關研發;

2、負責RightCloud CMP產品售前POC、生產環境的部署實施;

3、參與公司研發中心生產&測試各種環境及相關服務的日常運維,並保證其安全高效穩定的運行;

大數據開發工程師的主要職責 篇17

1、從事軟件產品模塊的功能設計、數據庫設計工作;

2、從事軟件功能的代碼開發及測試;

3、從事項目在現場環境的安裝、部署與調試;

4、從事項目開發過程所需的文檔編寫工作。

大數據開發工程師的主要職責 篇18

職責

1、負責web自動化系統的編碼和自測並有效地按照計劃完成工作。

2、解決線上產品運行中出現的技術問題。

3、積極瞭解相關新技術及趨勢,促進技術創新,持續改進系統架構,提高用户體驗。

職位要求

1、計算機相關專業本科及以上學歷。

2、精通web開發的相關技術,3年及以上使用java進行web開發的經驗。

3、熟悉springboot、mybatis、sqlite數據庫等相關技術。

4、掌握javascript、ajax、jquery,等開發技術;

5、熟悉selenium等自動化技術優先。

6、具有良好的溝通技能,團隊合作能力,勤奮好學,熱愛技術,樂於分享知識與技術。

大數據開發工程師的主要職責 篇19

1、負責遊戲核心架構的搭建以及技術攻關;

2、使用unreal 4引擎進行遊戲客户端模塊開發,遊戲客户端框架的搭建和後續功能的開發,對領域前沿保持跟進,針對需求做出最優選擇;

3、負責MMO遊戲項目的必要的技術嘗試和開發流程探索。

  • 文章版權屬於文章作者所有,轉載請註明 https://wjfww.com/wenmi/gangwei/4g7gjl.html
專題