大數據開發工程師崗位的工作職責說明(通用18篇)

來源:瑞文範文網 5.14K

大數據開發工程師崗位的工作職責說明 篇1

職責:

大數據開發工程師崗位的工作職責說明(通用18篇)

1、負責公司大數據基礎平臺產品開發工作;

2、完成產品/項目劃分的研發任務,按需求規範進行研發;

3、具備良好的需求分析能力、業務建模能力,參與產品和項目相關模塊的需求討論,概要、詳細設計;

4、具備良好的架構分析能力與設計能力,積極參與前期設計;

5、能根據設計方案和計劃進行編碼實現,在進度和質量上符合方案和計劃的要求;

6、及時對BUG庫中的軟件問題進行跟蹤修正。

崗位要求:

1、三年以上工作經驗,一年以上大數據平臺架構及ETL相關經驗,可獨立搭建/運維CDH/Spark整套平臺架構;

2、精通Python/Java/Scala/SQL/Shell等語言中兩種以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三種以上開源框架的原理和源碼;

3、熟悉容器平臺開發或者開發優先考慮,有docker、kubernetes相關開發經驗更佳;

4、學習能力強,適應能力好,有豐富的問題原因定位及運維技術支持經驗;

5、有市場上成熟的大數據平臺產品實際架構/開發經驗優先。

大數據開發工程師崗位的工作職責說明 篇2

職責:

1、根據工作安排高效、高質地完成代碼編寫,確保符合規範的前端代碼規範;

2、負責公司現有項目和新項目的前端修改調試和開發工作;

3、與設計團隊緊密配合,能夠實現實現設計師的設計想法;

4、與後端開發團隊緊密配合,確保代碼有效對接,優化網站前端性能;

5、頁面通過標準校驗,兼容各主流瀏覽器。

任職要求:

1. 本科及以上學歷,熟悉j2ee,精通web開發有5年工作經驗以上(學習能力好放寬至4年),熟悉jsp,spring框架;

2.悉主流移動web開發框架,並有過實際項目開發經驗;

3.有kylin,atlas,oozie,azkaban,spark,ranger任意一種使用項目使用經驗。

大數據開發工程師崗位的工作職責說明 篇3

職責:

1、負責公司c端產品以及廣告數據的平臺數據基礎建設;

2、大數據平臺的搭建與維護;

3、優化算法提高執行效率;

4、數據挖掘相關開發。

職位要求:

1. 本科及以上,計算機、軟件工程、統計學、數據挖掘、機器學習等相關專業;

2. 熟悉JAVA語言及JAVA生態下的開發,瞭解多線程併發,能獨立完成應用開發和部署;

3. 3年及以上大數據流程架構經驗,熟悉Hbase/Hive/Hadoop/Spark或等主流分佈式開發平臺,有高性能集羣設計和開發經驗;

4. 能熟練操作Linux,熟練掌握SQL數據庫語言 HiveSQL/Mysql/Sqlserver;

5. 對有廣告營銷大數據算法/開發經驗者優先,有大型數據項目經驗優先,有用戶行爲分析、用戶建模、業務建模經驗者優先;

6. 具有良好的邏輯分析能力、溝通能力和協調能力;

大數據開發工程師崗位的工作職責說明 篇4

職責:

1. 負責公司大數據業務集羣的運維工作確保高可用;

2. 負責基礎運維、故障定位、容量規劃、擴容及性能優化;

3. 設計實現大規模分佈式集羣的運維、報警監控和管理平臺;

4. 參與業務架構設計,在設計階段給出可運維性改進建議;

5. 深入研究大數據業務相關運維技術,持續優化集羣服務架構,探索新的大數據運維技術及發展方向。

任職資格:

1.大專以上學歷,2年及以上大數據運維工作經驗,熟悉hadoop/hbase/hive/Yarn/Spark等分佈式相關技術,熟悉源碼尤佳,至少掌握python/shell中的一種語言,接受優秀應屆畢業生;

2.瞭解大數據平臺應用架構,具備常見問題的基本分析和解決能力;

3.熟悉Linux操作系統的配置、管理及優化,能夠獨立排查及解決操作系統層面的問題;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應用/中間件及主流開源數據庫的使用和配置。

大數據開發工程師崗位的工作職責說明 篇5

職責:

1、負責基於Hadoop框架的海量數據平臺建設

2、參與大數據平臺的數據架構設計,完成從業務模型到數據模型的設計

3、基於海量數據的數據倉庫,爲業務搭建通用的查詢和分析解決方案

4、管理並優化存儲&計算資源利用效率、監控並維護例行ETL任務

5、梳理整體業務指標,可視化報表開發

應聘要求:

1、計算機本科及以上學歷,5年以上大型數據倉庫架構設計、模型設計、ETL設計相關經驗

2、熟悉Hadoop生態,熟悉Oracle、SQL數據庫中的一個或多個,有一定的性能優化經驗

3、熟練掌握Java語言,MapReduce編程,Python/Shell等腳本語言,Linux操作系統

4、具備大數據雲平臺、計算存儲平臺、可視化開發平臺經驗

5、業務理解力強,對數據敏感,有互聯網行業產品數據分析經驗者優先

大數據開發工程師崗位的工作職責說明 篇6

職責:

1、進行網站程序開發與實現,參與項目的編程、調試和模塊測試工作;

2、根據項目需求,能夠獨立按時完成網站開發任務;

3、根據主管要求對現有項目進行修改;

4、配合項目學習其他需要的技能。

任職要求:

1、 計算機相關專業本科或以上學歷;

2、有2年以上PHP開發經驗,熟悉MVC/OOP,具有獨立承擔模塊分析、設計開發能力;

3、對主流的PHP框架有實戰經驗,熟練使用Thinkphp框架者優先;

4、熟悉或擅長MYSQL或其他大型數據庫的使用及優化,熟悉MongoDb/Redis等NoSQL數據庫;

5、熟悉HTML/CSS/JS,瞭解HTML5/CSS3/AngularJS/Bootstrap,掌握常用的前端構建工具者優先;

6、熟練使用Linux操作系統,熟悉常見軟件的編譯部署(如Mysql/Nginx/Apache)和優化;

7、擁有良好的代碼習慣,結構清晰、命名規範、邏輯性強、代碼冗餘率低,有撰寫詳細的編碼註釋的習慣;

8、學習能力強,擁有優秀的邏輯思維能力,有良好的時間和流程意識,有較好的溝通交流能力,能夠迅速融入團隊;

9、有大數據產品軟件開發經驗者優先。

大數據開發工程師崗位的工作職責說明 篇7

1、負責數據管控產品的實施落地;

2、負責數據管控平臺、數據標準模塊、數據質量模塊、元數據管理模塊的實施部署;

3、負責業務流程的推廣與控制,保證項目順利落地;

4、負責管控平臺部分功能的定製開發;

5、負責對數據管控平臺各模塊的內容進行培訓。

大數據開發工程師崗位的工作職責說明 篇8

職責:

1、 完成與java相關的開發任務,確保項目的按時保質完成;

2、 對軟件進行後續維護和管理;

3、 能夠有效的與需求人員進行溝通,實現產品的設計意圖;

4、 維護和升級現有產品,快速修復Bug和缺陷。

任職要求:

1、專科及以上學歷, 計算機及相關專業畢業,2年以上java開發經驗,有公安行業系統經驗着重考慮;

2、能適應項目現場開發/實施/維護所需要的出差;

3、熟練使用Eclipse,Idea等開發工具進行Java開發,熟悉SSM,SpringBoot,SpringCloud等框架應用;熟練掌握JQuery,Vue,FreeMarker,Thymeleaf等前端的開發技術,以及掌握Oracle、Mysql數據庫應用開發。有高併發大數據開發經驗者優先;

4、具有較強的時間管理、耐壓能力、溝通協調能力,具有一定的市場意識和素養。

大數據開發工程師崗位的工作職責說明 篇9

職責:

1.負責公司旗下各系統功能開發、維護;

2.維護、升級及優化已有程序,編寫技術文檔;

3.獨立負責部分功能模塊的系統分析、數據庫設計、程序開發等;

4.配合運營部門進行活動頁面需求分析,完成代碼編寫和測試。

任職資格:

1.本科及以上學歷,計算機專業優先,5年及以上JAVA開發經驗者;

2.熟練掌握 java web 軟件開發技能,掌握主流開發框架:SSH、SSM、springMVC;

3.熟悉互聯網應用基本技術架構,熟練使用一種或多種 web 容器服務,如:nginx,jetty等;

4.掌握一種或多種常見 cache 開源服務:memcache,redis;

5.熟悉常見分佈式異步框架,會使用一種或多種消息服務:kafka,activeMQ,rabbitMQ 等;

6.有較強的溝通能力、團隊合作精神、高度的責任心。

大數據開發工程師崗位的工作職責說明 篇10

職責:

1. 負責產品研發Java後臺設計與開發工作、客戶現場相關項目的Java後臺設計與開發工作;

2. 對自行編制的功能代碼進行功能與性能優化,可協助H5、APP端、第三方進行接口聯調,及時修改測試、提出BUG,確保代碼質量;

3. 撰寫相關的技術文檔,主要包括設計文檔、接口文檔、部署文檔、使用手冊等;

4. 參與項目整個過程的實施工作,並具備獨立安裝部署和後期實施運維能力;

5. 參與到項目售前技術支持工作,能出差實施項目。

任職資格:

1. 計算機相關專業畢業,有3年以上Java工作經驗,有政府信息化或智慧城市相關項目經驗優先;

2. 熟練使用SQL語句與SQL優化,熟悉主流數據庫MySql、Oracle等;

3. 熟練J2EE主流技術框架,如Spring、SpringMVC、Mybatis、shiro等;

4. 精通HTTP通信協議、RESTfull API、HttpClient等接口規範與應用;

5. 熟練Java相關邊沿技術與工具:Eclipse、IDEA、Maven、SVN、Git、JavaScript、Poi、Log4j、freemarker、redis、Quartz、MQ等

6. 熟練使用Linux常用命令,可以完成Java服務運行環境的安裝、部署、監控等工作;

7. 具有良好的理解能力與溝通能力,能正確理解產品或項目目標與需求,有問題可以積極溝通確認,能做到及時準確的上報下達;

8. 具有良好的職業素質與團隊合作精神,可以嚴格遵守公司與項目組相關規定,有強烈的集體團隊意識;

9. 對工作態度主動積極、認真負責、且具有一定的抗壓能力;

大數據開發工程師崗位的工作職責說明 篇11

職責:

1、項目立項成功,在技術經理帶領下,進行產品開發工作,獨立完成功能模塊,協助完成數據庫的設計與核心業務編碼的工作;

2、產品技術性文檔撰寫,含產品研發過程中概要設計文檔,詳細設計文檔,接口文檔;

3、對上線產品進行日常運維,解決上線產品運行中出現的技術問題,對上線產品進行日常的數據分析與運營維護;

4、 與外部業務系統的接口設計與對接工作;

5、 預判、定位系統發展過程中的問題,提出解決方案,攻克技術瓶頸與難點;

6、實時關注用戶應用平臺情況,向技術經理彙報平臺運營情況,在技術經理規劃下,不斷根據反饋自行迭代優化代碼或架構,提高平臺性能;

7、 指導初級開發工程師進行開發與維護。

崗位要求:

1、大專及以上學歷,計算機或相關專業優先;

2、2年以上JAVA研發經驗,熟悉MVC設計模式,熟練使用主流的J2EE開源架構(struts2,springmvc,ibatis等) ;

3、熟悉掌握各種WEB前端技術,包括 、AngularJs、element-ui等;

4、熟悉MySQL、Oracle或NoSQL數據庫技術,熟悉SQL調優機制,有大型數據庫軟件開發經驗者優先;

5、熟悉mongodb,redis、memcached,nginx,tomcat的一種或多種;

6、瞭解軟件工程、編程規範、有過程控制意識;

7、良好的溝通能力及團隊合作精神,責任心強,工作認真負責,善於學習與解決問題;

8、有大數據相關項目開發經驗優先考慮。

大數據開發工程師崗位的工作職責說明 篇12

職責:

1、參與項目整體設計,開發和計劃的實施;

2、獨立完成功能模塊的開發,並負責各個功能及模塊的接口設計工作;

3、編寫核心代碼與組件;

4、負責系統的性能優化和技術難點公關;

5、對開發階段任務進行WBS分解,製作開發計劃,帶領項目團隊開發人員協同完成各個功能開發;

任職條件:

1.具有4年以上獨立PHP開發經驗。

2.熟悉mysql,包括數據庫設計,速度優化。

3.對互聯網的技術有較全面理解,能獨立應付大訪問量下網站的設計和開發工作。

4.具有PHP緩存技術、靜態化設計方面的經驗,能夠獨立開發。

5.精通PHP,具備在Linux平臺下使用PHP開發服務端程序,包含服務器部署、配置優化、響應速度優化、併發處理,SHELL腳本語言等。

6.具有較強的團隊意識,高度的責任感,對工作積極嚴謹,勇於承擔壓力。

7.有良好的溝通和學習能力、有較強的團隊協作能力以及快速解決問題的能力,並有組內領導能力。

大數據開發工程師崗位的工作職責說明 篇13

職責:

1、根據產品需求、設計文檔,負責公司大數據分析平臺產品相關開發工作;

2、協助架構師進行系統設計工作,參與部分技術預研工作;

3、遵循編碼規範,及時完成分配的開發任務,保證項目開發進度;

任職資格:

1、大專以上學歷,計算機相關專業,兩年以上Java開發經驗;

2、紮實的Java基礎,良好的編程規範,熟練掌握spring應用開發框架,有較好Web前端功底;

3、熟悉Linux操作系統、MySQL/Oracle等數據庫,熟悉Javascript、HTML、CSS等網頁開發技術;

4、具備較強的編程能力,較強的理解能力,能夠獨立根據業務需求進行技術實現;有系統設計能力優先;

5、具備良好的溝通能力、團隊協作精神,主動學習新技術的能力。

大數據開發工程師崗位的工作職責說明 篇14

職責:

1、根據需求安排高效、高質地完成代碼編寫,確保符合前端代碼規範;

2、與產品和設計團隊緊密配合,能夠有效溝通產品需求和設計的想法;

3、與後端開發團隊緊密配合,確保代碼有效對接,優化前端性能;

4、承擔前端開發工作,對代碼質量及進度負責;

5、利用HTML5、CSS3等相關技術參與前端應用的開發。

任職要求:

1、 本科及以上學歷,計算機相關專業;

2、良好的英文讀寫能力;互聯網相關3年以上從業經驗;

3、 精通HTML/XHTML、CSS、JavaScript、AJAX、JSON、XML等技術;

4、 JavaScript程序模塊開發,通用類庫、框架編寫;

5、 熟練掌握Jquery、Bootstrap、VUE、Angular等前端框架,熟悉對象化Javascript編程;

6、熟悉CSS、CSS3各種樣式屬性;

7、有html5開發經驗和手機、Pad 等多平臺上的前端應用開發者優先。

大數據開發工程師崗位的工作職責說明 篇15

職責:

1、負責API接口、管理後臺的開發和維護;

2、參與技術架構設計和優化,根據業務規劃及技術規則制定應用架構方案;

3、參與技術難題攻關,持續提升系統在高併發、海量請求下的處理能力;

4、數據分析,提供決策數據支持及建議;

5、參與線上產品的運維。

任職要求:

1、 PHP基礎紮實,5年以上相關工作經驗,有其它語言(Java/Python/Go)開發經驗者優先;

2、 精通開源框架(ThinkPHPswooleWorkerManCodeIgniter等)的原理及設計模式;

3、 精通MySQL、NOSQL、MongoDB等數據庫,能夠編寫和優化複雜的SQL程序;

4、 熟悉api接口開發,後臺開發或熟悉數據開發工作經驗者優先,熟悉消息隊列、任務調度服務開發經驗者優先;

5、 熟悉Unix/Linux操作系統和Nginx/Apache/Tomcat等服務器軟件的配置,熟練掌握shell、Python、Perl其中一種腳本語言;

6、 熟悉主流的分佈式架構,有高負載大併發的實際工作經驗;

7、 能夠快速定位和解決系統中的性能方面問題,熟悉常用的數據分析方法;

8、 需有一定的運維技術,有docker使用經驗,瞭解持續集成交付部署。

大數據開發工程師崗位的工作職責說明 篇16

職責:

1.參與基於JAVA技術的應用系統開發;

2.參與需求分析,根據具體的模塊需求,獨立完成模塊的設計編碼工作;

3.負責所開發模塊的故障修復、性能調優等;

4.根據開發規範與流程完成系統設計、編碼、測試以及相關文檔的編寫;

任職要求:

1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗

2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;

3.熟練掌握MySQL等數據庫;

4.熟練掌握Tomcat等應用服務器、nginx等負載均衡軟件;

5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;

6.敬業、責任心強,良好的溝通能力。

大數據開發工程師崗位的工作職責說明 篇17

負責數據庫系統架構的設計和實施,參與項目中的數據庫邏輯結構設計,參與大數據平臺的架構設計;

基於產品需求說明書,設計審覈並創建數據庫存儲結構、數據庫對象;

根據業務需求批量更新數據;開發和維護數據庫定時任務;使用spark SQl等技術,開發數據分析功能;

監控並及時發現TOP SQL,通過優化索引結構提高性能或給研發人員提出優化建議;

爲企業信息化和其他內部相關業務提供相關技術支持。

大數據開發工程師崗位的工作職責說明 篇18

職責:

1.根據需求完成功能設計和代碼編寫;

2.負責後端系統性能優化和改進;

3.獨立承擔子系統和模塊的架構設計以及開發;

4.從技術層面參與產品討論、設計;

任職要求:

1.精通Java,4年以上Java開發經驗;

2.精通J2EE開發相關技術和框架,對各種框架如Spring、Hibernate/Spring Data、SpringMVC、MyBatis、Shiro等有深入的應用經驗;

3.精通mysql、redis、mongoDB等數據庫和能夠獨立編寫性能良好的SQL代碼、並能夠進行SQL調優;

4.熟練掌握jQuery、Javascript、JSP、HTML、CSS、AJAX等Web前端編程技術;

5.具備良好的文檔撰寫能力,能夠獨立交付數據接口文檔,編碼時能清晰明瞭的註釋;

6.具備鑽研新技術的興趣和能力;

7.積極主動,善於溝通,獨立工作能力強並具備良好的團隊合作意識。

熱門標籤