大數據開發工程師崗位的工作職責說明(通用18篇)
大數據開發工程師崗位的工作職責說明 篇1
職責:
1、負責公司大數據基礎平臺產品開發工作;
2、完成產品/項目劃分的研發任務,按需求規範進行研發;
3、具備良好的需求分析能力、業務建模能力,參與產品和項目相關模塊的需求討論,概要、詳細設計;
4、具備良好的架構分析能力與設計能力,積極參與前期設計;
5、能根據設計方案和計劃進行編碼實現,在進度和質量上符合方案和計劃的要求;
6、及時對BUG庫中的軟件問題進行跟蹤修正。
崗位要求:
1、三年以上工作經驗,一年以上大數據平臺架構及ETL相關經驗,可獨立搭建/運維CDH/Spark整套平臺架構;
2、精通Python/Java/Scala/SQL/Shell等語言中兩種以上,熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三種以上開源框架的原理和源碼;
3、熟悉容器平臺開發或者開發優先考慮,有docker、kubernetes相關開發經驗更佳;
4、學習能力強,適應能力好,有豐富的問題原因定位及運維技術支持經驗;
5、有市場上成熟的大數據平臺產品實際架構/開發經驗優先。
大數據開發工程師崗位的工作職責說明 篇2
職責:
1、根據工作安排高效、高質地完成代碼編寫,確保符合規範的前端代碼規範;
2、負責公司現有項目和新項目的前端修改調試和開發工作;
3、與設計團隊緊密配合,能夠實現實現設計師的設計想法;
4、與後端開發團隊緊密配合,確保代碼有效對接,優化網站前端性能;
5、頁面通過標準校驗,兼容各主流瀏覽器。
任職要求:
1. 本科及以上學歷,熟悉j2ee,精通web開發有5年工作經驗以上(學習能力好放寬至4年),熟悉jsp,spring框架;
2.悉主流移動web開發框架,並有過實際項目開發經驗;
3.有kylin,atlas,oozie,azkaban,spark,ranger任意一種使用項目使用經驗。
大數據開發工程師崗位的工作職責說明 篇3
職責:
1、負責公司c端產品以及廣告數據的平臺數據基礎建設;
2、大數據平臺的搭建與維護;
3、優化算法提高執行效率;
4、數據挖掘相關開發。
職位要求:
1. 本科及以上,計算機、軟件工程、統計學、數據挖掘、機器學習等相關專業;
2. 熟悉JAVA語言及JAVA生態下的開發,瞭解多線程併發,能獨立完成應用開發和部署;
3. 3年及以上大數據流程架構經驗,熟悉Hbase/Hive/Hadoop/Spark或等主流分佈式開發平臺,有高性能集羣設計和開發經驗;
4. 能熟練操作Linux,熟練掌握SQL數據庫語言 HiveSQL/Mysql/Sqlserver;
5. 對有廣告營銷大數據算法/開發經驗者優先,有大型數據項目經驗優先,有用戶行爲分析、用戶建模、業務建模經驗者優先;
6. 具有良好的邏輯分析能力、溝通能力和協調能力;
大數據開發工程師崗位的工作職責說明 篇4
職責:
1. 負責公司大數據業務集羣的運維工作確保高可用;
2. 負責基礎運維、故障定位、容量規劃、擴容及性能優化;
3. 設計實現大規模分佈式集羣的運維、報警監控和管理平臺;
4. 參與業務架構設計,在設計階段給出可運維性改進建議;
5. 深入研究大數據業務相關運維技術,持續優化集羣服務架構,探索新的大數據運維技術及發展方向。
任職資格:
1.大專以上學歷,2年及以上大數據運維工作經驗,熟悉hadoop/hbase/hive/Yarn/Spark等分佈式相關技術,熟悉源碼尤佳,至少掌握python/shell中的一種語言,接受優秀應屆畢業生;
2.瞭解大數據平臺應用架構,具備常見問題的基本分析和解決能力;
3.熟悉Linux操作系統的配置、管理及優化,能夠獨立排查及解決操作系統層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應用/中間件及主流開源數據庫的使用和配置。
大數據開發工程師崗位的工作職責說明 篇5
職責:
1、負責基於Hadoop框架的海量數據平臺建設
2、參與大數據平臺的數據架構設計,完成從業務模型到數據模型的設計
3、基於海量數據的數據倉庫,爲業務搭建通用的查詢和分析解決方案
4、管理並優化存儲&計算資源利用效率、監控並維護例行ETL任務
5、梳理整體業務指標,可視化報表開發
應聘要求:
1、計算機本科及以上學歷,5年以上大型數據倉庫架構設計、模型設計、ETL設計相關經驗
2、熟悉Hadoop生態,熟悉Oracle、SQL數據庫中的一個或多個,有一定的性能優化經驗
3、熟練掌握Java語言,MapReduce編程,Python/Shell等腳本語言,Linux操作系統
4、具備大數據雲平臺、計算存儲平臺、可視化開發平臺經驗
5、業務理解力強,對數據敏感,有互聯網行業產品數據分析經驗者優先
大數據開發工程師崗位的工作職責說明 篇6
職責:
1、進行網站程序開發與實現,參與項目的編程、調試和模塊測試工作;
2、根據項目需求,能夠獨立按時完成網站開發任務;
3、根據主管要求對現有項目進行修改;
4、配合項目學習其他需要的技能。
任職要求:
1、 計算機相關專業本科或以上學歷;
2、有2年以上PHP開發經驗,熟悉MVC/OOP,具有獨立承擔模塊分析、設計開發能力;
3、對主流的PHP框架有實戰經驗,熟練使用Thinkphp框架者優先;
4、熟悉或擅長MYSQL或其他大型數據庫的使用及優化,熟悉MongoDb/Redis等NoSQL數據庫;
5、熟悉HTML/CSS/JS,瞭解HTML5/CSS3/AngularJS/Bootstrap,掌握常用的前端構建工具者優先;
6、熟練使用Linux操作系統,熟悉常見軟件的編譯部署(如Mysql/Nginx/Apache)和優化;
7、擁有良好的代碼習慣,結構清晰、命名規範、邏輯性強、代碼冗餘率低,有撰寫詳細的編碼註釋的習慣;
8、學習能力強,擁有優秀的邏輯思維能力,有良好的時間和流程意識,有較好的溝通交流能力,能夠迅速融入團隊;
9、有大數據產品軟件開發經驗者優先。
大數據開發工程師崗位的工作職責說明 篇7
1、負責數據管控產品的實施落地;
2、負責數據管控平臺、數據標準模塊、數據質量模塊、元數據管理模塊的實施部署;
3、負責業務流程的推廣與控制,保證項目順利落地;
4、負責管控平臺部分功能的定製開發;
5、負責對數據管控平臺各模塊的內容進行培訓。
大數據開發工程師崗位的工作職責說明 篇8
職責:
1、 完成與java相關的開發任務,確保項目的按時保質完成;
2、 對軟件進行後續維護和管理;
3、 能夠有效的與需求人員進行溝通,實現產品的設計意圖;
4、 維護和升級現有產品,快速修復Bug和缺陷。
任職要求:
1、專科及以上學歷, 計算機及相關專業畢業,2年以上java開發經驗,有公安行業系統經驗着重考慮;
2、能適應項目現場開發/實施/維護所需要的出差;
3、熟練使用Eclipse,Idea等開發工具進行Java開發,熟悉SSM,SpringBoot,SpringCloud等框架應用;熟練掌握JQuery,Vue,FreeMarker,Thymeleaf等前端的開發技術,以及掌握Oracle、Mysql數據庫應用開發。有高併發大數據開發經驗者優先;
4、具有較強的時間管理、耐壓能力、溝通協調能力,具有一定的市場意識和素養。
大數據開發工程師崗位的工作職責說明 篇9
職責:
1.負責公司旗下各系統功能開發、維護;
2.維護、升級及優化已有程序,編寫技術文檔;
3.獨立負責部分功能模塊的系統分析、數據庫設計、程序開發等;
4.配合運營部門進行活動頁面需求分析,完成代碼編寫和測試。
任職資格:
1.本科及以上學歷,計算機專業優先,5年及以上JAVA開發經驗者;
2.熟練掌握 java web 軟件開發技能,掌握主流開發框架:SSH、SSM、springMVC;
3.熟悉互聯網應用基本技術架構,熟練使用一種或多種 web 容器服務,如:nginx,jetty等;
4.掌握一種或多種常見 cache 開源服務:memcache,redis;
5.熟悉常見分佈式異步框架,會使用一種或多種消息服務:kafka,activeMQ,rabbitMQ 等;
6.有較強的溝通能力、團隊合作精神、高度的責任心。
大數據開發工程師崗位的工作職責說明 篇10
職責:
1. 負責產品研發Java後臺設計與開發工作、客戶現場相關項目的Java後臺設計與開發工作;
2. 對自行編制的功能代碼進行功能與性能優化,可協助H5、APP端、第三方進行接口聯調,及時修改測試、提出BUG,確保代碼質量;
3. 撰寫相關的技術文檔,主要包括設計文檔、接口文檔、部署文檔、使用手冊等;
4. 參與項目整個過程的實施工作,並具備獨立安裝部署和後期實施運維能力;
5. 參與到項目售前技術支持工作,能出差實施項目。
任職資格:
1. 計算機相關專業畢業,有3年以上Java工作經驗,有政府信息化或智慧城市相關項目經驗優先;
2. 熟練使用SQL語句與SQL優化,熟悉主流數據庫MySql、Oracle等;
3. 熟練J2EE主流技術框架,如Spring、SpringMVC、Mybatis、shiro等;
4. 精通HTTP通信協議、RESTfull API、HttpClient等接口規範與應用;
5. 熟練Java相關邊沿技術與工具:Eclipse、IDEA、Maven、SVN、Git、JavaScript、Poi、Log4j、freemarker、redis、Quartz、MQ等
6. 熟練使用Linux常用命令,可以完成Java服務運行環境的安裝、部署、監控等工作;
7. 具有良好的理解能力與溝通能力,能正確理解產品或項目目標與需求,有問題可以積極溝通確認,能做到及時準確的上報下達;
8. 具有良好的職業素質與團隊合作精神,可以嚴格遵守公司與項目組相關規定,有強烈的集體團隊意識;
9. 對工作態度主動積極、認真負責、且具有一定的抗壓能力;
大數據開發工程師崗位的工作職責說明 篇11
職責:
1、項目立項成功,在技術經理帶領下,進行產品開發工作,獨立完成功能模塊,協助完成數據庫的設計與核心業務編碼的工作;
2、產品技術性文檔撰寫,含產品研發過程中概要設計文檔,詳細設計文檔,接口文檔;
3、對上線產品進行日常運維,解決上線產品運行中出現的技術問題,對上線產品進行日常的數據分析與運營維護;
4、 與外部業務系統的接口設計與對接工作;
5、 預判、定位系統發展過程中的問題,提出解決方案,攻克技術瓶頸與難點;
6、實時關注用戶應用平臺情況,向技術經理彙報平臺運營情況,在技術經理規劃下,不斷根據反饋自行迭代優化代碼或架構,提高平臺性能;
7、 指導初級開發工程師進行開發與維護。
崗位要求:
1、大專及以上學歷,計算機或相關專業優先;
2、2年以上JAVA研發經驗,熟悉MVC設計模式,熟練使用主流的J2EE開源架構(struts2,springmvc,ibatis等) ;
3、熟悉掌握各種WEB前端技術,包括 、AngularJs、element-ui等;
4、熟悉MySQL、Oracle或NoSQL數據庫技術,熟悉SQL調優機制,有大型數據庫軟件開發經驗者優先;
5、熟悉mongodb,redis、memcached,nginx,tomcat的一種或多種;
6、瞭解軟件工程、編程規範、有過程控制意識;
7、良好的溝通能力及團隊合作精神,責任心強,工作認真負責,善於學習與解決問題;
8、有大數據相關項目開發經驗優先考慮。
大數據開發工程師崗位的工作職責說明 篇12
職責:
1、參與項目整體設計,開發和計劃的實施;
2、獨立完成功能模塊的開發,並負責各個功能及模塊的接口設計工作;
3、編寫核心代碼與組件;
4、負責系統的性能優化和技術難點公關;
5、對開發階段任務進行WBS分解,製作開發計劃,帶領項目團隊開發人員協同完成各個功能開發;
任職條件:
1.具有4年以上獨立PHP開發經驗。
2.熟悉mysql,包括數據庫設計,速度優化。
3.對互聯網的技術有較全面理解,能獨立應付大訪問量下網站的設計和開發工作。
4.具有PHP緩存技術、靜態化設計方面的經驗,能夠獨立開發。
5.精通PHP,具備在Linux平臺下使用PHP開發服務端程序,包含服務器部署、配置優化、響應速度優化、併發處理,SHELL腳本語言等。
6.具有較強的團隊意識,高度的責任感,對工作積極嚴謹,勇於承擔壓力。
7.有良好的溝通和學習能力、有較強的團隊協作能力以及快速解決問題的能力,並有組內領導能力。
大數據開發工程師崗位的工作職責說明 篇13
職責:
1、根據產品需求、設計文檔,負責公司大數據分析平臺產品相關開發工作;
2、協助架構師進行系統設計工作,參與部分技術預研工作;
3、遵循編碼規範,及時完成分配的開發任務,保證項目開發進度;
任職資格:
1、大專以上學歷,計算機相關專業,兩年以上Java開發經驗;
2、紮實的Java基礎,良好的編程規範,熟練掌握spring應用開發框架,有較好Web前端功底;
3、熟悉Linux操作系統、MySQL/Oracle等數據庫,熟悉Javascript、HTML、CSS等網頁開發技術;
4、具備較強的編程能力,較強的理解能力,能夠獨立根據業務需求進行技術實現;有系統設計能力優先;
5、具備良好的溝通能力、團隊協作精神,主動學習新技術的能力。
大數據開發工程師崗位的工作職責說明 篇14
職責:
1、根據需求安排高效、高質地完成代碼編寫,確保符合前端代碼規範;
2、與產品和設計團隊緊密配合,能夠有效溝通產品需求和設計的想法;
3、與後端開發團隊緊密配合,確保代碼有效對接,優化前端性能;
4、承擔前端開發工作,對代碼質量及進度負責;
5、利用HTML5、CSS3等相關技術參與前端應用的開發。
任職要求:
1、 本科及以上學歷,計算機相關專業;
2、良好的英文讀寫能力;互聯網相關3年以上從業經驗;
3、 精通HTML/XHTML、CSS、JavaScript、AJAX、JSON、XML等技術;
4、 JavaScript程序模塊開發,通用類庫、框架編寫;
5、 熟練掌握Jquery、Bootstrap、VUE、Angular等前端框架,熟悉對象化Javascript編程;
6、熟悉CSS、CSS3各種樣式屬性;
7、有html5開發經驗和手機、Pad 等多平臺上的前端應用開發者優先。
大數據開發工程師崗位的工作職責說明 篇15
職責:
1、負責API接口、管理後臺的開發和維護;
2、參與技術架構設計和優化,根據業務規劃及技術規則制定應用架構方案;
3、參與技術難題攻關,持續提升系統在高併發、海量請求下的處理能力;
4、數據分析,提供決策數據支持及建議;
5、參與線上產品的運維。
任職要求:
1、 PHP基礎紮實,5年以上相關工作經驗,有其它語言(Java/Python/Go)開發經驗者優先;
2、 精通開源框架(ThinkPHPswooleWorkerManCodeIgniter等)的原理及設計模式;
3、 精通MySQL、NOSQL、MongoDB等數據庫,能夠編寫和優化複雜的SQL程序;
4、 熟悉api接口開發,後臺開發或熟悉數據開發工作經驗者優先,熟悉消息隊列、任務調度服務開發經驗者優先;
5、 熟悉Unix/Linux操作系統和Nginx/Apache/Tomcat等服務器軟件的配置,熟練掌握shell、Python、Perl其中一種腳本語言;
6、 熟悉主流的分佈式架構,有高負載大併發的實際工作經驗;
7、 能夠快速定位和解決系統中的性能方面問題,熟悉常用的數據分析方法;
8、 需有一定的運維技術,有docker使用經驗,瞭解持續集成交付部署。
大數據開發工程師崗位的工作職責說明 篇16
職責:
1.參與基於JAVA技術的應用系統開發;
2.參與需求分析,根據具體的模塊需求,獨立完成模塊的設計編碼工作;
3.負責所開發模塊的故障修復、性能調優等;
4.根據開發規範與流程完成系統設計、編碼、測試以及相關文檔的編寫;
任職要求:
1.計算機相關專業本科及以上學歷,3-5年以上Java開發經驗
2.熟練掌握Java、HTML/Javascript/CSS,JSP/Servlet等JAVAEE相關技術,有vue相關經驗更佳;
3.熟練掌握MySQL等數據庫;
4.熟練掌握Tomcat等應用服務器、nginx等負載均衡軟件;
5.精通MVC模式下的B/S開發,熟悉Spring/Springboot/SpringMVC/MyBatis等開源框架;
6.敬業、責任心強,良好的溝通能力。
大數據開發工程師崗位的工作職責說明 篇17
負責數據庫系統架構的設計和實施,參與項目中的數據庫邏輯結構設計,參與大數據平臺的架構設計;
基於產品需求說明書,設計審覈並創建數據庫存儲結構、數據庫對象;
根據業務需求批量更新數據;開發和維護數據庫定時任務;使用spark SQl等技術,開發數據分析功能;
監控並及時發現TOP SQL,通過優化索引結構提高性能或給研發人員提出優化建議;
爲企業信息化和其他內部相關業務提供相關技術支持。
大數據開發工程師崗位的工作職責說明 篇18
職責:
1.根據需求完成功能設計和代碼編寫;
2.負責後端系統性能優化和改進;
3.獨立承擔子系統和模塊的架構設計以及開發;
4.從技術層面參與產品討論、設計;
任職要求:
1.精通Java,4年以上Java開發經驗;
2.精通J2EE開發相關技術和框架,對各種框架如Spring、Hibernate/Spring Data、SpringMVC、MyBatis、Shiro等有深入的應用經驗;
3.精通mysql、redis、mongoDB等數據庫和能夠獨立編寫性能良好的SQL代碼、並能夠進行SQL調優;
4.熟練掌握jQuery、Javascript、JSP、HTML、CSS、AJAX等Web前端編程技術;
5.具備良好的文檔撰寫能力,能夠獨立交付數據接口文檔,編碼時能清晰明瞭的註釋;
6.具備鑽研新技術的興趣和能力;
7.積極主動,善於溝通,獨立工作能力強並具備良好的團隊合作意識。