大數(shù)據(jù)開(kāi)發(fā)工程師需要編寫(xiě)產(chǎn)品研發(fā)相關(guān)任務(wù)單計(jì)劃，階段性代碼、技術(shù)方案和軟件產(chǎn)品及時(shí)提交至配置管理理庫(kù)。以下是YY簡(jiǎn)歷網(wǎng)小編整理的大數(shù)據(jù)開(kāi)發(fā)工程師崗位的基本職責(zé)。

　　大數(shù)據(jù)開(kāi)發(fā)工程師崗位的基本職責(zé)1

　　職責(zé):

　　1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的技術(shù)和產(chǎn)品的設(shè)計(jì)、開(kāi)發(fā)、優(yōu)化和維護(hù);

　　2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)設(shè)計(jì)文檔編寫(xiě)，線上產(chǎn)品的維護(hù);

　　3、負(fù)責(zé)系統(tǒng)性能優(yōu)化，解決各類潛在系統(tǒng)技術(shù)風(fēng)險(xiǎn)，保證系統(tǒng)的安全、穩(wěn)定、快速運(yùn)行;

　　4、負(fù)責(zé)整個(gè)產(chǎn)品平臺(tái)的搭建、多維數(shù)據(jù)庫(kù)建設(shè)及管控流程設(shè)計(jì);

　　5、參與指標(biāo)設(shè)計(jì)，數(shù)據(jù)建模，負(fù)責(zé)將數(shù)據(jù)模型在系統(tǒng)中實(shí)現(xiàn);

　　6、負(fù)責(zé)數(shù)據(jù)抽取、數(shù)據(jù)交換、實(shí)時(shí)計(jì)算等框架研究及相關(guān)產(chǎn)品的研發(fā);

　　7、負(fù)責(zé)追蹤整體產(chǎn)品過(guò)程及質(zhì)量把控。

　　任職要求：

　　1、專業(yè)技能：精通 Hadoop 生態(tài)圈中的一項(xiàng)或幾項(xiàng)技術(shù)，深入了解 Hadoop 及相關(guān)組件的部署及調(diào)優(yōu);設(shè)計(jì)或開(kāi)發(fā)過(guò)大容量，高性能，高可用，易擴(kuò)展的分布式系統(tǒng);熟悉實(shí)時(shí)計(jì)算/流式計(jì)算系統(tǒng)，至少熟悉一項(xiàng) Nosql 技術(shù);具有扎實(shí) java 功底及開(kāi)發(fā)能力;對(duì) hadoop，hive，hbase，spark 等相關(guān)源碼有一定了解;

　　2、學(xué)歷背景：計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷;

　　3、工作經(jīng)驗(yàn)：3年以上JAVA開(kāi)發(fā)經(jīng)驗(yàn)及1年以上大數(shù)據(jù)研發(fā)經(jīng)驗(yàn)

　　4、能力素質(zhì)：具有出色的抽象設(shè)計(jì)能力，思路清晰，善于思考，良好的團(tuán)隊(duì)合作能力、溝通能力、較好的自學(xué)能力，具有敬崗愛(ài)業(yè)的精神。

　　5、有團(tuán)隊(duì)管理經(jīng)驗(yàn)者優(yōu)先。

　　大數(shù)據(jù)開(kāi)發(fā)工程師崗位的基本職責(zé)2

　　職責(zé)：

　　1、負(fù)責(zé)大數(shù)據(jù)統(tǒng)計(jì)平臺(tái)建設(shè)與優(yōu)化;

　　2、負(fù)責(zé)廣告效果分析，反作弊平臺(tái)建設(shè);

　　3、負(fù)責(zé)移動(dòng)廣告平臺(tái)相關(guān)系統(tǒng)的設(shè)計(jì)研發(fā)及持續(xù)優(yōu)化。

　　職位要求：

　　1、計(jì)算機(jī)或相關(guān)專業(yè)本科學(xué)歷及以上，2年工作經(jīng)驗(yàn);

　　2、精通大數(shù)據(jù)采集、處理、存儲(chǔ)、查詢相關(guān)技術(shù);

　　3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相關(guān)技術(shù);

　　4、至少熟練掌握 Java/Scala/Python 中一門語(yǔ)言;

　　5、有做過(guò)大數(shù)據(jù)量查詢優(yōu)化的優(yōu)先;

　　6、有大數(shù)據(jù)服務(wù)運(yùn)維、性能調(diào)優(yōu)者優(yōu)先;

　　7、熟悉常用的設(shè)計(jì)模式，對(duì)MVC框架有了解;

　　8、強(qiáng)烈的責(zé)任心，對(duì)技術(shù)充滿熱情，高效率，良好的溝通能力。

　　大數(shù)據(jù)開(kāi)發(fā)工程師崗位的基本職責(zé)3

　　職責(zé)：

　　1.有獨(dú)立工作能力，工作踏實(shí)認(rèn)真，以及較強(qiáng)的團(tuán)隊(duì)協(xié)作精神。

　　2.負(fù)責(zé)日志大數(shù)據(jù)平臺(tái)的搭建和規(guī)劃;

　　3.在總體架構(gòu)設(shè)計(jì)下，完成日志大數(shù)據(jù)產(chǎn)品的設(shè)計(jì)、搭建、維護(hù)和調(diào)優(yōu)，技術(shù)文檔的編寫(xiě)與維護(hù);

　　4.參與業(yè)務(wù)日志的大數(shù)據(jù)分析;

　　5.及時(shí)反饋開(kāi)發(fā)中遇到的難點(diǎn)問(wèn)題，溝通并尋求解決方案，按階段有計(jì)劃地完成開(kāi)發(fā)任務(wù)

　　任職資格:

　　1、計(jì)算機(jī)等相關(guān)專業(yè)本科以上學(xué)歷，2年以上開(kāi)發(fā)經(jīng)驗(yàn);

　　2、熟悉 linux 操作系統(tǒng)，熟悉 shell 腳本語(yǔ)言，精通 Java，有較強(qiáng)的開(kāi)發(fā)能力;

　　2、熟練使用SQL，熟悉Mysql、MongoDB、Hive等數(shù)據(jù)庫(kù)技術(shù)的基本操作及原理;

　　3、熟悉Hadoop/Spark生態(tài)系統(tǒng)組件的使用，至少有1年的Spark(Core/Streaming/SQL)開(kāi)發(fā)經(jīng)驗(yàn);

　　4、熟悉Elastic產(chǎn)品線(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法，了解常見(jiàn)優(yōu)化方案，熟悉Elasticsearch部署、監(jiān)控及性能調(diào)優(yōu);

　　5、熟悉數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)、網(wǎng)絡(luò)數(shù)據(jù)分析等技術(shù)優(yōu)先;

　　大數(shù)據(jù)開(kāi)發(fā)工程師崗位的基本職責(zé)4

　　職責(zé)：

　　1. 根據(jù)公司業(yè)務(wù)需求，進(jìn)行數(shù)據(jù)開(kāi)發(fā)及報(bào)表制作;

　　2. 參與BI、大數(shù)據(jù)平臺(tái)體系建設(shè);

　　3. 文檔整理，包括ER圖、原型設(shè)計(jì)、數(shù)據(jù)字典整理等;

　　崗位要求：

　　1. 本科或以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，2年及以上工作經(jīng)驗(yàn);

　　2. 熟練使用主流數(shù)據(jù)庫(kù)(如ORACLE/PostgreSQL/MYSQL等)，掌握SQL查詢優(yōu)化方法;

　　3. 熟悉HADOOP生態(tài)，能夠熟練使用HIVE/HBASE/SPARK進(jìn)行數(shù)據(jù)開(kāi)發(fā);

　　4. 掌握J(rèn)AVA或PYTHON，會(huì)TABLEAU/KYLIN/帆軟等BI工具者優(yōu)先;

　　大數(shù)據(jù)開(kāi)發(fā)工程師崗位的基本職責(zé)5

　　職責(zé)：

　　1. 負(fù)責(zé)設(shè)計(jì)和實(shí)現(xiàn)手機(jī)衛(wèi)士大數(shù)據(jù)BI平臺(tái);

　　2. 不斷完善數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計(jì)，應(yīng)用開(kāi)發(fā)和新技術(shù)迭代;

　　3. 配合業(yè)務(wù)，產(chǎn)品，根據(jù)不同的業(yè)務(wù)需求，靈活快速地完成具有挑戰(zhàn)性的項(xiàng)目，為業(yè)務(wù)提供有價(jià)值的數(shù)據(jù)分析和預(yù)測(cè)。

　　任職要求

　　1. 計(jì)算機(jī)軟件相關(guān)專業(yè)本科及以上學(xué)歷，至少3年以上工作經(jīng)驗(yàn);

　　2. 認(rèn)可技術(shù)與平臺(tái)在BI的價(jià)值，能夠深入業(yè)務(wù)領(lǐng)域，通過(guò)使用數(shù)據(jù)分析和挖據(jù)技術(shù)，讓業(yè)務(wù)生成的海量數(shù)據(jù)產(chǎn)生更大價(jià)值。

　　3. 熟練掌握大數(shù)據(jù)技術(shù)：包括Hadoop，Spark，Storm，Hive，Presto，Parquet，F(xiàn)link，Druid，OLAP, Elastic Search等等。

　　4. 具備良好的編程能力和代碼風(fēng)格，熟練掌握J(rèn)ava， Python等語(yǔ)言，熟練使用SQL，并具有較強(qiáng)的優(yōu)化能力。

　　5. 需要有很強(qiáng)的開(kāi)發(fā)和架構(gòu)設(shè)計(jì)能力，特別是在大數(shù)據(jù)的分布式和實(shí)時(shí)處理領(lǐng)域，對(duì)存儲(chǔ)引擎和查詢引擎的原理和優(yōu)化都具備比較深入的理解。

　　6. 有一定的數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)算法能力，包括推薦系統(tǒng)，深度學(xué)習(xí)等技術(shù)領(lǐng)域 。

　　7. 擁有正直、積極、寬容的品質(zhì)，學(xué)習(xí)能力強(qiáng)，并且善于溝通合作。

• 推薦閱讀：
• 產(chǎn)品開(kāi)發(fā)工程師工作的主要職責(zé)
• PHP開(kāi)發(fā)工程師的基本職責(zé)說(shuō)明
• 數(shù)據(jù)庫(kù)開(kāi)發(fā)工程師崗位的職責(zé)
• 高級(jí)Java開(kāi)發(fā)工程師崗位的基本職責(zé)
• 產(chǎn)品開(kāi)發(fā)工程師崗位的主要職責(zé)說(shuō)明
• HTML5開(kāi)發(fā)工程師崗位的工作職責(zé)表述