大數據開(kāi)發(fā)工程師崗位職責
在現在的社會(huì )生活中,越來(lái)越多地方需要用到崗位職責,任何崗位職責都是一個(gè)責任、權力與義務(wù)的綜合體,有多大的權力就應該承擔多大的責任,有多大的權力和責任應該盡多大的義務(wù),任何割裂開(kāi)來(lái)的做法都會(huì )發(fā)生問(wèn)題。一般崗位職責是怎么制定的呢?以下是小編為大家收集的大數據開(kāi)發(fā)工程師崗位職責,供大家參考借鑒,希望可以幫助到有需要的朋友。
大數據開(kāi)發(fā)工程師崗位職責1
1、負責結構化數據和文本的數據處理、建模、分析等工作,如:數據清洗、中文分詞、情感分析、文本分類(lèi)等;
2、負責數據需求的收集、整理和分析,配合其他同事完成結構化數據和文本的'需求分析;
3、負責分析結果的可視化展現;
4、負責核心算法的設計與優(yōu)化。
任職要求:
1、全日制本科畢業(yè);
2、計算機或數學(xué)或軟件類(lèi)或統計相關(guān)專(zhuān)業(yè);
3、熟悉數據挖掘和文本挖掘的理論基礎,掌握統計模型、機器學(xué)習相關(guān)原理;
4、熟悉r/python/java等編程語(yǔ)言,熟悉常用數據結構和算法,熟悉正則表達式的使用。
大數據開(kāi)發(fā)工程師崗位職責2
1.參與大數據精準學(xué)平臺設計與研發(fā),在大數據采集、存儲、分析及應用領(lǐng)域都會(huì )有所涉及。
2.參與需求分析、系統架構設計、并完成需求設計相應文檔的編寫(xiě)。
3.參與核心代碼實(shí)現、系統性能優(yōu)化。
4.保質(zhì)保量地完成項目組分配的開(kāi)發(fā)任務(wù)。
5.協(xié)助項目經(jīng)理進(jìn)行技術(shù)支持工作,共同解決產(chǎn)品研發(fā)過(guò)程遇到的技術(shù)難題。
大數據開(kāi)發(fā)工程師崗位職責3
1、根據業(yè)務(wù)需求進(jìn)行數據模型的調研、設計、開(kāi)發(fā)及驗證工作,并持續進(jìn)行模型的優(yōu)化;
2、負責數據模型架構的構建,建立數據抽取、清洗、校驗等數據加工流程規范及olap多維數據分析模型;
3、持續對系統的技術(shù)架構進(jìn)行改進(jìn)和優(yōu)化,提升海量數據的查詢(xún)性能和用戶(hù)體驗。
大數據開(kāi)發(fā)工程師崗位職責4
。1)根據業(yè)務(wù)進(jìn)行數據需求的調研、設計、開(kāi)發(fā)及驗證工作,并持續進(jìn)行數據業(yè)務(wù)的優(yōu)化;
。2)負責大數據整體設計和開(kāi)發(fā)工作,包括數據接入、清洗、計算、校驗等數據加工流程,并沉淀文檔;
。3)持續對系統的技術(shù)架構進(jìn)行改進(jìn)和優(yōu)化,提升海量數據的查詢(xún)性能和用戶(hù)體驗。
。4)此崗位需駐場(chǎng)開(kāi)發(fā)半年左右(地點(diǎn):新疆)
大數據開(kāi)發(fā)工程師崗位職責5
1.參與產(chǎn)品和項目研發(fā)工作,基于spark完成產(chǎn)品大數據架構和功能開(kāi)發(fā);
2.搭建和調優(yōu)大數據基礎平臺,包括hadoop/hbase/hive/sqoop/kafka/flume/spark/storm等大數據組件的環(huán)境搭建;
3.維護線(xiàn)上系統的穩定性、可靠性,通過(guò)分析現象快速定位問(wèn)題,進(jìn)而提出優(yōu)化方案,改進(jìn)要求;
大數據開(kāi)發(fā)工程師崗位職責6
1.基于公司大數據產(chǎn)品進(jìn)行數據開(kāi)發(fā),包括數據的采集,清洗,預處理,存儲,建模,分析挖掘等
2.根據業(yè)務(wù)用戶(hù)需要分析數據,提供數據支持
3.參與公司大數據產(chǎn)品的運維和監控,保障數據質(zhì)量和服務(wù)穩定性
大數據開(kāi)發(fā)工程師崗位職責7
1、運用大數據分析工具和技術(shù)解決風(fēng)險管理業(yè)務(wù)中遇到的實(shí)際問(wèn)題與需求,如風(fēng)險評估、成長(cháng)評價(jià)等,包括對模型進(jìn)行設計、開(kāi)發(fā)、驗證、測試、部署及監控、優(yōu)化。。
2、基于海量用戶(hù)數據和特征,進(jìn)行數據質(zhì)量檢查、特征加工、數據清洗等,建立數據挖掘模型。
3、評估數據源的質(zhì)量和價(jià)值,能結合業(yè)務(wù)需求和場(chǎng)景,從各種數據維度中挖掘數據價(jià)值,并設計不同的模型,應用于不同的業(yè)務(wù)場(chǎng)景中。
大數據開(kāi)發(fā)工程師崗位職責8
1、規劃車(chē)聯(lián)網(wǎng)安全架構,不斷完善車(chē)聯(lián)網(wǎng)產(chǎn)品的安全規范和要求,跟進(jìn)、解決存在的安全隱患;
2、對上線(xiàn)前的軟件或者車(chē)上產(chǎn)品進(jìn)行安全方面驗證及測試;
3、跟進(jìn)最新漏洞的研究工作,理解漏洞的原理,編制漏洞研究報告和防范措施;
4、負責行業(yè)/國家車(chē)聯(lián)網(wǎng)汽車(chē)網(wǎng)絡(luò )安全部分的技術(shù)及標準規范的研究工作。
大數據開(kāi)發(fā)工程師崗位職責9
1、從事大數據分布式存儲/應用服務(wù)的設計和開(kāi)發(fā),挑戰大規模、高并發(fā)、易運維的分布式系統設計構建;
2、參與負責大數據運營(yíng)/風(fēng)控/分析等數據應用產(chǎn)品開(kāi)發(fā)迭代,包括需求討論需求/系統/算法的討論、設計及實(shí)現;
3、定位和解決集群組件如spark、hive、hbase、kafka的性能和高可用問(wèn)題,協(xié)助集群監控系統的開(kāi)發(fā)。
大數據開(kāi)發(fā)工程師崗位職責10
1.基于hadoop生態(tài)系統進(jìn)行大數據平臺建設;
2.負責各業(yè)務(wù)條線(xiàn)相關(guān)指標數據的數據建模
3.負責基于sqoop,hive、spark、sparksql、mysql進(jìn)行大數據開(kāi)發(fā)
4.負責離線(xiàn)運算、實(shí)時(shí)計算平臺項目的設計、開(kāi)發(fā)及運維
5.負責對數據平臺進(jìn)行性能調優(yōu)
【大數據開(kāi)發(fā)工程師崗位職責】相關(guān)文章:
數據挖掘工程師崗位職責06-04
結構開(kāi)發(fā)工程師崗位職責10-25
產(chǎn)品開(kāi)發(fā)工程師崗位職責11-13
產(chǎn)品開(kāi)發(fā)工程師的崗位職責09-13
游戲開(kāi)發(fā)工程師崗位職責09-13