范秘书_懂你的范文小秘书

2023大數據架構設計師的崗位職責(10篇)

| 思恩

2023大數據架構設計師的崗位職責有哪些?盡管每個人的職責不同,但是每個人都應該做好自己該做的事,踐行自己的職責。下面小編給大家帶來了2023大數據架構設計師的崗位職責(10篇),供大家參考。

2023大數據架構設計師的崗位職責(10篇)

2023大數據架構設計師的崗位職責篇1

職責:

1.負責企業數據中心建設,設計數據邏輯模型和物理模型,并完成相關開發

2.梳理公司各業務線常用的指標和維度,統一指標定義口徑

3.根據數據應用開發和數據分析需求,設計數據倉庫信息層模型,提高數據開發的效率

4.負責數據模型的運營和優化,及時響應業務邏輯變更,保證模型的數據質量和穩定性

5.負責公司數據標簽體系的建設,并推動標簽體系在實際業務場景中落地

崗位要求:

1.5年以上DW/BI數據架構設計、模型設計和性能調優等相關經驗

2.有較強的數據分析能力,精通數據倉庫架構,熟悉Erwin或PowerDesigner建模工具

3.精通一種主流關系數據庫(如mysql等),熟悉Hive開發

4.有電商業務經驗,元數據管理,數據質量管理或標簽體系搭建經驗者優先

5.優秀的協調溝通與團隊協作能力,極強的責任心,能承受一定的工作壓力,認同企業文化和團隊價值

2023大數據架構設計師的崗位職責篇2

1、建設大數據平臺,主要技術為k8s, docker;

2、跟進開源社區的更新,閱讀文檔,驗證feature;

3、閱讀容器生態圈各組件的開源項目代碼,開發新功能;

4、持續提升平臺的性能和穩定性。

2023大數據架構設計師的崗位職責篇3

職責:

1、負責公司大數據產品的架構設計,包含數據收集、數據存儲、數據應用,并完成相關架構設計文檔的撰寫;

2、參與規劃從數據源到數據應用的整體流程,并參與相關產品的決策;

3、負責解決核心技術問題,對技術方案進行決策;

4、負責大數據研發團隊建設、人才梯隊培養和技術團隊管理;

5、積極了解業界發展,研究與跟蹤大數據新技術發展方向。

任職要求:

1、精通GoldenGate For BigData相關理論,具備大型數據利用的生產實戰經驗;

2、精通數據驅動的理論,設計并生產上線相關數據驅動的產品;

3、精通常用消息中間件的使用,例如kafka/RocketMQ/Apache Pulsar,有解讀相關源碼者優先;

4、掌握hadoop、spark生態體系相關產品的使用,掌握MapReduce編程或Spark編程;

5、了解傳統數據倉庫理論及相關ETL工具,例如kettle/datastage;

6、熟悉Oracle、Mongodb、Mysql數據庫的使用;

7、扎實的Java語言基礎,熟悉Java開發工具和調試工具的使用;

8、良好的團隊協作精神,有能力對團隊在軟件設計、實現和測試方面進行指導;

9、良好的邏輯分析能力和溝通能力,執行力強、對待工作認真嚴謹、責任心強、具備出色的學習能力和團隊合作精神,有一定的推動能力;

10、計算機科學、信息技術或相關領域本科以上學歷,具有5年以上數據平臺項目開發經驗,3年以上的架構設計經驗,具有大數據平臺應用大型項目架構設計經驗優先;

2023大數據架構設計師的崗位職責篇4

職責:

1、負責大數據開發團隊建設;

2、負責行業大數據產品架構設計與研發;

3、負責帶領團隊進行行業大數據產品關鍵技術攻關。

任職要求:

1、有三年以上大數據應用、開發經驗;具備海量數據加工處理(ETL)相關經驗,對數據挖掘及機器學習有較為深刻的理解;

2、熟悉Hadoop相關技術,對HDFS、MapReduce、Hive、HBase有一定的使用和開發經驗;

3、熟悉Linu_,熟練使用Shell或Python,進行腳本編寫;

4、對數據結構和數據統計分析算法有較為深刻理解;

5、掌握至少一種主流關系數據庫開發技術:Oracle、SQL Server、MySQL等;

6、掌握實時流計算技術,有Spark、Storm開發經驗者優先;

7、需要具備2年以上研發團隊管理經驗。

2023大數據架構設計師的崗位職責篇5

職責:

1)負責公司軟件產品整體架構的設計和關鍵功能實現

2)負責公司架構長期看護以及優化;

3)負責軟件部門各模組間的協調配合;

4)提高鞏固軟件代碼質量;

5)負責大數據流式框架的設計、優化及部署;

6)規劃研發部門員工的技術發展路線并提供必要的幫助和指導

任職資格:

1)本科及以上學歷,計算機相關專業,5年以上工作經驗;

2)頻繁換工作,比如一年一個公司,請繞路;

3)3年以上產品架構經驗,主導過產品的成功上線;

4)對底層設備通訊協議,B/S系統,手機APP開發等都有一定的了解;

5)對各種主流語言C#\Java\Pathon有一定的了解

5)精通各種大數據架構,并深入研究過其中一種,有storm\kafka等流式實時處理經驗為佳

6)能夠承擔較強的工作壓力,有良好的自我驅動能力和責任感;

7)具備優秀的邏輯思維能力、表達能力、溝通協調能力。

2023大數據架構設計師的崗位職責篇6

職責:

1、搭建基于Hadoop/Spark的數據挖掘體系和大數據分析系統架構;

2、研究大數據領域前沿數據挖掘技術,并引入相應技術在數據中心的使用;

3、進行大數據系統框架設計、模型算法開發;

4、負責大型數據挖掘項目方案制定、項目實施落地及優化等 ;

5、開展數據爬取、聚類分析、輿情分析、魚骨圖分析、定價策略等領域數據挖掘工作;

任職資格:

1、本科以上學歷(持有學士學位)(985,211優先),計算機相關專業,五年工作經驗;

2、二年以上數據挖掘項目經驗,完整參與過數據挖掘大數據平臺的架構開發過程,具備互聯網行業背景優先;

3、精通分布式計算框架(hadoop、spark、Storm等)及相關經驗,熟練掌握Hive/SQL,Python,熟悉Python、R相關數值科學計算庫(NumPy,SciPy等);

4、了解傳統的BI/DW 理論,能結合傳統BI實踐設計大數據平臺;

5、熟悉常用機器學習算法(如分類、回歸、聚類、關聯規則等)及其原理,具備應用場景經驗,如用戶畫像、商品關聯度分析、輿情分析;

6、熟悉主數據、元數據、數據質量、和數據建模等數據治理相關的體系和方法;

7、具備較強的邏輯思維能力、數據敏感度,擅于利用數據發現問題及解決問題;

2023大數據架構設計師的崗位職責篇7

職責:

1. 深刻理解政府行業業務模式,構建政府行業的數據模型,制定公司大數據技術發展路線;

2. 對接業務研究和技術部門,主動搜集和轉化需求,組織數據中心業務開發,進行數據相關產品需求分析和設計;

3. 搭建數據倉庫,研發數據庫管理系統,搜集、提取、處理業務積累的海量數據,開展數據分析和挖掘;

4. 根據公司戰略和發展需要,規劃數據中心重點工作和任務;落實部門人員、事務管理,開展跨部門、跨地區協作,協助對外交流與合作。

職位要求:

1. 5年以上相關工作經驗,有團隊管理和項目管理經驗者優先;

2.了解政府運作機制,掌握財政行業知識,有電子政務行業經驗者優先;

3. 熟練掌握使用Java或Python,精通數據庫查詢語言如SQL,Oracle等,在機器學習模型和算法方向有應用經驗者優先;

4. 具備數據中心產品策劃整體思維,有大數據處理、分析、挖掘經驗者優先;

5. 邏輯思維嚴密,具備業務抽象、分解和標準化的能力,口頭和書面表達優秀;

6. 有較強的大局意識和良好的團隊合作意識,富有領導力,具備優秀的人際交往和溝通能力。

2023大數據架構設計師的崗位職責篇8

職責:

1、 基于公司大數據基礎和數據資產積累,負責大數據應用整體技術架構的設計、優化,建設大數據能力開放平臺;負責大數據應用產品的架構設計、技術把控工作。

2、 負責制定大數據應用系統的數據安全管控體系和數據使用規范。

3、 作為大數據技術方案到產品實現的技術負責人,負責關鍵技術點攻堅工作,負責內部技術推廣、培訓及知識轉移工作。

4、 負責大數據系統研發項目任務規劃、整體進度、風險把控,有效協同團隊成員并組織跨團隊技術協作,保證項目質量與進度。

5、 負責提升產品技術團隊的技術影響力,針對新人、普通開發人員進行有效輔導,幫助其快速成長。

任職資格:

1、 計算機、數學或相關專業本科以上學歷,5-20__年工作經驗,具有大型系統的技術架構\應用架構\數據架構相關的實踐工作經驗。

2、 有分布式系統分析及架構設計經驗,熟悉基于計算集群的軟件系統架構和實施經驗。

3、 掌握Hadoop/Spark/Storm生態圈的主流技術及產品,深入了解Hadoop/Spark/Storm生態圈產品的工作原理及應用場景。

4、 掌握Mysql/Oracle等常用關系型數據庫,能夠對SQL進行優化。

5、 熟悉分布式系統基礎設施中常用的技術,如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實踐經驗者優先。

6、 熟悉Linu_,Java基礎扎實,至少3-5年以上Java應用開發經驗,熟悉常用的設計模式和開源框架。

2023大數據架構設計師的崗位職責篇9

職責:

根據大數據業務需求,設計大數據方案及架構,實現相關功能;

搭建和維護大數據集群,保證集群規模持續、穩定、高效平穩運行;

負責大數據業務的設計和指導具體開發工作;

負責公司產品研發過程中的數據及存儲設計;

針對數據分析工作,能夠完成和指導負責業務數據建模。

職位要求:

計算機、自動化或相關專業(如統計學、數學)本科以上學歷,3年以上大數據處理相關工作經驗;

精通大數據主流框架(如 Hadoop、hive、Spark等);

熟悉 MySQL、NoSQL(MongoDB、Redis)等主流數據庫,以及rabbit MQ等隊列技術;

熟悉hadoop/spark生態的原理、特性且有實戰開發經驗;

熟悉常用的數據挖掘算法優先.

2023大數據架構設計師的崗位職責篇10

職責:

1、正確理解業務需求,對需求進行工作量評估;

2、參與項目相關的需求、設計、投產手冊等文檔的編寫;

3、根據進度計劃,完成所承擔功能模塊的設計、開發、單元測試、聯調測試;

4、配合測試組修復代碼缺陷,確保功能實現與代碼質量;

5、負責所承擔功能模塊投產、部署,及上線后的日常維護;

6、完成項目經理或者架構師安排的其他工作;

任職資格:

1、本科以上學歷,計算機相關專業,兩年以上大數據開發經驗;

2、熟悉Linu_ 環境,掌握shell或python;

3、熟練使用hadoop,hive,HBase,YARN,kafka,spark等大數據開發組件;

4、精通 ETL,數據倉庫的設計和開發;

5、有大數據處理實戰經驗,熟悉整個大數據的完整處理流程,包括數據的采集、清洗、存儲;

6、較強的動手能力和學習能力,良好的溝通能力、團隊協調能力;

7、具有銀行、金融行業從業背景者優先。

27311 主站蜘蛛池模板: MES系统-WMS系统-MES定制开发-制造执行MES解决方案-罗浮云计算 | 山东氧化铁红,山东铁红-淄博科瑞化工有限公司 | 飞扬动力官网-广告公司管理软件,广告公司管理系统,喷绘写真条幅制作管理软件,广告公司ERP系统 | 澳威全屋定制官网|极简衣柜十大品牌|衣柜加盟代理|全屋定制招商 百度爱采购运营研究社社群-店铺托管-爱采购代运营-良言多米网络公司 | 釜溪印象网络 - Powered by Discuz!| 智能垃圾箱|垃圾房|垃圾分类亭|垃圾分类箱专业生产厂家定做-宿迁市传宇环保设备有限公司 | 江苏密集柜_电动_手动_移动_盛隆柜业江苏档案密集柜厂家 | 智成电子深圳tdk一级代理-提供TDK电容电感贴片蜂鸣器磁芯lambda电源代理经销,TDK代理商有哪些TDK一级代理商排名查询。-深圳tdk一级代理 | ERP企业管理系统永久免费版_在线ERP系统_OA办公_云版软件官网 | 莱州网络公司|莱州网站建设|莱州网站优化|莱州阿里巴巴-莱州唯佳网络科技有限公司 | 吸音板,隔音板,吸音材料,吸音板价格,声学材料 - 佛山诺声吸音板厂家 | 半容积式换热器_北京浮动盘管换热器厂家|北京亿丰上达 | 通信天线厂家_室分八木天线_对数周期天线_天线加工厂_林创天线源头厂家 | 深圳希玛林顺潮眼科医院(官网)│深圳眼科医院│医保定点│香港希玛林顺潮眼科中心连锁品牌 | 防渗膜厂家|养殖防渗膜|水产养殖防渗膜-泰安佳路通工程材料有限公司 | 磨煤机配件-高铬辊套-高铬衬板-立磨辊套-盐山县宏润电力设备有限公司 | 实验室隔膜泵-无油防腐蚀隔膜泵-耐腐蚀隔膜真空泵-杭州景程仪器 电杆荷载挠度测试仪-电杆荷载位移-管桩测试仪-北京绿野创能机电设备有限公司 | 精雕机-火花机-精雕机 cnc-高速精雕机-电火花机-广东鼎拓机械科技有限公司 | 挖掘机挖斗和铲斗生产厂家选择徐州崛起机械制造有限公司 | 团建-拓展-拓展培训-拓展训练-户外拓展训练基地[无锡劲途] | 苏州西装定制-西服定制厂家-职业装定制厂家-尺品服饰西装定做公司 | 西安展台设计搭建_西安活动策划公司_西安会议会场布置_西安展厅设计西安旭阳展览展示 | 膜结构_ETFE膜结构_膜结构厂家_膜结构设计-深圳市烨兴智能空间技术有限公司 | 压滤机-洗沙泥浆处理-压泥机-山东创新华一环境工程有限公司 | 牛皮纸|牛卡纸|进口牛皮纸|食品级牛皮纸|牛皮纸厂家-伽立实业 | 全自动在线分板机_铣刀式在线分板机_曲线分板机_PCB分板机-东莞市亿协自动化设备有限公司 | 软文发布-新闻发布推广平台-代写文章-网络广告营销-自助发稿公司媒介星 | elisa试剂盒价格-酶联免疫试剂盒-猪elisa试剂盒-上海恒远生物科技有限公司 | 杭州火蝠电商_京东代运营_拼多多全托管代运营【天猫代运营】 | 不锈钢拉手厂家|浴室门拉手厂家|江门市蓬江区金志翔五金制品有限公司 | 厦门网站建设_厦门网站设计_小程序开发_网站制作公司【麦格科技】 | 高低温万能试验机_拉力试验机_拉伸试验机-馥勒仪器科技(上海)有限公司 | 杭州中策电线|中策电缆|中策电线|杭州中策电缆|杭州中策电缆永通集团有限公司 | 间甲酚,间甲酚厂家-山东祥东新材料 | 塑料瓶罐_食品塑料瓶_保健品塑料瓶_调味品塑料瓶–东莞市富慷塑料制品有限公司 | 屏蔽服(500kv-超高压-特高压-电磁)-徐吉电气 | 快干水泥|桥梁伸缩缝止水胶|伸缩缝装置生产厂家-广东广航交通科技有限公司 | 卡诺亚轻高定官网_卧室系统_整家定制_定制家居_高端定制_全屋定制加盟_定制家具加盟_定制衣柜加盟 | 恒温恒湿箱(药品/保健品/食品/半导体/细菌)-兰贝石(北京)科技有限公司 | 浙江华锤电器有限公司_地磅称重设备_防作弊地磅_浙江地磅售后维修_无人值守扫码过磅系统_浙江源头地磅厂家_浙江工厂直营地磅 | 西装定制/做厂家/公司_西装订做/制价格/费用-北京圣达信西装 |