大数据平台架构师岗位职责10篇.docx

上传人:0****3 文档编号:85279237 上传时间:2023-04-10 格式:DOCX 页数:10 大小:16.24KB
返回 下载 相关 举报
大数据平台架构师岗位职责10篇.docx_第1页
第1页 / 共10页
大数据平台架构师岗位职责10篇.docx_第2页
第2页 / 共10页
点击查看更多>>
资源描述

《大数据平台架构师岗位职责10篇.docx》由会员分享,可在线阅读,更多相关《大数据平台架构师岗位职责10篇.docx(10页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。

1、大数据平台架构师岗位职责10篇 大数据平台架构师岗位职责范本10篇 大数据平台架构师岗位职责有哪些?岗位职责是一个具象化的工作描述,可将其归类于不同职位类型范畴。下面我给大家带来了大数据平台架构师岗位职责10篇,供大家参考,盼望可以关心到你。 大数据平台架构师岗位职责篇1 职责: 依据大数据业务需求,设计大数据方案及架构,实现相关功能; 搭建和维护大数据集群,保证集群规模持续、稳定、高效平稳运行; 负责大数据业务的设计和指导详细开发工作; 负责公司产品研发过程中的数据及存储设计; 针对数据分析工作,能够完成和指导负责业务数据建模。 职位要求: 计算机、自动化或相关专业(如统计学、数学)本科以上

2、学历,3年以上大数据处理相关工作阅历; 精通大数据主流框架(如 Hadoop、hive、Spark等); 熟识 MySQL、NoSQL(MonQ等队列技术; 熟识hadoop/spark生态的原理、特性且有实战开发阅历; 熟识常用的数据挖掘算法优先. 大数据平台架构师岗位职责篇2 职责: 1、正确理解业务需求,对需求进行工作量评估; 2、参加项目相关的需求、设计、投产手册等文档的编写; 3、依据进度方案,完成所担当功能模块的设计、开发、单元测试、联调测试; 4、协作测试组修复代码缺陷,确保功能实现与代码质量; 5、负责所担当功能模块投产、部署,及上线后的日常维护; 6、完成项目经理或者架构师支

3、配的其他工作; 任职资格: 1、本科以上学历,计算机相关专业,两年以上大数据开发阅历; 2、熟识Linu_ 环境,把握shell或python; 3、娴熟使用hadoop,hive,HBase,YARN,kafka,spark等大数据开发组件; 4、精通 ETL,数据仓库的设计和开发; 5、有大数据处理实战阅历,熟识整个大数据的完整处理流程,包括数据的采集、清洗、存储; 6、较强的动手力量和学习力量,良好的沟通力量、团队协调力量; 7、具有银行、金融行业从业背景者优先。 大数据平台架构师岗位职责篇3 职责: 1.负责企业数据中心建设,设计数据规律模型和物理模型,并完成相关开发 2.梳理公司各业

4、务线常用的指标和维度,统一指标定义口径 3.依据数据应用开发和数据分析需求,设计数据仓库信息层模型,提高数据开发的效率 4.负责数据模型的运营和优化,准时响应业务规律变更,保证模型的数据质量和稳定性 5.负责公司数据标签体系的建设,并推动标签体系在实际业务场景中落地 岗位要求: 1.5年以上DW/BI数据架构设计、模型设计和性能调优等相关阅历 2.有较强的数据分析力量,精通数据仓库架构,熟识Erwin或PowerDesiQ/Apache Pulsar,有解读相关源码者优先; 4、把握hadoop、spark生态体系相关产品的使用,把握MapReduce编程或Spark编程; 5、了解传统数据仓

5、库理论及相关ETL工具,例如kettle/datastaonysql数据库的使用; 7、扎实的Java语言基础,熟识Java开发工具和调试工具的使用; 8、良好的团队协作精神,有力量对团队在软件设计、实现和测试方面进行指导; 9、良好的规律分析力量和沟通力量,执行力强、对待工作仔细严谨、责任心强、具备精彩的学习力量和团队合作精神,有肯定的推动力量; 10、计算机科学、信息技术或相关领域本科以上学历,具有5年以上数据平台项目开发阅历,3年以上的架构设计阅历,具有大数据平台应用大型项目架构设计阅历优先; 大数据平台架构师岗位职责篇6 职责: 1、负责大数据开发团队建设; 2、负责行业大数据产品架构

6、设计与研发; 3、负责带领团队进行行业大数据产品关键技术攻关。 任职要求: 1、有三年以上大数据应用、开发阅历;具备海量数据加工处理(ETL)相关阅历,对数据挖掘及机器学习有较为深刻的理解; 2、熟识Hadoop相关技术,对HDFS、MapReduce、Hive、HBase有肯定的使用和开发阅历; 3、熟识Linu_,娴熟使用Shell或Python,进行脚本编写; 4、对数据结构和数据统计分析算法有较为深刻理解; 5、把握至少一种主流关系数据库开发技术:Oracle、SQL Server、MySQL等; 6、把握实时流计算技术,有Spark、Storm开发阅历者优先; 7、需要具备2年以上研

7、发团队管理阅历。 大数据平台架构师岗位职责篇7 职责: 1)负责公司软件产品整体架构的设计和关键功能实现 2)负责公司架构长期看护以及优化; 3)负责软件部门各模组间的协调协作; 4)提高巩固软件代码质量; 5)负责大数据流式框架的设计、优化及部署; 6)规划研发部门员工的技术进展路线并供应必要的关心和指导 任职资格: 1)本科及以上学历,计算机相关专业,5年以上工作阅历; 2)频繁换工作,比如一年一个公司,请绕路; 3)3年以上产品架构阅历,主导过产品的胜利上线; 4)对底层设备通讯协议,B/S系统,手机APP开发等都有肯定的了解; 5)对各种主流语言C#JavaPathon有肯定的了解 5

8、)精通各种大数据架构,并深化讨论过其中一种,有stormkafka等流式实时处理阅历为佳 6)能够担当较强的工作压力,有良好的自我驱动力量和责任感; 7)具备优秀的规律思维力量、表达力量、沟通协调力量。 大数据平台架构师岗位职责篇8 职责: 1、搭建基于Hadoop/Spark的数据挖掘体系和大数据分析系统架构; 2、讨论大数据领域前沿数据挖掘技术,并引入相应技术在数据中心的使用; 3、进行大数据系统框架设计、模型算法开发; 4、负责大型数据挖掘项目方案制定、项目实施落地及优化等 ; 5、开展数据爬取、聚类分析、舆情分析、鱼骨图分析、定价策略等领域数据挖掘工作; 任职资格: 1、本科以上学历(

9、持有学士学位)(985,211优先),计算机相关专业,五年工作阅历; 2、二年以上数据挖掘项目阅历,完整参加过数据挖掘大数据平台的架构开发过程,具备互联网行业背景优先; 3、精通分布式计算框架(hadoop、spark、Storm等)及相关阅历,娴熟把握Hive/SQL,Python,熟识Python、R相关数值科学计算库(NumPy,SciPy等); 4、了解传统的BI/DW 理论,能结合传统BI实践设计大数据平台; 5、熟识常用机器学习算法(如分类、回归、聚类、关联规章等)及其原理,具备应用场景阅历,如用户画像、商品关联度分析、舆情分析; 6、熟识主数据、元数据、数据质量、和数据建模等数据

10、治理相关的体系和方法; 7、具备较强的规律思维力量、数据敏感度,擅于利用数据发觉问题及解决问题; 大数据平台架构师岗位职责篇9 职责: 1. 深刻理解政府行业业务模式,构建政府行业的数据模型,制定公司大数据技术进展路线; 2. 对接业务讨论和技术部门,主动搜集和转化需求,组织数据中心业务开发,进行数据相关产品需求分析和设计; 3. 搭建数据仓库,研发数据库管理系统,搜集、提取、处理业务积累的海量数据,开展数据分析和挖掘; 4. 依据公司战略和进展需要,规划数据中心重点工作和任务;落实部门人员、事务管理,开展跨部门、跨地区协作,帮助对外沟通与合作。 职位要求: 1. 5年以上相关工作阅历,有团队

11、管理和项目管理阅历者优先; 2.了解政府运作机制,把握财政行业学问,有电子政务行业阅历者优先; 3. 娴熟把握使用Java或Python,精通数据库查询语言如SQL,Oracle等,在机器学习模型和算法方向有应用阅历者优先; 4. 具备数据中心产品策划整体思维,有大数据处理、分析、挖掘阅历者优先; 5. 规律思维严密,具备业务抽象、分解和标准化的力量,口头和书面表达优秀; 6. 有较强的大局意识和良好的团队合作意识,富有领导力,具备优秀的人际交往和沟通力量。 大数据平台架构师岗位职责篇10 职责: 1、 基于公司大数据基础和数据资产积累,负责大数据应用整体技术架构的设计、优化,建设大数据力量开

12、放平台;负责大数据应用产品的架构设计、技术把控工作。 2、 负责制定大数据应用系统的数据平安管控体系和数据使用规范。 3、 作为大数据技术方案到产品实现的技术负责人,负责关键技术点攻坚工作,负责内部技术推广、培训及学问转移工作。 4、 负责大数据系统研发项目任务规划、整体进度、风险把控,有效协同团队成员并组织跨团队技术协作,保证项目质量与进度。 5、 负责提升产品技术团队的技术影响力,针对新人、一般开发人员进行有效辅导,关心其快速成长。 任职资格: 1、 计算机、数学或相关专业本科以上学历,5-20_年工作阅历,具有大型系统的技术架构应用架构数据架构相关的实践工作阅历。 2、 有分布式系统分析及架构设计阅历,熟识基于计算集群的软件系统架构和实施阅历。 3、 把握Hadoop/Spark/Storm生态圈的主流技术及产品,深化了解Hadoop/Spark/Storm生态圈产品的工作原理及应用场景。 4、 把握Mysql/Oracle等常用关系型数据库,能够对SQL进行优化。 5、 熟识分布式系统基础设施中常用的技术,如缓存(Varnish、Memcache、Redis)、消息中间件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有实践阅历者优先。 6、 熟识Linu_,Java基础扎实,至少3-5年以上Java应用开发阅历,熟识常用的设计模式和开源框架。

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 技术资料 > 其他杂项

本站为文档C TO C交易模式,本站只提供存储空间、用户上传的文档直接被用户下载,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有。本站仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。若文档所含内容侵犯了您的版权或隐私,请立即通知淘文阁网,我们立即给予删除!客服QQ:136780468 微信:18945177775 电话:18904686070

工信部备案号:黑ICP备15003705号© 2020-2023 www.taowenge.com 淘文阁