大数据架构师工作的岗位职责.docx

上传人:wj151****6093 文档编号:81293540 上传时间:2023-03-24 格式:DOCX 页数:11 大小:14.67KB
返回 下载 相关 举报
大数据架构师工作的岗位职责.docx_第1页
第1页 / 共11页
大数据架构师工作的岗位职责.docx_第2页
第2页 / 共11页
点击查看更多>>
资源描述

《大数据架构师工作的岗位职责.docx》由会员分享,可在线阅读,更多相关《大数据架构师工作的岗位职责.docx(11页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。

1、大数据架构师工作的岗位职责大数据架构师负责研发技术发展方向,新技术领域的探究,将新技术应用到公司大数据平台,提升公司效能。下面是第一范文网小编整理的大数据架构师工作的岗位职责。大数据架构师工作的岗位职责1职责:1、负责大数据平台技术框架的技术选型和搭建;2、负责核心技术问题公关,建设高牢靠性,扩展性及高性能大数据/数据应用平台;3、负责规划数据挖掘的整体流程,负责大数据开发团队业务需求开发;4、与其他团队亲密协作,寻求数据层面的业务价值,利用数据分析结论推动产品优化;5、探讨和共享大数据架构领域新技术。任职要求:1、计算机相关专业全日制统招本科及以上;2、5年以上工作阅历,至少3年以上大数据项

2、目相关工作阅历,能够设计大型大数据系统的架构和技术方案;3、精通Hadoop/Spark/Hbase/Hive等大数据技术,精通ETL技术;4、熟识数据挖掘,了解典型大数据算法和策略;5、熟识主流Java技术框架,精通关系型数据库及SQL语言,熟识NoSQL/JSON/XML;6、有较强的学习实力和问题解决实力,逻辑严密、思路清楚;7、有数据仓库阅历者优先,有金融行业项目阅历者优先。大数据架构师工作的岗位职责2职责:1、负责DMP技术架构设计与构建,依据业务规划及技术规划制定应用架构方案;2、负责设计构建DMP数据采集、存储及分析框架,设计数据处理的技术流程和规范;3、负责核心功能的架构与代码

3、模板编写,开发与维护系统公用核心模块;4、负责基于大数据技术的海量数据的自动化分析处理和统计工作。岗位要求:1、计算机或相关专业本科以上学历,三年以上的开发阅历,二年以上大数据相关软件架构的实际阅历;2、精通大数据处理技术,熟识Hadoop/Storm技术体系,有Hadoop、Hive、Hbase项目阅历;3、具有较强的架构实力,具有分布式计算、实时计算、数据仓库、数据挖掘系统的架构经验优先;4、对数据敏感,洞察力强,了解国内外广告发展趋势;5.、擅长系统分析与设计,精通常用的设计模式,擅长性能调优;6、熟识DMP/RTB技术原理,了解用户的行为分析及建模;有RTB/DSP/SSP/EXCHA

4、NGE/DMP等广告行业从业经验。大数据架构师工作的岗位职责3职责:1、负责spark, hadoop, flink等开发和优化。2、参加前期需求沟通和分析,以产品化开发的思维,完成需求分解和数据架构设计。3、与研发和数据科学家合作保证产品定义清楚,按时完成产品上线。4、能够洞察市场状况,与各部门合作转化为基于大数据挖掘的新策略或方案.5、主动创建和发掘新的基于大数据挖掘产品商业模式.任职要求:1、全日制本科及以上学历,计算机软件相关专业,5年以上开发阅历,3年以上架构阅历2、精通hadoop/MapReduce/Spark/Hbase/Flink/Hive/R/Mahout等分布式数据存储和

5、分布式计算平台原理,流式计算开发,有开源二次开发阅历者优先。3、精通大数据挖掘、机器学习.娴熟驾驭Java/Perl/Python至少一种编程语言。4、具有数据挖掘和分析、机器学习等项目实施相关阅历者优先;5、良好的跨部门沟通合作实力,解决不同观点实力并取得结果。具备敏锐的互联网产品理解力,学习实力和逻辑思维实力强;6、较强的自我驱动力、推动和协调实力,剧烈的责任心和团队合作精神;大数据架构师工作的岗位职责4职责1、负责大数据架构设计,包括定义数据的存储、集成(ETL)、应用,支撑业务运营和数据分析类需求实现;2、制定数据治理领域的数据体系化管理措施,包括元数据设计、数据标准、数据质量、数据处

6、理、数据平安等工作,确保数据可信与平安;3、基于行业数据积累,满意业务的数据挖掘需求,实现从数据到资产的转变,依据目标行业建立具有前瞻性的数据模型;4、对各产品的数据平安负责,主导制定和实施数据库系统平安策略,保证整体方案数据平安;岗位要求业务技能要求:1、深化理解云化、数据仓库,在参加过的系统设计中,必需涉及这两项关键技术;n2、精通或者熟识Hadoop体系架构,以及HDFS/HBase/Hive/MapReduce/Spark等技术,了解体系架构各组件的优缺点,有干脆的产品设计与开发、部署、调优的阅历;3、精通或熟识常见RDBMS(Oracle / PostgreSQL / MySql)、

7、NoSQL(Redis / Memcached/ MongoDB)、全文搜寻引擎(Solr/ElasticSearch)的运用及开发,了解各数据库优缺点, 熟识与架构设计相关的数据存储、性能调优等相关领域学问,有相关项目阅历尤佳;4、熟识业界常用的数据采集、集成、数据存储、计算、数据模型、数据分析的技术方案,具有数据分析或数据挖掘相关阅历者优先;n5、熟识数据治理相关流程,包括数据接入、数据处理、数据治理、数据组织、数据服务等。专业学问要求:1、具备数据治理的学问与体系方案,包含政策、组织、角色、流程、规范等,以及规划相应的支撑方案。了解业界的数据管理方法论;2、具备数据用例设计和开发实力。能

8、够基于业务相关数据进行业务需求分析和痛点识别,将业务需求转化为数据的需求,完成数据用例的设计和开发;3、精通海量数据(日增量百亿)级别数据仓库、数据集市的构建流程。熟识公安、政务、工业、交通、医疗等多行业业务者优先。大数据架构师工作的岗位职责5职责:1. 负责大数据平台的基础技术规划,编制相关规范文档。2. 负责大数据平台的数据采集,处理,存储以及挖掘分析的架构实现。3. 负责大数据平台的实际规划建设,包括环境和框架的规划搭建以及部分核心编码工作。4. 负责大数据相关技术发展方向的预研。5. 参加业务需求调研,依据需求及行业特点设计大数据解决方案并跟进详细实施项目。6. 制定大数据平台中数据质

9、量,业务质量监控及管理方法。岗位要求:1. 全日制本科及以上学历,5年以上工作阅历,4年及以上大数据架构设计阅历,熟识大数据解决方案,包括Hadoop平台、Spark、storm、机器学习、深度学习等大数据解决方案。2. 深刻理解大数据处理(流计算、分布式计算、分布式文件系统、分布式存储等相关技术)实现方法。有架构和设计实践阅历。3. 精通大型数据库Oracle、SqlServer等的开发。4. 精通java,Python中的一种或多种语言。5. 熟识容器、虚拟化、微服务框架等相关技术。6. 对数据敏感,有严谨的工作思路,良好的沟通实力和团队合作精神。7. 熟识R,Python,SAS、SPSS等数据挖掘阅历者优先。8. 高宽展性,高性能,和分布式系统的实践及运维阅历者优先。9. 有大型数据仓库实施、大数据平台数据开发阅历,熟识运营商业务者优先。

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 应用文书 > 工作报告

本站为文档C TO C交易模式,本站只提供存储空间、用户上传的文档直接被用户下载,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有。本站仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。若文档所含内容侵犯了您的版权或隐私,请立即通知淘文阁网,我们立即给予删除!客服QQ:136780468 微信:18945177775 电话:18904686070

工信部备案号:黑ICP备15003705号© 2020-2023 www.taowenge.com 淘文阁