5大数据技术岗位要求
【一】大数据技术架构专家岗位职责岗位要求
职责描述:
1。负责企业级数据中心规划、架构设计、组件封装及疑难技术问题解决
2。深入了解企业级数据中心需求,进行整体架构设计、技术选型、关键核心模块研发、问题解决
3。针对具体业务需求提出合适的算法解决方案,应用先进的统计建模、数据挖掘、机器学习等方法建立数据模型,优化算法,推动解决方案在业务系统中的落地。算法包括但不限于机器学习、推荐算法、自然语言处理等;
4。负责项目从模型技术设计、数据抽取和清洗、数据推导和转换、模型开发、模型验证评估到最终模型实现的整个生命周期,解决不同场景下的业务问题,包括但不限于客户画像、精准营销、业务预测、路线规划、路线优化等
资格:
1。精通java、scala、python、sql、r等至少2到3种开发语言
2。熟练掌握cdh、ambari、yarn/mesos、zookeeper等安装、配置及参数调优,有中大型项目故障排查的实践经验
3。精通hadoop、spark、storm、flink、kylin、druid等大数据计算技术,有中大型项目故障排除实践经验
4。精通hdfs、hbase、hive、elasticsearch、casandra、mongodb等大数据存储技术的安装、配置和性能调优,有中大型项目故障排查的实践经验
5。精通kafka、nifi、flume、sqoop等大数据集成技术的安装、配置和性能调优,有中大型项目故障排查的实践经验
6。精通redis、ignite、geode等分布式缓存和数据网格技术的安装、配置和性能调优,有中大型项目故障排查的实践经验
7。精通impala、spark sql、drill等大数据即席查询技术,有中大型项目排查故障的实践经验
8。精通数据库技术,对mysql等数据库使用有一定的了解和经验
9。熟悉docker/kubernetes等大数据分布式集群技术安装、配置、性能调优者优先
10。熟悉jmx大数据监控管理技术,有相关开源监控管理组件使用经验者优先
11。有企业数据中心建设、实施、开发经验者优先
12。有zepplin、jupyter note等实际应用开发经验者优先
13。有janusgraph、openstsdb等实际应用开发经验者优先
14。有tensorflow安装、配置、调优和实际应用开发经验者优先
15。具备良好的业务敏感性、数据敏感性和优秀的数据分析能力,能够开发创新实用的分析方法解决复杂的业务问题,注重业务逻辑和数据逻辑的结合,脚踏实地、接地气。你一定要有很强的落地能力
16。熟悉常见的机器学习和数据挖掘算法,包括但不限于gbdt、随机森林、支持向量机、逻辑回归和深度学习算法
17。良好的沟通能力和团队合作精神,能够协同工作,愿意为团队成员提供技术指导和帮助
18。有BAT或知名互联网或高科技公司数据挖掘经验、大数据系统或平台架构师优先
19。为开源社区贡献过补丁的申请者将优先考虑
职位要求:
学历要求:大专学历
语言要求:无限制
年龄要求:不限
工作经验:8-9年经验
【二】大数据技术经理岗位职责及岗位要求
大数据技术经理岗位职责
大数据技术经理职位描述:
1。主要负责产品和项目开发管理,带领团队保质保量完成开发任务;
2。参与产品需求分析、架构设计、技术选型等,参与技术框架搭建;
3。负责项目开发流程管理和核心代码编写;
4。负责制定相关技术方案,解决开发过程中的技术问题;
5。负责对外产品技术支持
职位要求:
1。具有2-3年技术管理经验,参与过企业级产品开发过程;
2。精通java,熟悉spring mvc开发架构
3。精通hadoop生态系统中的常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp的实际应用经验;
4。精通Linux平台,熟悉shell、python中的一种或多种;
5。熟悉系统部署、开发、测试、维护流程和方法;
6。能够跟进项目进展,及时管理项目风险,及时发现和解决项目问题,推动项目团队朝着目标前进;
7。综合素质高,有良好的执行力和责任感,较强的组织能力和沟通能力;
8。有pmp证书者优先。
职位描述:
1。主要负责产品和项目开发管理,带领团队保质保量完成开发任务;
2。参与产品需求分析、架构设计、技术选型等,参与技术框架搭建;
3。负责项目开发流程管理和核心代码编写;
4。负责制定相关技术方案,解决开发过程中的技术问题;
5。负责对外产品技术支持
职位要求:
1。具有2-3年技术管理经验,参与过企业级产品开发过程;
2。精通java,熟悉spring mvc开发架构
3。精通hadoop生态系统中的常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp的实际应用经验;
4。精通Linux平台,熟悉shell、python中的一种或多种;
5。熟悉系统部署、开发、测试、维护流程和方法;
6。能够跟进项目进展,及时管理项目风险,及时发现和解决项目问题,推动项目团队朝着目标前进;
7。综合素质高,有良好的执行力和责任感,较强的组织能力和沟通能力;
8。有pmp证书者优先。
大数据技术经理职位
【第三部分】大数据技术经理岗位描述及岗位职责岗位要求
岗位描述:
工作职责:
1。管理项目团队整体技术,根据业务需求分析实施方案和数据计算
2、指导团队成员,负责项目组成员的建设和管理
3。负责完成项目相关技术的设计并参与团队项目代码评审
4。规划项目组的大数据技术体系以及团队成员的技术成长
职位要求:
1。计算机、数学、工程或相关专业本科及以上学历。硕士优先
2、5年以上大数据开发经验或数据仓库/模型/报表开发经验
3、丰富的大中型大数据架构/数据仓库项目规划、方案设计、实施经验
4、熟悉hadoop生态系统的各个组件、系统和引擎
5。参与过商业项目大数据平台建设者优先
6、良好的学习能力和对前沿技术发展的极大好奇心
7、逻辑思维能力强,思路清晰,良好的沟通协调能力
【第四部分】大数据技术开发岗位职责描述及岗位职责及岗位要求
职位描述:
职责描述:
1。负责与各业务线业务部门沟通,分析处理业务相关数据;
2。负责特殊数据的业务逻辑分析和数据挖掘,充分了解挖掘用户需求,并负责构建数据挖掘模型;
3。负责大数据应用开发、数据采集与处理、数据分析等领域;
4。参与大数据应用项目建设,包括项目开发和项目管理;
5。跟踪大数据领域技术应用趋势,开展技术研究,强化大数据应用能力。
职位要求:
1。本科及以上学历,计算机相关专业;
2。 3年以上相关行业工作经验,2年以上软件开发经验;有互联网金融、金融行业、大数据行业开发经验者优先;
3。精通一门编程语言,如java、vc、python等,熟悉当前互联网前沿技术,对tomcat、nginx服务器、常用Linux命令的使用有一定的实践经验。了解或熟悉数据仓库建模,擅长业务系统的数据分析;具有证券从业资格;
4。具有良好的职业心态,包括高度的责任心、踏实的工作作风、较强的学习能力、良好的团队合作精神、勇于接受压力和挑战、较强的沟通表达能力、组织协调能力和文档记录能力能力强,善于总结经验、探索思路、勇于创新等
【第五部分】大数据技术总监岗位描述及岗位职责岗位要求
岗位描述:
职责描述:
1。负责大数据车间部门的管理,建立、管理和领导团队承担公司大数据技术研发相关工作;
2。负责牵头研究制定市级大数据技术体系规划、跨领域多维度平台的数据标准制定和建模;制定大数据技术路线;
3。负责牵头研究制定大横琴科技企业级大数据技术体系规划、数据标准制定及建模;
4。参与跨领域多维城市大数据云平台项目,全面负责大数据平台系统建设、关键技术选型和实施;
5。负责数据建模相关关键算法研究及核心代码实现;
6。负责城市和企业数据资产建设,包括采集、清洗、管理、对外共享服务;
7。负责数据资产运营,挖掘数据资产价值,对外提供数据服务;
8。负责跟踪研究前沿大数据技术,跟踪行业平台产品及相关解决方案。
职位要求:
1。教育背景:数学/统计学/计算机相关专业硕士及以上优先;
2。工作经验:5年以上大数据/人工智能相关工作经验,10人以上团队管理经验,有2个以上大型数据平台实施经验者优先;
3。知识和技能:
(1)对业务数据和业务敏感,具有密切跟踪业务运营和发展的数据运营经验,例如BI、数据分析和挖掘;在用户行为日志采集、海量数据处理、数据建模、业务理解等方面拥有丰富的经验;
(2)对业务数据模型、数据仓库、数据分析、数据挖掘等整个大数据系统的架构有清晰的思路和实施方案,对数据服务和数据的模型有清晰的认识产品,并能够带领团队实施;
(3)熟悉至少一种编程语言,如:java、python、r、shell、sql等;熟悉当前主流开源数据平台和工具以及数据云服务,如:hadoop、hbase、spark等;并具有动手能力;
(4)具有很强的学习能力,良好的逻辑思维能力,较强的抽象、概括、总结能力;良好的沟通能力,善于主动思考和行动,愿意解决具有挑战性的问题;