5大数据技术岗位要求

2023-10-11 21:45

【一】大数据技术架构专家岗位职责岗位要求

职责描述:

1。负责企业级数据中心规划、架构设计、组件封装及疑难技术问题解决

2。深入了解企业级数据中心需求,进行整体架构设计、技术选型、关键核心模块研发、问题解决

3。针对具体业务需求提出合适的算法解决方案,应用先进的统计建模、数据挖掘、机器学习等方法建立数据模型,优化算法,推动解决方案在业务系统中的落地。算法包括但不限于机器学习、推荐算法、自然语言处理等;

4。负责项目从模型技术设计、数据抽取和清洗、数据推导和转换、模型开发、模型验证评估到最终模型实现的整个生命周期,解决不同场景下的业务问题,包括但不限于客户画像、精准营销、业务预测、路线规划、路线优化等

资格:

1。精通java、scala、python、sql、r等至少2到3种开发语言

2。熟练掌握cdh、ambari、yarn/mesos、zookeeper等安装、配置及参数调优,有中大型项目故障排查的实践经验

3。精通hadoop、spark、storm、flink、kylin、druid等大数据计算技术,有中大型项目故障排除实践经验

4。精通hdfs、hbase、hive、elasticsearch、casandra、mongodb等大数据存储技术的安装、配置和性能调优,有中大型项目故障排查的实践经验

5。精通kafka、nifi、flume、sqoop等大数据集成技术的安装、配置和性能调优,有中大型项目故障排查的实践经验

6。精通redis、ignite、geode等分布式缓存和数据网格技术的安装、配置和性能调优,有中大型项目故障排查的实践经验

7。精通impala、spark sql、drill等大数据即席查询技术,有中大型项目排查故障的实践经验

8。精通数据库技术,对mysql等数据库使用有一定的了解和经验

9。熟悉docker/kubernetes等大数据分布式集群技术安装、配置、性能调优者优先

10。熟悉jmx大数据监控管理技术,有相关开源监控管理组件使用经验者优先

11。有企业数据中心建设、实施、开发经验者优先

12。有zepplin、jupyter note等实际应用开发经验者优先

13。有janusgraph、openstsdb等实际应用开发经验者优先

14。有tensorflow安装、配置、调优和实际应用开发经验者优先

15。具备良好的业务敏感性、数据敏感性和优秀的数据分析能力,能够开发创新实用的分析方法解决复杂的业务问题,注重业务逻辑和数据逻辑的结合,脚踏实地、接地气。你一定要有很强的落地能力

16。熟悉常见的机器学习和数据挖掘算法,包括但不限于gbdt、随机森林、支持向量机、逻辑回归和深度学习算法

17。良好的沟通能力和团队合作精神,能够协同工作,愿意为团队成员提供技术指导和帮助

18。有BAT或知名互联网或高科技公司数据挖掘经验、大数据系统或平台架构师优先

19。为开源社区贡献过补丁的申请者将优先考虑

职位要求:

学历要求:大专学历

语言要求:无限制

年龄要求:不限

工作经验:8-9年经验

【二】大数据技术经理岗位职责及岗位要求

大数据技术经理岗位职责

大数据技术经理职位描述:

1。主要负责产品和项目开发管理,带领团队保质保量完成开发任务;

2。参与产品需求分析、架构设计、技术选型等,参与技术框架搭建;

3。负责项目开发流程管理和核心代码编写;

4。负责制定相关技术方案,解决开发过程中的技术问题;

5。负责对外产品技术支持

职位要求:

1。具有2-3年技术管理经验,参与过企业级产品开发过程;

2。精通java,熟悉spring mvc开发架构

3。精通hadoop生态系统中的常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp的实际应用经验;

4。精通Linux平台,熟悉shell、python中的一种或多种;

5。熟悉系统部署、开发、测试、维护流程和方法;

6。能够跟进项目进展,及时管理项目风险,及时发现和解决项目问题,推动项目团队朝着目标前进;

7。综合素质高,有良好的执行力和责任感,较强的组织能力和沟通能力;

8。有pmp证书者优先。

职位描述:

1。主要负责产品和项目开发管理,带领团队保质保量完成开发任务;

2。参与产品需求分析、架构设计、技术选型等,参与技术框架搭建;

3。负责项目开发流程管理和核心代码编写;

4。负责制定相关技术方案,解决开发过程中的技术问题;

5。负责对外产品技术支持

职位要求:

1。具有2-3年技术管理经验,参与过企业级产品开发过程;

2。精通java,熟悉spring mvc开发架构

3。精通hadoop生态系统中的常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp的实际应用经验;

4。精通Linux平台,熟悉shell、python中的一种或多种;

5。熟悉系统部署、开发、测试、维护流程和方法;

6。能够跟进项目进展,及时管理项目风险,及时发现和解决项目问题,推动项目团队朝着目标前进;

7。综合素质高,有良好的执行力和责任感,较强的组织能力和沟通能力;

8。有pmp证书者优先。

大数据技术经理职位

【第三部分】大数据技术经理岗位描述及岗位职责岗位要求

岗位描述:

工作职责:

1。管理项目团队整体技术,根据业务需求分析实施方案和数据计算

2、指导团队成员,负责项目组成员的建设和管理

3。负责完成项目相关技术的设计并参与团队项目代码评审

4。规划项目组的大数据技术体系以及团队成员的技术成长

职位要求:

1。计算机、数学、工程或相关专业本科及以上学历。硕士优先

2、5年以上大数据开发经验或数据仓库/模型/报表开发经验

3、丰富的大中型大数据架构/数据仓库项目规划、方案设计、实施经验

4、熟悉hadoop生态系统的各个组件、系统和引擎

5。参与过商业项目大数据平台建设者优先

6、良好的学习能力和对前沿技术发展的极大好奇心

7、逻辑思维能力强,思路清晰,良好的沟通协调能力

【第四部分】大数据技术开发岗位职责描述及岗位职责及岗位要求

职位描述:

职责描述:

1。负责与各业务线业务部门沟通,分析处理业务相关数据;

2。负责特殊数据的业务逻辑分析和数据挖掘,充分了解挖掘用户需求,并负责构建数据挖掘模型;

3。负责大数据应用开发、数据采集与处理、数据分析等领域;

4。参与大数据应用项目建设,包括项目开发和项目管理;

5。跟踪大数据领域技术应用趋势,开展技术研究,强化大数据应用能力。

职位要求:

1。本科及以上学历,计算机相关专业;

2。 3年以上相关行业工作经验,2年以上软件开发经验;有互联网金融、金融行业、大数据行业开发经验者优先;

3。精通一门编程语言,如java、vc、python等,熟悉当前互联网前沿技术,对tomcat、nginx服务器、常用Linux命令的使用有一定的实践经验。了解或熟悉数据仓库建模,擅长业务系统的数据分析;具有证券从业资格;

4。具有良好的职业心态,包括高度的责任心、踏实的工作作风、较强的学习能力、良好的团队合作精神、勇于接受压力和挑战、较强的沟通表达能力、组织协调能力和文档记录能力能力强,善于总结经验、探索思路、勇于创新等

【第五部分】大数据技术总监岗位描述及岗位职责岗位要求

岗位描述:

职责描述:

1。负责大数据车间部门的管理,建立、管理和领导团队承担公司大数据技术研发相关工作;

2。负责牵头研究制定市级大数据技术体系规划、跨领域多维度平台的数据标准制定和建模;制定大数据技术路线;

3。负责牵头研究制定大横琴科技企业级大数据技术体系规划、数据标准制定及建模;

4。参与跨领域多维城市大数据云平台项目,全面负责大数据平台系统建设、关键技术选型和实施;

5。负责数据建模相关关键算法研究及核心代码实现;

6。负责城市和企业数据资产建设,包括采集、清洗、管理、对外共享服务;

7。负责数据资产运营,挖掘数据资产价值,对外提供数据服务;

8。负责跟踪研究前沿大数据技术,跟踪行业平台产品及相关解决方案。

职位要求:

1。教育背景:数学/统计学/计算机相关专业硕士及以上优先;

2。工作经验:5年以上大数据/人工智能相关工作经验,10人以上团队管理经验,有2个以上大型数据平台实施经验者优先;

3。知识和技能:

(1)对业务数据和业务敏感,具有密切跟踪业务运营和发展的数据运营经验,例如BI、数据分析和挖掘;在用户行为日志采集、海量数据处理、数据建模、业务理解等方面拥有丰富的经验;

(2)对业务数据模型、数据仓库、数据分析、数据挖掘等整个大数据系统的架构有清晰的思路和实施方案,对数据服务和数据的模型有清晰的认识产品,并能够带领团队实施;

(3)熟悉至少一种编程语言,如:java、python、r、shell、sql等;熟悉当前主流开源数据平台和工具以及数据云服务,如:hadoop、hbase、spark等;并具有动手能力;

(4)具有很强的学习能力,良好的逻辑思维能力,较强的抽象、概括、总结能力;良好的沟通能力,善于主动思考和行动,愿意解决具有挑战性的问题;