大数据技术岗位职责

时间:2023-01-14 08:16:46 岗位职责 我要投稿

大数据技术岗位职责

  在日常生活和工作中,人们运用到岗位职责的场合不断增多,制定岗位职责可以减少违章行为和违章事故的发生。到底应如何制定岗位职责呢?以下是小编收集整理的大数据技术岗位职责,希望能够帮助到大家。

大数据技术岗位职责

大数据技术岗位职责1

  职位描述:

  职责描述:

  基于flink开源大数据计算平台,在阿里集团整体业务场景下,

  1.研发实时流计算数据研发平台,支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务;

  2.研发实时olap(elasticsearch,druid)赋能业务

  3.研发实时智能化(算法加工程)赋能业务

  任职要求:

  1.具备扎实的计算机理论基础,对数据结构及算法有较强的功底

  2.精通java语言编程,具备优秀的系统debug/profiling能力和经验

  3.熟悉常见的面向对象设计模式,具备优秀的系统架构设计能力

  4.熟悉hadoop/hbase/flink/sparkstreaming等开源大数据技术,在开源社区活跃者优先

  5.熟悉elasticsearch/druid等olap开源技术优先

  6.具备实际的大数据业务开发经验以及良好的项目沟通和协调能力

  7.具备实时流计算数据开发经验、全栈开发经验优先

大数据技术岗位职责2

  大数据技术经理工作职责:

  1、参与打造数据中内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享;

  2、参与数据模型体系构建及数据主题设计和开发,搭建离线、实时数据公共层;

  3、参与数据产品与应用的数据研发,发掘数据商业价值,打造良好体验的数据产品;

  4、深入理解数据产品的使用场景,为业务方在可用性、成本上做更好的设计做参考。;

  5、团队成员的搭建与培养,任务划分,进度监控,代码规范,质量保证。

  任职要求:

  1、熟悉数据仓库建模理论,5年以上相关领域实践经验;

  2、hadoop、hive、hbase、storm、spark等技术框架;

  3、精通java、python、scala、go等开发语言中的1到2种;

  4、熟练使用python/java/scala或其他语言进行复杂业务逻辑的数据处理工作,具备海量数据处理以及性能优化的能力;

  5、对mysql、redis、hbase等数据库有一定的了解和使用经验;

  6、对olap,多维分析及kylin熟悉的更好;

  7、思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力;

  8、对新技术,新事物有很好的探索和求知欲;

  9、熟悉常规的机器学习算法:降维(pca、svd)、svm、逻辑回归(logisticsregression)、决策树(gbdt、randomforest)、关联规则(apriori、fp-growth)、聚类(k-means)等优先。工作职责:

  1、参与打造数据中内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享;

  2、参与数据模型体系构建及数据主题设计和开发,搭建离线、实时数据公共层;

  3、参与数据产品与应用的数据研发,发掘数据商业价值,打造良好体验的数据产品;

  4、深入理解数据产品的使用场景,为业务方在可用性、成本上做更好的设计做参考。;

  5、团队成员的搭建与培养,任务划分,进度监控,代码规范,质量保证。

  任职要求:

  1、熟悉数据仓库建模理论,5年以上相关领域实践经验;

  2、hadoop、hive、hbase、storm、spark等技术框架;

  3、精通java、python、scala、go等开发语言中的1到2种;

  4、熟练使用python/java/scala或其他语言进行复杂业务逻辑的数据处理工作,具备海量数据处理以及性能优化的能力;

  5、对mysql、redis、hbase等数据库有一定的了解和使用经验;

  6、对olap,多维分析及kylin熟悉的更好;

  7、思路清晰,具备良好的沟通能力和理解能力,较强的学习能力以及快速解决问题的能力;

  8、对新技术,新事物有很好的探索和求知欲;

  9、熟悉常规的机器学习算法:降维(pca、svd)、svm、逻辑回归(logisticsregression)、决策树(gbdt、randomforest)、关联规则(apriori、fp-growth)、聚类(k-means)等优先。

大数据技术岗位职责3

  职位描述:

  职责描述:

  基于flink开源大数据计算平台,在集团整体业务场景下,

  1.研发实时流计算数据研发平台,支持包括核心电商、云计算、大文娱、创新业务在内的等各个综合业务板块务;

  2.研发实时olap(elasticsearch,druid)赋能业务

  3.研发实时智能化(算法加工程)赋能业务

  任职要求:

  1.具备扎实的计算机理论基础,对数据结构及算法有较强的功底

  2.精通java语言编程,具备优秀的系统debug/profiling能力和经验

  3.熟悉常见的面向对象设计模式,具备优秀的系统架构设计能力

  4.熟悉hadoop/hbase/flink/sparkstreaming等开源大数据技术,在开源社区活跃者优先

  5.熟悉elasticsearch/druid等olap开源技术优先

  6.具备实际的.大数据业务开发经验以及良好的项目沟通和协调能力

  7.具备实时流计算数据开发经验、全栈开发经验优先

大数据技术岗位职责4

  职位描述:

  职责描述:

  1、负责大数据工作坊部门管理工作,组建、管理和带领团队承担公司大数据技术研发相关工作;

  2、负责牵头研究制定跨域多维平台城市级大数据技术体系规划、数据标准制定及建模等;制定大数据技术路线;

  3、负责牵头研究制定大横琴科技企业级大数据技术体系规划、数据标准制定及建模等;

  4、参与跨域多维城市大数据云平台项目,全面负责大数据平台系统搭建、关键技术选型及落地实施等工作;

  5、负责数据建模相关的关键算法研究,及核心代码实现;

  6、负责城市及企业数据资产建设,包括采集、清洗、管理、对外共享服务;

  7、负责数据资产运营,挖掘数据资产价值,对外提供数据服务;

  8、负责大数据前沿技术的追踪及研究,跟踪行业平台产品和相关解决方案。

  任职要求:

  1、教育背景:数学/统计学/计算机相关专业硕士研究生以上学历优先;

  2、工作经验:5年以上大数据/人工智能相关工作经验,有10人以上团队管理经验,具有2个以上大规模数据平台落地实施经验者优先;

  3、知识技能:

  (1)对业务数据和业务敏感,有紧密跟踪业务运营和发展的数据运营经验,比如bi、数据分析和挖掘;在用户行为日志采集、海量数据处理、数据建模、业务理解方面有丰富经验;

  (2)对业务数据模型、数据仓库、数据分析、数据挖掘等整个大数据系统的架构有清晰的思路和落地执行的方案,对数据服务、数据产品的模式有清晰的理解,并能带领团队实施;

  (3)至少熟悉一种编程语言,如:java、python、r、shell、sql等;熟悉当前主流的开源数据平台和工具以及数据云服务,如:hadoop、hbase、spark等;并具有hand-on能力;

  (4)具备非常强的学习能力、较好的逻辑思维能力,较强的抽象、概括、总结能力;较好的沟通交流能力,善于主动思考和行动,乐于解决具有挑战性的问题;

大数据技术岗位职责5

  大数据技术经理岗位职责

  大数据技术经理职位描述:

  1、主要负责产品和项目的开发管理工作,带领团队保质保量完成开发任务;

  2、参与产品需求分析、架构设计、技术选型等工作,参与技术框架构建;

  3、负责项目开发进程管理,核心代码编写;

  4、负责制定相关技术解决方案,解决开发中的技术问题;

  5、负责对外的产品技术支持

  任职要求:

  1、有2-3年的技术管理经验,参与过企业级产品研发过程;

  2、精通java、熟悉springmvc开发架构

  3、精通hadoop生态圈中常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp实际应用经验;

  4、精通linux平台,熟悉shell、python其一或多种;

  5、熟悉系统部署、开发、测试、维护过程与方法;

  6、能够及时地跟进项目进度、管理项目风险,及时发现并解决项目问题,推动项目团队朝目标前进;

  7、综合素质高,具有良好的执行力和责任心,有较强的组织能力和沟通能力;

  8、具有pmp证书优先。

  职位描述:

  1、主要负责产品和项目的开发管理工作,带领团队保质保量完成开发任务;

  2、参与产品需求分析、架构设计、技术选型等工作,参与技术框架构建;

  3、负责项目开发进程管理,核心代码编写;

  4、负责制定相关技术解决方案,解决开发中的技术问题;

  5、负责对外的产品技术支持

  任职要求:

  1、有2-3年的技术管理经验,参与过企业级产品研发过程;

  2、精通java、熟悉springmvc开发架构

  3、精通hadoop生态圈中常用技术,如hbase、hive、zookeeper、storm、spark等,有华为fi、腾讯tbds、cdh或hdp实际应用经验;

  4、精通linux平台,熟悉shell、python其一或多种;

  5、熟悉系统部署、开发、测试、维护过程与方法;

  6、能够及时地跟进项目进度、管理项目风险,及时发现并解决项目问题,推动项目团队朝目标前进;

  7、综合素质高,具有良好的执行力和责任心,有较强的组织能力和沟通能力;

  8、具有pmp证书优先。

  大数据技术经理岗位

大数据技术岗位职责6

  招银职责描述:

  1.负责租赁行业大数据平台架构规划、技术落地、与开发团队协同实施;

  2.负责需求调研、需求分析,编写需求分析说明书,负责项目全周期管理;

  3.组织uat测试方案制定、测试案例准备,负责测试环境搭建、以及对项目进行验收测试。

  任职要求:

  1.计算机软件或信息系统相关专业硕士以上学历;

  2.具有三年及以上大数据系统架构规划及系统建设相关的工作经验;

  3.精通大数据平台存储、计算及算法相关技术,精通机器学习相关模型与算法、或nlp或计算机图像识别等相关理论及技术,熟悉精益(敏捷)项目管理、瀑布式项目管理流程,有项目经验者优先;

  4.有强烈的技术思维及自我突破的欲望,性格外向、善于组织沟通、文字表达能力强。

大数据技术岗位职责7

  职责描述:

  1、负责企业级数据中台规划、架构设计、组件封装以及疑难技术问题解决

  2、深入理解企业级数据中台需求,进行整体架构设计、技术选型、关键核心模块的研发以及疑难问题解决

  3、针对具体业务需求提出合适的算法解决方案,应用先进的统计建模、数据挖掘,机器学习等方法建立数据模型,优化算法,推动该方案在业务系统的实现。算法包括但不限于机器学习,推荐算法,自然语言处理等;

  4、负责大数据应用项目的模型技术设计、数据提取清洗、数据衍生变换、模型开发、模型验证评估到最终模型实施的项目全生命周期,解决不同场景下的业务问题,包含但不限于客户画像、精准营销、业务预测、路由规划、线路优化等

  任职资格:

  1、精通java、scala、python、sql、r等开发语言中至少2到3种

  2、精通cdh、ambari、yarn/mesos、zookeeper等安装配置与参数调优,并在中大型项目中有troubleshooting的实际经验

  3、熟练掌握hadoop、spark、storm、flink、kylin、druid等大数据计算技术,并在中大型项目中有troubleshooting的实际经验

  4、熟练掌握hdfs、hbase、hive、elasticsearch、casandra、mongodb等大数据存储技术的安装配置与性能调优,并在中大型项目中有troubleshooting的实际经验

  5、熟练掌握kafka、nifi、flume、sqoop等大数据集成技术的安装配置与性能调优,并在中大型项目中有troubleshooting的实际经验

  6、熟练掌握redis、ignite、geode等分布式缓存和数据网格技术的安装配置与性能调优,并在中大型项目中有troubleshooting的实际经验

  7、熟练掌握impala、sparksql、drill等大数据即席查询技术,并在中大型项目中有troubleshooting的实际经验

  8、熟练掌握数据库技术,对mysql等数据库有一定的了解和使用经验

  9、熟悉docker/kubernetes等大数据分布式集群技术的安装配置与性能调优者优先

  10、熟悉jmx大数据监控管理技术,并具有相关开源监控管理组件的使用经验者优先

  11、有企业数据中台建设实施开发经验者优先

  12、有zepplin、jupyternote等实际应用开发经验者优先

  13、有janusgraph、opentsdb等实际应用开发经验者优先

  14、有tensorflow安装配置调优以及实际应用开发经验者优先

  15、具有良好的商业敏感度、数据敏感度和优秀的数据分析技能,能够开发创新而实际的分析方法以解决复杂的商业问题,注重业务逻辑与数据逻辑相结合,接地气意识和落地能力都要强

  16、熟悉常用机器学习和数据挖掘算法,包括但不限于gbdt、随机森林、支持向量机、logistic回归以及深度学习等算法

  17、良好的沟通能力和团队合作精神,能够协同工作,乐于在技术上指导帮助团队成员

  18、优先考虑具备bat或知名互联网或高科技公司数据挖掘以及大型数据系统或平台的架构设计者经验

  19、向开源社区贡献过patch者优先

  岗位要求:

  学历要求:大专

  语言要求:不限

  年龄要求:不限

  工作年限:8-9年经验

大数据技术岗位职责8

  职位描述:

  职责描述:

  1、负责面向各业务条线,与业务部门沟通,分析处理业务相关数据;

  2、负责专项数据的业务逻辑分析和数据挖掘,充分理解挖掘用户需求,负责构建数据挖掘模型;

  3、负责大数据应用、数据采集加工、数据分析等领域的开发工作;

  4、参与大数据应用项目的建设,包括项目开发及项目管理等工作;

  5、跟踪大数据领域的技术应用趋势,进行技术,加强大数据应用能力。

  任职要求:

  1、大学本科及以上学历,计算机相关专业;

  2、3年以上相关行业工作经验,2年以上软件开发经验;有互联网金融、金融行业、大数据行业开发经验优先;

  3、熟练掌握一种编程语言,java、vc、python等,熟悉当下互联网前沿的技术,并具有一定运用实践经验,熟练使用tomcat,nginx服务器,linux常用命令。了解或熟悉数据仓库建模,擅长业务系统的数据分析;具备证券从业资格;

  4、有良好的职业心态,包括高度的责任心、踏实的工作作风、较强的学习能力、良好的团队合作精神、敢于接受压力和挑战、具有较强的沟通表达能力、组织协调能力和文档编制能力,善于总结经验,开拓思路勇于创新等。

大数据技术岗位职责9

  职位描述:

  岗位职责:

  1,管理项目团队整体技术,根据业务需求分析实施方案和数据计算

  2,指导团队成员,负责项目团队成员的建设和管理

  3,负责完成项目相关技术的方案设计,参与团队项目代码评审

  4,规划项目团队的大数据技术体系和团队成员技术成长

  职位要求:

  1,本科及以上学位,计算机,数学,工程学相关专业,硕士学位优先

  2,5年以上大数据开发经验或数据仓库/模型/报表开发经验

  3,丰富的大中型大数据架构/数据仓库项目的规划、方案设计、实施等相关经验

  4,熟悉hadoop生态圈的各组件,系统及引擎

  5,参与过商业项目的大数据平台建设的优先

  6,良好的学习能力,对技术前沿的发展有很大的好奇心

  7,逻辑思维能力强,思路清晰,良好的沟通协调能力

大数据技术岗位职责10

  职位描述:

  职责描述:

  1.负责研发网络、系统安全评估和安全加固产品;

  2.负责对客户的应用系统进行渗透测试和代码审计;

  3.开发安全攻防产品,对流量攻击、web方向、软件逆向方向和软件安全周期展开研究;

  4.在出现网络攻击或安全事件时,为运维提供紧急响应支撑服务,开发调查取证

  任职要求:

  1、学历:本科及以上

  2、专业:计算机、软件工程、电子信息、网络空间安全、信息安全等

  3、年龄:28~40

  4、性别:不限

  5、工作经验:5~10年

  6、其他要求:无

【大数据技术岗位职责】相关文章:

销售数据岗位职责10-10

数据治理岗位职责11-02

数据助理岗位职责10-23

数据系统岗位职责11-10

数据市场岗位职责12-20

市场数据岗位职责12-21

数据平台岗位职责07-25

数据总监岗位职责12-01

数据工岗位职责12-07