工作职责 百文网手机站

大数据开发工程师岗位的基本职责

时间:2022-11-20 09:05:01 工作职责 我要投稿

大数据开发工程师岗位的基本职责(精选10篇)

  在不断进步的时代,我们都跟岗位职责有着直接或间接的联系,岗位职责主要强调的是在工作范围内所应尽的责任。大家知道岗位职责的格式吗?下面是小编为大家整理的大数据开发工程师岗位的基本职责,欢迎阅读与收藏。

大数据开发工程师岗位的基本职责(精选10篇)

  大数据开发工程师岗位的基本职责 篇1

  职责:

  1. 根据公司业务需求,进行数据开发及报表制作;

  2. 参与BI、大数据平台体系建设;

  3. 文档整理,包括ER图、原型设计、数据字典整理等;

  岗位要求:

  1. 本科或以上学历,计算机相关专业,2年及以上工作经验;

  2. 熟练使用主流数据库(如ORACLE/PostgreSQL/MYSQL等),掌握SQL查询优化方法;

  3. 熟悉HADOOP生态,能够熟练使用HIVE/HBASE/SPARK进行数据开发;

  4. 掌握JAVA或PYTHON,会TABLEAU/KYLIN/帆软等BI工具者优先;

  大数据开发工程师岗位的基本职责 篇2

  职责:

  1.有独立工作能力,工作踏实认真,以及较强的团队协作精神。

  2.负责日志大数据平台的搭建和规划;

  3.在总体架构设计下,完成日志大数据产品的设计、搭建、维护和调优,技术文档的编写与维护;

  4.参与业务日志的大数据分析;

  5.及时反馈开发中遇到的难点问题,沟通并寻求解决方案,按阶段有计划地完成开发任务

  任职资格:

  1、计算机等相关专业本科以上学历,2年以上开发经验;

  2、熟悉 linux 操作系统,熟悉 shell 脚本语言,精通 Java,有较强的开发能力;

  2、熟练使用SQL,熟悉Mysql、MongoDB、Hive等数据库技术的基本操作及原理;

  3、熟悉Hadoop/Spark生态系统组件的使用,至少有1年的Spark(Core/Streaming/SQL)开发经验;

  4、熟悉Elastic产品线(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,了解常见优化方案,熟悉Elasticsearch部署、监控及性能调优;

  5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;

  大数据开发工程师岗位的基本职责 篇3

  职责:

  1、负责大数据统计平台建设与优化;

  2、负责广告效果分析,反作弊平台建设;

  3、负责移动广告平台相关系统的设计研发及持续优化。

  职位要求:

  1、计算机或相关专业本科学历及以上,2年工作经验;

  2、精通大数据采集、处理、存储、查询相关技术;

  3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相关技术;

  4、至少熟练掌握 Java/Scala/Python 中一门语言;

  5、有做过大数据量查询优化的优先;

  6、有大数据服务运维、性能调优者优先;

  7、熟悉常用的设计模式,对MVC框架有了解;

  8、强烈的责任心,对技术充满热情,高效率,良好的沟通能力。

  大数据开发工程师岗位的基本职责 篇4

  职责:

  1、负责大数据平台的技术和产品的设计、开发、优化和维护;

  2、负责大数据平台设计文档编写,线上产品的维护;

  3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;

  4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

  5、参与指标设计,数据建模,负责将数据模型在系统中实现;

  6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

  7、负责追踪整体产品过程及质量把控。

  任职要求:

  1、专业技能:精通 Hadoop 生态圈中的一项或几项技术,深入了解 Hadoop 及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项 Nosql 技术;具有扎实 java 功底及开发能力;对 hadoop,hive,hbase,spark 等相关源码有一定了解;

  2、学历背景:计算机相关专业本科及以上学历;

  3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验

  4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。

  5、有团队管理经验者优先。

  大数据开发工程师岗位的基本职责 篇5

  职责:

  1、负责区块链产品的研发,独立或与团队合作,按时保质完成软件开发项目;

  2、参与产品系统设计、概要设计工作,核心功能的代码编写;

  3、独立解决和指导其他同事处理开发中遇到的难点问题;

  4、总结和编写相关的开发文档;并能够根据规划需求制定相关技术与产品的`解决方案。

  任职资格:

  1.本科及以上学历,5年以上相关工作经验;

  2.精通J2EE,精通SSH及常用开源框架和技术,深刻理解各框架的优缺点,熟悉分布式、多线程、缓存、消息等高性能架构相关开发技术;有微服务开发经验者优先 ;掌握主流的前端技术和框架;

  3.熟练应用Oracle、MySql数据库件,具备丰富的数据库设计能力;

  4、参与过至少一个产品和项目的系统框架设计,有系统设计、调优的经验;

  5.具有较强的学习能力,研究能力和问题解决能力,热衷于新技术的学习和研究;有区块链研究或经验的优先 ;

  6.性格开朗、乐观,有很强的团队协作精神和沟通能力,有带领团队者缀优先;

  7.能承受工作压力,对待工作积极热情、踏实肯干,能接受短期出差。

  大数据开发工程师岗位的基本职责 篇6

  职责:

  1、根据数据库仓库及BI项目的需求,制定ETL相关的设计方案和开发计划,并进行后续的设计、实施、维护;

  2、负责整个数据仓库数据模型的管理工作(建模、设计、实施);负责数据源调研、入库、开发的全流程工作,并保证数据质量;

  3、负责数据仓库的模型的标准制定,实施,监督工作;承担数据抽取、清洗、转化等数据处理程序开发。

  任职要求:

  1、精通关系型数据库理论,熟练掌握Oracle数据库,熟悉数据仓库架构与模型;

  2、熟悉Informatica等主流ETL开发工具;

  3、精通SQL语句,对SQL查询优化有丰富的经验,熟悉PLSQL,熟悉函数、存储过程,触发器等的开发;

  4、熟悉Linux操作系统SHELL脚本。

  大数据开发工程师岗位的基本职责 篇7

  职责:

  1.负责ORACLE、SQLSEVER等数据库的实时数据处理、故障分析出来,性能优化等;

  2.定位和解决数据集群组件性能和高可用问题,协助数据集群监控系统的开发;

  3.深入探索业务数据,创造性的思考和发现问题,能够提出有效解决方案,协助新项目的预研和开发,数据驱动业务,

  4.负责公司内外部各数据的接入和清洗处理。

  任职资格:

  1、计算机相关专业,本科及以上学历,1年以上hadoop开发经验,对分布式计算理论有深刻理解。

  2、熟悉Linux开发环境,熟练Java、scala编程,有良好的编码习惯;

  3、熟悉Hadoop、HBase、HIVE、Spark、KAFKA等系统相关技术原理与实现;

  4、熟悉mysql、sql server、oracle开发环境,对SQL语句相当熟练,具备sql调优能力;

  5、有大数据运维相关经验优先

  6、具备良好的沟通能力、学习能力、分析解决问题能力;

  7、英语熟练优先

  大数据开发工程师岗位的基本职责 篇8

  职责:

  1.编写存储过程和SQL脚本实现复杂业务逻辑;

  2.根据业务逻辑完成数据库表设计,和整个数据的抽取清洗转换过程(ETL),以及数据输出;

  3.对于运行缓慢的SQL语句调优;

  4.数据处理自动化脚本部署和维护。

  5、定时巡查数据库系统,发现潜在问题和性能瓶颈,并预警

  【任职要求】

  大专以上学历,计算机相关专业,有存储开发经验;

  2、数据Oracle或SQLSERVER的运行机制,熟练掌握Oracle或SQLSERVER的基本操作和调优;

  3、精通SQL语句,基础扎实

  大数据开发工程师岗位的基本职责 篇9

  职责:

  1、参与需求的调研、分析和设计工作,并根据需求设计说明书,编写数据模型存储过程设计文档;

  2、负责数据提取和数据分析,以及数据库转换和迁移;

  3、负责数据模型设计、后台存储过程开发;

  4、负责数据库日常维护与性能优化;

  5、负责项目上数据库相关业务的支撑。

  任职要求:

  1、本科及以上学历、计算机相关专业;(可以考虑去掉)

  2、3年以上数据库存储过程开发工作经验,有一个或以上大型数据项目开发经验;

  3、能独立撰写存储过程、视图、数据库函数、触发器;

  4、熟悉ORACLE/DB2数据库,有数据库、SQL语句优化的经验;

  5、熟悉银行各业务部门常用报表类业务知识,包含资产负债类、中间业务类、票据类、信用卡类等。

  6、能适应出差的工作环境;

  大数据开发工程师岗位的基本职责 篇10

  职责:

  1、参与需求分析。负责项目整体规划、功能设计、程序开发工作。

  2、对所编写的程序进行严格的综合测试,进行软件故障的诊断、定位、分析和调试。

  3、负责项目完善及必要的二次开发。

  4、与团队协作进行系统级的代码优化,保证程序的安全、效率和可扩展性。

  5、负责系统性能优化和技术攻关。

  6、按照要求完成相关开发文档的整理与编写。

  任职要求:

  1、三年及以上后端开发经验;

  2、精通PHP开发语言,熟悉常用的框架等;

  3有大中型规模的产品架构设计和独立开发经验优先;

  3、具有一定的MySql优化经验,精通PHP+MYSQL编程和MySQL数据库

  4了解HTML5、CSS3、Jquery、Ajax等前端技术;具有一定的前端开发能力;

  5、精通常见第三方平台接口的开发流程;

  6、具有很好的团队合作意识、工作协同意识;

  7、具备根据业务和团队进行技术选型架构能力。

【大数据开发工程师岗位的基本职责】相关文章:

数据库开发工程师岗位的基本职责-岗位职责01-11

大数据开发工程师的基本职责12-28

数据库开发工程师岗位的职责01-24

大数据开发工程师的职责08-23

大数据开发工程师的职责文本精选08-19

大数据开发工程师的具体职责03-20

产品开发技术员岗位的基本职责-岗位职责01-11

GIS数据工程师岗位职责12-16

数据库工程师的基本职责04-18