数据开发岗位职责

　　在不断进步的社会中，越来越多人会接触到岗位职责，岗位职责是组织考核的依据。什么样的岗位职责才是有效的呢？以下是小编收集整理的数据开发岗位职责，仅供参考，欢迎大家阅读。

数据开发岗位职责1

　　1、参与大数据平台相关的数据整合清洗、数据应用的设计和开发

　　2.协助用户完成用户测试，解决测试发现的问题。

　　任职要求：

　　1、本科及以上学历，计算机或相关专业，2年以上DW/BI项目实施和开发经验

　　2、熟悉大数据开源产品的架构和技术细节，具有Hadoop、Mapreduce、HBase、Hive、Spark、Kafka、Redis等大数据平台开发经验

　　3、有金融、互联网金融、电商、广告等行业数据仓库，数据挖掘经验

　　4、精通SQL，熟练使用至少一种数据库，如Oracle、MySQL、PostgreSQL等

　　1、3年以上工作经验；至少有一个数据仓库/数据集市/ODS项目开发经验；

　　2、精通oracle数据库的开发（view/TRIGER/function/procedure/package）及SQL调优，熟悉oracle数据库的基础原理；

　　3、精通ETL工具datastage开发；

　　4、熟悉linux/Unix系统，有shell/Perl脚本开发能力；

　　5、具备良好的分析能力和沟通协调能力，能够承受较高的压力，工作认真负责，积极主动，有较高的效率；

　　6、熟悉一种主流商用调度工具TWS/control-M/AUTOSYS优先；

　　7、熟悉Python开发优先；

　　岗位职责:

　　1、参与大数据平台的搭建、开发和维护工作；

　　2、负责大数据采集、清洗、整合等工作；

　　3、负责大数据平台文本挖掘分析等工作；

　　4、负责BI以及报表开发；

　　5、参与新技术选型和调研，解决不断增长的海量数据带来的存储和计算挑战。

　　任职资格:

　　1、本科以上学历，计算机、信息管理等相关专业；

　　2、深厚的Java功底，3年及以上的并发编程经验，参与过分布式高性能服务的设计开发过程，有大规模分布式系统的实践经验；

　　3、熟悉hadoop/kafka/flume/storm/spark/zookeeper等相关技术；

　　4、熟悉常见数据库如oracle/mysql，有Nosql数据库如mongoDb等经验者优先；

　　5、熟悉redis或memcache者优先；

　　6、对于分布式系统有一定了解，有海量数据处理经验；

　　7、具备较强学习能力，良好的沟通能力和团队合作意识

　　1、负责基于Hadoop/Spark/Hive/Storm/kafka等分布式计算平台实现离线分析、实时分析的计算框架；

　　2、负责平台数据仓库的选型、设计、开发、维护工作；

　　3、负责上述计算平台系统的可用性、容量、性能、监控、发布、安全等运维管理工作，确保系统持续稳定、高效运行；

　　4、协调大数据团队高效的进行数据处理、分析、统计、挖掘工作；

　　岗位要求：

　　1、熟悉服务器/存储/网络/OS等基础架构基本元素，熟悉linux操作系统，具备较强的调优排障能力；

　　2、熟悉Hadoop、Spark等大数据框架，有大型分布式计算开发、部署等相关经验；

　　3、熟悉shell/python或其他脚本语言中的`任意一门，有扎实的Java开发基础，了解jvm的运行机制以及相应调优；

　　4、能够独立完成项目的系统分析、设计，并主导完成详细设计和编码的任务。

　　5、注重性能，良好的代码管理及重构意识。具备独立沟通需求，设计，架构，开发的能力；

　　6、熟悉主流的数据存储产品，有开发经验者优先。如：HBase，Hive，Redis，MongoDB，MySQL等；

　　7、有团队管理经验者优先。

数据开发岗位职责2

　　1.负责完成业务数据指标、报表、接口等需求的'分析及开发实现;

　　2. 参与数据仓库搭建项目的ETL开发实施、性能调优、数据监控、保障系统稳定运行;

　　3. 参与公司数据统一发布平台的建设和维护工作;

　　4. 部门业务上级交代的其它相关工作。

　　岗位要求：

　　1.计算机本科学历，2年以上工作经验，其中1年及以上数据开发工作经验;

　　2.熟练掌握MySQL、MSSQL、Mongo主流数据库的使用，精通SQL、存储过程、函数;

　　3.熟悉ETL工具者优先，如kettle，Sqoop、Datastage、Informatica;

　　4.掌握一门编程语言优先，如Python、R语言。

数据开发岗位职责3

　　职责：

　　1、根据设计方案，完成相关模块代码编写和测试;

　　2、负责相关项目的维护和技术支持工作;

　　3、配合项目组其他成员完成项目相关开发工作;

　　4、协助完成项目的系统交付工作，对项目实施提供支持。

　　任职资格：

　　1、培训过JAVA或有半年以上JAVA项目开发经验;

　　2、计算机相关专业优先考虑，有1-2年开发工作经验;

　　3、熟悉使用oracle/sqlserver/mysql至少一种数据库，熟练使用sql开发;

　　4、性格开朗、具有良好的.学习能力;

　　5、工作责任心强，能承受工作压力。

数据开发岗位职责4

　　职责：

　　1.负责设计和实现手机卫士大数据BI平台;

　　2.不断完善数据产品的架构设计，应用开发和新技术迭代;

　　3.配合业务，产品，根据不同的业务需求，灵活快速地完成具有挑战性的项目，为业务提供有价值的数据分析和预测。

　　任职要求

　　1.计算机软件相关专业本科及以上学历，至少3年以上工作经验;

　　2.认可技术与平台在BI的价值，能够深入业务领域，通过使用数据分析和挖据技术，让业务生成的海量数据产生更大价值。

　　3.熟练掌握大数据技术：包括Hadoop，Spark，Storm，Hive，Presto，Parquet，Flink，Druid，OLAP, Elastic Search等等。

　　4.具备良好的编程能力和代码风格，熟练掌握Java，Python等语言，熟练使用SQL，并具有较强的优化能力。

　　5.需要有很强的开发和架构设计能力，特别是在大数据的`分布式和实时处理领域，对存储引擎和查询引擎的原理和优化都具备比较深入的理解。

　　6.有一定的数据挖掘和机器学习算法能力，包括推荐系统，深度学习等技术领域。

　　7.拥有正直、积极、宽容的品质，学习能力强，并且善于沟通合作。

数据开发岗位职责5

　　职位描述：

　　1、基于海量数据，支持业务对数据的分析和使用：

　　2、支持业务处理数据的流式处理、构建数据仓库、分析用户行为等。

　　任职要求：

　　1、有扎实的编程能力，有优秀的设计和代码品位，对解决具有挑战性问题充满激情；

　　2、对大数据处理有丰富的'经验和广阔的视野；

　　3、熟悉常用的开源组件：hadoop/hive/spark/storm，并了解其特性和使用场景；

　　4、优秀的沟通理解能力，能快速理解业务，用数据解读业务；

　　5、推荐或机器学习相关的开发工作优先。

数据开发岗位职责6

　　职责：

　　1、负责数据分析、加工、清理，相关处理脚本和程序的开发；

　　2、负责开发大数据工具，如报表平台、多维度分析工具、ETL平台、调度平台的研发；

　　3、负责分布式大数据平台应用开发（Hadoop/Spark/Hive/HBase等）；

　　4、负责大数据相关平台的'维护、优化。

　　任职要求：

　　1、本科及以上学历，计算机相关专业，具有5年及以上的大数据ETL或数据开发经验，熟悉大数据组件的维护以及调优；

　　2、熟练掌握Java或Python编程语言，熟悉大数据架构体系，熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技术中的一个或者多个，熟悉Sqoop、DataX等数据导入工具；

　　3、能熟练使用Hive、HBase、Spark等加工和处理数据，有海量数据处理经验；

　　4、有数据仓库开发经验/BI系统开发经验优先；

　　5、有电商行业数据处理与分析平台开发经验者优先。

数据开发岗位职责7

　　职责：

　　1、参与项目需求分析，研究项目技术细节，进行系统框架和核心模块的详细设计；编写相应的.技术文档；

　　2、根据公司要求规范，编写相应的技术文档；编制项目文档、记录质量测试结果

　　3、完成项目初始至终结的全部技术跟踪协调工作

　　4、根据开发进度和任务分解完成软件编码工作，配合测试工程师进行软件测试工作；

　　5、参与客户沟通、项目需求调研分析并维持良好的客户关系；编写需求分析报告。

　　6、进行用户现场软件的部署和实施

　　7、完成公司领导交办的其他工作。

　　岗位要求：

　　1、计算机相关专业，数学专业优先，本科以上学历；

　　2、熟悉Oracle、Sqlserver等数据库及SQL语言；

　　3、良好的团队合作精神和社交技巧及沟通协调能力；

　　4、能适应经常出差。

数据开发岗位职责8

'职位描述：

　　1、负责根据灵云人工智能各核心能力算法的数据处理需求，提供数据处理的高级技术支持与支撑工作；

　　2、负责各种数据资源处理的具体方法制定与制作流程的规范化，为灵云人工智能各项核心技术构建一套有序高效与高质量的数据处理体系与方案，包括但不限于文本、语音与图像数据加工的指导、知识库编辑的培训和技术文档的编写等内容；

　　3、负责数据的分析、挖掘、优化和难点攻坚等数据处理层面工作，并将其成果应用相关产品线中，以及配合核心研究员完成各种数据问题的分析、解决及其数据资源的产品化；

　　4、负责灵云人工智能中数据平台的方案设计、搭建、维护和优化等工作。

　　任职资格：

　　1、学历要求：

　　—毕业于211或985院校、统招本科及以上学历，数学、统计学、计算机、智能信息处理类等专业背景。

　　2、工作经验及能力要求：

　　—3年以上工作经验，2年以上团队管理经验；

　　—对数字，数据敏感，具备良好的逻辑思维能力，能够从海量数据中发现有价值的规律；

　　—优秀的'分析问题与解决问题能力，具有较好的归纳能力、文字和语言表达能力；

　　—拥有大数据平台架构的经验和能力，能够根据数据及业务需求构建大数据平台，并随着需求和技术的进步，不断演进；

　　—熟悉主流大数据平台的组件，拥有较大规模集群的架构经验。

　　3、优先考虑：

　　—有互联网行业大数据平台架构实施经验者优先；

　　—有相关从业的工作背景经验者优先考虑。

数据开发岗位职责9

　　职责

　　1、负责基于hadoop/spark生态系统、亿级别数据的全文检索，搜索引擎的`产品研发；

　　2、基于海量用户行为数据和其他数据，分析和研究数据与实际业务的关联关系，并与实际业务应用相结合开发；

　　3、负责大数据分析需求设计和开发，承担数据抽取、清洗、转化等数据处理程序开发。

　　任职要求：

　　1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技术及其生态圈，具备相关项目开发经验，有数据实时计算项目经验优先；

　　2、有搜索引擎全文检索开发经验，如：elasticsearch、solr；

　　3、熟悉python、R任意一门开发语言；

　　4、有SAAS，PAAS企业级应用平台或者互联网，金融等大型应用平台开发经验优先考虑；

　　5、本科及以上学历，计算机/软件工程/统计学/数学等相关专业，互联网/金融等行业3年以上工作经验；

　　6、拥有良好的代码习惯，要求结构清晰、命名规范、逻辑性强、代码冗余率低，代码注释清晰；

　　7、熟悉使用svn，禅道等项目管理工具，有良好的团队协作开发经验、

数据开发岗位职责10

　　职责：

　　1、负责大数据平台的基础环境搭建与性能优化，完成平台的构建与维护、实时流计算平台、分布式调度、可视化报表等平台的架构与研发；

　　2、对各种开源框架进行深入的代码剖析和优化；

　　3、参与大数据技术方案评审；

　　4、指导初中级大数据工程师工作；

　　岗位要求：

　　1、计算机相关专业全日制专科及以上学历，具有3年或以上的分布式计算平台研发工作经验；

　　2。对大数据相关组件：Hadoop、Spark、Hbase、Hive、Flink、Kafka、Flume等架构与底层实现有深入理解，具备相应的.定制和研发能力，尤其需要精通Flink框架；

　　3。具备构建稳定的大数据基础平台的能力，具备数据收集、数据清洗、数据仓库建设、实时流计算等系统研发经验；

　　4。对技术有热情，有不错的数据思维和敏感度，有一定的数据分析能力优先，对深度学习、机器学习有一定的了解优先；

　　5。工作有计划性，责任心和执行能力强，具备高度的责任心、诚信的工作作风、优秀沟通能力及团队精神。

数据开发岗位职责11

　　岗位职责：

　　分布式大数据系统开发、计算性能调优、 高性能服务框架设计与开发；

　　参与项目的架构设计、评审、技术攻坚及优化；

　　参与系统文档的撰写、维护。

　　任职要求：

　　本科以上学历，计算机或相关专业；

　　3年以上linux后台开发经验，有大规模系统开发经验；

　　精通http、tcp/ip协议，网络编程；

　　熟悉linux操作系统原理，常用工具；

　　熟悉常用大数据开源组件；

　　有高并发、大容量后台服务系统设计经验；

　　具有良好的`学习能力、沟通能力、团队合作意识；

　　强烈的责任心与主动性，对所负责工作有owner意识，并能自我驱动成长；

　　对hadoop、flink、spark、lucene等开源项目有大规模应用经验，contributor或者committer优先。

数据开发岗位职责12

　　职责：

　　1.参与传统数仓和大数据数仓日常开发工作;

　　2.参与大数据仓库设计、规划和开发;

　　3.参与日常工作的优化，提出建设性意见;

　　4.负责管理项目，负责板块内的'资源协调、进度管理、交付管理;

　　5.参与数据仓库、数据集市体系架构的设计、规划与开发,参与大数据、ETL开发，sql性能优化。

　　任职要求：

　　1.全日制本科，计算机等相关专业。3年以上数仓开发经验，有银行、金融从业经验者优先。

　　2.2年以上项目管理经验，具备PMP证书优先.

　　3.熟悉oracle/hive/spark，熟悉数据处理和性能优化，有UDF自定义函数、MR开发经验优先;

　　4.熟悉常用ETL工具，熟悉常用的Linux指令，熟悉shell/python任意一种脚本语言。

数据开发岗位职责13

　　职责

　　1.数据库安装、配置、故障处理、备份与恢复;

　　2.数据库性能监控与优化、数据库安全加固、数据库空间管理等(包括线上、线下环境);

　　3.负责项目数据ETL整合与数据库设计;

　　4.审核数据库设计方案和SQL语句，对上线数据库质量进行管理;

　　5.负责数据库操作标准化流程制定，并遵照执行;(如数据库设计规范、数据库变更管理规范)

　　6.负责跟进、试用厦门数据组产出的工具、数据整合方案，以及在重庆团队中推广使用;

　　7.提升实施团队数据库运维相关技能。

　　岗位要求

　　1、计算机或相关专业本科以上学历，2年以上数据处理工作经验;

　　2、精通关系型数据库体系架构和原理，精通存储过程、触发器、动态SQL的编写;

　　3、精通数据库的性能优化及SQL语句的优化;

　　4、精通MySql/oracle数据库的规划、设计、优化及运维;

　　5、熟悉Linux常用命令，熟悉shell/python/perl(其中一种)脚本开发;

　　6、熟悉数据库的负载解决方案，如分库、分表、主从;

　　7、高度的'责任心、良好的沟通技巧和团队合作精神;

数据开发岗位职责14

　　职责：

　　1、负责参与数据库选型、给出数据库设计方案、优化方案;

　　2、负责数据库故障恢复、备份、调优;

　　3、负责监控数据库资源消耗情况、数据库运行日志、故障日志，给出解决方案;

　　4、负责数据库安装和配置管理;

　　5、负责解决数据库、数据方面的问题。

　　任职要求：

　　1、本科以上学历，计算机及相关专业;

　　2、两年以上的数据库开发经验;

　　3、熟悉oracle或者greenplum等常见关系型数据库，有开发存储过程(PL/SQL)的经验;

　　4、熟悉SQL调优;

　　5、熟悉数据库集群、分库、分表等操作的`优先考虑;

　　6、有greenplum数据开发的经验优先考虑。

数据开发岗位职责15

　　职责：

　　1、负责数据库的安装、配置、监控、实时备份、恢复和管理；

　　2、负责数据清理及系统间的.数据迁移；

　　3、根据需要负责数据库设计包括表结构、表、索引等的设计；

　　4、负责编写SQL、触发器、存储过程等；

　　5、负责原有SQL优化，原有存储过程维护。

　　工作要求：

　　1、2年以上数据库开发或Java软件开发经验；

　　2、熟练使用Linux系统，熟悉表结构设计、SQL优化，熟练编写存储过程；

　　3、熟悉Oracle、Mysql数据库运行机制、体系架构；

　　4、掌握Oracle数据库维护，能对业务需求和故障及时反馈和处理；

　　5、具较强的责任心和学习能力，有团队合作精神、沟通协调能力、承压能力。