数据开发工程师岗位职责

数据开发工程师岗位职责

在现在的社会生活中，越来越多人会接触到岗位职责，岗位职责具有提高内部竞争活力，更好地发现和使用人才的作用。我敢肯定，大部分人都对制定岗位职责很是头疼的，以下是小编为大家收集的数据开发工程师岗位职责，仅供参考，欢迎大家阅读。

职责：

1.负责公司大数据业务集群的运维工作确保高可用;

2.负责基础运维、故障定位、容量规划、扩容及性能优化;

3.设计实现大规模分布式集群的'运维、报警监控和管理平台;

4.参与业务架构设计，在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技术及发展方向。

任职资格：

1.大专以上学历，2年及以上大数据运维工作经验，熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术，熟悉源码尤佳，至少掌握python/shell中的一种语言，接受优秀应届毕业生;

2.了解大数据平台应用架构，具备常见问题的基本分析和解决能力;

3.熟悉Linux操作系统的配置、管理及优化，能够独立排查及解决操作系统层面的问题;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

3、负责多种类型的数据报表的研发工作，包括钻取类报表，表格类报表，和图形化报表的研发，测试和发布工作；

4、承担数据抽取、清洗、转化等数据处理程序开发。

任职要求：

1、计算机相关专业本科及以上学历

2、精通数据仓库的数据模型设计，熟悉ETL工具如DataStage，有3年以上的实际BI项目经验；

3、精通Mysql/Oracle/SQLServer数据库，精通SQL语言，熟练编写存储过程，掌握海量数据处理及数据库性能优化；

4、熟悉Hadoop大数据技术框架及相关技术；

职位描述：

1、基于海量数据，支持业务对数据的分析和使用：

2、支持业务处理数据的流式处理、构建数据仓库、分析用户行为等。

任职要求：

1、有扎实的.编程能力，有优秀的设计和代码品位，对解决具有挑战性问题充满激情；

2、对大数据处理有丰富的经验和广阔的视野；

3、熟悉常用的开源组件：hadoop/hive/spark/storm，并了解其特性和使用场景；

4、优秀的沟通理解能力，能快速理解业务，用数据解读业务；

5、推荐或机器学习相关的开发工作优先。

1、分析需求，根据需求确定技术方案，设计系统架构，编写相关设计文档；

2、根据项目进度计划完成软件编码和集成测试；

3、指导初中级工程师的设计编码；

4、积极响应客户需求并进行定制化开发和交付；

5、协助处理其他部门完成技术性事项；