大数据开发工程师的具体职责10篇
1、负责大数据平台的技术和产品的设计、开发、优化和维护;
2、负责大数据平台设计文档编写,线上产品的维护;
3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;
4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;
5、参与指标设计,数据建模,负责将数据模型在系统中实现;
6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;
7、负责追踪整体产品过程及质量把控。
任职要求:
1、专业技能:精通 Hadoop 生态圈中的一项或几项技术,深入了解 Hadoop 及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项 Nosql 技术;具有扎实 java 功底及开发能力;对 hadoop,hive,hbase,spark 等相关源码有一定了解;
2、学历背景:计算机相关专业本科及以上学历;
3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验
4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。
5、有团队管理经验者优先。
大数据开发工程师的具体职责(篇2)
职责
1、负责传感器数据核心数据库产品整体架构设计及开发工作;
2、负责传感器数据数据库产品核心代码开发,并对存储性能进行持续调优;
3、进行传感器数据数据库系统的上线及部署方案设计及开发;
4、负责传感器数据库前端页面的开发,并针对业务需求进行持续调优;
5、对应用系统中存在的问题及性能瓶颈进行快速定位并解决;
岗位要求
1、具有3年以上数据库系统研发经验,大数据集群部署经验者优先;
2、精通数据库管理,熟练使用Mysql、SqlServer、ORACLE数据库、SQL语言,能独立进行应用排错、调优、数据库结构设计、数据备份和恢复等.
3、具有大型数据仓库或者数据库平台设计经验;
4、有大数据平台开发或者数据结构设计经验;
5、熟练掌握应用前端Web的开发;
6、沟通能力较好,对传感器有一定思考和了解;
7、踏实肯干,技术视野开阔,对业界新技术敏感,喜欢钻研,具有良好的学习能力并注重团队合作;
大数据开发工程师的具体职责(篇3)
职责
1、 进行业务系统数据库的规划、设计、实施,设计并优化数据库物理建设方案;
2、 对数据库进行管理,负责业务系统数据库的运营及监控;
3、 业务系统数据库的定期维护和异常处理;
4、 对数据库性能分析与调优,排错,保证数据安全;
5、 对数据库进行定期备份、和按需恢复;
6、 配合其他部门进行的数据处理、查询,统计和分析工作。
任职资格
1、 计算机相关专业,本科以上学历,两年以上相关工作经验;
2、 精通关系数据库原理,熟悉数据库系统的规划、安装、配置、性能调试,
3、 精通SQL、pll存储过程的编写,有丰富的数据库管理、运维调优经验;
4、 熟练使用数据库管理、分析、设计工具;
5、 对SQLSERVER精通、ORACLE、MYSQL有一定的了解;
6、 快速处理系统突发事件的能力,较强的学习和创新能力;
7、 良好的沟通能力、团队合作精神。
8、有专职DBA工作经验优先
大数据开发工程师的具体职责(篇4)
职责:
1、负责平台软件产品需求分析、设计;
2、参与平台软件的架构和实现;
3、负责关键代码的编写和审核;
4、参与产品开发重点、难点的技术攻关;
5、负责软件开发标准文档的撰写和维护。
任职资格:
1、计算机相关专业,本科以上学历,三年以上java开发经验;
2、精通JavaEE架构,熟练应用Struts2,Spring MVC,Spring,Hibernate、MyBatis 、Redis等常见框架,至少有一项深入研究过;
3、对Jsp、Servlet、Html、Javascript、JSON、AJAX、Jquery等有深入了解;
4、熟练应用Oracle或MySQL数据库;
5、具有Hadoop、Storm等开发经验者优先;
6、具有物联网管理平台相关开发经验者有限。
大数据开发工程师的具体职责(篇5)
1. 基于mtk,高通芯片平台的移动设备的软件解决方案,主要是嵌入式上层Android系统/App开发。
2. 负责开发Android Framework/App,优化Android系统、内存泄露。
3, 负责开发Android hal 层,定位解决一些深度bug。
4. 客户支持:对客户基于上述解决方案开发的产品提供技术指导和支持。
大数据开发工程师的具体职责(篇6)
职责
1、负责公司产品运营相关网站后端快速响应开发;
2、负责公司运营支持相关系统开发;
3、负责设计和开发一些内部工具,提高网站整体性开发效益,保证一定的质量;
4、负责相关APP接口开发;
5、配合移动部门与产品部门实现服务器端相关接口开发。
任职资格
1、计算机或相关专业。
2、熟练使用PHP进行程序开发,至少一年以上的PHP项目开发经验,有模板开发经验;
3、熟悉Linux系统,至少一年以上Linux平台开发经验;
4、掌握WEB编程相关知识JavaScript,CSS,XML,HTTP协议;
5、熟悉大数据量下数据库(MSSQL、MySQL)的性能管理及优化,具有一定的数据库规划能力;
6、有大型网站开发经验者优先;
7、较强的责任心及团队合作精神,有独立解决问题的能力。
大数据开发工程师的具体职责(篇7)
职责
1、独立承担系统功能的需求分析和重要功能模块的设计;
2、负责核心模块的代码编写、测试;
3、参与软件项目工程的实施和管理;
4、培养和指导团队成员开展工作。
任职资格:
1、计算机相关专业(数学、物理专业也可),本科以上学历;
2、精通Java语言,熟练使用Eclipse;
3、能熟练掌握目前主流的数据库(Oralce /DB2/SQL SERVER/My Sql)至少一种;
4、有3年以上实际项目开发经验,1-2年作为项目团队核心成员;
5、能参与系统设计,独立完成模块开发;
6、富有责任心和创新精神,具有团队合作精神;
7、计算机相关专业,本科以上学历,或研究生毕业;
8、有过项目管理经历的优先录用。
大数据开发工程师的具体职责(篇8)
职责:
1、参与微信开发、小程序项目功能编码及完成项目技术攻关;
2、独立完成网站前后台的功能开发;
3、负责数据库优化、程序性能优化;
4、能独立理清产品需求,完成代码编导;
岗位要求:
1、大专以上学历,三年或以上相关工作经验;
2. 精通PHP+MYSQL编程
3. 熟练使用一种PHP框架,ThinkPHP、Yii2 框架优先;
4. 熟练的进行MySQL数据库设计和优化;
5. 熟练使用PHP缓存技术
6. 对前端语言Html、Div+CSS、JS、jq有所了解;
7. 熟悉常见的短信接口,熟悉支付宝、微信等支付接口的集成.
8. 有微信开发、小程序项目、商城开发经验者优先
大数据开发工程师的具体职责(篇9)
职责:
1.有独立工作能力,工作踏实认真,以及较强的团队协作精神。
2.负责日志大数据平台的搭建和规划;
3.在总体架构设计下,完成日志大数据产品的设计、搭建、维护和调优,技术文档的编写与维护;
4.参与业务日志的大数据分析;
5.及时反馈开发中遇到的难点问题,沟通并寻求解决方案,按阶段有计划地完成开发任务
任职资格:
1、计算机等相关专业本科以上学历,2年以上开发经验;
2、熟悉 linux 操作系统,熟悉 shell 脚本语言,精通 Java,有较强的开发能力;
2、熟练使用SQL,熟悉Mysql、MongoDB、Hive等数据库技术的基本操作及原理;
3、熟悉Hadoop/Spark生态系统组件的使用,至少有1年的Spark(Core/Streaming/SQL)开发经验;
4、熟悉Elastic产品线(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,了解常见优化方案,熟悉Elasticsearch部署、监控及性能调优;
5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;
大数据开发工程师的具体职责(篇10)
职责:
1. 负责设计和实现手机卫士大数据BI平台;
2. 不断完善数据产品的架构设计,应用开发和新技术迭代;
3. 配合业务,产品,根据不同的业务需求,灵活快速地完成具有挑战性的项目,为业务提供有价值的数据分析和预测。
任职要求
1. 计算机软件相关专业本科及以上学历,至少3年以上工作经验;
2. 认可技术与平台在BI的价值,能够深入业务领域,通过使用数据分析和挖据技术,让业务生成的海量数据产生更大价值。
3. 熟练掌握大数据技术:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP, Elastic Search等等。
4. 具备良好的编程能力和代码风格,熟练掌握Java, Python等语言,熟练使用SQL,并具有较强的优化能力。
5. 需要有很强的开发和架构设计能力,特别是在大数据的分布式和实时处理领域,对存储引擎和查询引擎的原理和优化都具备比较深入的理解。
6. 有一定的数据挖掘和机器学习算法能力,包括推荐系统,深度学习等技术领域 。
7. 拥有正直、积极、宽容的品质,学习能力强,并且善于沟通合作。