大数据开发工程师岗位职责是什么
2、负责大数据平台设计文档编写,线上产品的维护;
3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;
4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;
5、参与指标设计,数据建模,负责将数据模型在系统中实现;
6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;
7、负责追踪整体产品过程及质量把控。
任职要求:
1、专业技能:精通Hadoop生态圈中的一项或几项技术,深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop,hive,hbase,spark等相关源码有一定了解;
2、学历背景:计算机相关专业本科及以上学历;
3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验
4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。
5、有团队管理经验者优先。
大数据开发工程师岗位职责是什么篇2
职责:
1.负责运营平台以及移动应用服务器API开发与维护,编写开发文档;
2.根据业务需求提出技术方案,负责系统框架的规划、开发;
3.熟悉支付业务流程,对已有模块的调优和bug修复。
任职资格:
1.计算机及相关专业,熟悉掌握PHP、熟悉面向对象编程;
2.有成熟的项目经验,能独立处理开发中遇到的问题;
3.熟悉Linux服务器相关知识,熟悉Nginx/Apache等服务搭建,对服务器搭建和系统性能调优有了解;
4.熟悉掌握MySQL数据库的使用,对高并发数据处理和数据优化有相应的处理方案;
5.对缓存技术有了解,使用过Redis/Memcache/Mongodb等常见nosql数据库之一。
大数据开发工程师岗位职责是什么篇3
职责
1、负责公司大数据平台建设工作,完成Hdaoop/Spark搭建部署,根据业务需要进行开发;
2、开发实现网络爬虫并爬取所需数据,有效存储到大数据平台;
3、对平台数据做预处理,满足数据展现及后续机器学习等系统使用;
4、根据业务需要,应用大数据实时分析技术、可视化技术等,并对平台发展规划进行设计。
任职资格
1、本科及以上学历,计算机相关专业;
2、熟悉数据仓库和数据建模相关技术细节,有编程经验,熟悉SQL/Hadoop/Hive/Hbase/Spark等大数据工具;
3、具备海量数据处理经验,或有互联网行业数据挖掘工作经验;
4、1年以上岗位经验优先,本科应届有意向的,可优先培养。
大数据开发工程师岗位职责是什么篇4
2、负责大数据平台设计文档编写,线上产品的维护;
3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;
4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;
5、参与指标设计,数据建模,负责将数据模型在系统中实现;
6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;
7、负责追踪整体产品过程及质量把控。
任职要求:
1、专业技能:精通Hadoop生态圈中的一项或几项技术,深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop,hive,hbase,spark等相关源码有一定了解;
2、学历背景:计算机相关专业本科及以上学历;
3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验
4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。
5、有团队管理经验者优先。
大数据开发工程师岗位职责是什么篇5
1、负责数据仓库和大数据处理模块的架构设计和开发;
2、负责实现基于Spark框架的分布式计算框架的设计和开发工作;
3、负责Spark技术研究和通用数据平台的性能调优;
4、负责大数据项目中,基于kafka、flume、sparkstreaming、SparkSQL等相关技术的海量数据的处理、分析、统计、挖掘工作。
5、熟悉Scala/Java语言,对Scala/Java原理、底层技术有深入研究者优先;
6、有过海量数据系统开发经验者优先;
7、熟悉Hadoop/Spark生态系统组件的使用,至少有2年以上的Spark开发经验;
8、写过推荐系统的优先考虑
大数据开发工程师岗位职责是什么篇6
职责:
1、参与产品初期的需求定义
2、根据需求快速完成开发方案设计
3、高效完成功能开发
4、功能自测、代码定期自查、框架及系统完善
5、参与日常的功能快速迭代,完成开发、自动化测试到产品发布的整个流程。
任职要求:
1、扎实的计算机编程及网络基础,熟悉常用软件设计模式
2、3年以上PHP开发经验,熟练练使用PHP框架,有一个以上Laravel或Swoft的完整项目的开发经验
3、熟练使用MySQL数据库,对索引、锁和事务有了解,有并发处理和调优经验
4、熟练使用Redis、Memcache等常见非关系型数据库
5、熟练使用HTML、CSS、Javascript、Jquery、Vue等前端技术,有Vue实际使用经验
6、有支付、OSS、消息通讯等一种以上三方应用的集成经验
7、熟悉Docker、Git、及常用Linux命令使用有,有生产服务器运维经验的优先
8、熟悉或掌握一种或以上其他服务端语言的优先
9、有SaaS系统、社交软件、直播平台高并发处理能力经验的优先
10、有责任心,具备良好的编码习惯,较强的学习及沟通能力。
大数据开发工程师岗位职责是什么篇7
职责:
1、独立负责工作小组,并对下级成员进行监督;
2、具备资源整合以及对软件项目全局把控的能力;
3、负责软件项目的系统设计和需求分析;
4、制定软件项目开发计划,并按时完成功能模块的设计、开发以及编程任务;
5、积极配合并完成主管下达的任务,并能够对软件部门的发展规划提出意见;
任职条件
1、大数据相关开发经验3年以上,至少具备2年以上java开发经验;
2、有基于hadoop的数据抽取、转换、加载的开发相关经验;
3、熟练掌握hadoop生态的相关知识,如hive,hbase,flume.kafka,storm,spark,mapreduce等;
4、熟悉Linux操作系统。熟悉linux各项基本操作,至少掌握一门脚本语言;
5、熟练数据仓库,对多维数据建模有深入理解;
6、有BI数据平台、数据仓库、日志采集、多维数据仓库设计、开发、架构经验者优先;
7、思维敏捷,有较强的钻研学习能力,较好的沟通能力、团队合作;
大数据开发工程师岗位职责是什么篇8
职责:
1.负责公司项目的开发和维护,产品的后端web程序开发、数据库结构设计和搭建,包括架构设计、技术方案的制定相关工作;
2.根据项目情况,完成项目可行性和需求分析,并完成系统设计;
3.根据开发需求,负责完成PHP核心代码,接口规范制定;
职位要求:
1、计算机相关专业专科以上学历;
2、3年以上实际项目开发经验,熟练运用HTML、Javascript、Ajax等技术;
3、精通PHP+MYSQL程序设计及开发,拥有良好的代码习惯;
4、熟练应用各种工具进行协作开发,有团队开发经验
5、逻辑性强,善于思考,具备良好的需求理解能力、学习能力、分析和独立解决问题的能力
大数据开发工程师岗位职责是什么篇9
职责:
1、负责公司云计算业务相关系统的开发、升级、优化工作。
2、参与相关业务逻辑后台架构设计、系统建模、数据库设计、核心代码的编写及后台服务程序的研发和编写。
3、独立完成完整功能测试和发布,准备相关的技术文档,协助解决各种技术问题。
4、进行详细设计、代码开发,配合测试,高质量完成项目。
5、按照项目计划,按时提交高质量代码,完成开发任务。
任职资格:
1、2年以上PHP开发经验;精通PHP+MySQL,熟悉OOP编程思想和MVC框架,有整体项目开发经验。
2、熟练使用JavaScript,jQuery熟悉AJAX、JSON数据交互,对Mysql数据库有丰富的经验及熟悉优化。
3、熟悉PHP缓存技术、了解高并发、负载均衡处理技术。
4、有移动开发经验,能完成主流应用工具接口的二次开发,能为业务提供接口支持者优先。
5、有良好的编码习惯,具有高度的责任心、良好的沟通能力和团队协作精神。
大数据开发工程师岗位职责是什么篇10
职责:
1.负责公司产品软件功能模块的详细设计、开发、测试;
2.参与系统的需求调研和需求分析;
3.参与撰写需求分析、概要设计、详细设计等相关技术文档;
4.根据公司的设计和编码规范能独立完成分配模块的设计、编码、测试工作;
5.对自身承担模块的开发进度、代码质量负责。
任职资格:
1、本科或以上历;
2、3年以上Java开发经验,有较大型高性能应用系统开发经验者优先;
3、熟练使用各种开发工具(Eclipse、Maven、Junit、Svn);
4、熟练使用Mysql数据库,对sql优化有一定的了解,有针对业务场景有设计数据库结构关系的能力;
5、熟悉Linux基础命令
6、熟练使用Spring、SpringMVC、Mybatis、Hibernate等开源框架,熟悉springboot/springcloud优先;
7、熟练使用Mysql/Oracle/Sqlserver等数据库设计及应用经验;
8、熟练使用JavaScript脚本语言,熟悉JQuery类库;
9、可以独立完成简单模块的数据结构设计和代码开发;
10、能够独立开发业务模块,有较强的系统分析能力;
大数据开发工程师岗位职责是什么篇11
职责:
1、完成日常任务开发及代码优化;
2、完成公司现有项目(tp5开发)的更新迭代;
3、参与公司产品的设计,以及完成相应功能模块的开发,调试;
4、保质保量完成团队分配的任务。
任职资格:
1、3年以上php开发经验,从事过电信增值业务者优先;
2、熟练使用thinkphp5或laravel框架;
3、熟悉Unix/Linux操作系统,会使用git或svn等版本控制工具;
4、熟悉mysql数据库,熟练sql查询语句;
5、熟悉memcache或redis等缓存技术;
6、熟悉html、css、javascript、jquery框架和ajax等前端技术。
大数据开发工程师岗位职责是什么篇12
职责:
1、负责平台软件产品需求分析、设计;
2、参与平台软件的架构和实现;
3、负责关键代码的编写和审核;
4、参与产品开发重点、难点的技术攻关;
5、负责软件开发标准文档的撰写和维护。
任职资格:
1、计算机相关专业,本科以上学历,三年以上java开发经验;
2、精通JavaEE架构,熟练应用Struts2,SpringMVC,Spring,Hibernate、MyBatis、Redis等常见框架,至少有一项深入研究过;
3、对Jsp、Servlet、Html、Javascript、JSON、AJAX、Jquery等有深入了解;
4、熟练应用Oracle或MySQL数据库;
5、具有Hadoop、Storm等开发经验者优先;
6、具有物联网管理平台相关开发经验者有限。
大数据开发工程师岗位职责是什么篇13
1、家电产品内部结构及装配设计,有智能家电开发经验者优先;
2、负责参与新产品整体结构设计方案设计,确定产品的结构设计方案和项目计划,完成样机试制,确定零部件的详细设计;
3、能够结合工业设计、市场反馈、用户体验、产品品质综合确定产品的结构设计方向;
4、负责样品分析,参与试产、对产品可靠性、工艺性、合理性负责。
大数据开发工程师岗位职责是什么篇14
职责:
1、按计划完成公司产品的设计、开发以及测试等工作,解决产品的技术问题,促进产品的实施落地;
2、负责对产品的功能、性能、安全、稳定等相关方面进行优化;
3、根据业务发展,对现有产品进行调整、重构;
4、对团队的代码规范、质量负责;
5、撰写相关技术文档;
6、其它技术事务的支持及上级安排的工作任务。
任职要求:
1、全日制统招大学本科学历,计算机或相关专业,优秀应届生或1年以上相关工作经验均可;
2、java基础扎实,熟悉面向对象编程思想;
3、熟悉网络编程,IO、NIO相关知识,了解tcp/ip协议;
4、熟悉常用集合类,对算法和数据结构有一定了解;
5、了解常用设计模式;
6、掌握spring,springboot的使用,swing、awt使用;
7、MySQL、SQLserver使用及优化;
8、能承受一定工作压力,沟通理解能力强,能适应出差。
大数据开发工程师岗位职责是什么篇15
职责
1、独立承担系统功能的需求分析和重要功能模块的设计;
2、负责核心模块的代码编写、测试;
3、参与软件项目工程的实施和管理;
4、培养和指导团队成员开展工作。
任职资格:
1、计算机相关专业(数学、物理专业也可),本科以上学历;
2、精通Java语言,熟练使用Eclipse;
3、能熟练掌握目前主流的数据库(Oralce/DB2/SQLSERVER/MySql)至少一种;
4、有3年以上实际项目开发经验,1-2年作为项目团队核心成员;
5、能参与系统设计,独立完成模块开发;
6、富有责任心和创新精神,具有团队合作精神;
7、计算机相关专业,本科以上学历,或研究生毕业;
8、有过项目管理经历的优先录用。
大数据开发工程师岗位职责是什么篇16
跟客户沟通,整理分析需求;
制定设计文档进行开发,测试;
撰写必要的文档。
工作要求:
1年以上MES开发或实施经验;
2年以上项目开发经验,熟悉SpringMVC/Struts,Hibernate/MyBatis等开发框架;
熟练掌握面向对象的分析及设计方法,以及关系型数据库结构设计;
熟悉HTML,CSS,Javascript,jQuery等脚本语言,了解Ajax原理;
有良好的表达和沟通能力,能整理和撰写设计和开发文档;
乐于学习新技术,有团队合作精神与集体荣誉感。
大数据开发工程师岗位职责是什么篇17
职责:
1、完成软件的设计、开发、测试、修改bug等工作。
2、撰写相关的技术文档。
3、参与业务需求的沟通,功能模块详细设计,业务功能实现与单元测试,系统维护等工作。
4、对代码质量如执行性能、可读性、可维护性负责
5、独立的解决和分析开发过程中的问题
6、完成上级安排的其他临时性工作。
岗位要求:
1、计算机相关专业专科以上。
2、精通Java语言,熟练使用MyEclipse,熟悉Linux平台的程序开发。
3、熟悉面向对象编程原理,数据结构和算法基础扎实。
4、熟悉J2EE相关技术,掌握Spring、SpringMVC、Mbatis/Hibernate等常用应用开发框架。
5、掌握Web前端技术,熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用经验者优先。
6、熟悉Mysql/Oracle等常用关系型数据库,精通SQL,能够对SQL进行优化。
7、了解分布式计算、NoSQL技术,有实际应用经验者优先。
8、有SpringBoot、SpringCloud、Git、Redis、Java8等相关使用经验者优先。
9、思维敏捷,具备良好的表达能力和沟通能力,PMP/ACP/CSM优先。
10、工作认真负责,有强烈的责任感和吃苦耐劳精神,具有良好的团队合作精神,具有强烈的事业心和责任感。
大数据开发工程师岗位职责是什么篇18
职责:
1、负责数据库的安装、配置、监控、实时备份、恢复和管理;
2、负责数据清理及系统间的数据迁移;
3、根据需要负责数据库设计包括表结构、表、索引等的设计;
4、负责编写SQL、触发器、存储过程等;
5、负责原有SQL优化,原有存储过程维护。
工作要求:
1、2年以上数据库开发或Java软件开发经验;
2、熟练使用Linux系统,熟悉表结构设计、SQL优化,熟练编写存储过程;
3、熟悉Oracle、Mysql数据库运行机制、体系架构;
4、掌握Oracle数据库维护,能对业务需求和故障及时反馈和处理;
5、具较强的责任心和学习能力,有团队合作精神、沟通协调能力、承压能力。