大数据开发工程师岗位职责(精选25篇)

大数据开发工程师岗位职责 篇1

1.参与产品和项目研发工作,基于spark完成产品大数据架构和功能开发;

大数据开发工程师岗位职责(精选25篇)

2.搭建和调优大数据基础平台,包括hadoop/hbase/hive/sqoop/kafka/flume/spark/storm等大数据组件的环境搭建;

3.维护线上系统的稳定性、可靠性,通过分析现象快速定位问题,进而提出优化方案,改进要求;

大数据开发工程师岗位职责 篇2

1、规划车联网安全架构,不断完善车联网产品的安全规范和要求,跟进、解决存在的安全隐患;

2、对上线前的软件或者车上产品进行安全方面验证及测试;

3、跟进最新漏洞的研究工作,理解漏洞的原理,编制漏洞研究报告和防范措施;

4、负责行业/国家车联网汽车网络安全部分的技术及标准规范的研究工作。

大数据开发工程师岗位职责 篇3

1、运用大数据分析工具和技术解决风险管理业务中遇到的实际问题与需求,如风险评估、成长评价等,包括对模型进行设计、开发、验证、测试、部署及监控、优化。。

2、基于海量用户数据和特征,进行数据质量检查、特征加工、数据清洗等,建立数据挖掘模型。

3、评估数据源的质量和价值,能结合业务需求和场景,从各种数据维度中挖掘数据价值,并设计不同的模型,应用于不同的业务场景中。

大数据开发工程师岗位职责 篇4

(1)根据业务进行数据需求的调研、设计、开发及验证工作,并持续进行数据业务的'优化;

(2)负责大数据整体设计和开发工作,包括数据接入、清洗、计算、校验等数据加工流程,并沉淀文档;

(3)持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。

(4)此岗位需驻场开发半年左右(地点:新疆)

大数据开发工程师岗位职责 篇5

1、根据业务需求进行数据模型的调研、设计、开发及验证工作,并持续进行模型的优化;

2、负责数据模型架构的构建,建立数据抽取、清洗、校验等数据加工流程规范及olap多维数据分析模型;

3、持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。

大数据开发工程师岗位职责 篇6

1、负责结构化数据和文本的数据处理、建模、分析等工作,如:数据清洗、中文分词、情感分析、文本分类等;

2、负责数据需求的收集、整理和分析,配合其他同事完成结构化数据和文本的需求分析;

3、负责分析结果的可视化展现;

4、负责核心算法的设计与优化。

任职要求:

1、全日制本科毕业;

2、计算机或数学或软件类或统计相关专业;

3、熟悉数据挖掘和文本挖掘的理论基础,掌握统计模型、机器学习相关原理;

4、熟悉r/python/java等编程语言,熟悉常用数据结构和算法,熟悉正则表达式的使用。

大数据开发工程师岗位职责 篇7

1.基于公司大数据产品进行数据开发,包括数据的采集,清洗,预处理,存储,建模,分析挖掘等

2.根据业务用户需要分析数据,提供数据支持

3.参与公司大数据产品的运维和监控,保障数据质量和服务稳定性

大数据开发工程师岗位职责 篇8

1.参与大数据精准学平台设计与研发,在大数据采集、存储、分析及应用领域都会有所涉及。

2.参与需求分析、系统架构设计、并完成需求设计相应文档的编写。

3.参与核心代码实现、系统性能优化。

4.保质保量地完成项目组分配的开发任务。

5.协助项目经理进行技术支持工作,共同解决产品研发过程遇到的技术难题。

大数据开发工程师岗位职责 篇9

1、从事大数据分布式存储/应用服务的设计和开发,挑战大规模、高并发、易运维的分布式系统设计构建;

2、参与负责大数据运营/风控/分析等数据应用产品开发迭代,包括需求讨论需求/系统/算法的讨论、设计及实现;

3、定位和解决集群组件如spark、hive、hbase、kafka的性能和高可用问题,协助集群监控系统的开发。

大数据开发工程师岗位职责 篇10

1、 根据业务需求,负责iOS客户端应用、软件或产品架构设计、开发和维护;

2、 协助项目经理进行程序的模块设计和分析;

3、 负责APP产品性能优化,兼容性优化、故障排查;

4、 独立的完成开发并发布等任务。

大数据开发工程师岗位职责 篇11

1、负责金蝶EAS系统(ERP)业务需求的二次开发与设计,并参与EAS的需求的讨论和技术评审;

2、负责基于金蝶BOS技术平台的项目开发,以及EAS与其他业务系统的接口开发;

3、独立或与团队合作,按时保质完成上级交给的软件开发项目;

4、具有良好的协调、沟通能力,并能够根据规划需求制定相关的技术解决方案;

5、对研发组初级开发人员进行指导,提供技术支持和帮助。

大数据开发工程师岗位职责 篇12

职责:

1. 负责游戏后台的完善和维护,以及新增代码的代码编写和测试、游戏数据处理、游戏接口对接;

2. 根据项目进度和需求按要求完成代码编写、注释、优化;

3. 配合项目完成相关功能测试工作

4. 能独立完成产品需求,对突发性出现的问题能够及时追踪、定位和解决

岗位要求:

1. 熟练掌握PHP语言, 熟练应用PHP+MySQL,熟悉LAMP或LNMP平台;

2. 熟悉Linux开发环境,熟练使用shell、python脚本,熟悉Nginx等Web服务器的配置及优化,可以独立配置LNMP环境;

3. 熟悉MVC开发,熟练使用laravel等框架;

4. 熟练使用HTML、XML、CSS、Ajax、Json等前端技术;

5. 有渠道接入经验、游戏开发经验者优先

大数据开发工程师岗位职责 篇13

职责:

1. 按质、按量、按时的完成代码开发任务。

2. 根据项目需要,撰写及修改相应的文档。

3. 完成在各个测试阶段BUG的修改

4. 按照编码规范编程,并编制贯穿整个软件开发周期的文档资料

任职条件

1. 大专以上学历,年龄不超过35岁,热爱编程开发,计算机,软件相关专业的应届生也可培养。

2. 会PHP/MySQL开发, 熟悉基于PHP的面向对象编程思想,

3. 熟悉WEB应用框架(Codelgniter、Zend Framework、Symfony、ThinkPhp或其它);

4. 熟悉MySQL数据库应用开发,熟悉MySQL日常维护、性能优化等基本操作技能;对SQL Server, Oracal等有一定认识了解

5. 谦虚好学,积极上进。

大数据开发工程师岗位职责 篇14

职责:

1、能独立承担项目经理分配的模块开发工作,按照开发规范编写健壮、高效的程序代码;

2、能够对自己开发的模块进行单元测试、集成测试,并及时修改程序bug

3、有良好的团队协作精神,逻辑思维能力强,理解项目经理设计的开发思路

任职资格:

1,精通spring+struts+hibernate 或ibatis等架构,有大型互联网项目开发经验。

2,精通javascript脚本,熟悉ajax,掌握dwr,jquery,extjs,prototype等技术。

3,精通oracle,mysql或sql server等主流数据库的开发。

4,熟悉nginx、tomcat、redis等主流中间件的部署和配置。

5,做web开发居多,熟悉Spring MVC MySQL Webservice jason

6,有一定的软件设计能力。

7,有良好的编程规范及开发技能及撰写技术文档能力,有良好的合作精神和主动性。

大数据开发工程师岗位职责 篇15

1、根据客户需求,在规定的工期与质量要求下,进行产品模块级或功能级的设计与开发;

2、与开发上下游密切协作,不断提升产品的品质,提升用户体验;

3、不断提升个人技术能力,精通HR产品技术体系。

大数据开发工程师岗位职责 篇16

岗位职责:

1、负责公司电商平台业务中间件的模块设计、开发、单元测试和文档维护编写;

2、后端业务支撑系统的架构分析和设计;

3、参与项目组的需求分析和总体设计,代码评审等工作;

4、能独立或带领其他开发人员完成系统设计和代码实现。

任职要求:

1、计算机或相关专业,具有7年以上电商行业互联网产品开发工作经验;

2、有较强的思维能力和学习能力,JAVA基础扎实,理解IO、多线程等基础框架,对JVM性能调优有一定的经验;

3、熟练掌握JAVA开源框架(Spring、Spring boot、Spring Cloud等),并对核心思想和实现原理有一定的认知;

4、熟练掌握RabbitMQ、Kafka等消息队列相关技能;

5、熟悉Dubbo、Zookeeper、配置中心等分布式架构及高并发服务设计;

6、熟练使用linux操作系统,具有基本shell脚本编写能力;

7、熟悉GO语言、参与过订单交易系统开发经验者优先;

8、细心,责任心强,有团队合作精神,并具有一定抗压能力。

大数据开发工程师岗位职责 篇17

职责:

1、公司产品无线线端web端的制作、开发和优化

2、根据设计稿,编写静态页面和交互、特效等功能的脚本程序

3、优化前端组件的灵活性和可扩展性

4、跟踪研究前沿的前端技术,并应用到公司的产品开发当中

任职要求:

1、3-5年工作经验,了解react框架前端技术,熟悉流行的前端ui库,能够设计开发工具型网站,如:码工助手;

2、熟练掌握DIV+CSS网页布局,并且对模板化、模块化有一定理解,精通HTML/HTML5、CSS/CSS3等前端开发技术;

3、熟练掌握JavaScript语言核心技术DOM、Ajax、JSON等,对javascript框架(如react/jQuery/jq ui 等)有一定的经验;

4、对css/JavaScript性能优化、解决多浏览器兼容性问题有一定的经验;

5、对无线端开发有一定经验,能够较好解决ios,Android端兼容问题;

6、具备良好的责任心、逻辑思维强、善于交流和表达、较强的学习能力、优秀的团队沟通与协作能力。

7、爱思考,沟通能力强。

大数据开发工程师岗位职责 篇18

职责:

1、参与项目需求分析,编写概要设计、详细设计文档;

2、根据项目具体要求,承担开发任务,按计划完成任务目标;

3、完成项目编码实现、单元测试,协助测试人员完成模块测试,并对模块质量负责;

4、完成上级分配的其他工作任务。

任职要求:

1、全日制本科以上学历,计算机相关专业;

2、熟练Spring MVC, Spring, MyBatis等开源框架;

3、熟练前端HTML,CSS,JavaScript, jQuery等;

4、熟悉ORACLE、MSSQL数据库开发。

5、熟悉HTTP,TCPIP,MODBUS,Socket网络通讯协议;

6、良好的逻辑思维能力和理解能力,能快速掌握新知识,学习能力强。

7、具有较好的沟通表达能力和团队协作能力,能承受一定工作压力;

大数据开发工程师岗位职责 篇19

1、 负责PHP团队任务管理及项目管理工作;

2、 与需求部门沟通,了解业务部门需求,完成需求确认设计工作;

3、 负责核心系统的功能代码与数据库的设计及开发;

4、 负责提供项目过程遇到的技术解决方案;

5、 参与制定设计及实现规范,系统架构分析设计;

6、 与产品经理配合,完成产品的快速迭代、持续创新;

7、 与产品实施配合,不断提升后台功能、服务系统的性能及易用性;

8、 带领研发组其他成员一起,不断提升共同进步。

大数据开发工程师岗位职责 篇20

职责:

1.负责公司项目开发与维护;

2.负责公司项目核心代码编写;

3.负责代码的单元测试,保证开发质量,提交符合规范的成果;

4.针对业务场景的应用要求,不断优化系统设计和前台表现,提升系统效能和安全性。

任职要求

1.3年以上的PHP开发经验,有独立开发经验者优先;

2.了解HTML5、CSS3、JAVASCRIPT等前端代码;

3.具有MySQL索引优化、查询优化和存储优化经验,熟练使用redis;

4.具有良好的PHP基础,熟悉ThinkPHP开源框架;

5.熟悉微擎二开者优先,做过微信公众号优先,接过各平台支付SDK优先,熟悉对高并发业务的处理;

6.有游戏开发经验者优先,计算机专业优先,熟悉linux服务器操作的优先;

7.有良好的面向对象分析、设计能力、规范的编程风格和良好的文档习惯;

8.有良好的团队精神、敬业精神,有高效的执行力,能主动学习钻研与工作相关的知识和技术;

大数据开发工程师岗位职责 篇21

职责:

1、负责平台架构优化、核心重要模块开发,有很强的质量意识,主导核心代码开发;

2、负责需求、设计产品相关文档编写;

3、编写制订各项技术方案;

4、负责较高难度的需求分析;

5、指导、培训中初级工程师、新员工;

6、解决项目中技术难题;

7、参与系统安全性、稳定性、性能和扩展性测试。

职位要求:

1、五年以上基于Java的Web项目开发经验,具有较好的系统架构设计能力,有互联网产品、分布式应用系统开发经验;

2、Java基础扎实,理解常用的设计模式,熟悉基于J2EE的相关开源技术以及熟练运用主流开发框架(Spring, Spring MVC, Hibernate,Mybatis等);对Spring boot,Spring cloud,Dubbo框架等有使用经验优先;

3、熟悉熟悉HTTP,TCPIP,Socket网络通讯协议,熟悉Kafka,RabitMQ等中间件;

4、熟悉分布式缓存Redis,Memcache,熟悉SOA, WebService等技术;

5、熟悉ORACLE,MySql数据库开发技术及相关工具,熟练掌握SQL,有海量数据系统的开发、调优经验;

6、熟悉Linux环境以及操作,SVN的使用,熟悉Tomcat,Apache,Nginx等开源的服务器;

7、熟悉微服务架构设计原理,并有过相关实战经验;

8、有大数据方面工作经验如hadoop、storm、spark、hbase等技术的优先;

9、有过数据仓库系统设计和实施经验的优先;

大数据开发工程师岗位职责 篇22

职责:

1. 参与公司项目或产品的前期调研、需求整理、设计、开发、部署等工作:

2. 按照设计的功能,协助公司开发工程师完成相关模块的代码编写工作;

3. 整理公司项目或产品的技术文档;

4. 参与公司项目或产品的验收工作;

任职要求:

1、基本了解JAVA开发语言,了解面向对象的软件设计方法;

2、熟悉XML、JSON、XSLT技术;

3、学习能力强,工作热情高,富有责任感,工作认真、细致、敬业,责任心强;

大数据开发工程师岗位职责 篇23

1、参与O2O平台(PC及移动)及网站的设计与研发

2、能根据项目任务计划独立按时完成软件高质量编码和调试工作

3、与团队一起解决大数据量,高并发,高可靠性等各种技术问题,不断挑战技术难题,持续对系统进行优化.

4、复杂分布式系统的设计、开发及维护,用技术支撑公司O2O业务的快速发展.

5、负责解决产品使用中遇到的各种问题,并进行总结与改进,从技术角度对产品设计和体验提出建议

大数据开发工程师岗位职责 篇24

职责:

1、参与概要设计,详细设计,并负责完成核心代码;

2、参与项目技术选型与架构讨论;

3、各类应用系统模块设计与开发,以及相关设计文档编写和整理;

4、指导其他初、中级软件工程师工作;

5、完成领导交代的其他工作。

岗位要求:

1.精通java语言,熟悉基本设计模式。

2.熟悉常用应用服务器产品,如Tomcat,熟悉Linux系统,熟悉Java应用的部署、配置、调试和测试,并能根据调试测试结果定位错误原因,找出解决方案。

3.掌握SQL语言,熟悉以下任意一种或多种数据库:SQL server、Oracle、MySQL,了解并能熟练运用其常见性能优化手段。

4.熟悉j2EE技术,精通struts、spring、hibernate,mybatis等开源框架,精通jquery等前端框架。

5.熟悉消息中间件,缓存,应用服务器等中间件,并有实际的项目应用经验。

6.掌握各类技术文档的编写和整理。

7.有设计,调试接口的相关经验。

8.对信息技术领域的新信息、新知识具有相当的敏感性,能够迅速更新自身的知识内容,能够在短时间内攻克技术难关。

9.具有很好的代码编写能力和良好的代码编程习惯。

10.具有公卫领域相关项目经验者优先考虑。

大数据开发工程师岗位职责 篇25

职位要求:

1、本科及以上学历,计算机、自动化相关专业。

2、熟悉理解windows编程,熟练掌握c#编程,熟悉.net framework框架和工控组态软件。

3、熟练掌握orecal、mssql、mysql等数据库开发技术、相关工具。

4、学习能力、接受新技术能力强,具有良好的团队精神。

5、有大型项目的开发经验者优先。

6、能承受较大工作压力,具有团队合作精神。

7、三年以上c#开发经验,有较强的编程能力。

岗位职责:

1、负责scada系统的`底层通讯开发、测试、调试及编写相应的技术文件。

2、负责操作平台移植开发,如windows、unix和linux。

3、负责相关技术支持。