数据开发工程师工作总结4篇
时间:2023-09-13 19:40:07 来源:千叶帆 本文已影响人
数据开发工程师工作总结1、负责数据分析、加工、清理,相关处理脚本和程序的开发;2、负责开发大数据工具,如报表平台、多维度分析工具、etl平台、调度平台的`研下面是小编为大家整理的数据开发工程师工作总结4篇,供大家参考。
数据开发工程师工作总结篇1
1、负责数据分析、加工、清理,相关处理脚本和程序的开发;
2、负责开发大数据工具,如报表平台、多维度分析工具、etl平台、调度平台的`研发;
3、负责分布式大数据平台应用开发(hadoop/spark/hive/hbase等);
4、负责大数据相关平台的维护、优化。
1、本科及以上学历,计算机相关专业,具有5年及以上的大数据etl或数据开发经验,熟悉大数据组件的维护以及调优;
2、熟练掌握java或python编程语言,熟悉大数据架构体系,熟悉hadoop、hdfs、hive、hbase、spark、kafka等技术中的一个或者多个,熟悉sqoop、datax等数据导入工具;
3、能熟练使用hive、hbase、spark等加工和处理数据,有海量数据处理经验;
4、有数据仓库开发经验/bi系统开发经验优先;
5、有电商行业数据处理与分析平台开发经验者优先。
数据开发工程师工作总结篇2
1.有独立工作能力,工作踏实认真,以及较强的团队协作精神。
2.负责日志大数据平台的搭建和规划;
3.在总体架构设计下,完成日志大数据产品的设计、搭建、维护和调优,技术文档的编写与维护;
4.参与业务日志的大数据分析;
5.及时反馈开发中遇到的.难点问题,沟通并寻求解决方案,按阶段有计划地完成开发任务
1、计算机等相关专业本科以上学历,2年以上开发经验;
2、熟悉linux操作系统,熟悉shell脚本语言,精通java,有较强的开发能力;
2、熟练使用sql,熟悉mysql、mongodb、hive等数据库技术的基本操作及原理;
3、熟悉hadoop/spark生态系统组件的使用,至少有1年的spark(core/streaming/sql)开发经验;
4、熟悉elastic产品线(如elasticsearch、kafka、kibana、logstash)的使用方法,了解常见优化方案,熟悉elasticsearch部署、监控及性能调优;
5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;
数据开发工程师工作总结篇3
1. 建立和维护公司it项目建设管理的`规章制度;
2. 项目进度跟踪和控制,风险识别,里程碑监控、项目成本管理;
3. 根据公司it系统需求和系统设计要求,进行详细分析、设计,编写设计文档,进行功能模块的代码编写工作;
4. 协助进行公司it系统架构设计,技术规划及技术可行性分析,对公司it系统架构方案提出优化改进建议,提高系统架构质量;
5. 根据开发规范编写各种开发文档及项目文档;
6. 评估项目交付件,对系统质量负责。
7. 对于开发外包项目,作为开发接口人与供应商进行系统开发对接,对开发进度进行管理控制,修正开发偏差。
8. 上级领导安排的其他工作。
数据开发工程师工作总结篇4
1、负责数据分析、加工、清理,相关处理脚本和程序的开发;
2、负责开发大数据工具,如报表平台、多维度分析工具、etl平台、调度平台的`研发;
3、负责分布式大数据平台应用开发(hadoop/spark/hive/hbase等);
4、负责大数据相关平台的维护、优化。
1、本科及以上学历,计算机相关专业,具有5年及以上的大数据etl或数据开发经验,熟悉大数据组件的维护以及调优;
2、熟练掌握java或python编程语言,熟悉大数据架构体系,熟悉hadoop、hdfs、hive、hbase、spark、kafka等技术中的一个或者多个,熟悉sqoop、datax等数据导入工具;
3、能熟练使用hive、hbase、spark等加工和处理数据,有海量数据处理经验;
4、有数据仓库开发经验/bi系统开发经验优先;
5、有电商行业数据处理与分析平台开发经验者优先。
相关热词搜索:工作总结,工程师,数据,数据开发工程师工作总结范文,数据开发工程师工作总结怎么写,数据开发工程师工作总结报告,数据开发工程师工作内容,数据开发工程师岗位职责,数据开发年终总结,数据开发工程师的发展前景,数据开发工程师的有前景吗,数据开发工程师薪资待遇,数据开发工程师工资水平,