范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

大数据开发工程师岗位的基本职责

  大数据开发工程师需要编写产品研发相关任务单计划,阶段性代码、技术方案和软件产品及时提交至配置管理理库。以下是品学网小编整理的大数据开发工程师岗位的基本职责。
  大数据开发工程师岗位的基本职责1
  职责:
  1、负责大数据平台的技术和产品的设计、开发、优化和维护;
  2、负责大数据平台设计文档编写,线上产品的维护;
  3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;
  4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;
  5、参与指标设计,数据建模,负责将数据模型在系统中实现;
  6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;
  7、负责追踪整体产品过程及质量把控。
  任职要求:
  1、专业技能:精通 Hadoop 生态圈中的一项或几项技术,深入了解 Hadoop 及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项 Nosql 技术;具有扎实 java 功底及开发能力;对 hadoop,hive,hbase,spark 等相关源码有一定了解;
  2、学历背景:计算机相关专业本科及以上学历;
  3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验
  4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。
  5、有团队管理经验者优先。
  大数据开发工程师岗位的基本职责2
  职责:
  1、负责大数据统计平台建设与优化;
  2、负责广告效果分析,反作弊平台建设;
  3、负责移动广告平台相关系统的设计研发及持续优化。
  职位要求:
  1、计算机或相关专业本科学历及以上,2年工作经验;
  2、精通大数据采集、处理、存储、查询相关技术;
  3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相关技术;
  4、至少熟练掌握 Java/Scala/Python 中一门语言;
  5、有做过大数据量查询优化的优先;
  6、有大数据服务运维、性能调优者优先;
  7、熟悉常用的设计模式,对MVC框架有了解;
  8、强烈的责任心,对技术充满热情,高效率,良好的沟通能力。
  大数据开发工程师岗位的基本职责3
  职责:
  1.有独立工作能力,工作踏实认真,以及较强的团队协作精神。
  2.负责日志大数据平台的搭建和规划;
  3.在总体架构设计下,完成日志大数据产品的设计、搭建、维护和调优,技术文档的编写与维护;
  4.参与业务日志的大数据分析;
  5.及时反馈开发中遇到的难点问题,沟通并寻求解决方案,按阶段有计划地完成开发任务
  任职资格:
  1、计算机等相关专业本科以上学历,2年以上开发经验;
  2、熟悉 linux 操作系统,熟悉 shell 脚本语言,精通 Java,有较强的开发能力;
  2、熟练使用SQL,熟悉Mysql、MongoDB、Hive等数据库技术的基本操作及原理;
  3、熟悉Hadoop/Spark生态系统组件的使用,至少有1年的Spark(Core/Streaming/SQL)开发经验;
  4、熟悉Elastic产品线(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,了解常见优化方案,熟悉Elasticsearch部署、监控及性能调优;
  5、熟悉数据挖掘、机器学习、网络数据分析等技术优先;
  大数据开发工程师岗位的基本职责4
  职责:
  1. 根据公司业务需求,进行数据开发及报表制作;
  2. 参与BI、大数据平台体系建设;
  3. 文档整理,包括ER图、原型设计、数据字典整理等;
  岗位要求:
  1. 本科或以上学历,计算机相关专业,2年及以上工作经验;
  2. 熟练使用主流数据库(如ORACLE/PostgreSQL/MYSQL等),掌握SQL查询优化方法;
  3. 熟悉HADOOP生态,能够熟练使用HIVE/HBASE/SPARK进行数据开发;
  4. 掌握JAVA或PYTHON,会TABLEAU/KYLIN/帆软等BI工具者优先;
  大数据开发工程师岗位的基本职责5
  职责:
  1. 负责设计和实现手机卫士大数据BI平台;
  2. 不断完善数据产品的架构设计,应用开发和新技术迭代;
  3. 配合业务,产品,根据不同的业务需求,灵活快速地完成具有挑战性的项目,为业务提供有价值的数据分析和预测。
  任职要求
  1. 计算机软件相关专业本科及以上学历,至少3年以上工作经验;
  2. 认可技术与平台在BI的价值,能够深入业务领域,通过使用数据分析和挖据技术,让业务生成的海量数据产生更大价值。
  3. 熟练掌握大数据技术:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP, Elastic Search等等。
  4. 具备良好的编程能力和代码风格,熟练掌握Java, Python等语言,熟练使用SQL,并具有较强的优化能力。
  5. 需要有很强的开发和架构设计能力,特别是在大数据的分布式和实时处理领域,对存储引擎和查询引擎的原理和优化都具备比较深入的理解。
  6. 有一定的数据挖掘和机器学习算法能力,包括推荐系统,深度学习等技术领域 。
  7. 拥有正直、积极、宽容的品质,学习能力强,并且善于沟通合作。

制造工艺实习报告一观看电子产品制造技术录像总结通过观看电子产品制造技术录像,我初步了解了pcb板的制作工艺以及表贴焊技术工艺流程pcb版制作基本步骤用软件化电路图,打印菲林纸,曝光电路板,显影,腐工艺实习报告第一天实习工种钳工实习目的了解钳工工作的几个工序初步把握钳工工具的使用和对金属进行简单加工实习内容加工一直径为21。9mm厚度10mm的正六边形螺母加工材料一直径为25mm的圆棒加2015年警察入党志愿书范例敬爱的党组织我志愿加入中国共产党,愿意为共产党事业奋斗终身。中国共产党是中国工人阶级的先锋队,是中国各族人民利益的忠实代表,是中国社会主义事业的领导核心。党的最终目的是实现人类最崇2015年党员思想汇报范文践行群众路线敬爱的党组织践行群众路线必须听得进群众的话。听得进群众的话,才能解决实际问题推动工作落实。听不进群众的话,就难以全面客观准确的认识事物,及时有效的解决问题。干部下基层是密切联系群众春季防火倡议书新学期开始正值进入春季,天干物燥,是火灾事故多发时节,也是每年防火的重要季节。那么你知道春季防火倡议书怎么写的吗?下面是品学网小编为你整理的春季防火倡议书,希望对你有用。春季防火倡中西方服饰审美的异同基于不同的发展历史民族文化和生活环境,中华民族与西洋服饰的审美取向也形成了迥乎不同的风貌。中西服饰审美取向直接导致了各自服饰外在形式美的不同和内在神韵的不同追求。下面是品学网小编给社会组织年度工作总结作为促进社会组织健康发展的有效途径,社会组织评估已获得了政府和学术界的普遍认可,对于社会组织评估的研究和实践得到广泛重视,今天品学网小编为大家精心挑选了关于社会组织年度工作总结的文高中数学优质课学生评语评语既是对学生全面考核后的概括性评价,又是促使学生进步的良好手段下面是有高中数学优质课学生评语,欢迎参阅。高中数学优质课学生评语1你特长突出,很有灵性,你看似沉静其实性格开朗,你交学生综合评语高中对学生思想品德的考核一般采用定性的综合评语,对学生进行综合评价,也就是通常的操行评语,下面是有学生综合评语高中,欢迎参阅学生综合评语高中1心地善良,脾气温柔,活泼可爱,为人坦诚,接大学生第一天军训心得体会800字军训是高校素质教育的重要组成部分,是大学生在校期间履行兵役义务接受国防教育的重要方式,是学校实践育人的主要形式之一。品学网小编在此整理了大学生第一天军训心得体会800字,希望大家在布达拉宫的优秀导游词布达拉宫的优秀导游词(1)尊敬的游客,你们好!欢迎你们来到西藏的布达拉宫。今天,我金导游要带你们去闻名中外的布达拉宫游览一番,相信你们会大饱眼福的。其次,我还有几个提醒1不能随地扔
自我评价高中生400字通过自我评价,高中生要在学习生活中多加观察,善于总结自己的行为习惯,要多于老师同学家长沟通,及时发现并纠正自身的错误。下面是品学网小编整理自我评价高中生400字的范文,欢迎阅读!自实用就业介绍信4篇在学习工作生活中,越来越多人会去使用介绍信,介绍信是联结双方关系的一个桥梁,其目的旨在证明来人的身份,以便防止假冒。怎么写介绍信才能避免踩雷呢?下面是小编精心整理的就业介绍信4篇,感谢老师的一封信范本感谢信能够及时地表达谢忱,你知道感谢老师的一封信是怎样写吗?下面就让品学网小编带大家看看一系列的感谢老师的一封信。望大家采纳。感谢老师的一封信范文篇一郝老师你好!我是你所授课培训班关于四有好老师心得体会四有好老师是指有理想信念有道德情操有扎实学识有仁爱之心的ldquo四有rdquo好老师。下面是品学网小编进行整理的四有好老师心得体会范文,供大家学习和参阅。当代四有好老师心得体会X小学英语老师教学工作总结小学英语老师教学工作总结篇一一个学期紧张繁忙的英语教学工作即将告一段落,四个多月120多个日日夜夜,可谓一路探索一路艰辛一路欣喜一路收获。本学期,我担任四年级和五年级的英语教学工作高中语文老师年度总结高中语文老师年度总结1一学期的时光就这样过去了,回顾一学期的工作,想说的真是太多太多。人民教师这一职业是非常辛苦的,尤其作为一名刚刚走上教育岗位的年轻教师,不仅要尽快适应工作,更担2021心理小游戏活动策划书心理游戏是交互作用分析的理论基础,是一种独具特色的人际沟通理论。下面是有20xx心理小游戏活动策划书,欢迎参阅。20xx心理小游戏活动策划书范文1一。活动背景为了丰富我班同学的课余商务谈判策划书范文商务谈判是指人们为了协调彼此之间的商务关系,那么商务谈判的策划书应该怎么写?下面品学网小编给大家介绍关于商务谈判策划书范文的相关资料,希望对您有所帮助。商务谈判策划书范文一一谈判双办公写字楼租赁合同格式随着新时期国内的经济发展,企业的旧有生产模式已经难以满足企业的生产和发展需求,租赁行业的出现,为企业提供了另一种形式的发展模式。对于办公写字楼租赁合同你又有多少了解呢?以下是品学网2021年1月积极分子思想汇报加深对党的认识敬爱的党组织也许,没有发生在我们身边的事情,我们无法做到感同身受,无法切身体会他人的悲哀,无法感受那种撕心裂肺。但是地震后的那一幕幕景象,无一不让我们沉痛,不让我们感受到那种窒息和思想汇报2021年1月践行党的纲领敬爱的党组织今天我又读了党的纲领,每一次回顾它,我都会有新得体会,新的收获,感受到我们的历史责任和使命。中国成立之日就明确宣布,以为奋斗目标,这是我们党的纲领。纵观我党八十年的历史