数据工程师职位描述模板/简介
我们正在寻找具有先前经验的以管道为中心的数据工程师。我们的理想候选人将拥有您期望的数学和统计知识,以及罕见的好奇心和独创性。您将在这个位置上戴各种帽子,但是您会花费大量时间来开发我们的Python ETL程序并创建出色的SQL。
除技术人才外,您还需要软技能,以可理解的方式将极其复杂的数据模式传达给组织高管。我们正在寻找渴望入门的人并协助组织充分利用其数据。
数据工程师工作资料
数据工程师创建的数据管道将原始的,非结构化的数据转换为数据科学家可以分析的表格。他们负责开发和维护几乎所有其他数据功能的分析基础架构。数据库,服务器和大规模处理系统是此类结构的示例。
汇报给
- 数据与战略团队
- 首席执行官
数据工程师职责
- 设计和维护有效的数据管道设计
- 将实现业务目标的大量复杂数据集汇总在一起
- 识别,创建和执行内部流程增强功能
- 改善数据传输并重新设计基础架构以进行可伸缩性
- 使用SQL和AWS技术来创建从全面的数据参考范围的最佳数据提取,转换和加载所需的体系结构
- 创建分析工具,以使用数据流来提供可行的见解,以对公司绩效措施,例如客户获取,运营效率等
- 与内部和外部利益相关者合作,以解决与数据相关的技术挑战并支持数据基础架构要求
- 为分析和数据科学家团队成员开发数据工具
数据工程师的要求和技能
- 作为数据工程师或可比较功能的事先经验
- 数据模型,数据挖掘和细分技术的技术知识
- 了解编程语言(例如Java和Python)
- 需要SQL数据库设计的实用知识
- 出色的数值和分析能力
- 需要获得计算机科学,信息技术或相关学科的学士学位;硕士学位是首选
- 数据工程认证(例如,IBM认证数据工程师)是有利的