Modelo de Descrição do Trabalho do Engenheiro de Dados/Brief

Estamos procurando um engenheiro de dados centrado no pipeline com experiência anterior. Nosso candidato ideal terá o conhecimento matemático e estatístico que você esperaria e uma curiosidade e originalidade incomuns. Você usará vários chapéus nesta posição, mas gastará muito tempo desenvolvendo nossos procedimentos Python ETL e criando SQL fantástico.

Além dos talentos técnicos, você precisará das habilidades sociais para transmitir padrões de dados extremamente complicados aos executivos organizacionais de maneira compreensível. Estamos procurando alguém ansioso para começar e ajudar a organização a aproveitar ao máximo seus dados.

Perfil de trabalho do engenheiro de dados

Os engenheiros de dados criam pipelines de dados que convertem dados brutos e não estruturados em formulários que os cientistas de dados podem analisar. Eles estão encarregados de desenvolver e manter a infraestrutura de análise que sustenta quase todas as outras funções de dados. Bancos de dados, servidores e sistemas de processamento em larga escala são exemplos de tais estruturas.

Relatórios para

  • Equipe de dados e estratégia
  • CEO

Responsabilidades do engenheiro de dados

  • Projete e mantenha um projeto de pipeline de dados eficiente
  • Junte conjuntos de dados enormes e complicados que atendem aos objetivos de negócios
  • Reconhecer, criar e executar aprimoramentos de processos internos
  • Melhorar a entrega de dados e reimignar a infraestrutura para escalabilidade
  • Use tecnologias SQL e AWS para criar a arquitetura necessária para extração de dados, conversão e carregamento ideais de uma gama abrangente de referências de dados
  • Crie ferramentas de análise que usam o fluxo de dados para fornecer informações acionáveis ​​sobre as medidas de desempenho da empresa necessárias, como aquisição de clientes, eficiência operacional e outras pessoas
  • Colaborar com as partes interessadas internas e externas para resolver desafios técnicos relacionados a dados e suportar requisitos de infraestrutura de dados
  • Desenvolva ferramentas de dados para membros das equipes de análise e cientista de dados

Requisitos e habilidades do engenheiro de dados

  • Experiência anterior como engenheiro de dados ou em uma função comparável
  • Conhecimento técnico de modelos de dados, mineração de dados e técnicas de segmentação
  • Compreensão das linguagens de programação (por exemplo, Java e Python)
  • O conhecimento prático do design do banco de dados SQL é necessário
  • excelentes habilidades numéricas e analíticas
  • É necessário um diploma de bacharel em ciência da computação, tecnologia da informação ou disciplina relacionada; Um mestrado é preferido
  • Certificação de engenharia de dados (por exemplo, engenheiro de dados certificado pela IBM) é vantajoso