Hadoop Developer Jobbbeskrivelse Mal/Brief

Vi søker en Hadoop-utvikler for å hjelpe oss med å utvikle programvare og infrastruktur for datalagring og prosessering i stor skala. Kunnskap om nåværende teknologier og evnen til å lage applikasjoner som bruker Hadoop API er påkrevd.

Hadoop Developer Job Profile

Hadoop er en gratis og åpen kildekode-plattform for å administrere og lagre store dataapplikasjoner i klynger. Hadoop -utviklere har ansvaret for å utvikle og kode Hadoop -applikasjoner. En Hadoop -utvikler tilbyr i hovedsak programmer for å håndtere og vedlikeholde et selskaps massive data.

Rapporterer til

  • Chief Technology Officer
  • Teknisk bly
  • Led Hadoop Engineer
  • Sr. Software Developer
  • JavaScript -utvikler

Hadoop utvikleransvar

  • ha ansvar for all Hadoop -applikasjonsdesign, utvikling, arkitektur og dokumentasjon
  • Vær i rekkefølge å installere, konfigurere og vedlikeholde Hadoop
  • Bruk en planlegger for å administrere Hadoop -oppgaver
  • Reduser koden for Hadoop -klynger mens du også hjelper deg med å lage nye Hadoop -klynger
  • Oversett kompleks metodikk og funksjonelle spesifikasjoner til omfattende design
  • Lag online apper for dataforespørsel og rask datasporing, alt i bedre hastigheter
  • Foreslå organisasjonens beste praksis og standarder, og overfør dem deretter til operasjoner
  • Test programvareprototyper og overvåke deres påfølgende overføring til operasjonelle team
  • Bruk gris og bikub for å forbehandle data
  • Vedlikeholde bedriftsdatasikkerhet og Hadoop Cluster personvern
  • HBase -administrering og distribusjon
  • Analyseanalyser massive dataregistreringer og innhent innsikt

Hadoop utviklerkrav og ferdigheter

  • En bachelor- eller mastergrad i informatikk
  • Grunnleggende forståelse av Hadoop og dets økosystem
  • i stand til å jobbe med Linux og utføre de fleste grunnleggende kommandoer
  • Praktisk kunnskap om Hadoop -kjernekomponenter
  • MapReduce, Pig, Hive og HBase er eksempler på Hadoop -teknologi
  • Evne til å håndtere flertråd og samtidighet i et økosystem
  • Kjennskap til ETL- og databelastningsteknologier som Flume og Sqoop
  • Evne til å håndtere back-end programmering
  • En solid forståelse av SQL -grunnleggende og distribuerte systemer
  • Omfattende programmeringsopplevelse på språk som Java, Python, JavaScript og Nodejs
  • Kjennskap til Java