Hadoop Developer Function Beschrijving

We zijn op zoek naar een Hadoop-ontwikkelaar om ons te helpen bij het ontwikkelen van grootschalige gegevensopslag- en verwerkingssoftware en infrastructuur. Kennis van huidige technologieën en de mogelijkheid om toepassingen te maken met behulp van de Hadoop API is vereist.

Hadoop is een gratis en open-source platform voor het beheren en opslaan van grote gegevenstoepassingen in clusters. Hadoop -ontwikkelaars zijn verantwoordelijk voor het ontwikkelen en coderen van Hadoop -applicaties. Een Hadoop -ontwikkelaar biedt in wezen programma's om de enorme gegevens van een bedrijf te verwerken en te onderhouden.

• Hoofd technologie
• Tech Lead
• Lead Hadoop -ingenieur
• Sr. Software Developer
• JavaScript -ontwikkelaar

• Wees de leiding over alle Hadoop -applicatieontwerp, ontwikkeling, architectuur en documentatie
• Wees om Hadoop te installeren, te configureren en te onderhouden
• Gebruik een planner om Hadoop -taken te beheren
• Verminder de code voor Hadoop -clusters en helpt ook bij het creëren van nieuwe Hadoop -clusters
• Vertaal complexe methodologie en functionele specificaties in uitgebreide ontwerpen
• Maak online apps voor het zoeken naar gegevens en snelle gegevens volgen, allemaal met betere snelheden
• Stel de best practices en normen van de organisatie voor en breng ze vervolgens over naar operaties
• Test Software -prototypes en begeleiden hun daaropvolgende overdracht naar het operationele team
• Gebruik varken en bijenkorf om gegevens vooraf te verwerken
• Handhaaf de gegevensbeveiliging van enterprise en Hadoop Cluster Privacy
• HBASE -administratie en implementatie
• Analyzeanalyseer massieve gegevensrepositories en verkrijg inzichten

• Een bachelor- of masterdiploma in informatica
• basiskennis van Hadoop en het ecosysteem
• in staat om met Linux te werken en de meeste basale opdrachten uit te voeren
• Praktische kennis van Hadoop -kerncomponenten
• MapReduce, Pig, Hive en HBase zijn voorbeelden van Hadoop -technologie
• Mogelijkheid om met multi-threading en gelijktijdigheid om te gaan in een ecosysteem
• Bekendheid met ETL- en gegevenslaadtechnologieën zoals Flume en Sqoop
• Mogelijkheid om met back-end programmeren om te gaan
• Een goed begrip van SQL -basisprincipes en gedistribueerde systemen
• Uitgebreide programmeerervaring in talen zoals Java, Python, JavaScript en Nodejs
• Bekendheid met Java