Описание работы разработчика Spark

Как разработчик Spark, вы будете нести ответственность за создание, поддержку и поддержание эффективного, многоразового и надежного кода Java. В дополнение к этому вам также потребуется внести свой вклад в разработку и архитектуру программного обеспечения.

Разработчик Spark отвечает за разработку, программирование и обслуживание приложений с использованием фреймворка Apache Spark с открытым исходным кодом. Они работают с различными аспектами экосистемы Spark, включая Spark SQL, DataFrames, наборы данных и потоковую передачу. Разработчик Spark должен обладать сильными навыками программирования в Java, Scala или Python. Они также должны быть знакомы с инструментами и методами обработки больших данных.

• ИТ-менеджер

• Разработать, программировать и поддерживать приложения, используя фреймворк с открытым искрытом Apache Spark
• Работать с различными аспектами экосистемы Spark, включая Spark SQL, DataFrames, наборы данных и потоковую передачу
• Разработчик Spark должен иметь сильные навыки программирования в Java, Scala или Python
• знакомы с инструментами и методами обработки больших данных

• Проверенный опыт в качестве разработчика Spark или связанной с ним роли
• Сильные навыки программирования в Java, Scala или Python
• Знакомство с инструментами и методами обработки больших данных
• Опыт работы с экосистемой Hadoop
• Хорошее понимание распределенных систем
• Опыт работы с потоковыми платформами данных
• Отличные аналитические и решения проблем-