Desarrollador/a Pyspark/ScalaSpark

Remote: 
Full Remote
Contract: 
Work from: 

Offer summary

Qualifications:

Proficiency in Pyspark and ScalaSpark is mandatory., Experience with Python is desirable., Familiarity with Control-M for process review is a plus., Strong understanding of data ingestion, transformation, and validation processes..

Key responsibilities:

  • Develop processes using Pyspark, ScalaSpark, and Python.
  • Review processes in Control-M and logs for troubleshooting.
  • Plan workflows in the Document Management System.
  • Make modifications to scheduled jobs and handle data exploitation processes.

Grupo TECDATA Engineering logo
Grupo TECDATA Engineering Scaleup https://www.tecdata.es/
201 - 500 Employees
See all jobs

Job description

Oferta de Empleo: Desarrollador/a Pyspark/SparkScala

Tecnologías a usar (Obligatorias):

Pyspark /Spark Scala

Tecnologías a usar (Deseables):

Python

Tareas a realizar:

Desarrollar procesos con lenguajes como Python, Pyspark o ScalaSpark

Revisar procesos en Control-M

Revisión de logs

Planificar mallas en Gestor Documental

Modificación de pequeños cambios en jobs programados

Realizar ingestas y procesos de explotación de datos, transferencias, transformación y validación de datos

Todo esto en el Universo de cliente (arquitectura ADA)

Primary Skill:

Python

Localización exacta:

Remoto

Ubicación del proyecto: Madrid - Las Tablas

Required profile

Experience

Spoken language(s):
Spanish
Check out the description to know which languages are mandatory.

Related jobs