Data Engineer Spark Scala Senior | Devoteam Maroc Nearshore

Rabat, 4, MA, Morocco

Job Description

- Chez Devoteam, nous sommes des Digital Transformakers . Le respect, la franchise et la passion animent chaque jour notre tribu.


Ensemble, nous aidons nos clients a remporter la bataille du Digital : du conseil a la mise en oeuvre de technologies innovantes, jusqu'a l'adoption des usages.


Cloud, Cybersecurity, Data, DevOps, Fullstack Dev, Low Code, RPA n'ont plus aucun secret pour notre tribu !


Nos 10 000+ collaborateurs sont certifies, formes et accompagnes au quotidien pour relever de nouveaux challenges innovants.


Leader du Cloud, de la Cybersecurite et de la Data en EMEA, le Groupe Devoteam a realise en 2022 un chiffre d'affaires de 1,036 milliard d'euros et se donne pour ambition de le doubler dans les 5 annees a venir.


Devoteam Maroc, acteur de reference dans les expertises IT depuis plus de 30 ans (350+ consultants) accelere sa croissance en developpant ses activites d'expertise en nearshore pour repondre aux besoins de nos clients francais, europeens et moyen orientaux.


Es-tu pret(e) a nous rejoindre et relever ensemble ce defi ?




Data Engineer Spark Scala Senior @ Devoteam Data Driven.



Dans un monde ou les sources de donnees sont en constante evolution, Devoteam Data Driven aide ses clients a transformer leurs donnees en informations exploitables et les rendre ainsi impactantes pour plus de valeur business.


Data Driven adresse les 3 grandes dimensions suivantes : Data Strategy, Data for Business et Data Foundation en appui d'expertise chez ses clients pour les rendre encore plus performants et competitifs au quotidien.


Au sein des equipes Nearshore de Devoteam Maroc, tu rejoindras les equipes de la tribu Data Foundation : une equipe enthousiaste de Data Engineers, de Data Ops, de Tech lead architectes et de chefs de projets travaillant sur les plateformes et l'ecosysteme Data : designer, construire et moderniser les plateformes et solutions Data, concevoir les data pipelines en mettant l'accent sur l'agilite et le DevOps applique a la Data.


Tu seras le maillon essentiel pour fournir les donnees fiables et valorisees aux metiers leur permettant de creer leurs nouveaux produits et services et tu appuieras aussi les equipes Data Science en leur fournissant les environnements de donnees "datalab" necessaires pour mener a bien leurs demarches exploratoires dans l'elaboration et l'industrialisation de leurs modeles, a savoir :


Concevoir, developper et maintenir des pipelines de donnees efficaces pour extraire, transformer et charger les donnees de differentes sources vers des systemes de stockage de donnees de type Lakehouse (datalake, datawarehouse) Ecrire du code Scala, souvent associe a Apache Spark pour ses fonctionnalites concises et expressives, afin de realiser des transformations complexes sur de grands volumes de donnees S'appuyer sur les fonctionnalites offertes par Apache Spark, telles que les transformations et les actions distribuees, pour traiter les donnees a grande echelle de maniere rapide et efficace Identifier et resoudre les problemes de performance dans les pipelines de donnees, en optimisant les requetes Spark, en ajustant la configuration de Spark et en mettant en oeuvre les meilleures pratiques. Collaborer avec d'autres equipes pour integrer les pipelines de donnees avec des bases de donnees SQL, noSQL, du streaming Kafka, des systemes de fichiers de type buckets ... Si besoin, concevoir et mettre en oeuvre des pipelines de traitement des donnees en temps reel en utilisant les fonctionnalites de streaming de Spark Mettre en oeuvre les mecanismes de securite pour proteger les donnees sensibles en utilisant les fonctionnalites d'authentification, d'autorisation RBAC/ABAC, de chiffrement, d'anonymisation des donnees Documenter le code, les pipelines de donnees, les schemas de donnees et les decisions de conception pour assurer leur comprehension et maintenabilite Mettre en place les tests unitaires et d'integration pour assurer la qualite du code et deboguer les problemes eventuels dans les pipelines de donnees
Tu donneras ta pleine mesure par la maitrise de tes fondamentaux techniques, ta connaissance sur le bout des doigts des donnees que tu traites et que tu manipules et surtout en affirmant ta volonte a comprendre les besoins et le metier pour lequel tu travailleras.


Ton terrain de jeu : la distribution, l'energie, la finance, l'industrie, la sante et les transports avec plein de cas d'usage et de nouveaux defis Data a relever ensemble notamment la Data dans le Cloud.


Ce qu'on attend de toi.



Que tu aies foi dans la Data Que tu aides ton collegue Que tu sois gentil avec tes RHs Que tu t'eclates dans ta mission Et que les Codingame ne te fassent pas peur (tu ne seras pas seul : on t'aidera)
Et plus serieusement :


Que tu maitrises les fondamentaux de la Data : les technologies Hadoop, Spark, les data pipelines : l'ingestion, le traitement, la valorisation et l'exposition des donnees Que tu souhaites t'investir sur les nouveaux paradigmes de la Data : Cloud, DaaS, SaaS, DataOps, AutoML et que tu t'engages a nos cotes dans cette aventure Que tu aimes travailler en mode agile Que tu realises des pipelines data performants Que tu entretiennes cette double competence Dev & Infra Que tu sois proche des metiers, que tu les accompagnes dans la definition de leurs besoins, leurs nouveaux produits & services : dans des ateliers, en definissant les user stories et en eprouvant au travers de POC Et coder est ta passion : tu travailles ton code, tu commit en Open Source, tu fais un peu de competition alors rejoins nous

Ce qu'on t'apportera.



Un manager a tes cotes en toute circonstance Une communaute Data ou tu y trouveras ta place : Ideation Lab, Hackathon, Meetup ... Un parcours de formation et de certification via "myDevoteam Academy" sur les technologies du moment et a venir : Databricks, Spark, Azure Data, Elastic.io, Kafka, Snowflake, GCP BigQuery, dbt, Ansible, Docker, k8s ... Un renfort de ton expertise dans le domaine de la Data pour devenir un Tech Lead Cloud (Azure, AWS, GCP ...), un architecte des futures plateformes Data, un expert DataOps au service des metiers (Data as a Service) et de la Data Science (AutoML), un Data Office Manager en pilotage des projets Data Product, bref plein de nouveaux jobs en perspective ... La possibilite de t'investir personnellement : etre formateur interne, leader de communaute, participer aux entretiens candidats, aider a developper nos offres et pourquoi pas manager ta propre equipe ...

Quelques exemples de missions.



La conception, la mise en place et le support des pipelines data Le deploiement de solutions data dans une demarche Agile et DevOps Le developpement d'API REST pour exposer les donnees Le support et l'expertise sur les technologies Data et les solutions deployees : Hadoop, Spark, Kafka, Elasticsearch, Snowflake, BigQuery, Azure, AWS ...

Quels atouts pour rejoindre l'equipe ?



Diplome d'ingenieur ou equivalent Expert dans le domaine de la Data : 3 a 5 ans d'experience post diplome Maitrise et pratique averee de Apache Spark Maitrise et pratique averee de Scala Pratique de Python et pySpark Connaissance et pratique des outils d'orchestration tels Apache Oozie, Apache Airflow, Databricks Jobs Des certifications seront un plus specialement sur Spark, Databricks, Azure, GCP Maitrise des principes ETL/ELT Pratique des outils ETL/ELT tels Talend Data Integration, Apache Nifi, dbt sont un plus Pratique de Kafka et Spark Streaming sont un plus aussi Une double competence dev (java, scala, python) infra (linux, ansible, k8s) Une bonne connaissance des API Rest et microservices Maitrise des outils d'integration CI/CD (Jenkins, Gitlab) et du travail en mode agile Un excellent relationnel, tu aimes travailler en equipe Un sens prononce du service et engage dans tes activites Savoir communiquer et ecouter en toutes circonstances et ecrire sans fautes ... and you are fluent in english, indeed !

-

Informations additionnelles.




Poste base au Maroc dans nos locaux de Rabat et/ou Casablanca et ouvert uniquement en CDI Poste hybride avec possibilite de teletravail En rejoignant Devoteam, vous aurez la possibilite d'echanger avec vos pairs, de partager leur experience et de developper vos competences en rejoignant la communaute Data Driven rassemblant les consultants des 18 pays du Groupe

Restons connectes :



https://www.linkedin.com/company/devoteam https://twitter.com/devoteam * https://www.facebook.com/devoteam

Beware of fraud agents! do not pay money to get a job

MNCJobsGulf.com will not be responsible for any payment made to a third-party. All Terms of Use are applicable.


Job Detail

  • Job Id
    JD2203132
  • Industry
    Not mentioned
  • Total Positions
    1
  • Job Type:
    Full Time
  • Salary:
    Not mentioned
  • Employment Status
    Permanent
  • Job Location
    Rabat, 4, MA, Morocco
  • Education
    Not mentioned