Description :
Le client souhaite recruter un ingénieur de données et un spécialiste du lac de données azur.
Ce consultant fera partie de l’équipe de la plateforme de données et participera à de nombreux projets pour transformer les données et répondre à de multiples besoins.
La majeure partie du travail consistera en l’exploration des données, l’ingestion des données, la transformation des données, la préparation des données, la conception, la construction et le développement de pipelines consolidant les sources de données en streaming et en batch dans le lac de données de l’entreprise. L’ingénieur participera également à l’élaboration d’un outil de validation de la qualité des données dans le lac de données.
Responsabilités :
Utilisation de Databricks pour la transformation et le chargement des données dans les différentes couches.
Utilisation de Spark/Python pour le développement des librairies
Utilisation des pipelines Azure DevOps pour automatiser le CI/CD
Participer au développement de l’ensemble des données et incorporer de nouvelles sources du lac de données
Développer des bonnes pratiques sur la validation de la qualité des données
Exigences :
3 ans dans le développement en spark/python
3 ans sur databricks
2 ans sur Azure DevOps
Expérience avec Powershell
Expérience sur azure data lake
Expérience en data factory
Compétences :
Azure, Python, Spark, databricks, devops, pipelines, ci/cd, Data lake, Data factory, Data, data warehouse, cloud
Compétences et qualifications supplémentaires :
Compétences non techniques :
Solides compétences en matière de relations interpersonnelles, de travail en équipe, de coordination et de recherche de consensus
Solides compétences en matière de communication, de documentation, de narration, de créativité et de présentation
Solides compétences organisationnelles, capacité à travailler sous pression et à gérer des priorités multiples avec des demandes concurrentes.
demandes concurrentes
Langue :
Niveau d’expérience :
Niveau intermédiaire
À propos de TEKsystems:
Nous sommes partenaires dans la transformation. Nous aidons les clients à activer des idées et des solutions afin de profiter d’un nouveau monde d’opportunités. Nous sommes une équipe solide de 80 000 personnes, nous travaillons avec plus de 6 000 clients, dont 80 % faisant partie du Fortune 500, partout en Amérique du Nord, en Europe et en Asie. En tant que chefs de file de l’industrie des services technologiques complets, des services aux talents et des applications du monde réel, nous travaillons avec des leaders progressistes pour favoriser le changement. C’est le pouvoir d’un vrai partenariat. TEKsystems est une société du groupe Allegis.
Québec Numéro du permis d’agence de placement de personnel AP-2000547
About TEKsystems:
We’re partners in transformation. We help clients activate ideas and solutions to take advantage of a new world of opportunity. We are a team of 80,000 strong, working with over 6,000 clients, including 80% of the Fortune 500, across North America, Europe and Asia. As an industry leader in Full-Stack Technology Services, Talent Services, and real-world application, we work with progressive leaders to drive change. That’s the power of true partnership. TEKsystems is an Allegis Group company.
The company is an equal opportunity employer and will consider all applications without regards to race, sex, age, color, religion, national origin, veteran status, disability, sexual orientation, gender identity, genetic information or any characteristic protected by law.
Quebec Personnel Placement Agency Permit Number AP-2000547
Sales Associate, PT Date: Jan 2, 2024 Location: Mirabel, Quebec, CA, J7J OT1 Company: Under Armour Values & Innovation At...
Apply For This JobPosition Description Sessional Instructor Openings – Summer 2022 Position Type: Term Certain Education Required: PhD or EdD Application Deadline: April...
Apply For This JobAbout CIMT College CIMT College is registered as a Private Career College under the Private Career Colleges Act, 2005 and...
Apply For This JobSummit Academy is a co-educational independent school founded in 2017 with students in Junior Primary to Grade 9. Academic rigour,...
Apply For This JobJob Description Insight Global is looking for an Information Technology Manager to dive into an exciting opportunity with one of...
Apply For This JobCareer wheels spinning but getting nowhere? Put yourself in the driver’s seat and get some traction with Fountain Tire Huntsville...
Apply For This Job