Description :
Le client souhaite recruter un ingénieur de données et un spécialiste du lac de données azur.
Ce consultant fera partie de l’équipe de la plateforme de données et participera à de nombreux projets pour transformer les données et répondre à de multiples besoins.
La majeure partie du travail consistera en l’exploration des données, l’ingestion des données, la transformation des données, la préparation des données, la conception, la construction et le développement de pipelines consolidant les sources de données en streaming et en batch dans le lac de données de l’entreprise. L’ingénieur participera également à l’élaboration d’un outil de validation de la qualité des données dans le lac de données.
Responsabilités :
Utilisation de Databricks pour la transformation et le chargement des données dans les différentes couches.
Utilisation de Spark/Python pour le développement des librairies
Utilisation des pipelines Azure DevOps pour automatiser le CI/CD
Participer au développement de l’ensemble des données et incorporer de nouvelles sources du lac de données
Développer des bonnes pratiques sur la validation de la qualité des données
Exigences :
3 ans dans le développement en spark/python
3 ans sur databricks
2 ans sur Azure DevOps
Expérience avec Powershell
Expérience sur azure data lake
Expérience en data factory
Compétences :
Azure, Python, Spark, databricks, devops, pipelines, ci/cd, Data lake, Data factory, Data, data warehouse, cloud
Compétences et qualifications supplémentaires :
Compétences non techniques :
Solides compétences en matière de relations interpersonnelles, de travail en équipe, de coordination et de recherche de consensus
Solides compétences en matière de communication, de documentation, de narration, de créativité et de présentation
Solides compétences organisationnelles, capacité à travailler sous pression et à gérer des priorités multiples avec des demandes concurrentes.
demandes concurrentes
Langue :
Niveau d’expérience :
Niveau intermédiaire
À propos de TEKsystems:
Nous sommes partenaires dans la transformation. Nous aidons les clients à activer des idées et des solutions afin de profiter d’un nouveau monde d’opportunités. Nous sommes une équipe solide de 80 000 personnes, nous travaillons avec plus de 6 000 clients, dont 80 % faisant partie du Fortune 500, partout en Amérique du Nord, en Europe et en Asie. En tant que chefs de file de l’industrie des services technologiques complets, des services aux talents et des applications du monde réel, nous travaillons avec des leaders progressistes pour favoriser le changement. C’est le pouvoir d’un vrai partenariat. TEKsystems est une société du groupe Allegis.
Québec Numéro du permis d’agence de placement de personnel AP-2000547
About TEKsystems:
We’re partners in transformation. We help clients activate ideas and solutions to take advantage of a new world of opportunity. We are a team of 80,000 strong, working with over 6,000 clients, including 80% of the Fortune 500, across North America, Europe and Asia. As an industry leader in Full-Stack Technology Services, Talent Services, and real-world application, we work with progressive leaders to drive change. That’s the power of true partnership. TEKsystems is an Allegis Group company.
The company is an equal opportunity employer and will consider all applications without regards to race, sex, age, color, religion, national origin, veteran status, disability, sexual orientation, gender identity, genetic information or any characteristic protected by law.
Quebec Personnel Placement Agency Permit Number AP-2000547
Production Technician – Job Description Exciting opportunity to work as a production line worker in blood cartridge manufacturing. The job...
Apply For This Job←Back to all jobs at BGC Central Vancouver Island Program Leader – Chase River Out of School Care Program Leader...
Apply For This JobJob Description At Boeing, we innovate and collaborate to make the world a better place. From the seabed to outer...
Apply For This JobYou see all aspects of the retail cannabis sector as a big, beautiful puzzle that you can’t wait to assemble....
Apply For This JobStaff – Non Union Job Category Non Union Technicians and Research Assistants Job Profile Non Union Hourly – Research Assistant...
Apply For This JobUn de nos clients dans l’industrie Aeronautique est à la recherche d’un agent en méthodes électriques pour se joindre à...
Apply For This Job