Description :
Le client souhaite recruter un ingénieur de données et un spécialiste du lac de données azur.
Ce consultant fera partie de l’équipe de la plateforme de données et participera à de nombreux projets pour transformer les données et répondre à de multiples besoins.
La majeure partie du travail consistera en l’exploration des données, l’ingestion des données, la transformation des données, la préparation des données, la conception, la construction et le développement de pipelines consolidant les sources de données en streaming et en batch dans le lac de données de l’entreprise. L’ingénieur participera également à l’élaboration d’un outil de validation de la qualité des données dans le lac de données.
Responsabilités :
Utilisation de Databricks pour la transformation et le chargement des données dans les différentes couches.
Utilisation de Spark/Python pour le développement des librairies
Utilisation des pipelines Azure DevOps pour automatiser le CI/CD
Participer au développement de l’ensemble des données et incorporer de nouvelles sources du lac de données
Développer des bonnes pratiques sur la validation de la qualité des données
Exigences :
3 ans dans le développement en spark/python
3 ans sur databricks
2 ans sur Azure DevOps
Expérience avec Powershell
Expérience sur azure data lake
Expérience en data factory
Compétences :
Azure, Python, Spark, databricks, devops, pipelines, ci/cd, Data lake, Data factory, Data, data warehouse, cloud
Compétences et qualifications supplémentaires :
Compétences non techniques :
Solides compétences en matière de relations interpersonnelles, de travail en équipe, de coordination et de recherche de consensus
Solides compétences en matière de communication, de documentation, de narration, de créativité et de présentation
Solides compétences organisationnelles, capacité à travailler sous pression et à gérer des priorités multiples avec des demandes concurrentes.
demandes concurrentes
Langue :
Niveau d’expérience :
Niveau intermédiaire
À propos de TEKsystems:
Nous sommes partenaires dans la transformation. Nous aidons les clients à activer des idées et des solutions afin de profiter d’un nouveau monde d’opportunités. Nous sommes une équipe solide de 80 000 personnes, nous travaillons avec plus de 6 000 clients, dont 80 % faisant partie du Fortune 500, partout en Amérique du Nord, en Europe et en Asie. En tant que chefs de file de l’industrie des services technologiques complets, des services aux talents et des applications du monde réel, nous travaillons avec des leaders progressistes pour favoriser le changement. C’est le pouvoir d’un vrai partenariat. TEKsystems est une société du groupe Allegis.
Québec Numéro du permis d’agence de placement de personnel AP-2000547
About TEKsystems:
We’re partners in transformation. We help clients activate ideas and solutions to take advantage of a new world of opportunity. We are a team of 80,000 strong, working with over 6,000 clients, including 80% of the Fortune 500, across North America, Europe and Asia. As an industry leader in Full-Stack Technology Services, Talent Services, and real-world application, we work with progressive leaders to drive change. That’s the power of true partnership. TEKsystems is an Allegis Group company.
The company is an equal opportunity employer and will consider all applications without regards to race, sex, age, color, religion, national origin, veteran status, disability, sexual orientation, gender identity, genetic information or any characteristic protected by law.
Quebec Personnel Placement Agency Permit Number AP-2000547
Applications are invited for a continuing 1.0 FTE Grade 5/6 Teacher at Fort Qu’Appelle Elementary School commencing August 26, 2024....
Apply For This JobCompany Description Fairmont Jasper Park Lodge is seeking passionate and adventurous individuals to join our incredible team here in the Canadian...
Apply For This JobLooking for Talented Child Care Educators to join our team! If you are currently looking for a position with growth...
Apply For This JobAt CN, everyday brings new and exciting challenges. You can expect an interesting environment where you’re part of making sure...
Apply For This JobSolenis is a leading global producer of specialty chemicals, focused on delivering sustainable solutions for water-intensive industries, including the pulp,...
Apply For This JobJob Requisition Id: 162170 Business Function: Retail Primary City: Saint-Polycarpe Other Location(s):Ste-Justine/St-Télesphore/Ste-Marthe Province: Quebec Employment Type: On Call Employment Status:...
Apply For This Job