Job Information
TEKsystems Data Engineer in Montréal, Quebec
Description :
Le client souhaite recruter un ingénieur de données et un spécialiste du lac de données azur.
Ce consultant fera partie de l'équipe de la plateforme de données et participera à de nombreux projets pour transformer les données et répondre à de multiples besoins.
La majeure partie du travail consistera en l'exploration des données, l'ingestion des données, la transformation des données, la préparation des données, la conception, la construction et le développement de pipelines consolidant les sources de données en streaming et en batch dans le lac de données de l'entreprise. L'ingénieur participera également à l'élaboration d'un outil de validation de la qualité des données dans le lac de données.
Responsabilités :
Utilisation de Databricks pour la transformation et le chargement des données dans les différentes couches.
Utilisation de Spark/Python pour le développement des librairies
Utilisation des pipelines Azure DevOps pour automatiser le CI/CD
Participer au développement de l'ensemble des données et incorporer de nouvelles sources du lac de données
Développer des bonnes pratiques sur la validation de la qualité des données
Exigences :
3 ans dans le développement en spark/python
3 ans sur databricks
2 ans sur Azure DevOps
Expérience avec Powershell
Expérience sur azure data lake
Expérience en data factory
Compétences :
Azure, Python, Spark, databricks, devops, pipelines, ci/cd, Data lake, Data factory, Data, data warehouse, cloud
Compétences et qualifications supplémentaires :
Compétences non techniques :
Solides compétences en matière de relations interpersonnelles, de travail en équipe, de coordination et de recherche de consensus
Solides compétences en matière de communication, de documentation, de narration, de créativité et de présentation
Solides compétences organisationnelles, capacité à travailler sous pression et à gérer des priorités multiples avec des demandes concurrentes.
demandes concurrentes
Langue :
- Bilingue (français et anglais) avec d'excellentes aptitudes à la communication orale et écrite.
Niveau d'expérience :
Niveau intermédiaire
À propos de TEKsystems:
Nous sommes partenaires dans la transformation. Nous aidons les clients à activer des idées et des solutions afin de profiter d’un nouveau monde d’opportunités. Nous sommes une équipe solide de 80 000 personnes, nous travaillons avec plus de 6 000 clients, dont 80 % faisant partie du Fortune 500, partout en Amérique du Nord, en Europe et en Asie. En tant que chefs de file de l’industrie des services technologiques complets, des services aux talents et des applications du monde réel, nous travaillons avec des leaders progressistes pour favoriser le changement. C’est le pouvoir d’un vrai partenariat. TEKsystems est une société du groupe Allegis.
Québec Numéro du permis d'agence de placement de personnel AP-2000547
About TEKsystems:
We're partners in transformation. We help clients activate ideas and solutions to take advantage of a new world of opportunity. We are a team of 80,000 strong, working with over 6,000 clients, including 80% of the Fortune 500, across North America, Europe and Asia. As an industry leader in Full-Stack Technology Services, Talent Services, and real-world application, we work with progressive leaders to drive change. That's the power of true partnership. TEKsystems is an Allegis Group company.
The company is an equal opportunity employer and will consider all applications without regards to race, sex, age, color, religion, national origin, veteran status, disability, sexual orientation, gender identity, genetic information or any characteristic protected by law.
Quebec Personnel Placement Agency Permit Number AP-2000547