Développeur Databricks
Description Du Poste
PRÉPAREZ-VOUS à agir et à faire passer vos compétences technologiques au niveau supérieur.
Chez Accenture, les jours se suivent, mais ne se ressemblent pas; et c'est ce qui nous plait. Accenture Technologie vous offre une occasion exceptionnelle d'entamer une carrière enrichissante. En plein cœur d'un environnement passionné par le numérique et l'innovation, voici où vous pourrez aider les clients les plus prestigieux à se tourner vers demain en utilisant les technologies de pointe pour les projets les plus novateurs qui soient.
Joignez-vous à une équipe hautement performante : Cloud First - Génie logiciel.
Nous nous concentrons sur l'adoption par la clientèle de technologies perturbatrices, sur l'architecture technologique et les prestations spécialisées en intégration, ingénierie logicielle personnalisée, tests, modernisation des applications, méthode agile et plus encore. Nous aidons notre clientèle dans les projets les plus complexes, notamment en travaillant sur des plateformes Web ouvertes, des plateformes DevOps ainsi que l'informatique intelligente et l'amélioration de l'architecture.
VOTRE RÔLE : Développeur Databricks
Vos tâches
En tant qu Développeur Databricks vous jouerez un rôle essentiel dans la conception et la mise en œuvre de pipelines robustes de données, de solutions de traitement de flux et de solutions de migration de données en utilisant Databricks. Votre expertise sera indispensable pour concevoir et optimiser les processus de données opérationnels/analytiques et pour encadrer les membres juniors de l'équipe. Vous travaillerez en étroite collaboration avec les développeuses et développeurs, les analystes, les responsables de produits et les parties prenantes commerciales pour veiller à ce que les solutions de données soient évolutives, efficaces et alignées sur les objectifs commerciaux.
Qualifications
Responsabilités clés
- Conception et mise en œuvre : Mener la conception et le développement de pipelines ETL et de solutions de traitement des données en temps réel en utilisant Databricks et Apache Kafka. Garantir l'intégrité, la qualité et la performance des données en appliquant les meilleures pratiques.
- Architecture et optimisation : Concevoir des solutions de données évolutives pour traiter d'importants volumes de données. Optimiser les pipelines et les flux de travail existants par rapport aux performances, à la fiabilité et à la rentabilité.
- Collaboration interfonctionnelle : Travailler en étroite collaboration avec les membres de l'équipe, et les gestionnaires de produits pour comprendre les exigences en matière de données et fournir des solutions qui répondent aux besoins commerciaux. Participer à la planification des projets et aux discussions techniques.
- Innovation et amélioration continue : Se tenir au courant des dernières avancées en matière de technologies et de méthodologies d'ingénierie des données. Évaluer et recommander de nouveaux outils et technologies pour améliorer les capacités de traitement et d'analyse des données.
- Documentation et meilleures pratiques : Développer et maintenir une documentation complète pour les pipelines , les architectures et les processus de données. Établir et appliquer les meilleures pratiques pour l'ingénierie des données et les processus ETL.
Exigences de base
- Expérience : Au moins 3 ans d'expérience professionnelle en ingénierie des données, avec un accent particulier sur Databricks et Apache Kafka. Expérience démontrée dans la conception et la mise en œuvre de pipelines ETL à grande échelle et de solutions de traitement de flux.
- Compétences techniques : Compréhension approfondie de Databricks, de la gestion des schémas, de SQL, de Spark/Python et de Kafka. Maîtrise de Delta Tables, DLT, et Postgres, ainsi qu'une expérience dans d'autres langages de programmation tels que Scala ou Java, seraient un atout.
- Architecture de données : Solide expérience dans la conception d'architectures de données évolutives et l'optimisation des flux de données. Bonne connaissance des concepts et des technologies d'entreposage de données est fortement souhaitée.
- Formation : Baccalauréat en informatique, en ingénierie ou dans un domaine connexe. Diplôme supérieur ou certifications pertinentes en ingénierie des données ou en technologies infonuagiques un atout.
- Langue : L'anglais est exigé pour ce poste, car le ou la titulaire de ce poste est appelé à interagir régulièrement avec des parties prenantes au Canada, aux États-Unis et dans d'autres pays de notre empreinte mondiale où l'anglais est la langue commune. En raison du volume important d'interactions avec ces parties prenantes anglophones, ce qui est intrinsèque à ce poste, une réorganisation des activités de l'entreprise n'est pas possible pour éviter cette exigence.