Concevoir et mettre en place des systmes pour collecter des donnes partir de diffrentes sources telles que les bases de donnes les fichiers logs les capteurs IoT etc.
Dvelopper des pipelines de donnes pour nettoyer normaliser et pr traiter les donnes en liminant les valeurs manquantes les doublons et les incohrences.
Concevoir et grer des bases de donnes et des entrepts de donnes adapts aux besoins spcifiques de lorganisation.
Dvelopper des processus pour transformer et agrger les donnes brutes en formats exploitables.
Mettre en uvre des mesures de scurit et de confidentialit pour protger les donnes sensibles contre les accs non autoriss.
Surveiller les performances des pipelines de donnes dtecter et rsoudre les problmes de manire proactive et effectuer la maintenance rgulire des systmes.
Qualifications :
Bac3 d cole dingnieur ou Master avec une spcialit en informatique gnie logiciel gnie des donnes ou en mathmatiques
Excellente connaissance des outils et des technologies utiliss dans le domaine de la data engineering tels que Hadoop Spark Kafka Hive etc.
Matrise des langages de programmation comme Python Java Scala ou des comptences dans les langages de requte comme SQL.
Exprience avec les services cloud comme AWS Azure ou Google Cloud Platform et la capacit concevoir des solutions bases sur le cloud.
Une exprience dans les mtiers de la data est un plus.
Disclaimer: Drjobpro.com is only a platform that connects job seekers and employers. Applicants are advised to conduct their own independent research into the credentials of the prospective employer.We always make certain that our clients do not endorse any request for money payments, thus we advise against sharing any personal or bank-related information with any third party. If you suspect fraud or malpractice, please contact us via contact us page.