Big Data & Machine learning
Dans ce domaine dans l’air du temps, mes connaissances et compétences dans ce domaine se sont développé depuis ses dernières années par mon implication dans les différents événements dédié à l’intelligence artificielle et la big data en France.
Par conséquent je suis au fait des technologies ETL, Data Mining et Machine Learning les plus connus.
Le processus d’E.T.L permet d’extraire des données d’un ou plusieurs dépôt de donnée (Database, fichiers, flux de données, etc…) puis de les transformer (mettre a plat, consolider, reformater) afin qu’elles soient chargées dans un nouveau dépôt ou dans des outils de classification, de prédiction ou simplement de visualisation de données.
J’ai eu l’opportunité de créer un algorithme ETL qui traite plusieurs sources de données pour optimiser les performances de visualisation ou de traitement de celles-ci dans l’usage d’un modèle prédictif de ma conception dans le cadre de l’application Expoll.
Le data mining est une activité qui a pour but la découverte de modèles de données dans des jeux de données plus ou moins important afin d’apporté des réponses issues des statistiques.
A ces fins j’ai été amené a produire des arbres de décisions, régressions linéaire ou régression logistique dans le cadre de mes études personnelles et dans le cadre de la conception du modèle prédictif de donnée d’Expoll.
Le machine learning est l’emploi d’un algorithme adapté a l’échantillon de donnée a traiter afin de répondre a un besoin de classification ou de prédiction de donnée.
Durant mes études personnelles, j’ai utilisé les logiciels Orange et R afin d’entraîner des réseaux de neurones pour la classification de données et utilisé la librairie Python OpenCV pour la reconnaissance faciale.
Le scoring est un indicateur de la précision d’un modèle de donnée produit a l’issu du datamining ou du machine learning.
A ses fins, j’ai effectué une évaluation du modèle prédictif que j’ai produit pour Expoll en produisant une matrice de confusion et en evaluant la précision des prédictions.