/ SPEAKER
Alexia Audevart est “Data Enthusiast” et fondatrice de la société datactik. Elle baigne dans la donnée sous toutes ses formes : Big Data, Data Science, Data Visualisation, Machine Learning, Deep Learning, Intelligence Artificielle, etc.
Quand elle n’accompagne pas ses clients dans la valorisation de leurs données, elle partage ses connaissances en animant des formations, en écrivant des livres ou en donnant des conférences. Depuis 2019, elle a rejoint la communauté des Google Developer Expert Machine Learning.
Son premier livre est une collaboration sur l'intelligence artificielle et les neurosciences ("Apprendre demain" - édition Dunod). Son second ouvrage, plus technique, aborde le Deep Learning ("Machine Learning using TensorFlow cookbook" - édition Packt).
Pionnier des grands modèles de langage (LLM), BERT, développé par Google en 2018, a ouvert de nouvelles perspectives dans le domaine du NLP et est aujourd’hui considéré comme la base de nombreuses avancées en traitement automatique du langage.
Nous déconstruirons son architecture fondée sur les transformers puis, nous plongerons dans les détails de son entraînement : masquage de mots (Masked LM - MLM) et prédiction de la phrase suivante (NSP - Next Sentence Prediction).
Nous illustrerons ses capacités à travers deux cas d'usage en utilisant des modèles pré-entrainés disponible dans Keras Hub :
- la détection de catastrophes dans des tweets,
- l'inférence de relations sémantiques entre des paires de phrases (implication/contradiction/neutralité de textes multilingues avec le jeu de données "Elémentaire, mon cher Watson")
RoBERTa, CamemBERT, FlauBERT, DistilBERT n'auront plus aucun secret pour vous !
Searching for speaker images...
Français 
English