Newsletter IA – Numéro 1 : Lancement de notre newsletter sur l’intelligence artificielle !
Il ne se passe plus un jour sans qu’une nouvelle “révolution” soit annoncée dans le monde de l’intelligence artificielle… difficile de suivre, sauf à y passer ses journées.
Alors, en attendant qu’une IA soit capable de faire votre veille pour vous, Joël Gombin, responsable du Lab IA de la Plateforme_, vous propose de partager avec vous sa veille. Forcément, elle est partielle, partiale et subjective… on espère qu’elle vous plaira !
Pour recevoir les prochains articles directement par mail abonnez vous directement à la newsletter en cliquant ci-dessous :
« Ce qui a retenu mon attention ces dernières semaines, c’est que si les grands modèles de langage sont, de notoriété publique, des boîtes noires, on commence à lever des coins de voile sur leur fonctionnement.
Deux papiers importants ont été publiés, l’un parAnthropic, l’entreprise qui produit la série de modèles propriétaires Claude, l’autre parHuggingFace, les champions de l’IA open source.
15 trillions (soit milliers de milliards) de tokens (l’unité de base de texte pour les LLM, disons un demi-mot), c’est la taille du dataset Fineweb publié par HuggingFace il y a quelques semaines. Au-delà de proposer le plus grand corpus de données de qualité disponible en open source à ce jour, les ingénieurs de la firme au smiley nous proposent, grâce à un billet de blog extrêmement détaillé, une plongée passionnante dans la fabrique d’un (en réalité, deux) jeux de données de grande qualité à très grande échelle.Un LLM n’étant jamais meilleur que les données sur lequel il est entraîné, c’est un sujet absolument majeur.
Anthropic nous emmène à l’autre bout ducycle de vie des LLM : une fois un modèle entraîné, comment peut-on le contrôler de manière fine ? Où sont les boutons sur lesquels on peut appuyer pour activer ou désactiver tel ou tel trait de caractère, de style, tel ou tel sujet ? Ce problème est en bonne voie d’être résolu, et ça pourraitchanger profondément la manière dont on utilise les LLM. Finies la magie blanche, coûteuse et chronophage, du fine tuning, et la magie noire, incertaine et mal documentée, du prompt engineering ? Peut-être bien. Pour l’instant, on a en tout cas le droit à une plongée en profondeur dans cette idée et c’est fascinant. Surtout si vous aimez le Golden Gate Bridge… ».
– Joël Gombin, responsable du Lab IA de la Plateforme_
À propos de La Plateforme
www.laplateforme.io
“La Plateforme” est une école des métiers du numérique et des nouvelles technologies, cofondée avec le ClubTop20 réunissant les grandes entreprises de la Métropole Aix-Marseille. Elle comprend des formations diversifiées en web, cybersécurité, intelligence artificielle, systèmes immersifs et image numérique, innovation ; sur des niveaux allant jusqu’au Bac+5. L’école est ouverte à tous sans condition d’âge ni de diplôme à l’entrée et propose une scolarité aux frais intégralement pris en charge dans le cadre de l’alternance.
L’ambition de “La Plateforme” est de proposer une offre de formations qui apporte des solutions aux métiers en tension dans le numérique, avec la volonté de créer des vocations sur ce secteur dès le plus jeune âge.