L'ONG allemande de l'IA ouverte, du dataset LAION-5B aux modèles CLIP et CLAP
LAION (Large-scale Artificial Intelligence Open Network) est une organisation allemande à but non lucratif fondée en 2021, dédiée à la mise à disposition libre de jeux de données et de modèles d'IA. Elle est surtout connue pour LAION-5B, un immense jeu de données de paires image-texte qui a servi à entraîner de nombreux modèles multimodaux. Sa mission affichée est de démocratiser la recherche en apprentissage automatique en favorisant l'ouverture et la réutilisation des ressources existantes.
Au catalogue, l'offre reflète cette orientation multimodale et ouverte : on y trouve des modèles CLIP entraînés sur les données LAION (dont une variante CLIP-ViT-bigG), qui relient images et texte dans un espace commun, ainsi que des modèles audio de la famille CLAP associant sons et descriptions. L'ensemble illustre l'accent mis par LAION sur des modèles fondation multimodaux entièrement ouverts.
Ces modèles servent la recherche, la classification et le lien entre modalités (image ou audio et texte), notamment comme briques pour d'autres systèmes.
