Forum Codalab / Codabench

Codabench (ex Codalab) est une infrastructure de référence internationale, développée au LISN par les chercheurs d'A&O et les ingénieurs d'ASARD. La plateforme est dédiée à l'évaluation d'algorithmes d'apprentissage automatique et héberge, gratuitement, des milliers de compétitions.

Ajouter à mon calendrier

Pour la deuxième année consécutive, en 2024, Codabench a été classée première plateforme dans le « State of Competitive Machine Learning » de MLConstests (voir l’actualité sur le site du LISN en 2023).

Programme

13h30 Café d’accueil

14h00 Présentation des plateformes Codalab et Codabench

Introduction : Anne-Catherine Letournel, Ingénieure LISN, équipe ASARD
La science avec Codalab et Codabench : Adrien Pavao, Contributeur, Docteur en informatique
Infrastructure de production : Obada Haddad-Soussac, Ingénieur, LISN, équipe ASARD
Building Together in Open Source: the Github community : Ihsan Ullah, Contributeur, Ingénieur

14h40 Retours d’expérience d’organisateurs de compétitions

“Organisation des campagnes d’évaluation multilingues en traitement automatique des langues avec Codabench – réseaux PARSEME et UniDive“: Agata Savary, Professeure, LISN, équipe SEME
“NeurIPS’24 experiment: LLM as an Author Checklist Assistant“: Hieu Khuong, chercheur doctorant, LISN équipes GALAC-A&O
“Évaluation du module Algorithmique Avancée de la dominante Info&Num à CentraleSupélec“: Joanna Tomasik, professeur, LISN équipe GALaC

15h30 Questions / réponses et conclusion

Accès au site de Codabench Lien visio