Communiqué de Stability AI:

Points clés à retenir

Pour l’année écoulée, MedARC a été à l’avant-garde de la recherche en neuroIA avec la sortie de MindEye et travaille actuellement sur des recherches de suivi et sur le développement de modèles de base pour les neurosciences, ayant également contribué au développement de modèles de base de pointe pour la radiologie en collaboration avec Stanford.

Fondée il y a un an par Dr Tanishq Mathew Abraham MedARC se concentre désormais sur la recherche ouverte et collaborative sur l’IA médicale avec l’ajout de deux membres exceptionnels à l’équipe MedARC : Dr Paul Scotti (Responsable Neuroimagerie + IA) et Dr Griffin Adams (Responsable de la PNL Clinique).

MedARC se lance désormais dans la recherche clinique en PNL, dans le but de former des modèles linguistiques de pointe pour le domaine médical et prévoit de partager les poids, la méthodologie et les résultats des modèles de manière transparente.

MedARC a des partenariats avec Answer.AI, l’Université de Princeton et l’initiative VALID AI, pour nous aider à réaliser le programme de recherche de MedARC.

Il y a un an, MedARC a été fondée avec la vision d’une approche nouvelle, ouverte et collaborative de la recherche sur l’IA médicale. Il a été créé pour développer des modèles de base d’IA à grande échelle pour la médecine et constituer des équipes interdisciplinaires pour répondre aux besoins cliniques avec un intérêt particulier pour l’application des dernières avancées en matière d’IA générative aux applications médicales. L’équipe a fait des progrès significatifs dans la réalisation de cette vision.

« Le rôle de l’IA générative en médecine ne peut être sous-estimé et la communauté MedARC a obtenu des résultats étonnants en seulement un an », a déclaré Emad Mostaque, PDG de Stability AI. « Nous sommes impatients de continuer à le soutenir pour catalyser la recherche et un impact qui profite à tous. »

Voici quelques faits saillants de l’année écoulée :

Ajout d’ensembles de compétences supplémentaires

MedARC est ravi d’annoncer l’ajout de deux membres exceptionnels à son équipe :

Dr Paul Scotti – ancien postdoctorant à l’Université de Princeton, il dirige nos efforts en neuroimagerie + IA depuis novembre 2023.

Dr Griffin Adams – Récemment diplômé d’un doctorat de l’Université de Columbia, il dirige désormais nos efforts cliniques en PNL depuis janvier 2024.

MedARC a été fondé et continue d’être dirigé par Dr Tanishq Mathew Abraham. Il a rejoint Stability AI à temps plein en août 2023 en tant que directeur de recherche. Notamment, Jérémy Howard reste engagé auprès de MedARC à titre consultatif. L’équipe se développe activement, renforçant son engagement en faveur d’une recherche ouverte et collaborative sur l’IA médicale.

Projets de recherche

Au cours de la dernière année, MedARC a lancé et réalisé plusieurs projets de recherche percutants :

Neurosciences+IA

Dirigé par le Dr Paul Scotti, MedARC est à l’avant-garde recherche en neuroIA, en collaboration avec des institutions de premier plan telles que l’Université de Princeton, l’ENS Paris et l’Université du Minnesota. Le premier projet de MedARC dans cet espace a été Œil-esprit, un pipeline de reconstruction IRMf en image de pointe. Autrement dit, grâce aux analyses IRMf qui enregistrent l’activité cérébrale d’une personne, ce pipeline est capable de reconstruire l’image que le sujet regardait avec un degré de précision saisissant, meilleur que n’importe quelle méthode précédente. Pour ce faire, MedARC a exploité les progrès récents en matière de représentations d’images (CLIP) et de génération d’images (Stable Diffusion). Ce travail a été accepté à NeurIPS 2023 en tant que présentation Spotlight.

Bientôt, MedARC partagera ses travaux de suivi qui améliorent considérablement MindEye en termes de qualité de reconstruction et peuvent utiliser beaucoup moins de données (une propriété cruciale pour permettre des applications pratiques). De plus, l’équipe travaille actuellement au développement de modèles de base pour les données IRMf afin de permettre des pipelines plus généralisables et plus simples pour la reconstruction IRMf en image avec plusieurs autres projets en cours, alors restez à l’écoute !

Modèles de base en radiologie

MedARC a en outre aidé à développer des modèles de base de pointe pour la radiologie, grâce à des collaborations avec le Stanford Center for Artificial Intelligence in Medicine & Imaging (AIMI). MedARC était un contributeur et un partisan original de Roentgen, une version de Stable Diffusion affinée sur les radiographies pulmonaires. Ce travail a été l’un des premiers à démontrer l’avantage des données générées par un modèle de diffusion stable pour améliorer les performances du modèle en aval.

Plus récemment, MedARC a contribué à un projet supplémentaire Stanford AIMI : CheXagent, un modèle de langage de vision 8B pour la radiologie. Ce modèle surpasse les modèles de base développés précédemment dans les domaines général et médical pour une variété de tâches d’interprétation des radiographies pulmonaires. Il s’agit également de l’un des premiers projets de l’équipe axés sur les modèles de langage vision et ils exploreront davantage cet espace avec la conviction que les modèles multimodaux sont nécessaires aux applications pratiques de l’IA générative en médecine.

PNL clinique

Dirigés par le Dr Griffin Adams, les efforts cliniques de MedARC en matière de PNL prennent de l’ampleur. L’équipe vise à former des modèles linguistiques de pointe pour le domaine médical et prévoit de partager les poids, la méthodologie et les résultats des modèles de manière transparente.

Afin d’atteindre cet objectif, MedARC a consacré beaucoup de temps à réfléchir à l’évaluation des modèles et à l’état actuel des capacités médicales des modèles linguistiques. Dans leurs article de blog récentils ont évalué de nombreux LLM ouverts sur une variété de tâches médicales de référence (qui sont ajoutée à lm-eval-exploiter une analyse transparente et reproductible), et ont été surpris de découvrir les fortes capacités médicales des LLM ouverts existants, battant déjà le modèle propriétaire Med-PaLM v1.

Partenariats

MedARC a divers partenariats universitaires et industriels pour les aider à réaliser leur programme de recherche, notamment Answer.AI pour une formation efficace en PNL et l’Université de Princeton pour faire progresser la recherche en neuroimagerie + IA. En tant que partenaire fondateur du Initiative d’IA VALIDEMedARC contribue activement à l’exploration des applications, des pièges et des meilleures pratiques de l’IA générative dans les soins de santé et la recherche.

Pour rester informé des projets et des progrès de MedARC, suivez-nous sur Twitter. Si vous souhaitez contribuer à nos projets de recherche, rejoignez notre Serveur Discorde.

Source