Stanford AI Index Report 2024

Date de récolte : [[2024-04-15-lundi]]

Artificial Intelligence Index Report 2024

Mon avis :

LA référence depuis des années sur le développement de l'IA. 500 pages d'informations en libre accès. Les principaux enseignements :

1. L'IA surpasse les humains dans certaines tâches, mais pas dans toutes. L'IA a dépassé les performances humaines sur plusieurs benchmarks, y compris certains en classification d'images, raisonnement visuel, et compréhension de l'anglais. Pourtant, elle est à la traîne sur des tâches plus complexes comme les mathématiques de niveau compétition, le raisonnement visuel de bon sens et la planification.
2. L'industrie continue de dominer la recherche en IA de pointe. En 2023, l'industrie a produit 51 modèles d'apprentissage automatique notables, tandis que le milieu académique n'en a contribué que 15. Il y a eu également 21 modèles notables résultant de collaborations industrie-académie en 2023, un nouveau record.
3. Les modèles de frontière deviennent beaucoup plus coûteux. Selon les estimations de l'AI Index, les coûts de formation des modèles d'IA à la pointe de la technologie ont atteint des niveaux sans précédent. Par exemple, le GPT-4 d'OpenAI a utilisé une estimation de 78 millions de dollars de calcul pour sa formation, tandis que le Gemini Ultra de Google a coûté 191 millions de dollars de calcul.
4. Les États-Unis devancent la Chine, l'UE et le Royaume-Uni comme principale source de modèles d'IA de premier plan. En 2023, 61 modèles d'IA notables provenaient d'institutions basées aux États-Unis, surpassant largement les 21 de l'Union européenne et les 15 de la Chine.
5. Des évaluations robustes et standardisées pour la responsabilité des LLM font sérieusement défaut. De nouvelles recherches de l'AI Index révèlent un manque significatif de standardisation dans le reporting de l'IA responsable. Les principaux développeurs, y compris OpenAI, Google et Anthropic, testent principalement leurs modèles contre différents benchmarks d'IA responsable. Cette pratique complique les efforts pour comparer systématiquement les risques et les limitations des principaux modèles d'IA.
6. L'investissement en IA générative explose. Malgré un déclin de l'investissement privé global en IA l'année dernière, le financement pour l'IA générative a presque octuplé de 2022 pour atteindre 25,2 milliards de dollars. Les acteurs majeurs dans l'espace de l'IA générative, y compris OpenAI, Anthropic, Hugging Face et Inflection, ont signalé des tours de financement substantiels.
7. Les données sont claires : l'IA rend les travailleurs plus productifs et conduit à un travail de meilleure qualité. En 2023, plusieurs études ont évalué l'impact de l'IA sur le travail, suggérant que l'IA permet aux travailleurs de compléter les tâches plus rapidement et d'améliorer la qualité de leur production. Ces études ont également démontré le potentiel de l'IA pour combler l'écart de compétences entre les travailleurs peu et hautement qualifiés. Néanmoins, d'autres études mettent en garde que l'utilisation de l'IA sans supervision adéquate peut conduire à une performance diminuée.
8. Le progrès scientifique s'accélère encore davantage, grâce à l'IA. En 2022, l'IA a commencé à faire avancer la découverte scientifique. Cependant, 2023 a vu le lancement d'applications d'IA liées à la science encore plus significatives - de AlphaDev, qui rend le tri algorithmique plus efficace, à GNoME, qui facilite le processus de découverte de matériaux.
9. Le nombre de réglementations sur l'IA aux États-Unis augmente considérablement. Le nombre de réglementations liées à l'IA aux É.-U. a considérablement augmenté au cours de l'année passée et sur les cinq dernières années. En 2023, il y avait 25 réglementations liées à l'IA, contre seulement une en 2016. Rien que l'année dernière, le nombre total de réglementations liées à l'IA a augmenté de 56,3 %.
10. Les gens à travers le monde sont plus conscients de l'impact potentiel de l'IA — et plus nerveux. Une enquête d'Ipsos montre que, au cours de la dernière année, la proportion de ceux qui pensent que l'IA affectera considérablement leur vie dans les trois à cinq prochaines années est passée de 60 % à 66 %. De plus, 52 % expriment leur nervosité à l'égard des produits et services d'IA, marquant une hausse de 13 points de pourcentage par rapport à 2022. En Amérique, les données de Pew suggèrent que 52 % des Américains se disent plus préoccupés qu'enthousiasmés par l'IA, en hausse par rapport à 37 % en 2022.