Comment les grands modèles d'IA vont créer des modèles d'IA plus petits sans humains

Selon une équipe de scientifiques, les grands modèles de langage (LLM) de type ChatGPT peuvent désormais créer des outils d'IA plus petits sans intervention humaine.

Ce n'est un secret pour personne, 2023 a été l'année de l'intelligence artificielle (IA). De nombreux développements passionnants ont été signalés dans le domaine de l'IA cette année.

Par exemple, Google et Microsoft ont dévoilé leurs propres chatbots basés sur l'IA, Bard et Bing. De même, le chatbot IA très populaire d'OpenAI, ChatGPT, est devenu plus puissant avec GPT-4.

Google a également introduit Gemini AI, qui a surpassé ChatGPT dans plusieurs tests de référence et alimente actuellement Bard. En dehors de cela, la société travaillerait sur un programme nommé " Projet Ellmann " qui pourrait utiliser Gemini AI pour raconter l'histoire de votre vie.

Comme si cela ne suffisait pas, le géant de la recherche a récemment annoncé la création de son studio d'IA dans le but de suivre le rythme des autres entreprises technologiques. On peut donc dire sans se tromper que l'année a été placée sous le signe des progrès de l'IA.

L'IA utilisée pour créer une nouvelle IA

Aujourd'hui, une équipe de scientifiques du MIT et des campus de l'Université de Californie, ainsi que la société de technologie d'IA Aizip, affirment qu'ils peuvent reproduire automatiquement de grands modèles d'IA, comme celui qui alimente ChatGPT.

"À l'heure actuelle, nous utilisons des modèles plus grands pour construire des modèles plus petits, comme un grand frère aidant [son petit] frère à s'améliorer", a déclaré le PDG d'Aizip Yan Sun à Fox News .

Le haut dirigeant estime qu'il s'agit de la première étape vers un travail plus important d'IA auto-évolutive. "C'est la première étape pour montrer que les modèles d'IA peuvent créer des modèles d'IA", a-t-il ajouté.

Yubei Chen, l'un des chercheurs, professeur à l'UC Davis et co-fondateur d'Aizip, a déclaré avoir été surpris de constater que le plus grand modèle pouvait être utilisé pour concevoir automatiquement les plus petits.

Chen pense que les grands et les petits modèles collaboreront ensemble à l'avenir et construiront un écosystème complet d'intelligence.

Selon Chen, l'IA peut être utilisée pour générer des modèles capables " d'identifier les voix humaines parmi le bruit ambiant, de surveiller les données des pipelines pour prévenir de manière proactive les problèmes d'intégrité et d'analyser les données des capteurs satellitaires et au sol pour suivre les animaux sauvages ".

Il a noté que la technologie constitue une avancée majeure car ils ont conçu pour la première fois un pipeline entièrement automatisé. Il peut concevoir un modèle d'IA sans nécessiter d'intervention humaine, a ajouté Chen.

Chen a poursuivi en disant que les chercheurs ont démontré la première preuve de concept montrant qu'un type de modèle peut être automatiquement conçu à partir de zéro. En d'autres termes, ce modèle d'IA peut tout faire, de la génération de données au déploiement et aux tests de modèles, sans aucune implication humaine.

Sun et Chen ont présenté un dispositif de suivi de l'activité humaine, qui utilisait l'IA pour collecter et analyser des données de mouvement.

Contrairement aux modèles de langage géants, dont le fonctionnement coûte une bombe, ces modèles d'IA plus petits (AKA TinyML) coûtent moins cher et sont plus portables. TinyML peut être utilisé pour des tâches spécifiques. Par exemple, TinyML peut être utilisé pour améliorer les gadgets domestiques, les appareils auditifs ou la reconnaissance faciale.

Parlant de leur mission, Sun a déclaré que leur objectif était d'apporter de l'intelligence à la vie quotidienne tout en rendant les choses plus sûres et plus intelligentes.

Microsoft présente ses petits modèles de langage

Pendant ce temps, Microsoft nous a donné un aperçu de ses propres modèles d'IA à petite échelle qui peuvent donner du fil à retordre à ChatGPT. Selon les gens de Business Insider , il s'agit du " plan de sauvegarde OpenAI " du géant de la technologie basé à Redmond.

Pour ceux qui ne le savent pas, Microsoft a investi beaucoup d'argent dans OpenAI cette année dans l'espoir de tirer profit de la popularité croissante de ChatGPT.

En fait, l'entreprise a intégré la technologie OpenAI dans certains de ses produits, dont Bing. Cependant, suite aux troubles à OpenAI qui ont vu le licenciement et la réintégration du PDG Sam Altman, Microsoft semble désireux de montrer qu'il ne manque pas de technologies puissantes.

Selon Ashley Stewart de Business Insider, les dirigeants de Microsoft ont séparé l'entreprise d'OpenAI. Microsoft a dévoilé plus tôt ce mois-ci une nouvelle itération d'un modèle d'IA appelée Phi-2. Les chercheurs de l'entreprise affirment que ce modèle est petit mais puissant.