Lors d'une récente session de questions-réponses à la conférence des développeurs d'OpenAI, le PDG Sam Altman a donné des indications sur le développement de leur modèle d'IA de nouvelle génération, GPT-5.
M. Altman a mis l'accent sur les défis actuels du développement de l'IA, en soulignant la nécessité d'augmenter la puissance de calcul et de résoudre des problèmes scientifiques complexes avant que le GPT-5 ne devienne une réalité.
Il a évoqué la progression rapide des modèles de l'OpenAI, du GPT-2, dont peu de gens en dehors de l'industrie avaient entendu parler, au GPT-3, axé sur la génération de texte, et au GPT-4, qui est compétent dans un plus grand nombre de catégories.
Avec la publication par OpenAI de GPT-4 Turbo et la fonction "GPTs", qui permet aux utilisateurs de créer leurs propres agents à l'aide d'invites en langage naturel, 2023 a connu une évolution impressionnante au sein de l'écosystème d'OpenAI.
M. Altman a déclaré que le GPT-5 ferait paraître l'IA actuelle "désuète" et qu'il prendrait en charge "la plupart des choses que l'on pourrait vouloir construire".
Sam Altman : "Nous espérons que vous reviendrez l'année prochaine. Ce que nous lançons aujourd'hui va paraître bien pittoresque par rapport à ce que nous sommes en train de créer pour vous en ce moment." pic.twitter.com/nUAQH1De5i
- Smoke-away (@SmokeAwayyy) 6 novembre 2023
La nature du GPT-5 reste un sujet de spéculation, avec des rumeurs sur ses capacités multimodales et des caractéristiques potentielles telles que l'autocorrection et un certain degré de conscience de soi.
Alimentées par des initiés de l'industrie comme Brian Roemmele, ces spéculations brossent un tableau intriguant de ce que GPT-5 pourrait offrir, bien qu'OpenAI n'ait pas encore confirmé quoi que ce soit.
Bill Gates craint un plafonnement de l'IA
Le fondateur de Microsoft, Bill Gates, dans une récente interview avec HandelsblattIl a exprimé son scepticisme quant aux progrès réalisés entre le GPT-4 et le GPT-5.
Il a suggéré que l'IA générative actuelle pourrait avoir atteint un plateau, malgré les opinions contraires de nombreux membres d'OpenAI, dont le PDG Sam Altman.
M. Gates a qualifié d'"incroyable" l'amélioration significative de la qualité entre le GPT-2 et le GPT-4, mais il n'est pas certain qu'une telle amélioration puisse être reproduite avec le GPT-5.
Actuellement, le matériel d'IA continue d'évoluer, mais la pratique de la force brute consistant à accumuler littéralement des milliers de puces GPU est loin d'être extensible à l'infini.
Les opérations de refroidissement nécessaires à l'entraînement de puissants modèles d'IA consomment déjà autant d'eau qu'un ".petit paysSelon certaines estimations, il s'agit là d'un autre obstacle à franchir.
Bien que l'on ne sache pas exactement quand OpenAI commencera la formation sur le GPT-5 ou publiera le modèle, l'entreprise se concentrerait sur l'amélioration de l'efficacité du modèle afin de réduire les coûts, ce qui est d'une importance fondamentale pour la prochaine génération de modèles d'avant-garde.
M. Altman a déjà déclaré que l'entreprise "n'a pas commencé" à former les GPT-5, mais il y a fort à parier qu'elle l'a fait en secret. En effet, une partie au moins du travail préparatoire a déjà été effectuée.
L'OpenAI s'est complètement "relookée" en tant que Société AGIcomme l'indiquent les modifications apportées à la page "À propos" et à d'autres pages de son site web.
Toutefois, comme Altman a constaté une baisse de la consommation d'énergie, il n'y a pas eu d'augmentation de la consommation d'énergie. manque de calcul et l'intention de faire en sorte que l'IA soit moins coûteuse - ce qui est l'un des principaux objectifs de l'industrie dans un contexte d'escalade des coûts - nous pourrions attendre un peu avant que le GPT-5 ne soit mis en place.
