Entretien avec Jensen Huang

CEO of NVIDIA

par Stanford Institute for Economic Policy Research (SIEPR)2024-03-07

Jensen Huang

Le Stanford Institute for Economic Policy Research (SIEPR) a récemment accueilli une discussion captivante avec Jensen Huang, le CEO de NVIDIA, lors de son Sommet Économique 2024. Ce qui s'est déroulé était bien plus qu'une simple allocution ; c'était une exploration narrative de l'innovation, de l'ambition et de l'impact profond de l'intelligence artificielle, menée par le mélange caractéristique de franchise et de vision perspicace de Huang.

Le parcours du visionnaire : des devoirs à la domination de l'IA

Le décor a été planté par John Shoven, l'ancien directeur du SIEPR, qui a dépeint un tableau vivant de Huang comme l'incarnation même du "rêve américain". De son arrivée aux États-Unis à l'âge de neuf ans avec son frère, naviguant dans une "école difficile et rude du Kentucky", à la co-fondation de NVIDIA à 30 ans et à sa transformation en la quatrième plus grande entreprise mondiale, la trajectoire de Huang est indéniablement remarquable. Shoven a même raconté avec humour la "phrase d'accroche" unique de Huang – "Voulez-vous voir mes devoirs ?" – une stratégie qui a mené à un mariage durable et à deux enfants. Huang, toujours humble, a esquivé avec légèreté, déclarant : "Il est plus judicieux pour moi de ne faire aucune remarque préliminaire afin d'éviter de risquer de nuire à toutes les bonnes choses que vous avez dites." Pourtant, son histoire a rapidement tourné autour de la mission principale de NVIDIA : créer l'informatique accélérée, un nouveau paradigme conçu pour résoudre des problèmes hors de portée des ordinateurs à usage général.

Principaux enseignements :

  • La résilience se forge dans l'adversité : Les premières expériences de vie de Huang, telles que racontées par Shoven, soulignent l'importance de surmonter l'adversité.
  • Les relations personnelles peuvent alimenter le succès professionnel : Son approche unique pour construire une relation avec sa future épouse met en lumière les chemins inattendus vers le partenariat.
  • La vision à long terme est payante : Engagé depuis plus de trois décennies, l'engagement de NVIDIA envers l'informatique accélérée a fondamentalement remodelé la technologie.

L'IA : la technologie structurante du XXIe siècle

Shoven a posé une question provocante : l'IA a-t-elle dépassé le transistor comme la plus grande percée technologique des 76 dernières années ? La réponse de Huang fut catégorique, attribuant le plus grand don du transistor au logiciel, mais déclarant l'IA comme l'invention structurante du XXIe siècle. NVIDIA, a-t-il expliqué, a passé trois décennies à "ramener le coût de calcul des ordinateurs à quasiment zéro" pour des domaines algorithmiques spécifiques. Cette réduction, d'un "million de fois" pour le deep learning au cours de la dernière décennie, a débloqué une capacité révolutionnaire : les ordinateurs écrivant des logiciels. Ce changement profond permet aux systèmes de "parcourir tout internet, de le mettre dans un ordinateur et de le laisser découvrir ce qu'est la sagesse, ce qu'est la connaissance", un concept que Huang décrit comme "insensé" à moins que les coûts de calcul ne soient négligeables. La capacité de comprendre le "sens" de l'information numérique, des gènes aux protéines, est le véritable miracle, inaugurant une ère où l'on peut "discuter" avec la biologie comme avec un PDF.

Évolutions majeures :

  • Passage du logiciel écrit par l'homme au logiciel écrit par l'ordinateur : La réduction marginale des coûts de calcul permet à l'IA de générer ses propres programmes.
  • Comprendre le "sens" de l'information numérique : L'IA peut désormais interpréter des données complexes comme les gènes et les protéines, et non plus seulement des motifs.
  • La réduction radicale des coûts comme catalyseur : Réduire les coûts de calcul par un facteur d'un million crée des possibilités d'application entièrement nouvelles.

L'avenir se dévoile : AGI, contenu génératif et IA Souveraine

En regardant vers l'avenir, Huang a envisagé un avenir où la monstrueuse puce H100 de "70 livres et un quart de million de dollars", déjà une merveille, évoluerait pour permettre un apprentissage continu, où l'IA s'affine constamment en regardant des vidéos, en traitant du texte et en générant des données synthétiques. Cette "boucle d'apprentissage par renforcement sera continue", permettant à l'IA "d'imaginer des choses, elle les testera avec l'expérience du monde réel." Interrogé sur l'Intelligence Artificielle Générale (AGI), Huang a offert le point de vue d'un ingénieur : "Si je donnais à une IA beaucoup de tests de mathématiques et de raisonnement, un test d'histoire et de biologie, des examens médicaux et des examens du barreau... Je suppose que d'ici 5 ans, nous réussirons bien à chacun d'entre eux." Il a en outre prédit un monde où "100 % du contenu sera génératif", allant au-delà des interactions préenregistrées et basées sur la récupération actuelles, pour que l'IA génère des informations spécifiques au contexte à la demande. Ce changement, associé aux réalités géopolitiques, est à l'origine d'un "réveil de chaque pays" pour contrôler son "IA Souveraine" afin de protéger la langue, la culture et les industries.

Idées clés :

  • L'apprentissage continu comme prochaine frontière : Les systèmes d'IA dépasseront la formation discrète pour une amélioration constante de soi grâce aux données du monde réel et synthétiques.
  • L'AGI définie par la réussite aux tests : Si l'AGI est mesurée par la performance de niveau humain aux tests, elle est potentiellement à cinq ans, mais la véritable intelligence humaine est plus difficile à définir et à atteindre.
  • L'informatique générative est l'avenir du contenu : Tout le contenu numérique sera à terme généré par l'IA, plutôt que préenregistré, créant d'immenses nouvelles exigences en matière d'infrastructure.
  • La géopolitique, moteur de l'"IA Souveraine" : Les nations prennent conscience de la nécessité de développer et de contrôler leurs propres capacités d'IA, créant de nouvelles opportunités malgré les limites.

L'avantage de NVIDIA : TCO, concurrence et culture de la résilience

Abordant les préoccupations concernant la concurrence, en particulier sur le marché de l'inférence, Huang a affirmé avec confiance la position unique de NVIDIA. Alors que les concurrents pourraient viser des puces "suffisamment bonnes", l'avantage de NVIDIA réside dans sa "plateforme de calcul accéléré" complète – une norme développée sur trois décennies, intégrant non seulement des GPU, mais aussi des CPU, des réseaux et une "montagne de logiciels". Cet écosystème complet signifie que le coût total d'exploitation (TCO) de NVIDIA pour les clients est si supérieur que "même lorsque les puces des concurrents sont gratuites, ce n'est pas assez bon marché." Il accepte même de concurrencer ses clients, partageant ouvertement les feuilles de route futures, croyant que "si vous ne tentez pas d'expliquer pourquoi vous êtes bon dans quelque chose, ils n'auront jamais la chance d'acheter vos produits." Aux entrepreneurs en herbe, Huang a donné un conseil provocateur : embrasser les "faibles attentes" et la "douleur et la souffrance" qui forgent la résilience. "La grandeur n'est pas l'intelligence, comme vous le savez", a-t-il déclaré, "la grandeur vient du caractère et le caractère n'est pas formé par des gens intelligents, il est formé par des gens qui ont souffert." Son propre leadership, marqué par une hiérarchie plate, la transparence et un feedback constant, est conçu pour inculquer cette culture du caractère et de l'agilité.

Pratiques clés :

  • Accent mis sur le coût total d'exploitation (TCO) : La stratégie de NVIDIA souligne la valeur globale et les économies d'exploitation, rendant leur matériel haut de gamme plus économique.
  • Adopter la "co-opétition" : L'ouverture avec les clients, même ceux qui construisent leurs propres puces, fait partie de la stratégie de NVIDIA pour maintenir son leadership grâce à une innovation supérieure.
  • Cultiver la résilience face à l'adversité : Huang préconise d'affronter les défis et la "souffrance" comme éléments essentiels au développement du caractère et à l'atteinte de la grandeur.
  • Leadership transparent et agile : Une structure de gestion plate avec un feedback constant, ouvert et l'autonomisation favorise une culture d'agilité et d'innovation.

"Ce que l'industrie de l'informatique a apporté au monde, c'est que nous avons comblé la fracture technologique, ce qui est très inspirant." - Jensen Huang