2024-08-17
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
Eric Schmidt, ancien PDG de Google (Source de l'image : support)
L'ancien PDG de Google a rétracté ses commentaires précédents critiquant son ancien employeur pour n'être "pas assez bon" et critiquant le travail à distance pour ruiner Google.
Récemment, l'ancien PDG et président exécutif de Google, Eric Schmidt, a déclaré dans un discours à l'Université de Stanford que Google perdrait face à des start-ups telles qu'OpenAI dans la compétition en matière d'IA (intelligence artificielle) en raison des capacités de Google Office à distance. travailler assez dur.
"Google estime que l'équilibre travail-vie personnelle, quitter le travail plus tôt et travailler à domicile sont plus importants que gagner. Mais la raison pour laquelle les startups réussissent est parce que les gens travaillent dur." Schmidt a déclaré sans ambages que les employés de Google "apprécient" désormais le travail. équilibre de vie, mais en conséquence, l'entreprise a perdu son focus et a perdu face à OpenAI. La méthode actuelle de travail à distance de Google est la principale responsable. Les employés pensent qu'il est plus important de rentrer tôt chez eux pour passer du temps avec leur famille que d'accomplir des tâches professionnelles. "Je suis désolé d'être si direct, mais lorsque vous obtenez un diplôme universitaire et démarrez une entreprise, vous comprenez que vous n'autorisez pas les employés à venir dans l'entreprise seulement un jour par semaine."
Schmidt a souligné que les startups d'IA peuvent d'abord « copier » les œuvres matures d'autres personnes, puis « embaucher un grand nombre d'avocats pour nettoyer les dégâts » une fois que le produit est devenu populaire.
Cependant, un jour après la diffusion de la vidéo, Schmidt s'est excusé pour ses propos.
Le 15 août, Schmidt a déclaré dans un e-mail au Wall Street Journal : « J'ai commis une erreur dans mes commentaires sur Google et ses horaires de travail, et je regrette mon erreur. »
Les informations publiques montrent que Schmidt a été PDG de Google de 2001 à 2011 et a siégé au conseil d'administration jusqu'en 2019. Par la suite, Schmidt a quitté le conseil d'administration d'Alphabet, la société mère de Google.
Mais à partir de maintenant,Schmidt reste actionnaire d'Alphabet, détenant environ 147 millions d'actions Alphabet, soit près de 1 % du capital, d'une valeur d'environ 24 milliards de dollars. Schmidt vaut 31,4 milliards de dollars.
Les remarques trop directes de Schmidt ont cette fois suscité de nombreuses controverses, tandis que certains internautes ont critiqué la gestion de Google comme étant le plus gros problème de l'entreprise. Parmi eux, le syndicat des travailleurs d’Alphabet a posté sur « Le manque d’exécution est ce qui ralentit chaque jour les Googleurs. »
Un jour seulement après que Schmidt ait fait ces remarques, il s'est rapidement excusé publiquement et la vidéo concernée a été définie comme vidéo privée par l'Université de Stanford.Avant cela, la vidéo de Schmidt avait été visionnée plus de 400 000 fois.
Il convient de noter que de nombreux entrepreneurs américains bien connus partagent en réalité des points de vue similaires à ceux de Schmidt. Par exemple, Elon Musk, PDG de Tesla, et Jamie Dimon, PDG de JPMorgan Chase, se sont tous deux publiquement plaints des politiques de travail à distance. Dimon a écrit un jour dans sa lettre annuelle aux actionnaires que les dirigeants d’entreprise ne peuvent pas diriger leurs équipes assis devant un écran.
"Regardez Musk, regardez TSMC. La raison pour laquelle ces entreprises réussissent est parce qu'elles peuvent recruter des employés. Vous devez pousser vos employés assez fort pour gagner. TSMC laissera les docteurs en physique travailler dans l'usine la première année. Pouvez-vous imaginer des doctorants américains se rendant à la chaîne de montage ?", a déclaré Schmidt.
En outre, Schmidt a également partagé quelques conseils d'investissement sur Nvidia, affirmant qu'il avait constaté une tendance claire sur le marché boursier, c'est-à-dire que les grandes entreprises technologiques envisageaient de réaliser des investissements de plus en plus importants dans Nvidia. "Je parle à de grandes entreprises, et elles me disent qu'elles ont besoin de 20 milliards de dollars, 50 milliards de dollars, 100 milliards de dollars – de manière très, très urgente", a ajouté Schmidt, PDG d'OpenAI, Sam Alter, "ami proche" de Sam Altman.
Schmidt estime que même si Nvidia ne sera pas le seul gagnant dans le domaine de l'IA, il n'existe pas beaucoup d'autres options. Selon lui, les grandes entreprises qui peuvent investir davantage dans les puces et les centres de données Nvidia seront technologiquement en avance sur leurs concurrents plus petits.
« Il n'existe que trois modèles de pointe, et l'écart entre eux et tout le reste semble se creuser de plus en plus. Il y a six mois, j'étais convaincu que l'écart se réduisait, alors j'ai investi beaucoup d'argent dans les petites entreprises. , je n'en suis pas si sûr », a souligné Schmidt. "Je pensais que CUDA de NVIDIA était un langage de programmation stupide, mais maintenant CUDA est le fossé le plus puissant de NVIDIA. Tous les grands modèles doivent fonctionner sur CUDA, et seuls les GPU de NVIDIA prennent en charge CUDA. C'est quelque chose que les autres puces ne peuvent pas ébranler. "
Schmidt a souligné que les entreprises technologiques dominantes ont souvent des difficultés à s'adapter aux nouvelles vagues industrielles, et que les idées innovantes et une forte présence de bureaux sont très importantes pour la Silicon Valley.
Le point de vue de Schmidt soulève donc une question plus large : comment concilier le besoin d’innovation et le bien-être des employés à l’ère de l’IA en évolution rapide ?
Les propos de Schmidt, ancien PDG de Google, pourraient représenter les défis auxquels est confrontée l’ensemble du secteur technologique. Avec le développement rapide de la technologie de l’IA, comment les grandes entreprises peuvent-elles trouver un équilibre entre rester compétitives et maintenir la satisfaction de leurs employés ? Il ne s’agit pas seulement du succès de l’entreprise, mais aussi de l’orientation future du développement de l’ensemble du secteur.
Au moment de mettre sous presse, le cours de l'action Google-A (NASDAQ : GOOGL) a augmenté de 1,54 % pour atteindre 163,77 $ US par action, avec une valeur marchande totale de 2,02 billions de dollars US. Depuis début 2024, le cours de l’action Google a augmenté d’environ 16 %.
Ce qui suit est un résumé succinct du discours de Schmidt, édité et abrégé :
Modérateur : Les invités d’aujourd’hui n’ont pas besoin d’être présentés. J'ai rencontré Eric pour la première fois il y a environ 25 ans, lorsqu'il est arrivé à Stanford GSB en tant que PDG de Novell. Depuis, il a occupé des postes clés chez Google, commençant en 2001, et rejoignant Schmidt Futures en 2017. De plus, il a également participé à de nombreux autres projets, et vous pouvez consulter les informations pertinentes. Alors Eric, si vous me le permettez, je vais commencer par ça. Tout d’abord, où pensez-vous que l’intelligence artificielle va se diriger à court terme ? Je pense que vous définissez cela comme étant la période d'un à deux ans.
Schmidt : Les choses évoluent si vite que j'ai l'impression que tous les six mois, je dois prononcer un nouveau discours sur ce qui va se passer. J'ai un groupe d'étudiants en informatique ici, quelqu'un peut-il expliquer au reste de la classe ce qu'est la « fenêtre contextuelle d'un million de jetons » ? Veuillez le nommer et dites-nous ce qu'il fait.
Étudiant : Fondamentalement, cela vous permet d'inviter avec un million de jetons ou un million de mots.
Schmidt : Vous pouvez donc poser une question d'un million de mots. Anthropic, c'est 200 000 jetons, jusqu'à 1 million, et ainsi de suite. Vous pouvez imaginer qu’OpenAI ait un objectif similaire. Quelqu'un ici peut-il donner une définition technique d'un agent IA ? Encore une fois, l'informatique.
Étudiant : L'agent IA peut être quelque chose qui se comporte d'une certaine manière. Il peut s'agir d'appeler quelque chose sur le Web pour trouver des informations en votre nom. Cela pourrait être beaucoup de choses différentes dans ce sens. Il se passe toutes sortes de choses dans un processus.
Schmidt : Un agent est donc quelque chose qui exécute une sorte de tâche. Une autre définition est qu'il s'agit d'un LLM, état et mémoire. Ensuite, informaticiens, l’un d’entre vous peut-il définir « du texte à l’action » ?
Étudiant : Au lieu de convertir du texte en plus de texte, laissez l'IA déclencher des actions en fonction de cela.
Schmidt : Une autre définition est le langage Python. Je ne veux jamais voir un langage de programmation survivre. Tout dans l'IA est fait en Python. Un nouveau langage vient d'apparaître appelé Mojo, et il semble qu'ils aient enfin résolu le problème de la programmation de l'IA, mais nous verrons s'il peut réellement survivre à la domination de Python. Il y a aussi un problème technique. Pourquoi NVIDIA vaut-il 2 000 milliards de dollars alors que d’autres sociétés sont en difficulté ?
Étudiant : La réponse technique est que la plupart du code doit être exécuté à l'aide des optimisations CUDA qui ne sont actuellement prises en charge que par les GPU NVIDIA, afin que d'autres entreprises puissent faire ce qu'elles veulent, mais à moins d'avoir 10 ans d'expérience en matière de logiciels, vous n'aurez pas d'apprentissage automatique. optimisation.
Schmidt : J'aime considérer CUDA comme un langage de programmation C pour les GPU, et je me sens à l'aise avec cette idée. CUDA a été fondée en 2008. Même si j'ai toujours pensé que c'était un mauvais langage, il a pris le dessus. Un autre point à noter : il existe un ensemble de bibliothèques open source hautement optimisées pour CUDA, ce qu'aucune autre bibliothèque ne propose. Tous ceux qui construisent ces piles technologiques passent complètement à côté de ce point de la discussion. Ces bibliothèques sont techniquement appelées VLLM, et il existe de nombreuses bibliothèques similaires qui sont également hautement optimisées pour CUDA, ce qui les rend difficiles à copier pour les concurrents.
Alors qu’est-ce que tout cela signifie ? L'année prochaine, vous verrez de très grandes fenêtres contextuelles, des agents et des applications de synthèse texte-action. Lorsque ces technologies seront déployées à grande échelle, elles auront un impact énorme sur le monde, bien au-delà de l’impact des médias sociaux. Voici pourquoi : dans la fenêtre contextuelle, vous pouvez l'utiliser comme mémoire à court terme, et j'ai été choqué par la durée de la fenêtre contextuelle. Les raisons techniques sont liées au service et aux difficultés de calcul. La chose intéressante à propos de la mémoire à court terme est que lorsque vous saisissez des informations et posez une question, par exemple lisez 20 livres et utilisez le texte des livres comme requête, puis demandez de quoi ils parlent, elle oublie la partie centrale, de la même manière que le cerveau humain fonctionne.
En ce qui concerne les agents, il y a maintenant des gens qui construisent des agents LLM en lisant et en comprenant des choses dans des domaines comme la chimie, puis en les testant et en les réintégrant à leur compréhension. C'est très puissant. Le troisième aspect est le texte-action. Laissez-moi vous donner un exemple : disons que le gouvernement essaie d'interdire TikTok. Si TikTok est interdit, je vous suggère de dire ce qui suit à votre LLM : copiez TikTok pour moi, mettez-y mes préférences, créez cette application et publiez-la dans les 30 prochaines secondes, et dans l'heure, si elle n'a pas fait son chemin. , fais juste quelque chose comme ça. C'est l'ordre. Vous pouvez voir à quel point c’est puissant.
Si vous pouvez traduire n'importe quel langage vers n'importe quelle commande numérique, il s'agit essentiellement de Python dans ce scénario. Imaginez que tout le monde sur la planète ait ses propres programmeurs qui faisaient réellement ce qu'ils voulaient faire, par opposition à des programmeurs qui ne travaillaient pas comme prévu. Les programmeurs ici savent de quoi je parle. Imaginez un programmeur non arrogant qui fait réellement ce que vous voulez sans que vous ayez à payer un prix élevé. Et la fourniture de ces programmeurs est illimitée.
Animateur : Est-ce que tout cela se produira dans un an ou deux ?
Schmidt : Très rapidement. J’en suis sûr, les trois choses ci-dessus se produiront simultanément lors de la prochaine vague. Alors vous demandez ce qui va se passer d’autre. Je fluctue tous les six mois, nous sommes donc dans une oscillation impaire-pair. À l’heure actuelle, l’écart entre les modèles de pointe (il n’y en a que trois maintenant) et les autres semble se creuser. Il y a six mois, j'étais convaincu que l'écart se réduisait, j'ai donc investi massivement dans certaines petites entreprises. Cependant, maintenant, je n'en suis plus si sûr.
J'ai des conversations avec de grandes entreprises et elles me disent qu'elles ont besoin de 10 milliards de dollars, 20 milliards de dollars, 50 milliards de dollars, voire 100 milliards de dollars. Le projet Stargate nécessite 100 milliards de dollars et est très difficile. Mon bon ami Sam Altman pense que cela pourrait coûter environ 300 milliards de dollars, peut-être plus. Je lui ai fait remarquer que j'avais calculé l'énergie nécessaire.
Dans un souci de transparence, je suis allé à la Maison Blanche vendredi et je leur ai dit que nous devions être les meilleurs amis du Canada. Parce que les Canadiens sont des gens vraiment sympas, ils ont contribué à inventer l’intelligence artificielle et ils disposent de beaucoup d’énergie hydroélectrique. Parce que nous, en tant que pays, n’avons pas assez de pouvoir pour atteindre cet objectif. Une autre option serait que les pays arabes financent le projet. Personnellement, j’aime les Arabes et j’y passe beaucoup de temps, mais ils ne respectent peut-être pas nos règles de sécurité nationale. Et le Canada et les États-Unis sont l’un des trois grands sur lesquels nous sommes tous d’accord.
Ainsi, dans ces centres de données, qui pèsent entre 100 et 300 milliards de dollars, l’électricité commence à devenir une ressource rare.
D’ailleurs, si vous suivez ce raisonnement, vous vous demanderez peut-être pourquoi je parle de CUDA et NVIDIA ? Si la totalité des 300 milliards de dollars revient à NVIDIA, vous savez quoi faire en bourse. Cependant, il ne s’agit pas d’une recommandation boursière et je ne suis pas un concédant de licence.
Animateur : En partie parce que nous allons avoir besoin de plus de puces, mais Intel reçoit beaucoup d'argent du gouvernement américain. AMD tente de construire une usine de fabrication en Corée du Sud.
Schmidt : Levez la main si vous possédez une puce Intel dans l'un de vos appareils informatiques. Voilà pour le monopole.
Professeur : Mais c'est le point. Ils avaient un monopole autrefois, et maintenant NVIDIA a un monopole. Alors, ce sont des barrières à l’entrée ? En parlant de CUDA, existe-t-il d’autres options ? Je parlais à Percy Lange l'autre jour. Il bascule entre les TPU et les puces NVIDIA, en fonction de ce à quoi il a accès. C'est parce qu'il n'a pas le choix.
Schmidt : S'il disposait de fonds illimités, il choisirait aujourd'hui l'architecture B200 de NVIDIA car elle est plus rapide. Je ne dis pas cela : la concurrence est une bonne chose. J'ai eu une longue conversation avec Lisa Su d'AMD. Ils ont construit quelque chose qui peut convertir l'architecture CUDA en la leur, appelé Rokam. Ce n'est pas encore entièrement fonctionnel, mais ils y travaillent.
Modérateur : Vous avez longtemps travaillé chez Google et ils ont inventé l'architecture Transformer. Merci aux gens formidables là-bas, comme Peter, Jeff Dean et tout le monde. À l’heure actuelle, OpenAI semble avoir perdu l’initiative. Dans le dernier classement que j'ai vu, Claude d'Anthropic était en tête de liste. J'ai demandé à Sundar, mais il ne m'a pas donné de réponse très claire. Peut-être avez-vous une explication plus précise ou objective de ce qui se passe là-bas.
Schmidt : Je ne suis plus un employé de Google. L'accent mis par Google sur l'équilibre travail-vie personnelle consiste davantage à permettre aux employés de rentrer tôt chez eux et de travailler à domicile, plutôt que de rechercher aveuglément la victoire. En revanche, les startups réussissent parce que leurs employés travaillent dur. Même si cela peut paraître un peu brutal, la réalité est que si vous démarrez une entreprise après vos études et que vous souhaitez rivaliser avec d'autres startups, vous ne pouvez pas faire venir des employés un seul jour par semaine.
Modérateur : Au début de Google, la même chose était vraie pour Microsoft.
Schmidt : Il semble maintenant que dans notre secteur, depuis longtemps, les entreprises ont toujours gagné en étant vraiment créatives et en dominant un espace plutôt qu'en effectuant la transformation suivante. Ceci est bien documenté. Je pense que les fondateurs sont spéciaux et qu’ils doivent garder le contrôle, même s’il peut être difficile de travailler avec eux car ils mettent beaucoup de pression sur leurs employés. Même si nous n’aimons pas les actions personnelles d’Elon, regardez ce qu’il obtient de ses employés. J'ai dîné avec lui une fois et il volait. J'étais dans le Montana et il prenait un vol à 22 heures ce soir-là pour un rendez-vous à minuit avec x.ai. Pensez-y.
Différents endroits ont des cultures différentes. Je suis impressionné par TSMC. Ils avaient pour règle que les doctorants fraîchement diplômés, bons physiciens, devaient travailler dans le sous-sol de l'usine. Pouvez-vous imaginer qu'un docteur américain en physique fasse cela ? Peu probable. C’est une éthique de travail différente.
La rigueur avec laquelle je travaille vient du fait que ces systèmes ont des effets de réseau, donc le temps presse. Et dans la plupart des entreprises, le temps n’est pas si important, vous en disposez en abondance. Coca-Cola et Pepsi-Cola existeront toujours, la concurrence entre eux se poursuivra et tout sera glacial. Lorsque je traite avec des sociétés de télécommunications, la signature d’un accord prend généralement 18 mois. Il n’y a aucune raison de prendre 18 mois pour faire quoi que ce soit, cela doit être fait le plus tôt possible. Nous sommes dans une période de croissance et de maximisation des revenus, mais cela demande aussi des idées folles.
Par exemple, lorsque Microsoft a conclu un accord avec OpenAI, j'ai pensé que c'était l'idée la plus stupide que j'aie jamais entendue. Externaliser votre leadership en IA à OpenAI et Sam et son équipe ? C'est fou. Personne chez Microsoft ou ailleurs ne fait cela. Aujourd’hui, cependant, elles deviennent les entreprises les plus valorisées, certainement du tac au tac avec Apple. Apple n'a pas de bonne solution d'IA, mais il semble qu'ils l'aient fait fonctionner.
Sponsor : Quel rôle l’IA jouera-t-elle dans la sécurité nationale ou les intérêts géopolitiques, notamment dans la concurrence avec la Chine ?
Schmidt : En tant que président d'un comité sur l'intelligence artificielle, j'ai étudié cette question en profondeur. Nous avons rédigé un rapport d'environ 752 pages et l'avons résumé ainsi : Nous sommes actuellement dans une position de leader et devons conserver cet avantage, ce qui nécessite un soutien financier important. Nos principaux clients sont le Sénat et la Chambre des représentants, ce qui a conduit à l'introduction de la loi CHIPS et d'autres politiques similaires.
Si des modèles de pointe et certains modèles open source continuent de se développer, seules quelques entreprises pourraient être en mesure de rivaliser dans ce domaine. Quels pays disposent de telles capacités ? Ces pays doivent être bien financés, talentueux, dotés de systèmes éducatifs solides et avoir la volonté de gagner. Les États-Unis et la Chine sont deux des principaux pays. Quant à savoir si d’autres pays peuvent participer, je n’en suis pas sûr. Mais ce qui est sûr, c’est qu’à l’avenir, la rivalité entre les États-Unis et la Chine pour l’hégémonie intellectuelle sera un combat majeur.
Le gouvernement américain a essentiellement interdit les exportations de puces Nvidia vers la Chine, même s'il ne l'admettra pas publiquement. Nous disposons d'environ 10 ans d'avantages technologiques dans les puces DUV, qui sont des puces de 5 nanomètres. Cet avantage nous donne plusieurs années d'avance sur la Chine, au grand dam de celle-ci. Cette politique a été développée par l’administration Trump et soutenue par l’administration Biden.
Animateur : Le Congrès suivra-t-il vos conseils et réalisera-t-il des investissements massifs ? La loi CHIPS en est évidemment un exemple.
Schmidt : Nous devons également construire un énorme système d’intelligence artificielle. Je dirige un groupe informel, ad hoc et non juridique d'initiés communs de l'industrie. L’année dernière, ces membres ont défendu ce qui est devenu le projet de loi sur l’intelligence artificielle de l’administration Biden, la plus longue directive présidentielle de l’histoire.
Nous avons déjà discuté d’une question centrale : comment détecter les dangers dans un système qui a appris mais dont vous ne savez pas quoi demander ? En d’autres termes, le système a peut-être appris quelque chose de mal, mais vous ne savez pas comment le demander. Par exemple, il a peut-être appris à mélanger des produits chimiques d'une nouvelle manière, mais vous ne savez pas comment lui demander. Pour répondre à ce problème, nous avons proposé dans une note au gouvernement de fixer un seuil que nous appelons 10 à la puissance 26, qui est une mesure technique de calcul. Au-delà de ce seuil, les entreprises doivent déclarer leurs activités au gouvernement. Pour garantir qu'ils sont différents, l'Union européenne fixe 10 à la puissance 25 à 10. Mais ces chiffres sont assez proches. Je pense que toutes ces distinctions disparaîtront parce que la technologie existante deviendra obsolète. Le terme technique est appelé formation conjointe, ce qui signifie essentiellement que les éléments peuvent être fusionnés. Nous ne pourrons donc peut-être pas protéger les gens contre ces nouvelles choses.
Modérateur : Ensuite, je veux discuter d’une question quelque peu philosophique. L’année dernière, vous avez co-écrit un article avec Henry Kissinger et Dan Huttenloch sur la nature de la connaissance et la façon dont elle se développe. J'ai également évoqué ce problème il y a quelques jours. Pendant la majeure partie de l’histoire, la compréhension de l’univers par l’humanité est restée mystérieuse, jusqu’à l’avènement de la révolution scientifique et des Lumières. Dans votre article, vous mentionnez que les modèles actuels sont devenus si complexes et difficiles à comprendre qu'on ne sait vraiment pas ce qui se passe à l'intérieur. Je cite Richard Feynman : « Ce que je ne peux pas créer, je ne le comprends pas. » Je suis tombé sur cette citation l’autre jour. Mais maintenant, les gens créent ce qu’ils peuvent sans vraiment comprendre son fonctionnement interne. La nature de la connaissance a-t-elle changé d’une manière ou d’une autre ? Devons-nous commencer à accepter ces modèles au pied de la lettre, qu’ils ne peuvent pas nous expliquer ?
Schmidt : Je veux vous donner l’exemple d’un adolescent. Si vous avez un adolescent, vous savez qu’il est humain, mais vous n’arrivez pas à comprendre ce qu’il pense. Cependant, en tant que société, nous avons réussi à nous adapter à l’existence des adolescents et ils finiront par en sortir. C'est une question sérieuse. Nous pouvons donc avoir des systèmes de connaissances que nous ne pouvons pas décrire entièrement, mais nous comprenons leurs limites et les limites de ce qu'ils peuvent faire, et c'est probablement le mieux que nous puissions obtenir. Pensez-vous que nous comprendrons ces limites ? Si nous pouvons faire cela, c'est génial.
Le consensus lors des réunions hebdomadaires de mon groupe est qu'à terme, il y aura ce qu'on appelle l'IA contradictoire, où des entreprises vous embaucheront et vous paieront pour briser votre système d'IA. Tout comme l'équipe rouge. Contrairement aux équipes rouges humaines d'aujourd'hui, vous aurez des entreprises entières et des secteurs entiers de systèmes d'IA dont le travail consiste à perturber les systèmes d'IA existants et à y trouver des vulnérabilités, en particulier celles que nous ne pouvons pas comprendre. Cela a du sens pour moi. C'est aussi un excellent programme pour Stanford. Si vous avez un étudiant diplômé qui doit comprendre comment attaquer l’un de ces grands modèles et comprendre ce qu’il fait, cela constituera une compétence importante pour construire la prochaine génération. Il est donc logique de combiner les deux.
Modérateur : Répondons maintenant aux questions de certains étudiants. Il y a un camarade de classe derrière moi, dites votre nom s'il vous plaît.
Étudiant : Vous avez déjà mentionné, et cela rejoint le commentaire actuel, que l'IA fait réellement ce que vous voulez qu'elle fasse. Vous venez de mentionner l’IA contradictoire, et je me demandais si vous pouviez nous en parler plus en détail. Il semble que, outre l'augmentation évidente de la puissance de calcul, vous puissiez obtenir des modèles plus performants, mais la question de savoir comment les faire faire ce que vous voulez semble être en partie sans réponse.
Schmidt : Eh bien, il faut supposer que le problème actuel des hallucinations diminuera à mesure que la technologie s'améliorera, etc. Je ne dis pas que ça va disparaître. Et puis il faut aussi supposer qu'il existe un test d'efficacité, donc il doit y avoir un moyen de savoir si cette chose a réussi. Dans l’exemple que j’ai mentionné d’un concurrent de TikTok, je ne suggère pas de voler illégalement la musique d’autrui. Que feriez-vous si vous étiez entrepreneur dans la Silicon Valley ? J'espère que vous êtes tous des entrepreneurs de la Silicon Valley. Si votre produit réussit, vous embaucherez une armée d’avocats pour gérer les conséquences. Mais si personne n’utilise votre produit, cela n’aura pas d’importance si vous volez tout. Bien sûr, ne me citez pas là-dessus.
La Silicon Valley effectue généralement ces tests et traite les questions de suivi. C'est une pratique courante. Je pense que vous allez voir de plus en plus de systèmes performants et des tests encore meilleurs et éventuellement des tests contradictoires, ce qui les maintiendra dans un cadre. Ce terme professionnel est appelé raisonnement en chaîne de pensée. On pense que dans les prochaines années, vous serez capable de générer une chaîne de raisonnement en mille étapes, tout comme si vous prépariez une recette. Vous pouvez l'exécuter et tester qu'il produit les bons résultats, c'est ainsi que fonctionne le système.
Étudiant : Dans l’ensemble, vous êtes très optimiste quant au potentiel de progrès de l’intelligence artificielle. Je suis curieux, qu'est-ce qui motive ces progrès ? Est-ce plus de puissance de calcul ? Est-ce plus de données ? Est-ce un changement fondamental ou réel ?
Schmidt : La réponse est tout ce qui précède. Le montant d’argent investi est incroyable. En gros, j'ai tout investi parce que je n'avais aucune idée de qui allait gagner et que la somme d'argent que je suivais était tellement énorme. Cela s'explique en partie par le fait que de l'argent a été gagné au début et que ceux qui n'en savent pas grand-chose doivent disposer du composant IA. Tout est investi dans l’IA maintenant et ils ne peuvent pas faire la différence.
Je définis l’intelligence artificielle comme un système d’apprentissage, un système qui apprend véritablement. Je pense que c'est l'un d'entre eux. Le deuxième point est qu’il existe désormais de nouveaux algorithmes très complexes qui ressemblent un peu à ceux de l’ère post-Transformer. Un de mes amis, également collaborateur de longue date, a inventé une nouvelle architecture non-Transformer. Un groupe que j'ai financé à Paris a affirmé avoir fait la même chose. Il y a beaucoup d’inventions et beaucoup de recherches à Stanford. Le dernier point est que le marché estime que les inventions intelligentes ont des rendements illimités. Disons que vous investissez 50 milliards de dollars dans une entreprise et que vous devez gagner beaucoup d’argent grâce aux renseignements pour pouvoir le rembourser. Nous pourrions avoir une énorme bulle d’investissement et elle se résoudrait d’elle-même. Cela a toujours été le cas et cela pourrait être le cas aujourd’hui.
Professeur : Vous avez mentionné plus tôt que les dirigeants créent une distance par rapport aux autres.
Schmidt : Il existe maintenant une entreprise en France appelée Mistral, et elle fait un très bon travail. Je suis évidemment un investisseur. Ils ont déjà réalisé une deuxième version, et leur troisième modèle sera probablement fermé car trop cher. Ils ont besoin de revenus et ne peuvent pas donner leur modèle gratuitement. Le débat entre open source et source fermée fait rage dans notre industrie. Toute ma carrière s'est construite sur la volonté des gens de partager des logiciels de manière open source. Tout ce que je fais est basé sur l'open source. Une grande partie des fondations de Google repose également sur l'open source. Mon travail se situe principalement dans le domaine technique. Cependant, les énormes coûts d’investissement pourraient changer fondamentalement la façon dont les logiciels sont construits.
Mon point de vue sur les programmeurs de logiciels est que leur productivité devrait au moins doubler. Il existe actuellement trois ou quatre éditeurs de logiciels qui tentent de le faire, et j'ai investi dans chacun d'eux pendant cette période. Ils tentent tous de rendre les programmeurs de logiciels plus productifs. Je suis récemment tombé sur une entreprise très intéressante appelée Augment. Je pense souvent aux programmeurs qui disent que ce n’est pas le but. Notre cible, ce sont ces équipes de programmation logicielle de 100 personnes avec des millions de lignes de code et personne ne sait ce qui se passe. C'est une très bonne application de l'intelligence artificielle. Vont-ils gagner de l’argent ? Je l'espère, mais il y a beaucoup de problèmes ici.
Étudiant : Au début, vous avez mentionné que la combinaison d'extensions de fenêtres contextuelles, de proxys et de textes-actions aurait un impact incroyable. Premièrement, pourquoi cette combinaison est-elle importante ? Deuxièmement, je sais que vous n’êtes pas un prophète et que vous ne pouvez pas prédire l’avenir, mais pourquoi pensez-vous que cela dépasse notre imagination ?
Schmidt : Je pense principalement parce que la fenêtre contextuelle permet de résoudre le problème de récence. Les modèles actuels nécessitent environ 18 mois de formation, dont six mois de préparation, six mois de formation et six mois de mise au point, ils sont donc toujours obsolètes. Et avec la fenêtre contextuelle, vous pouvez saisir les derniers événements et poser des questions sur la guerre Hamas-Israël dans son contexte, ce qui est très puissant et le rend aussi à jour que Google.
Dans le cas de l'agence, je peux vous donner un exemple. J'ai créé une fondation pour financer une organisation à but non lucratif. Je ne connais pas grand chose en chimie, mais il existe un outil appelé ChatCrow, qui est un système basé sur de grands modèles de langage permettant d'apprendre la chimie. Ils font fonctionner le système pour générer des hypothèses chimiques sur les protéines, puis le laboratoire les teste pendant la nuit et le système apprend. Il s’agit d’un énorme accélérateur pour des domaines tels que la chimie et la science des matériaux. Il s’agit d’un modèle d’agence.
Je pense que si seulement il y avait beaucoup de programmeurs bon marché, le concept de texte-action pourrait être compris. Je ne pense pas que nous comprenions ce qui se passe lorsque chacun a son propre programmeur. C'est aussi votre domaine d'expertise. Je ne parle pas de tâches simples comme allumer et éteindre les lumières. J'imagine un autre exemple, disons que vous n'aimez pas Google, vous pourriez dire, faites de moi un concurrent de Google. Oui, vous pouvez le faire personnellement. Construisez-moi un concurrent de Google qui effectue des recherches sur le Web, crée l'interface utilisateur, réalise une bonne copie et ajoute l'IA générative de manière intéressante. Faites-le dans les 30 secondes et voyez si cela fonctionne. Beaucoup pensent que les opérateurs historiques, dont Google, sont vulnérables à de telles attaques.
Animateur : Maintenant, jetons un coup d’œil. Slido a envoyé de nombreuses questions, dont certaines ont été mises en ligne. L’année dernière, nous avons discuté de la manière d’empêcher l’IA d’influencer l’opinion publique et de diffuser des informations erronées, en particulier lors des prochaines élections.
Schmidt : Nous devons réfléchir à des solutions à court et à long terme. Lors des prochaines élections mondiales, la plupart des informations erronées apparaîtront sur les réseaux sociaux, et les capacités organisationnelles actuelles des sociétés de médias sociaux sont insuffisantes pour contrôler efficacement ces informations. TikTok, par exemple, a été accusé de favoriser un certain type de désinformation, même si je n’en ai aucune preuve. Je pense que nous sommes dans le pétrin.
Le pays doit apprendre la pensée critique, ce qui pourrait constituer un défi difficile à relever pour les États-Unis. Ce n’est pas parce que quelqu’un vous dit quelque chose que c’est vrai.
Animateur : Allons-nous aller si loin que plus personne ne croira certaines des choses qui sont vraies ? Certains parlent de crise épistémologique. Or, Elon Musk dit qu’il n’a jamais fait quelque chose, mais comment le prouver ?
Schmidt : Nous pouvons prendre l’exemple de Donald Trump. Je pense que nous avons un problème de confiance dans notre société et que la démocratie pourrait échouer à cause de cela. La plus grande menace pour la démocratie est la désinformation, parce que nous sommes devenus si doués dans ce domaine.
Lorsque je dirigeais YouTube, le plus gros problème que nous avions était celui des gens qui mettaient en ligne de fausses vidéos entraînant la mort de personnes. Nous avons une politique de non-mort et essayer de résoudre ce problème est choquant et horrible. C’était avant l’avènement de l’intelligence artificielle générative.
Étudiant : Je suis curieux de savoir si vous avez exploré les paramètres distribués. Je pose cette question car, bien sûr, créer un grand cluster est difficile, mais les MacBook sont puissants. Il existe de nombreuses petites machines dans le monde. Alors, pensez-vous que le pliage à la maison ou quelque chose comme ça serait applicable à la formation de ces systèmes ?
Schmidt : Oui, nous avons examiné cette question très attentivement. Ainsi, la façon dont fonctionne l’algorithme est que vous avez une très grande matrice et que vous avez essentiellement une fonction de multiplication. Considérez-le donc comme un va-et-vient. Et ces systèmes sont complètement limités par la vitesse de la mémoire du CPU ou du GPU. En fait, la prochaine génération de puces NVIDIA a intégré toutes ces fonctions dans une seule puce. Les jetons sont désormais si gros qu’ils sont collés les uns aux autres. En fait, le boîtier est si sensible que le boîtier et la puce elle-même sont assemblés dans une salle blanche. La réponse semble donc que les superordinateurs et la vitesse de la lumière, en particulier les interconnexions de mémoire, ont vraiment le dessus. Je pense que la segmentation des grands modèles linguistiques (LLM) est peu probable pour le moment.
Modérateur : Dans le domaine de l'IA, certaines grandes entreprises semblent dominer le marché, ce qui est lié à l'antitrust.
Schmidt : J'ai participé à la dissolution de Microsoft au cours de ma carrière, mais cela n'a finalement pas abouti ; j'ai également travaillé dur pour empêcher la dissolution de Google, mais j'ai également échoué. Je pense donc que la tendance n’est pas à diviser. Tant que ces entreprises ne deviennent pas des monopoles comme John D. Rockefeller, une action gouvernementale est peu probable.
Ces grandes entreprises dominent parce qu’elles sont les seules à disposer du capital nécessaire pour construire des centres de données. J'ai des amis Reed et Mustafa qui ont pris la décision de céder leur entreprise à Microsoft parce qu'ils ne parvenaient pas à lever des dizaines de milliards de dollars. Quant aux chiffres exacts, vous devrez peut-être demander à Reid de vous le dire.
Étudiant : Enfin, je me demande quel impact ces développements auront sur les pays qui ne sont pas impliqués dans le développement de modèles et de calculs de pointe.
Schmidt : Les pays riches deviendront encore plus riches, tandis que les pays pauvres ne pourront que faire de leur mieux. Il s’agit en réalité d’un jeu réservé aux pays riches, qui nécessite d’énormes capitaux, des talents techniques et un fort soutien gouvernemental. À l’échelle mondiale, de nombreux pays sont confrontés à divers problèmes, notamment lorsque les ressources sont rares. Ils doivent trouver des partenaires et travailler avec d’autres pour résoudre ces problèmes.
Modérateur : Je me souviens de la dernière fois que nous nous sommes rencontrés, vous participiez à un hackathon à AGI House. Je sais que vous consacrez beaucoup de temps et que vous êtes passionné par le fait d'aider les jeunes à créer de la richesse. Avez-vous des conseils à donner aux personnes qui rédigent des plans d'affaires pour des cours ou qui rédigent des propositions politiques ou des propositions de recherche dans leur carrière ?
Schmidt : Je donne un cours sur ce sujet dans une école de commerce et vous devriez venir l'écouter. Je suis choqué par la rapidité avec laquelle vous présentez de nouvelles idées.
Lors d'un hackathon auquel j'ai participé, l'équipe gagnante avait pour mission de faire voler un drone entre deux tours. Ils ont utilisé Python pour générer du code dans un espace de drone virtuel et ont réussi la tâche dans le simulateur. Cela peut prendre une semaine ou deux à un bon programmeur professionnel pour ce faire. Je pense que la capacité de créer rapidement des prototypes est très importante, car une partie du problème auquel les entrepreneurs sont confrontés est la rapidité. Si vous ne pouvez pas créer de prototype en une journée avec ces outils, vous devez reconsidérer votre décision, car c'est exactement ce que font vos concurrents.
Mon plus grand conseil est donc que lorsque vous commencez à penser à créer une entreprise, vous pouvez rédiger un plan d’affaires. En fait, vous pouvez demander à un ordinateur de l'écrire pour vous, à condition que ce soit légal. Il est important d'utiliser ces outils pour prototyper vos idées le plus rapidement possible, car il se peut que quelqu'un fasse la même chose dans une autre entreprise, université ou ailleurs où vous n'êtes pas allé.
Modérateur : Merci beaucoup Schmidt. (La partie abrégée provient du compte Web3 Sky City)
(Cet article a été publié pour la première fois sur Titanium Media App, auteur|Lin Zhijia, éditeur|Hu Runfeng)