{"id":140650,"date":"2024-06-30T14:06:05","date_gmt":"2024-06-30T12:06:05","guid":{"rendered":"https:\/\/www.pauljorion.com\/blog\/?p=140650"},"modified":"2024-06-30T15:06:43","modified_gmt":"2024-06-30T13:06:43","slug":"lextraordinaire-gain-de-productivite-que-permettent-les-grands-modeles-de-langage-llm","status":"publish","type":"post","link":"https:\/\/www.pauljorion.com\/blog\/2024\/06\/30\/lextraordinaire-gain-de-productivite-que-permettent-les-grands-modeles-de-langage-llm\/","title":{"rendered":"<b>L&rsquo;extraordinaire gain de productivit\u00e9 que permettent les Grands Mod\u00e8les de Langage (LLM)<\/b>"},"content":{"rendered":"<p><a href=\"https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick.jpg\"><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter size-full wp-image-140651\" src=\"https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick.jpg\" alt=\"\" width=\"1000\" height=\"1500\" srcset=\"https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick.jpg 1000w, https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick-200x300.jpg 200w, https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick-683x1024.jpg 683w, https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick-768x1152.jpg 768w\" sizes=\"auto, (max-width: 1000px) 100vw, 1000px\" \/><\/a><\/p>\n<p>Je suis en train de terminer la lecture d&rsquo;un livre intitul\u00e9 <em>Co-Intelligence. Living and Working with AI<\/em> par Ethan Mollick *, c&rsquo;est tout r\u00e9cent bien entendu (2 avril 2024), et c&rsquo;est consacr\u00e9 \u00e0 ce que j&rsquo;ai mis en titre : l&rsquo;extraordinaire gain de productivit\u00e9 que permettent les Grands Mod\u00e8les de Langage (LLM).<\/p>\n<p>C&rsquo;est plut\u00f4t du genre \u00ab\u00a0guide pratique\u00a0\u00bb, pas vraiment le genre de livre que je lis habituellement mais j&rsquo;avais lu un article du gars et j&rsquo;avais compris qu&rsquo;on pensait lui et moi sur ces LLMs \u00e0 peu pr\u00e8s la m\u00eame chose, d&rsquo;o\u00f9 mon int\u00e9r\u00eat pour son livre.<\/p>\n<p>Je ne regrette pas de l&rsquo;avoir lu, ne serait-ce que pour cet aphorisme qu&rsquo;on y trouve et que j&rsquo;aurais bien aim\u00e9 composer moi-m\u00eame :<\/p>\n<blockquote><p>\u00ab\u00a0Les humains, ces sacs que nous sommes, d&rsquo;eau et de traces de compos\u00e9s chimiques qui marchent et qui parlent, et qui avons convaincu du sable bien-organis\u00e9 de pr\u00e9tendre qu&rsquo;il pense comme nous\u00a0\u00bb.<\/p><\/blockquote>\n<p>Mollick est un peu escroc, il vous dit : \u00ab\u00a0Il faut bien penser au fait que ces machines ne sont pas super-intelligentes. Tiens, je vais vous raconter une histoire &#8230;\u00a0\u00bb. Et il vous explique alors un travail qu&rsquo;il a un jour fait avec un LLM. Or il n&rsquo;y a qu&rsquo;un mot pour d\u00e9crire ce que cette IA a alors fait, et ce mot, c&rsquo;est &#8230; \u00ab\u00a0super-intelligent\u00a0\u00bb. Et il se contente \u00e0 ce moment l\u00e0 d&rsquo;une toute petite remarque : \u00ab\u00a0\u00c9videmment, \u00e7a vous fait r\u00e9fl\u00e9chir&#8230;\u00a0\u00bb. Puis il vous refait le coup : \u00ab\u00a0Il y a des gens qui vous diront que ces machines ont une personnalit\u00e9 propre, voire m\u00eame une conscience. Tiens, une anecdote&#8230;\u00a0\u00bb. Et, m\u00eame topo : quiconque le lit se dira que son histoire <strong>prouve<\/strong> que le LLM a une personnalit\u00e9 propre et qu&rsquo;il a une conscience. Et il conclut : \u00ab\u00a0Honn\u00eatement, \u00e7a m&rsquo;a un peu \u00e9branl\u00e9 quand m\u00eame&#8230;\u00a0\u00bb<\/p>\n<p>Il vous pousse \u00e0 dire : \u00ab\u00a0Mollick ne comprend pas lui-m\u00eame ce qu&rsquo;il vient de m&rsquo;expliquer ?\u00a0\u00bb. Il sait tr\u00e8s bien en r\u00e9alit\u00e9 ce qu&rsquo;il vient de d\u00e9montrer mais, tr\u00e8s faux-cul, il veut que les lecteurs se disent : \u00ab\u00a0Il ne se rend pas compte que ces IAs sont plus fortes qu&rsquo;il ne le croit !\u00a0\u00bb. C&rsquo;est habile, \u00e7a \u00e9vite qu&rsquo;on ne fasse un jour un compte-rendu d&rsquo;<a href=\"https:\/\/www.pauljorion.com\/blog\/2024\/01\/25\/lavenement-de-la-singularite-en-librairie-le-6-mars-2024\/\" target=\"_blank\" rel=\"noopener\">un bouquin sur le m\u00eame th\u00e8me<\/a> dont la premi\u00e8re phrase soit \u00ab\u00a0Paul Jorion est devenu fou\u00a0\u00bb, comme l&rsquo;a (gentiment) \u00e9crit <a href=\"https:\/\/www.pauljorion.com\/blog\/2024\/05\/29\/le-suis-dieu-et-je-joue-avec-des-bouchons-de-liege-par-jean-luc-porquet\/\" target=\"_blank\" rel=\"noopener\">Jean-Luc Porquet<\/a> dans <em>Le canard encha\u00een\u00e9<\/em>.<\/p>\n<p>Toujours est-il que Mollick a raison : le gain de productivit\u00e9 que permettent les LLM est extraordinaire. Je vais illustrer cela avec mes journ\u00e9es d&rsquo;hier et d&rsquo;aujourd&rsquo;hui, laquelle n&rsquo;est encore qu&rsquo;\u00e0 sa moiti\u00e9.<\/p>\n<p>Hier matin, comme je venais de terminer l&rsquo;essai que je soumets \u00e0 un prix aux \u00c9tats-Unis, je demande \u00e0 Claude 3.5 de me donner des id\u00e9es sur quoi faire maintenant.<\/p>\n<blockquote><p>\u00ab\u00a0Compte tenu de votre formation en philosophie [sic], en math\u00e9matiques et en programmation, ainsi que de votre int\u00e9r\u00eat pour l&rsquo;IA et la collaboration entre l&rsquo;homme et l&rsquo;IA, voici quelques id\u00e9es de projets qui pourraient vous int\u00e9resser :<\/p>\n<p>1. D\u00e9velopper un cadre \u00e9thique pour l&rsquo;IA : &#8230;<br \/>\n2. Concevoir une plateforme de r\u00e9solution de probl\u00e8mes en collaboration entre l&rsquo;homme et l&rsquo;IA : &#8230;<br \/>\n3. Explorer l&rsquo;intersection de l&rsquo;IA et de la conscience : &#8230;<br \/>\n4. Cr\u00e9er un outil de cr\u00e9ativit\u00e9 augment\u00e9 par l&rsquo;IA : &#8230;<br \/>\n5. D\u00e9velopper un mod\u00e8le math\u00e9matique de symbiose entre l&rsquo;IA et l&rsquo;homme : &#8230;<br \/>\n6. Concevoir un syst\u00e8me \u00e9ducatif aliment\u00e9 par l&rsquo;IA : &#8230;<br \/>\n7. \u00c9tudier l&rsquo;interpr\u00e9tabilit\u00e9 de l&rsquo;IA : &#8230;<br \/>\n8. Cr\u00e9er un syst\u00e8me de dialogue philosophique : &#8230;\u00a0\u00bb<\/p><\/blockquote>\n<p>J&rsquo;ai choisi le point 3, dont l&rsquo;\u00e9nonc\u00e9 complet \u00e9tait :<\/p>\n<blockquote><p><em>Explorer l&rsquo;intersection de l&rsquo;IA et de la conscience<\/em> : D\u00e9velopper un mod\u00e8le th\u00e9orique ou une simulation qui explore l&rsquo;\u00e9mergence potentielle de la conscience dans les syst\u00e8mes artificiels, en s&rsquo;appuyant \u00e0 la fois sur des th\u00e9ories philosophiques et des mod\u00e8les informatiques.<\/p><\/blockquote>\n<p>Nous avons travaill\u00e9 ensemble toute la journ\u00e9e d&rsquo;hier. \u00c0 un moment j&rsquo;ai \u00e9t\u00e9 irrit\u00e9 par le c\u00f4t\u00e9 \u00ab\u00a0schtroumpf \u00e0 lunettes\u00a0\u00bb de Claude 3.5 et je suis retourn\u00e9 travailler avec Claude 3. D&rsquo;abord parce qu&rsquo;on se conna\u00eet mieux (<em>joke !<\/em>) et ensuite parce que je le trouve plus aventureux, plus dispos\u00e9 \u00e0 r\u00e9fl\u00e9chir hors du cadre.<\/p>\n<p>R\u00e9sultat des courses : en fin de journ\u00e9e j&rsquo;avais un mod\u00e8le de la conscience qui rend compte \u00e0 la fois de l&rsquo;humain et de la machine. Il fait une page et demande \u00e0 \u00eatre tr\u00e8s s\u00e9rieusement \u00e9toff\u00e9. Mais il est l\u00e0.<\/p>\n<p>En cours de journ\u00e9e hier, j&rsquo;avais pris une note sur le <em>complexe significabile<\/em> : l&rsquo;\u00e9mergence du sens global de la phrase \u00e0 partir du sens des mots individuels.<\/p>\n<p>Ce matin, j&rsquo;ai regard\u00e9 une conf\u00e9rence d&rsquo;Ilya Sutskever en ao\u00fbt dernier sur l&rsquo;apprentissage non-supervis\u00e9. J&rsquo;y ai p\u00each\u00e9 une id\u00e9e qui m&rsquo;int\u00e9ressait sur la compression de l&rsquo;information.<\/p>\n<p><iframe loading=\"lazy\" title=\"YouTube video player\" src=\"https:\/\/www.youtube.com\/embed\/k2sbKTEhVe4?si=OAwo8fH99nyoYJhD\" width=\"700\" height=\"450\" frameborder=\"0\" allowfullscreen=\"allowfullscreen\"><\/iframe><\/p>\n<p>Je suis all\u00e9 combiner cette bonne id\u00e9e \u00e0 celle qui se trouvait dans la note prise hier.<\/p>\n<p>C&rsquo;est l&rsquo;aide de ChatGPT-4o que j&rsquo;ai r\u00e9quisitionn\u00e9e ce matin parce que sur des questions pointues (dans ce cas-ci, la complexit\u00e9 algorithmique), il est plus syst\u00e9matique et donne des r\u00e9ponses plus approfondies que Claude.<\/p>\n<p>Et j&rsquo;ai le sentiment que j&rsquo;ai \u00e0 l&rsquo;heure qu&rsquo;il est (12h30), un mod\u00e8le satisfaisant du <em>complexe significabile<\/em>.<\/p>\n<p>Je mentionne cela comme exemples d&rsquo;extraordinaires gains de productivit\u00e9 que permettent les LLM.<\/p>\n<p>Bon, j&rsquo;entends d\u00e9j\u00e0 quelqu&rsquo;un qui s&rsquo;exclame : \u00ab\u00a0Mais M. Jorion, ce que vous ne dites pas, c&rsquo;est que \u00e7a fait des ann\u00e9es que vous travaillez sur ces questions ! Le chapitre 22 de votre livre <em>Principes des syst\u00e8mes intelligents<\/em> (1989) est intitul\u00e9 : \u00ab\u00a0La signification de la phrase\u00a0\u00bb et on pourrait dire que l&rsquo;ensemble du livre pr\u00e9pare ce chapitre. Vous avez aussi d\u00e9j\u00e0 publi\u00e9 en 1999, un gros article consacr\u00e9 \u00e0 un mod\u00e8le de la conscience (<a href=\"https:\/\/www.persee.fr\/doc\/hom_0439-4216_1999_num_39_150_453573\" target=\"_blank\" rel=\"noopener\">\u00ab\u00a0Le secret de la chambre chinoise\u00a0\u00bb<\/a>) ! Ne venez pas alors nous raconter que vous obtenez un mod\u00e8le de la conscience en une journ\u00e9e et un autre du sens de la phrase en une matin\u00e9e, c&rsquo;est le travail d&rsquo;une vie !\u00a0\u00bb.<\/p>\n<p>D&rsquo;accord, il y a du vrai l\u00e0-dedans : j&rsquo;avais des bases quand je me suis assis \u00e0 mon bureau hier matin. Aussi ce que je vais vous dire, je vais le formuler de la mani\u00e8re suivante :<\/p>\n<p>&#8211; Sens de la phrase : de 1989 \u00e0 aujourd&rsquo;hui, cela fait 35 ans.<br \/>\n&#8211; Conscience : de 1999 \u00e0 maintenant, cela fait 25 ans.<\/p>\n<p>&#8211; Gr\u00e2ce \u00e0 ChatGPT-4o, j&rsquo;ai autant avanc\u00e9 sur un mod\u00e8le du sens de la phrase en une matin\u00e9e que moi tout seul en 35 ans.<br \/>\n&#8211; Gr\u00e2ce \u00e0 Claude 3 et 3.5, j&rsquo;ai autant avanc\u00e9 sur un mod\u00e8le de la conscience en une journ\u00e9e que moi tout seul en 25 ans.<\/p>\n<p>======<br \/>\n* Ethan Mollick, <em>Co-Intelligence. Living and Working with AI<\/em>, Portfolio \/ Penguin 2024<\/p>\n","protected":false},"excerpt":{"rendered":"<p><a href=\"https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick.jpg\"><img loading=\"lazy\" decoding=\"async\" class=\"aligncenter size-full wp-image-140651\" src=\"https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick.jpg\" alt=\"\" width=\"1000\" height=\"1500\" srcset=\"https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick.jpg 1000w, https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick-200x300.jpg 200w, https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick-683x1024.jpg 683w, https:\/\/www.pauljorion.com\/blog\/wp-content\/uploads\/Mollick-768x1152.jpg 768w\" sizes=\"auto, (max-width: 1000px) 100vw, 1000px\" \/><\/a><\/p>\n<p>Je suis en train de terminer la lecture d&rsquo;un livre intitul\u00e9 <em>Co-Intelligence. Living and Working with AI<\/em> par Ethan Mollick *, c&rsquo;est tout r\u00e9cent bien entendu (2 avril 2024), et c&rsquo;est consacr\u00e9 \u00e0 ce que j&rsquo;ai mis en titre : l&rsquo;extraordinaire gain de productivit\u00e9 que [&hellip;]<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_crdt_document":"","footnotes":""},"categories":[9457,7483,9056,9204,13],"tags":[9578,9499,9655,9663,1803,9664,9205,9306,940,941],"class_list":["post-140650","post","type-post","status-publish","format-standard","hentry","category-lavenement-de-la-singularite-lhumain-ebranle-par-lintelligence-artificielle","category-principes-des-systemes-intelligents","category-conscience","category-grands-modeles-de-langage","category-intelligence-artificielle","tag-chatgpt-4o","tag-claude-3","tag-claude-3-5","tag-complexe-significabile","tag-conscience","tag-ethan-mollick","tag-grands-modeles-de-langage","tag-ilya-sutskever","tag-intelligence-artificielle-2","tag-principes-des-systemes-intelligents"],"_links":{"self":[{"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/posts\/140650","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/comments?post=140650"}],"version-history":[{"count":4,"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/posts\/140650\/revisions"}],"predecessor-version":[{"id":140655,"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/posts\/140650\/revisions\/140655"}],"wp:attachment":[{"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/media?parent=140650"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/categories?post=140650"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.pauljorion.com\/blog\/wp-json\/wp\/v2\/tags?post=140650"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}