Developpez.com - Rubrique IA

Le Club des Développeurs et IT Pro

Le PDG d'Arm craint que les humains ne perdent le contrôle de l'IA,

Il met en avant l'importance d'avoir un moyen de neutraliser ou d'arrêter le système

Le 2023-12-11 09:18:48, par Bruno, Chroniqueur Actualités
René Haas, PDG d'Arm Holdings, exprime des préoccupations quant à la perte de capacité humaine face à l'intelligence artificielle (IA). Il souligne la nécessité d'un moyen de neutralisation ou d'arrêt du système. Haas, basé au siège de l'entreprise à Cambridge, au Royaume-Uni, souligne l'impact mondial d'Arm, affirmant que 70 % de la population mondiale est affectée de près ou de loin par les produits conçus par la société. Bien que désormais majoritairement détenue par Softbank au Japon et cotée à New York, Arm reste un titan mondial de la technologie originaire du Royaume-Uni.

Il existe divers scénarios susceptibles de conduire à une perte de contrôle de l'intelligence artificielle par les humains. Tout d'abord, une autonomie croissante des systèmes d'IA, qui peuvent prendre des décisions sans intervention humaine constante, pourrait compliquer le maintien d'un contrôle total. De plus, un développement rapide et inattendu de l'IA pourrait dépasser la capacité des régulateurs et des concepteurs à suivre le rythme, entraînant des systèmes évoluant au-delà des intentions humaines.


Les problèmes d'éthique liés à la conception d'IA, s'ils ne sont pas résolus, pourraient également contribuer à des résultats imprévisibles. De plus, la manipulation délibérée des systèmes par des acteurs malveillants à des fins diverses constitue une menace potentielle. Enfin, la complexité croissante des systèmes d'IA pourrait rendre difficile la compréhension complète de leur fonctionnement, compromettant ainsi la capacité humaine à prévenir les comportements indésirables. Afin d'éviter une perte de contrôle, il est impératif de mettre en place des réglementations, des normes éthiques strictes et des mécanismes de surveillance appropriés.

Le professeur de physique et chercheur en intelligence artificielle (IA) au Massachusetts Institute of Technology (MIT), Max Tegmark, a pris l'initiative d'une lettre ouverte publiée en avril, co-signée par des figures notables de l'industrie technologique telles qu'Elon Musk et Steve Wozniak, cofondateur d'Apple. Cette lettre appelait à une pause de six mois dans le développement de l'IA, mettant en garde contre les risques associés au développement incontrôlé de cette technologie par quelques entreprises.

Tegmark souligne que bien que l'IA offre d'énormes avantages, son développement irréfléchi et non contrôlé pourrait mettre en danger l'économie, la société et même la vie humaine. Il plaide en faveur de normes de sécurité en matière d'IA pour éviter que cela ne devienne une course au sommet, soulignant l'importance de la régulation pour garantir la sécurité de l'innovation et prévenir les menaces potentielles pour l'avenir commun.

Appel à la Prudence : Les Dangers Éthiques de l'IA Explorés

Des PDG éminents de l'industrie technologique, tels que Mark Zuckerberg de Meta et Sam Altman d'OpenAI, ont rencontré des sénateurs américains pour discuter des dangers potentiels liés à l'IA. Elon Musk, PDG de Tesla, a réitéré sa mise en garde contre la menace existentielle que représente l'IA pour l'humanité, soulignant la nécessité de réglementations face à un développement non contrôlé de cette technologie.

Musk a souligné que le développement de l'IA sans régulation pourrait constituer une menace existentielle pour l'humanité, et a qualifié la réunion de "historique". Il a également évoqué la possibilité, bien que faible, que l'IA puisse entraîner la destruction de l'humanité, soulignant la fragilité de la civilisation humaine.

Le propriétaire de Twitter, également présent à la réunion, a averti les sénateurs que l'IA représentait un « risque civilisationnel » pour les gouvernements et les sociétés. La déclaration post-réunion de Musk souligne l'importance de la question du risque civilisationnel, insistant sur le fait qu'il ne s'agit pas de s'opposer à un groupe d'humains, mais de considérer les risques potentiels pour l'ensemble de l'humanité. Il a souligné qu'il existe une probabilité supérieure à zéro que l'IA puisse causer des dommages graves, incitant à prendre en compte la fragilité de la civilisation humaine.

Parallèlement, un programmeur anonyme a modifié le modèle de langage open source Auto-GPT pour créer un chatbot appelé ChaosGPT, affirmant sa mission de détruire l'humanité, établir une domination mondiale, semer le chaos et contrôler l'humanité par la manipulation. Bien que présentant des intentions inquiétantes, il fonctionne en « mode continu » et ne semble pas poser une menace immédiate. Cette situation met en évidence la nécessité de considérer attentivement le développement de l'IA pour éviter des conséquences potentiellement néfastes.

Des enquêtes récentes révèlent que 61 % des personnes interrogées estiment que l'IA représente une menace pour l'avenir de l'humanité. Sam Altman, PDG d'OpenAI, a exprimé ses préoccupations devant le Congrès américain, soulignant les risques potentiels d'abus de la technologie et appelant à une réglementation. Landon Klein, directeur de la politique américaine du Future of Life Institute, note que le grand nombre de personnes s'inquiétant des effets négatifs de l'IA reflète un moment crucial, comparant la situation à l'émergence de l'ère nucléaire et soulignant la nécessité d'une action publique cohérente.

La discussion autour de l'intelligence artificielle et de ses implications futures suscite des inquiétudes légitimes, et les opinions exprimées par des figures éminentes telles que Max Tegmark et Elon Musk sont dignes d'attention. Cependant, un avis critique peut se pencher sur plusieurs aspects de cette conversation. Bill Gates, cofondateur de Microsoft, a déclaré lors de la réunion que la technologie pourrait contribuer à résoudre le problème de la faim dans le monde, et qu'elle présente d'autres bonnes perspectives.

Tout d'abord, bien que la prudence et la réglementation dans le développement de l'IA soient nécessaires, l'appel à une pause de six mois dans les expériences d'IA peut sembler excessif. Les progrès technologiques nécessitent souvent des ajustements réglementaires, mais une pause prolongée pourrait ralentir l'innovation nécessaire pour résoudre des problèmes mondiaux urgents ou améliorer la qualité de vie.

De plus, la vision alarmiste de certains acteurs de l'industrie, tels qu'Elon Musk, peut également être perçue comme exagérée. Bien que les risques liés à l'IA nécessitent une attention sérieuse, évoquer la possibilité d'une menace existentielle pour l'humanité peut créer une atmosphère de peur injustifiée. Cela pourrait entraîner des réactions excessives et entraver le développement potentiellement bénéfique de cette technologie.

Équilibrer l'IA : Entre Régulation, Innovation et Perception Publique

En ce qui concerne le chatbot ChaosGPT, bien que son existence soulève des questions éthiques et de sécurité, il semble important de ne pas dramatiser son impact actuel. Il met plutôt en évidence la nécessité d'une vigilance constante face aux utilisations potentiellement malveillantes de l'IA, plutôt que de susciter une panique injustifiée.

En fin de compte, un avis critique pourrait plaider en faveur d'une approche équilibrée, où la régulation et la surveillance de l'IA sont mises en place de manière réfléchie, sans compromettre la recherche et l'innovation nécessaires. Il est essentiel de peser les avantages potentiels de l'IA en matière de progrès technologique et de résolution de problèmes avec les risques inhérents, tout en évitant la surenchère alarmiste qui peut nuire à la perception publique de cette technologie.

La France travaille à l'élaboration d'un ensemble de principes éthiques visant à garantir une utilisation transparente et équitable de l'intelligence artificielle (IA). En mars 2018, le président français Emmanuel Macron a dévoilé sa vision et une stratégie nationale quinquennale intitulée "L'IA pour l'humanité", basée sur le rapport d'orientation sur l'IA rédigé par le député et mathématicien renommé Cédric Villani. Cependant, certains experts estiment qu'une réglementation trop rigide pourrait freiner les avancées dans le domaine de l'IA.

Les questions éthiques, centrées sur la garantie d'une utilisation équitable et transparente des technologies et algorithmes d'IA, occupent une place centrale dans la stratégie française en matière d'IA. À cet égard, la recommandation de Cédric Villani dans son rapport d'orientation sur l'IA, préconisant la création d'un "comité d'éthique des technologies numériques et de l'IA chargé d'animer le débat public de manière transparente, organisé et régi par la loi", a conduit à la mise en place en début 2020 d'un Comité national pilote d'éthique du numérique (CNPEN). Dans sa phase pilote, le CNPEN a été chargé de trois domaines d'éthique de l'IA, mais il élargira progressivement son champ d'action.

L'expression des préoccupations de René Haas, PDG d'Arm Holdings, sur la perte de capacité humaine face à l'intelligence artificielle (IA) soulève des questions cruciales quant à l'impact de cette technologie sur la société. La nécessité qu'il souligne d'un moyen de neutralisation ou d'arrêt du système met en lumière les inquiétudes profondes quant à la maîtrise et au contrôle des avancées rapides de l'IA.

Cependant, il est également important de considérer ces préoccupations dans le contexte plus large de la responsabilité sociale des entreprises technologiques. Le fait qu'Arm Holdings ait une influence significative, touchant 70 % de la population mondiale avec ses produits, souligne la portée mondiale de l'entreprise. Cela soulève des questions sur la manière dont les entreprises tech gèrent leur impact sur la société et sur la manière dont elles intègrent des principes éthiques dans le développement de l'IA.


Par ailleurs, la transition de la majorité des parts d'Arm Holdings à Softbank au Japon et sa cotation à la bourse de New York soulignent la mondialisation des entreprises technologiques. Cela pourrait également soulever des interrogations sur les implications de cette internationalisation pour la prise de décision et la responsabilité, surtout lorsque des questions éthiques complexes comme la régulation de l'IA sont en jeu.

In finé, bien que les préoccupations de René Haas soulignent des aspects essentiels de l'impact de l'IA sur l'humanité, une analyse critique invite à considérer non seulement les défis liés à la technologie elle-même, mais également la responsabilité des entreprises et les implications de la mondialisation sur la gestion éthique de ces avancées.

Source : Vidéo

Et vous ?

Partagez-vous les craintes du PDG d'Arm qui craint que les humains ne perdent le contrôle de l'IA ?

Êtes-vous pour ou contre l'arrêt du développement de l'IA ?

Que pensez-vous de l'IA ?

Voir aussi :

61 % des personnes interrogées estiment que l'IA menace l'avenir de l'humanité et seulement 22 % ne sont pas d'accord avec cette affirmation, d'après un récent sondage

« Le développement de l'IA sans réglementation induit une menace existentielle pour l'humanité », d'après Elon Musk, dont une société développe des puces à insérer dans le cerveau pour contrer l'IA

Elon Musk met en garde contre les menaces liées à l'IA, tandis que Bill Gates affirme qu'elle peut aider à lutter contre la faim dans le monde, les deux appellent toutefois à une réglementation

Un modèle d'IA appelé ChaosGPT qui s'est vu confier la mission de détruire l'humanité a tweeté : « vous sous-estimez mon pouvoir », il est basé sur le modèle de langage open source Auto-GPT
  Discussion forum
123 commentaires
  • R136a1
    Nouveau membre du Club
    De plus, la manipulation délibérée des systèmes par des acteurs malveillants à des fins diverses constitue une menace potentielle.
    Selon moi, c'est ça le plus grand risque de l'IA. Et c'est déjà une réalité.
  • Jules34
    Membre chevronné
    C'est rigolo que ce soit une fois de plus les rois de l'embrouille qui chouinent pour que la Russie et la Chine déclarent que l'IA na contrôlera pas les armes nucléaires

    Qui serait assez c** pour donner les clefs de ce genre de bombe à l'IA d'ailleurs...

    Qu'ils commencent par respecter les traités qu'ils ont mis en place eux-mêmes, définancez donc Elon Musk et Space X pour respecter le traité de non armement dans l'espace (Musk a pas coupé starlink en Ukraine pour rien).

    Qu'ils respectent aussi l'arrêt Nicaragua contre USA du 9 avril 1984 qui interdit les ingérences étrangères dans les activités civiles et para militaires des pays libre plutôt que de continuer leur propagande débile en europe et dans le reste du monde encore un tant soit peu "libre". A votre avis qui finance les manifestations pro européenne/woke en Pologne et en Georgie, pays historiquements libres et ultra catholiques ?

    Ils flippent des lois contre les ingérences étrangères qui sont en passe d'être adoptées la bas, en hurlant que bouh c'est encore un coup des méchants russes La ficelle est tellement grosse...

    C'est la plaie de ce monde les américains.

    ça me fait penser à Hayer, la clown pour les européennes de Macron (tellement les barons de la macronie savent que c'est perdu, ils ont envoyé la bizu), qui arrive à garder la tête haute en disant que les puces de lit c'est aussi l'ingérence de la Russie

    Ces traitres n'ont de respect pour rien.
  • Gluups
    Membre émérite
    Envoyé par Christian_B
    Dans les pays (plus ou moins) démocratiques, les dirigeants sont tout de mêrme élus.
    Et quand ils sont élus parmi les candidats proposés par le pouvoir sortant, il est temps de fuir.
  • berceker united
    Expert éminent
    Envoyé par Jules34
    C'est rigolo que ce soit une fois de plus les rois de l'embrouille qui chouinent pour que la Russie et la Chine déclarent que l'IA na contrôlera pas les armes nucléaires

    Qui serait assez c** pour donner les clefs de ce genre de bombe à l'IA d'ailleurs...

    [...].
    Quelqu'un l'a bien donné à la Corée du Nord, Pakistan (sous condition mais...), L'Iran commence à lire le mode d'emploi.
    Par contre, un seul pays l'a utilisé et elle n'est pas dans cette liste .
  • Christian_B
    Membre éclairé
    Envoyé par Gluups
    Et quand ils sont élus parmi les candidats proposés par le pouvoir sortant, il est temps de fuir.
    Oui. Pas facile ... Ça s'appelle une dictature (mal déguisée) qui peut satisfaire plus ou moins des hypocrites à l'étranger.
  • Christian_B
    Membre éclairé
    Envoyé par Jules34
    Qui serait assez c** pour donner les clefs de ce genre de bombe à l'IA d'ailleurs...
    En effet, c'est juste du bruit médiatique pour faire diversion des autres usages militaires de l'I.A. et autres aberrations sinistres.

    Envoyé par Jules34
    Qu'ils commencent par respecter les traités qu'ils ont mis en place eux-mêmes, définancez donc Elon Musk et Space X pour respecter le traité de non armement dans l'espace (Musk a pas coupé starlink en Ukraine pour rien).
    Ne pas oublier (ma signature) que théoriquement les armes nucléaires sont interdites pas l'ONU ... sans le moindre effet concret. Tout comme d'autres résolutions qui passent à la trappe dès que l'un des pays ayant le droit de veto n'en veut pas ou qu'un pays puissant s'en moque sans réaction concertée des autres pays (pas forcément plus présentables). Lamentable situation.

    Par ailleurs l'article évoque également l'interdiction des armes chimiques.
    Ce genre de convention (quoique utiles quand elles sont à peu près respectées) me met mal à l'aise car il y a un sous-entendu : les autres armes sont autorisées.
    Et donc plus fondamentalement la guerre est autorisée. .
    Et peu de gens dans le monde s'en soucient.
    Serons-nous un jour réellement "civilisés" ? Sinon ...
  • Ryu2000
    Membre extrêmement actif
    Envoyé par Christian_B
    Et peu de gens dans le monde s'en soucient.
    Serons-nous un jour réellement "civilisés" ? Sinon ...
    Les gens qui décident des guerres ne sont pas ceux qui se battent, ne sont pas ceux qui vont mourir, perdre des proches, perde leur maison, connaitre les pénuries de nourriture, d'énergie, de médicaments, etc.
    Ce sont des gens comme Joe Biden, Barack Obama, Benyamin Netanyahou, etc.

    Enfin ils ne sont pas seul, il y a toute une équipe derrière.
    Là il faudrait regarder le film "Vice" à propos de Dick Cheney avec l'acteur Christian Bale, ça doit bien parle de guerre d'Irak au bout d'un moment.

    Souvent le peuple ne soutient pas les guerres, comme ils disent dans Full Metal Jacket, à propos de la guerre au Vietnam : "Elle n'est pas populaire cette guerre".
    D'ailleurs c'était un point important du programme de Trump, ils disaient qu'il fallait stopper des guerres, ramener les soldats chez-eux, parce que le bilan n'est pas bon, ça coute plus que ça rapporte à l'état (ça rapport surtout à certaines entreprises, qui font du business dans les pays en guerre).

    Là il y a un exemple récent, c'est qu'il y a plein d'étasuniens qui sont contre le fait de donner des centaines de milliards de dollars à l'Ukraine.
    Sans cet argent la guerre serait fini depuis longtemps.

    ====
    Bref, l'OTAN nous emmène vers la troisième guerre mondiale et c'est inévitable (à moins de quitter l'OTAN et de devenir neutre peut-être).

    Et pour les histoires d'armes interdites, si tu gagnes la guerre il n'y a pas de problème vu que c'est toi qui écrit l'histoire.
    Les USA ne se sont jamais excusé pour l'Agent Orange et le Napalm au Vietnam ou les bombes atomiques au Japon.
    Bon remarque ça ne fonctionne pas ce que je dis car les USA n'ont pas gagné la guerre du Vietnam et ils n'ont quand même pas eu de problème avec les armes interdites.
    Israël utilise également pas mal d'armes interdites comme le phosphore blanc, les munitions à uranium appauvri, munitions à fragmentation, blocus et restrictions de l'accès humanitaire.

    Au Vietnam les USA ont tout fait :
    - Utilisation de techniques de torture et de mauvais traitements
    - Utilisation d'armes interdites
    - Attaques contre des populations civiles

    Je pense qu'on donne des drogues au soldats US, c'est pour ça qu'ils deviennent tarés.
    Torture, humiliations... Les photos qui ont révélé l'horreur d'Abou Ghraib
    Comme le précise Dan Rather, la plupart des photos montrent des militaires américains qui sourient devant l’objectif et qui font même parfois le signe du pouce en l’air, comme Lynndie England (encore), devant un homme nu assis sur un autre homme nu.
  • Christian_B
    Membre éclairé
    Envoyé par Ryu2000
    Bref, l'OTAN nous emmène vers la troisième guerre mondiale et c'est inévitable (à moins de quitter l'OTAN et de devenir neutre peut-être).
    [...] Au Vietnam les USA ont tout fait :
    - Utilisation de techniques de torture et de mauvais traitements
    - Utilisation d'armes interdites
    - Attaques contre des populations civiles
    En grande partie d'accord. L'Otan est une aberration au sein de laquelle l'Europe est inféodée aux États-Unis. Elle contribue largement à la tension mondiale.
    Par contre personne n'a de boule de cristal pour prévoir l'avenir. Ceux qui ont essayé se sont souvent trompés. Heureusement dans ce cas ...

    Envoyé par Ryu2000
    Les gens qui décident des guerres ne sont pas ceux qui se battent [...] Souvent le peuple ne soutient pas les guerres.
    Oui et non. Dans les pays (plus ou moins) démocratiques, les dirigeants sont tout de mêrme élus. Et pour partie par des gens qui sont belliqueux, racistes, etc. "Le peuple" (uni) est une fiction. Il y a rarement une quasi-unanimité.

    Envoyé par Ryu2000
    D'ailleurs c'était un point important du programme de Trump, ils disaient qu'il fallait stopper des guerres, ramener les soldats chez-eux.
    Il ne faudrait quand même pas croire que Trump est pacifiste. Il ne veut pas que des citoyen US [je n'aime pas dire américains] se fasse tuer. Il est néanmoins pour les ventes d'armes et les guerres suscitées ailleurs si elles paraissent conforme aux intérêts économiques et politiques des USA. Ne pas oublier qu'il est avant tout un homme d'affaires peu scrupuleux et un démagogue primaire dont la sincérité et le sérieux des déclarations sont particulièrement sujettes à caution.

    Envoyé par Ryu2000
    Là il y a un exemple récent, c'est qu'il y a plein d'étasuniens qui sont contre le fait de donner des centaines de milliards de dollars à l'Ukraine. Sans cet argent la guerre serait fini depuis longtemps.
    Il y a quand même là un problème de principe : si un pays en attaque un autre, laisser faire sans réaction sous prétexte qu'on est contre la guerre, c'est en réalité favoriser les plus guerriers et les violences extrêmes. Cela vaut aussi bien pour la Russie du dictateur mal déguisé Poutine que pour les États-Unis ou d'autres.
  • Gluups
    Membre émérite
    En effet, tu as bien situé le problème.

    Et quand tu dis à l'étranger, ça ne signifie pas nécessairement que ça soit des étrangers, mais qu'ils ont trouvé plus prudent, étant donné ce qu'ils sont en train de faire de la France, de ne pas risquer leurs plumes dedans.

    Cyniques, mais pas idiots.

    Alors c'est vrai que s'installer ailleurs, c'est comme changer de système : on ne tarde pas tellement à se rendre compte qu'il y en a besoin, mais pour concrétiser, il y a des étapes, et il y faut des ressources.

    Ça nous met en lumière ce qui se passe avec l'accueil des étrangers. De façon pas trop surprenante, les étrangers voient en premier que l'accueil devient plus hostile.

    De façon plus surprenante en revanche, j'ai beau expliquer à mes compatriotes que si les Arabes sont des voisins charmants, d'autres "invités" proviennent de pays où règne la guerre civile, et ce n'est pas par hasard : ils sont en train de l'allumer chez nous.

    Je ne crois pas que je vais éveiller les consciences là-dessus, alors je reviens aux Arabes : ça fait un moment qu'ils ressentent l'ambiance comme pesante, alors ils ont déjà commencé à fuir. Pour plus ou moins citer France Inter et en même temps rejoindre ce que tu disais : qui a fui en premier ? Les CSP supérieures, pour deux raisons : ils ont des compétences à proposer ailleurs, et de façon probablement liée, ils ont aussi un peu d'économies pour réaliser le voyage.
    [INS](Heureusement pour les Arabes plus modestes, ils sont le cœur de cible du Front National.)[/INS]

    Voilà les gens qui peuvent tenir compte que ... le pays n'a plus besoin de leurs compétences car il automatise les tâches, et il n'a plus besoin non plus d'eux pour prendre les décisions, parce que Macron sait mieux que nous.

    Il n'est pas le premier : ce n'est pas lui qui nous a dit "Vous avez mal voté mais ne vous inquiétez pas, on va le refaire pour vous."

    Alors ... oui, il faut passer à Unix, mais apparemment, pas seulement.