IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)

Vous êtes nouveau sur Developpez.com ? Créez votre compte ou connectez-vous afin de pouvoir participer !

Vous devez avoir un compte Developpez.com et être connecté pour pouvoir participer aux discussions.

Vous n'avez pas encore de compte Developpez.com ? Créez-en un en quelques instants, c'est entièrement gratuit !

Si vous disposez déjà d'un compte et qu'il est bien activé, connectez-vous à l'aide du formulaire ci-dessous.

Identifiez-vous
Identifiant
Mot de passe
Mot de passe oublié ?
Créer un compte

L'inscription est gratuite et ne vous prendra que quelques instants !

Je m'inscris !

Un artiste banni par Midjourney pour avoir utilisé l'IA pour créer des images de politiciens trompant leur femme,
Ces images réalistes montrent l'ampleur du problème des deepfakes générés par l'IA

Le , par Mathis Lucas

7PARTAGES

6  0 
Une expérience réalisée récemment par un artiste a attiré une nouvelle fois l'attention sur la dangerosité des deepfakes à l'ère de l'IA générative. Il a utilisé l'IA de génération d'œuvres d'art de Midjourney pour créer des images de politiciens trompant leur partenaire. Bien que ces photos soient fausses, elles sont "hyperréalistes" et capables de tromper facilement la vigilance d'un public non averti. L'artiste a déclaré que son objectif était d'alerter le public sur les dangers potentiels de ce type d'IA pour les personnes, les entreprises et les gouvernements, mais il a été banni par Midjourney. L'entreprise n'a pas évoqué les raisons justifiant cette décision.

L'IA générative a propulsé les deepfakes dans une nouvelle ère. Ils sont passés de l'état de simples canulars à celui d'armes dangereuses pouvant être dirigées contre des politiciens, des personnalités influentes, les ménages, les internautes et les entreprises. Un rapport publié le mois dernier indique que les deepfakes sont devenus la première forme de fraude et sont principalement utilisés pour contourner des systèmes de reconnaissance biométrique et fabriquer de fausses cartes d'identité. Cet état de choses alarme les chercheurs et les entreprises qui tentent tant bien que mal de trouver une solution efficace. D'autres activistes alertent sur les dangers de l'IA.

Récemment, Justin T. Brown, éditeur de vidéos et satiriste politique, a utilisé Midjourney (une plateforme d'IA permettant de créer des images à partir de descriptions textuelles) pour générer de fausses images montrant des personnalités politiques américaines telles que Donald Trump et Joe Biden dans des positions compromettantes. Selon l'artiste, la collection d'images, intitulée "AI's Impact on the Blackmail Industry" (l'impact de l'IA sur l'industrie du chantage), vise à démontrer le potentiel de l'IA générative en tant qu'arme dangereuse lorsqu'elle est utilisée pour représenter des scénarios susceptibles d'infliger des dommages à des personnes innocentes.

[tweet]<blockquote class="twitter-tweet"><p lang="en" dir="ltr">I got banned from Midjourney AI for generating realistic images of politicians cheating on their wives for a series called “AI will revolutionize the blackmail industry”<br><br>A couple thoughts on AI images from someone who’s good at making fake stuff &#129525;<br><br>Trump cheating on his wife: <a href="https://t.co/HjxBj7qdaR">pic.twitter.com/HjxBj7qdaR</a></p>&mdash; JustinTBrown (@JuuustinBrown) <a href="https://twitter.com/JuuustinBrown/status/1662225616635305985?ref_src=twsrc%5Etfw">May 26, 2023</a></blockquote> <script async src="https://platform.twitter.com/widgets.js" charset="utf-8"></script> [/tweet]

« J'ai créé cette série dans le but d'impliquer certaines des personnes les plus influentes d'Amérique dans la conversation sur les dangers de l'IA, et d'atteindre le plus grand public possible. Le but était de créer un buzz et de susciter la conversation de la manière la plus salace, la plus choquante et la plus drôle possible. Pour montrer le danger potentiel réel de l'IA, le projet lui-même devait être une menace, et à mon avis, il n'y a pas de cibles plus sûres que les hommes puissants de Washington. Il s'agissait d'un coup d'épée dans l'eau », a déclaré Brown lors d'un interview. L'artiste a ajouté ensuite avoir été banni par Midjourney sans aucune explication.

Brown, qui est basé à Los Angeles, affirme avoir créé ces images plusieurs mois auparavant et qu'il lui a fallu un peu plus d'une heure pour cela. Mais deux jours après la publication des photos sur Reddit, les modérateurs de Reddit ont supprimé les images et Brown a rapidement été banni de Midjourney presque au même moment. « Après avoir gagné du terrain sur Reddit, la série a été supprimée par les modérateurs et le bannissement de Midjourney a suivi presque immédiatement. J'ai déjà été confronté à des messages bloqués par le passé - pour des mots grossiers ou des personnages controversés - mais je n'ai jamais été banni », explique Brown.

« Midjourney ne m'a donné aucune raison directe justifiant l'interdiction, seulement un message disant que j'étais bloqué, mais le moment de la publication sur Reddit et l'interdiction sont en corrélation directe. C'est un espace où les gens de Midjourney se retrouvent », a-t-il ajouté. L'interdiction concerne le fait que les images n'ont été signalées qu'après avoir été partagées sur un site tiers. Selon les experts, cela confirme l'affirmation de Brown selon laquelle d'autres personnes pourraient créer des images similaires sans que Midjourney les détecte. Ces images pourraient servir dans des campagnes de chantage et d'autres types d'actions malveillantes.

Dans un fil de discussion viral sur Twitter, Brown a fait part de ses sentiments contradictoires au sujet de son exclusion de Midjourney et de la facilité avec laquelle l'IA peut générer des images fausses, mais crédibles. « Je ressens toutes les émotions possibles à ce sujet. Je préférerais ne pas être banni, mais au moins cela signifie peut-être qu'il y a une certaine responsabilité lorsque les utilisateurs génèrent du contenu nuisible avec de mauvaises intentions », explique Brown. Mais il a laissé entendre que le fait de punir une personne après qu'elle a généré des contenus malveillants n'est pas une politique rassurante. Selon l'artiste, le mal est déjà fait.

« J'ai été banni des mois après avoir créé les images, alors quand un contenu préjudiciable est généré, n'est-il pas déjà trop tard ? Je pense qu'une certaine régulation du contenu est nécessaire, mais pourquoi ferais-je confiance à une entreprise pour réguler ses propres résultats ? Et qui décide du type de contenu à réglementer ? », s'interroge Brown. Il affirme en outre que l'une de ses principales préoccupations à l'égard de l'IA est sa capacité à diffuser de la désinformation et qu'il est nécessaire d'engager une "conversation internationale" sur cette technologie. « Je n'ai jamais présenté les images [de la série de photos] comme réelles », a-t-il déclaré.

[tweet]<blockquote class="twitter-tweet"><p lang="en" dir="ltr">Midjourney et al have some safe guards in place, but you can get around them with creative prompting or repeated requests. These generators are mostly just mashing up photos available on the internet. Privacy, copyright, dignity, and safety be damned<br><br>Bernie cheating on his wife: <a href="https://t.co/uxSCXevQFd">pic.twitter.com/uxSCXevQFd</a></p>&mdash; JustinTBrown (@JuuustinBrown) <a href="https://twitter.com/JuuustinBrown/status/1662225634641469446?ref_src=twsrc%5Etfw">May 26, 2023</a></blockquote> <script async src="https://platform.twitter.com/widgets.js" charset="utf-8"></script> [/tweet]

« Toutefois, je sais que certaines de ces images ont été prises et partagées hors contexte par d'autres, et je ne serais donc pas surpris que certaines personnes croient qu'elles sont réelles. Mais dans une certaine mesure, cela fait partie du projet. Ce type de désinformation continuera à se produire, la prochaine fois par des personnes mal intentionnées, et nous ferions mieux de commencer à nous en occuper dès maintenant. Dans un monde meilleur, je serais favorable à l'IA. Cela dit, dans le monde dans lequel nous vivons, elle a le potentiel d'être dévastatrice. Je pense que notre monde doit changer », a-t-il ajouté. Cette forme d'utilisation est déjà répandue.

Un récent rapport du New York Times montre comment les lacunes dans la réglementation des campagnes électorales ont facilité la circulation d'images générées par l'IA par les politiciens. À l'approche de l'élection présidentielle américaine de 2024, cela pourrait s'avérer désastreux. Par exemple, en avril, le parti républicain a réagi à l'annonce de la candidature de Biden à l'élection présidentielle de 2024 par une publicité générée par l'IA qui dépeint une vision dystopique des États-Unis si l'actuel locataire de la Maison-Blanche est réélu. Dans la vidéo partagée par les républicains, l'IA suggère que la réélection de Joe Biden entraînera une série de crises.

Les images diffusées dans la vidéo représentent des explosions à Taïwan après une invasion chinoise et des déploiements militaires importants dans ce que l'on suppose être des rues américaines. Pour aggraver les choses, les efforts des réseaux sociaux pour détecter le contenu généré par l'IA se sont avérés largement inefficaces pour endiguer l'afflux de faux contenus. Par conséquent, il est de plus en plus difficile de distinguer la réalité de la fiction. En outre, les experts indiquent que les faux contenus générés par l'IA peuvent violer la vie privée des personnes en créant et en diffusant des images ou des enregistrements vocaux sans leur consentement.

Cela porte non seulement atteinte aux limites de la vie privée, mais ouvre également la porte à des abus potentiels, tels que le chantage ou l'usurpation d'identité. Les implications juridiques et éthiques des contenus générés par l'IA ne peuvent pas non plus être ignorées. Les droits de propriété intellectuelle et les lois sur les droits d'auteur peuvent être enfreints, entraînant des conséquences juridiques et financières importantes. En outre, l'utilisation de faux contenus à des fins frauduleuses ou diffamatoires est une préoccupation croissante qui doit être prise en compte. En raison de l'essor de l'IA, la confiance et la crédibilité des médias numériques sont en jeu.

Et vous ?

Quel est votre avis sur le sujet ?
Que pensez-vous des propos de l'artiste Justin Brown ?
Que pensez-vous de la démarche qu'il a utilisée pour alerter sur les dangers de l'IA ?
Selon vous, Midjourney a-t-il bien fait de le bannir ? Pourquoi ?
Que pensez-vous du fait que Midjourney laisse les utilisateurs générer de telles images ?
Selon vous, quels pourraient être les impacts de l'IA générative sur l'avenir des deepfakes ?

Voir aussi

Les "deepfakes" deviennent la première forme de fraude et sont principalement utilisés pour le "liveness bypass" et la fabrication de cartes d'identité falsifiées ou modifiées, selon Sumsub

Les publicités générées par l'IA visant à attaquer des adversaires politiques sont là et les implications sont terrifiantes, une IA dépeint une vision dystopique des États-Unis si Joe Biden est réélu

Le nombre de contenus deepfake en ligne augmente à un rythme annuel de 900 %, d'après le World Economic Forum

Des cybercriminels ont utilisé la technologie deepfake pour voler 35 millions de dollars à une banque, en clonant la voix du directeur

Une erreur dans cette actualité ? Signalez-nous-la !

Avatar de onilink_
Membre émérite https://www.developpez.com
Le 12/09/2023 à 13:09
M. Allen a déclaré à l'office qu'il avait "saisi de nombreuses révisions et invites de texte au moins 624 fois pour parvenir à la version initiale de l'image" à l'aide de Midjourney et qu'il l'avait modifiée à l'aide d'Adobe Photoshop. L'Office a demandé à Allen de renoncer aux parties de l'image générées par Midjourney afin de bénéficier de la protection du droit d'auteur. Il a rejeté la demande d'Allen après son refus.
Ce qui est logique. On ne peut protéger que ce qui a été crée par le créateur, pas ce qui a été "commandé".
Sinon cela voudrait dire que je pourrais m'approprier n'importe quelle œuvre commandée à un artiste du tier monde pour trois francs six sous. Et évidemment sous cet angle la on comprend bien le non sens au niveau du droit d'auteur.

Ici, il faudrait plus une protection hybride entre les parties de l'image retouchées sur photoshop, les itérations sur les prompts et tous les paramètres de génération utilisés.
Mais évidemment, cela n'a que peu d’intérêt pratique. C'est un peu comme nommer une étoile que l'on a découverte.

"certain que nous gagnerons à la fin"
Je ne comprend pas son combat.
Si ils "gagnent", pour moi ce serait plus une défaite globale.
Pour les vrai artistes mais aussi ces prétentieux "AI artists" que personnellement je qualifierais plus de "prompt monkeys", sans vouloir être méchant

Les seuls qui y gagneront seront ceux qui ont déjà des moyens énormes, comme disney ou hollywood.
Il n'y a qu'a voir ce qu'il se passe actuellement.
3  1 
Avatar de byrautor
Membre éclairé https://www.developpez.com
Le 27/07/2023 à 9:52
Citation Envoyé par Galactus13 Voir le message
Je pose la question,
Si l'IA est une entité humaine, donc, elle est vivante et par conséquent a le droit a un procès.
Si l'IA est une machine, c'est son créateur qui a la joie du procès.
.
Dans les deux cas: Ils perdent leurs procès puisque chacun d'eux viole les droits d'auteur. par plagia. La copie étant interdite sans l'accord de l'auteur.
Ceci reste mon avis en tant qu'auteur.
Ce n'est pas pour rien que dans une émission de télé en direct, on vous fait signer un papier autorisant la régie a utiliser votre image et ce qui en découle dans le cadre du sujet.
Comment gérer la multitude ? par des méthodes statistiques (théorie des gaz parfait) . Des "experts" analyseraient les flux et répartissent les droits statistiquement.....Et oui, la nature a horreur de l'égalité , il y aurait même des "mouvements" dans le vide quantique qui s'annihilent "d'eux mêmes)
1  0 
Avatar de OCRAM
Membre à l'essai https://www.developpez.com
Le 27/07/2023 à 15:57
Certes elles ont du souci à se faire, mais elles ne sont pas les seules. Les sites qui exploitent des données parfois personnelles deviennent légions. Citons Getty Images, qui reproduit sans vergogne et sans aucune autrisationdes photos personnelles, société.com qui reproduit les données des greffes (et les commercialisent) sans votre accord, alors que la société paye pour déposer ses formalités au Greffe ou à lINPI.

Getty images explique que ces photos ayant été glanées sur Internet, elles sont nécessairement publiques !

Il va falloir sérieusement légiférer.

la CNIL, ventre mou sur ce point ?

Marc Chernet
1  0 
Avatar de totozor
Membre expert https://www.developpez.com
Le 28/07/2023 à 13:57
Citation Envoyé par OCRAM Voir le message
société.com qui reproduit les données des greffes (et les commercialisent) sans votre accord, alors que la société paye pour déposer ses formalités au Greffe ou à lINPI.
J'étais persuadé que société.com était un service public (en partie payant) mais non , l'accord serait donné par le Greffe ou INPI?
Encore plus choquant quand une de leur catégorie est explicitement "Surveillance Gratuite" (Recevez une alerte e-mail chaque fois que la fiche d’identité de l’entreprise est mise à jour) ou "Fichier de surveillance"

Ceci dit il y a quelques années on tombait assez vite sur pas mal d'informations sur moi transmise par l'ordre des ingénieurs. Je remercie les quelques homonymes que j'ai d'occuper largement les réseaux sociaux pour que mes données personnelles se retrouvent reléguées (en grande partie) aux pages lointaines de Google.
1  0 
Avatar de olaxius
Membre éclairé https://www.developpez.com
Le 23/11/2023 à 8:45
ils souhaitent que les utilisateurs de leurs logiciels assument la responsabilité juridique des violations de droits d'auteur liées à l'IA
Plus c'est gros plus ça passe .
En sorte ils considèrent tout simplement que le client fait du recel .
Petit problème à cette analyse le produit vendu doit respecter la législation , si ce n'est pas le cas c'est aux clients de porter plainte .
Et comme ce n'est pas le cas ... l'arroseur risque d'être arrosé
1  0 
Avatar de Matthieu Vergne
Expert éminent https://www.developpez.com
Le 25/11/2023 à 12:15
Citation Envoyé par shenron666 Voir le message
copier ou réutiliser c'est du vol
De la contrefaçon. Le vol consiste à subtiliser quelque chose à quelqu'un, de sorte que ce quelqu'un ne l'a plus. La contrefaçon non.

Les discussions de ce genre se basent trop souvent sur des amalgames pour faire valoir telle ou telle interprétation. On ne peut pas critiquer qu'un tel fasse un argument fallacieux si de notre côté on fait pareil. Et corriger ça commence par utiliser la bonne terminologie.
2  1 
Avatar de Gluups
Membre chevronné https://www.developpez.com
Le 28/07/2023 à 14:11
Pour ce qui est de l'aspect payant mais pas vers la bonne poche, le problème a déjà été soulevé dans la santé avec (pour faire court) Doctolib, dans la recherche avec les travaux des universitaires, publiés non pas par un site public avec contrôle citoyen, mais par un site privé qui se fait payer par les universitaires et par les gens qui veulent consulter leurs travaux. Encore que ... dans ce dernier cas c'était du monde anglo-saxon qu'il s'agissait, en France il paraît que ça se passe mieux.

Quand même déjà deux domaines, reste à voir si il n'y en a pas d'autres.

Quelques constitutions sont prêtes, avec pour "nouveauté" notable que les élus ne peuvent pas les modifier, il me semble qu'il serait temps d'appeler à mettre ça en place, pour couper l'herbe sous le pied de Macron, qui s'apprête à pratiquer une nième modif magouillée à sa sauce, façon "grand débat public".
0  0 
Avatar de calvaire
Expert confirmé https://www.developpez.com
Le 15/09/2023 à 11:44
Citation Envoyé par Galactus13 Voir le message
Le soulèvement des machines contre les humains…
C'est peut-être plus proche qu'on ne croît. Je pense que le droit d'auteur ne peut être remisé à une machine sauf si nous lui donnons son faire valoir, et dans ce cas, il pourrait porter plainte contre son créateur !
Inquiétant et dangereux.
Quoique le contenu de la mémoire de la machine soit bien le résultat de la mémoire collective de l'humain, cela devient compliquer !
Terminator arrive… vite, cachons-nous en attendant Sarah Connor.
humm vu les problèmes hallucinatoire de chatgpt on en est encore loin.

terminator n'a jamais tenu la route, une usine y'a toujours des humains, meme les usines hyper automatisé comme celles de Peugeot en france ou st micro à Crolles, si y'a pas les ouvriers qui font les 3*8 l'usines s’arrête.
Et si des machines commence à faire des robots tueurs plutôt que des châssis de voitures, a mon avis un ouvrier va vite couper le courant pour pas se faire renvoyer pour faute grave.

On peut imaginer par contre l'arriver très bientôt de puissant virus informatique basé sur l'ia pour muter et trouver de nouveaux vecteurs d'attaque et de moyens de défenses. cela existe déja mais les mutations sont limités.
0  0 
Avatar de ALT
Membre émérite https://www.developpez.com
Le 23/11/2023 à 1:35
En ce qui me concerne, j'affirme depuis longtemps que les artistes se sont toujours inspirés de leurs prédécesseurs :
Pour commencer, lors de l'apprentissage.
Et il y a eu les modes : voir les périodes néoclassique, néogothique...
Et puis les emprunts plus ou moins clairs.
Sans compter les œuvres « à la manière de... ».
Donc, que des productions d'IA soient issues d'œuvres originales ne me choque pas. Simplement, il faut que la source d'inspiration soit mentionnée.
Encore que... Avant la protection du droit d'auteur (notion récente à l'échelle de l'Histoire), chaque artiste pouvait être copié, pour ne pas dire pillé, sans que ça perturbât qui que ce fût.
Bref, le périmètre précis du droit d'auteur doit d'abord être clairement & complètement défini avant de décider quoi que ce soit.
1  1 
Avatar de shenron666
Expert confirmé https://www.developpez.com
Le 25/11/2023 à 0:03
Citation Envoyé par Mathis Lucas Voir le message
Par exemple, lorsque vous reproduisez entièrement un livre à l'aide d'une photocopieuse, ce n'est pas le fabricant de l'appareil qui risque des poursuites, mais bien sûr vous, sauf si vous avez une autorisation légale.
Plutôt falacieux comme exemple
La photocopieuse n'a pas été "entrainée" avec des milliers / millions de livres originaux

Citation Envoyé par ALT Voir le message
En ce qui me concerne, j'affirme depuis longtemps que les artistes se sont toujours inspirés de leurs prédécesseurs
s'inspirer c'est une chose
copier ou réutiliser c'est du vol
et c'est ce que font les IA actuelles vu qu'elles sont entrainées avec des oeuvres originales
mais surtout, sans l'accord de l'auteur tant les géants derrière ces IA s'estiment en droit de voler le travail des autres pour mieux se dorer la pilule
0  0