IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)

Vous êtes nouveau sur Developpez.com ? Créez votre compte ou connectez-vous afin de pouvoir participer !

Vous devez avoir un compte Developpez.com et être connecté pour pouvoir participer aux discussions.

Vous n'avez pas encore de compte Developpez.com ? Créez-en un en quelques instants, c'est entièrement gratuit !

Si vous disposez déjà d'un compte et qu'il est bien activé, connectez-vous à l'aide du formulaire ci-dessous.

Identifiez-vous
Identifiant
Mot de passe
Mot de passe oublié ?
Créer un compte

L'inscription est gratuite et ne vous prendra que quelques instants !

Je m'inscris !

Les résultats de l'examen du barreau montrent que l'IA peut rivaliser avec les "avocats humains"
GPT-4 un modèle d'IA a obtenu un score de 297 à l'examen du barreau aux USA

Le , par Nancy Rey

1PARTAGES

4  0 
Selon une nouvelle étude publiée mercredi, l'intelligence artificielle peut désormais surpasser la plupart des diplômés des facultés de droit à l'examen du barreau, l'épreuve éprouvante de deux jours que les aspirants avocats doivent passer pour pratiquer le droit aux États-Unis. GPT-4, le modèle d'intelligence artificielle amélioré publié cette semaine par OpenAI, soutenue par Microsoft, a obtenu un score de 297 à l'examen du barreau lors d'une expérience menée par deux professeurs de droit et deux employés de l'entreprise de technologie juridique Casetext. Ce résultat place le GPT-4 dans le 90e percentile des candidats à l'examen et est suffisant pour être admis à pratiquer le droit dans la plupart des États, selon les chercheurs.


L'examen du barreau évalue les connaissances et le raisonnement et comprend des essais et des tests de performance destinés à simuler le travail juridique, ainsi que des questions à choix multiples. « Les grands modèles de langage peuvent répondre aux normes appliquées aux avocats humains dans presque toutes les juridictions des États-Unis en s'attaquant à des tâches complexes nécessitant des connaissances juridiques approfondies, une compréhension de la lecture et une capacité d'écriture », écrivent les auteurs.

Il y a moins de quatre mois, deux des mêmes chercheurs ont conclu que le modèle de langage large d'OpenAI, ChatGPT, n'atteignait pas la note de passage à l'examen du barreau, soulignant ainsi la rapidité avec laquelle la technologie s'améliore. Le modèle GPT-4, plus récent, a réussi près de 76 % des questions à choix multiples de l'examen du barreau, contre environ 50 % pour le modèle ChatGPT, surpassant de plus de 7 % le candidat humain moyen.

La National Conference of Bar Examiners, qui conçoit la section des questions à choix multiples, a déclaré dans un communiqué mercredi que les avocats possèdent des compétences uniques acquises par l'éducation et l'expérience que « l'IA ne peut actuellement pas égaler ».

Le co-auteur de l'étude, Daniel Martin Katz, professeur au Chicago-Kent College of Law, a déclaré dans une interview qu'il avait été le plus surpris par la capacité du GPT-4 à produire des réponses largement pertinentes et cohérentes pour les essais et les tests de performance. J'ai entendu tant de gens dire : « Eh bien, il pourrait répondre aux questions à choix multiples, mais il ne répondra jamais aux questions de rédaction », a déclaré Katz.

L'IA a également obtenu de bons résultats à d'autres tests standardisés, notamment le SAT (Scholastic Assessment Test est un examen qui mesure vos compétences générales verbales en anglais et votre raisonnement mathématique) et le GRE ( Graduate Record Examination est un test en anglais créé et géré par l'entreprise ETS. Ce test est requis pour étudier dans la plupart des universités ou graduate schools dans des pays anglophones), mais c'est l'examen du barreau qui a suscité le plus d'intérêt. OpenAI a vanté son score de réussite lors de l'annonce de son dernier modèle mardi.

Sean Silverman, tuteur de l'examen du barreau, a attribué l'attention portée à l'examen du barreau à sa difficulté largement reconnue. Cette année, le taux de réussite à l'examen pour l'obtention d'une licence d'avocat était de 78 % chez les candidats ayant suivi trois années d'études de droit.

Selon Silverman, les gens seront peut-être moins impressionnés d'apprendre que l'intelligence artificielle peut réussir un examen conçu pour les lycéens, comme le SAT, « plutôt que l'examen pour devenir avocat ».

Source : Rapport de l’étude

Et vous ?

Quel est votre avis sur le sujet ?
Que pensez-vous des résultats obtenus par GPT-4 à l'examen du barreau ?
Quels impacts ces modèles de langage pourraient-ils avoir sur le système judiciaire ?
À votre avis, les systèmes d'IA pourraient-ils remplacer les avocats et les juges dans les tribunaux ?

Voir aussi :

En remplaçant les avocats humains par l'IA, le système judiciaire chinois aurait économisé 45 Mds $ en frais entre 2019 et 2021, soit la moitié du total des honoraires des avocats en Chine en 2021

La France bannit les IA de prédiction des comportements des juges, les technologies de justice prédictive sont-elles une menace pour la société ?

Une intelligence artificielle peut-elle être un juge équitable dans un tribunal ? L'Estonie pense que oui

Intelligence artificielle : vingt avocats expérimentés se font battre par un algorithme lors d'un test de détection de problèmes juridiques

Une erreur dans cette actualité ? Signalez-le nous !

Avatar de Jsaintyv
Membre régulier https://www.developpez.com
Le 21/03/2023 à 14:05
Si le code de l'UI de ChatGPT a été écrit avec l'aide de ChatGPT. Je ne suis pas surpris qu'elle soit buggé :-)

Écrire du code avec ChatGPT, c'est un peu comme si tu aggréges du code patchwork stackoverflow sans le savoir, sans les commentaires de modération des réponses.
5  0 
Avatar de kain_tn
Expert éminent https://www.developpez.com
Le 28/03/2023 à 20:49
Citation Envoyé par Bill Fassinou Voir le message
Pensez-vous que ces nouveaux chatbots d'IA sont des outils utiles ou plutôt des gadgets inutiles, voire nuisibles ?
Si les champions des moteurs de recherche se lancent dans ce genre de bot, c'est parce qu'ils ont tout à y gagner niveau collecte des données.

On a essayé de nous pousser du metavers partout, et ça n'a pas vraiment pris. Là, ils ont trouvé comment collecter plus de données en exploitant la curiosité et/ou la paresse des gens
3  0 
Avatar de Prox_13
Membre averti https://www.developpez.com
Le 23/03/2023 à 10:42
Citation Envoyé par Bill Fassinou Voir le message
Une étude affirme que les internautes ne parviennent à détecter avec précision les textes générés par l'IA que dans 50 % des cas et une autre estime que les outils de détection ne sont pas fiables[/B]

50% de positifs ? Ça veut dire que la détection est faite au hasard, non ?
1  0 
Avatar de jnspunk
Membre du Club https://www.developpez.com
Le 24/03/2023 à 9:24
Citation Envoyé par Prox_13 Voir le message
50% de positifs ? Ça veut dire que la détection est faite au hasard, non ?
Si je te montre 100 fois une image, c'est soit une pomme soit une orange et en tout il y en a 50 de chaque.
Si je te demande combien de fois tu as détecté l'orange, tu vas me dire dans 50% des cas, pourtant tu ne l'as pas dit au hasard.
1  0 
Avatar de plegat
Expert éminent https://www.developpez.com
Le 25/03/2023 à 22:54
Citation Envoyé par Prox_13 Voir le message
50% de positifs ? Ça veut dire que la détection est faite au hasard, non ?
Ouaip, d'ailleurs c'est dans le texte:
[...]qu'avec une précision de 50 à 52 %, ce qui correspond à peu près au hasard d'un tirage à pile ou face[...]
Citation Envoyé par jnspunk Voir le message
Si je te montre 100 fois une image, c'est soit une pomme soit une orange et en tout il y en a 50 de chaque.
Si je te demande combien de fois tu as détecté l'orange, tu vas me dire dans 50% des cas, pourtant tu ne l'as pas dit au hasard.
Mauvais exemple... si on a 50% d'orange et qu'on détecte ces 50%, on a 100% de positif.

Prend plutôt 100 chiens, 50 mâles et 50 femelles, et demande à ton échantillon de repérer les mâles juste en regardant leur tête...
1  0 
Avatar de AoCannaille
Expert confirmé https://www.developpez.com
Le 28/03/2023 à 17:17
Nice, ChatGPT, pourvoyeur de la paix dans le monde. Tous les employés de toutes les entreprises du monde donnent les données confidentielles et dans quelques mois, ChatGPT aura la solution optimisée internationnalement à tous nos problèmes, sans brevets, sans besoin de consensus de commités de standardisation long et compliqués car bourrés de combat d'égo. Tout le monde sera d'accord pour chacune des question posés car ChatGPT donnera la même réponse à tout le monde!

Comment ça c'est utopique?
1  0 
Avatar de HaryRoseAndMac
Membre extrêmement actif https://www.developpez.com
Le 29/03/2023 à 1:12
Tant mieux !

Toutes ces startup à la con, plutôt que de faire appel à un Freelance et de le payer 800 euros par jours, qui préfèrent faire de A à Z leur produit avec ChatGPT et se retrouvent après avec un truc totalement beugué qui leur petes dans les mains et en plus avec des informations sensibles sur internet ça va leur faire les pieds à ces escrocs.

Ces le même genre d'individus après qu'on vois diriger des usines et qui préfèrent employer massivement des immigrés plutôt que de faire vivre tous les gens qui sont sans emplois dans leur village.

Un jour ou l'autre, tout se paie.
1  0 
Avatar de calvaire
Expert confirmé https://www.developpez.com
Le 29/03/2023 à 15:32
pour l'it il va difficilement remplacer les développeurs, l'utilisant tous les jours il est incapable d'écrire du code qui s'exécute sans erreur.
sauf a lui demander des petits de code simple et de les assembler... mais avec cette méthode on perds 4 fois plus de temps que de coder soit même.
C'est pas rentable.

Je sais pas si cette outil est si révolutionnaire que ca en faite, le "nouveau bing" est vraiment nul, taper une requête sur google et lire la réponse est beaucoup plus rapide.
Le potentiel semble énorme à 1ere vu mais des qu'on l'utilise pour de vrai on se rends compte que c'est très limité en faite.

il est parfaitement capable de remplacer les "journalistes" people et news pute a clic poubelle du style "vous devinerez jamais ce que fait ce chat", mais sinon...

Et j'aimerais bien connaitre le potentiel d'amélioration de cette outil, car il a déjà le plus gros dataset possible (internet), il a déjà eu ca grosse maj (gpt4), avec surtout l'ajout multimodal, mais la qualité des réponses reste toujours aussi pauvres.
Faut pas oublier que derrière c'est des formules mathématique et des stats qui tournent, nul aujourd'hui ne peut affirmer que ce genre d'algo peut atteindre un niveau humain.
Ils ont beau avoir augmenté à 1000 milliards de paramètres pour GPT-4, on voit que la techno n'a pas des masses évolué.

ca va être intéressant de voir la prochaine version, voir si on dépasse ou si cette techno plafonne. Les réseaux de neurones ont leurs limites et un nouveau paradigme sera surement nécessaire pour réellement avoir des voitures autonomes et remplacer des métiers comme developeur.
1  0 
Avatar de Gluups
Membre expérimenté https://www.developpez.com
Le 21/03/2023 à 13:39
Citation Envoyé par Bill Fassinou Voir le message
Et vous ?

Êtes-vous déjà tombé sur l'historique des discussions d'autres personnes dans la barre latérale de votre compte ?
Il est arrivé voici quelques décennies sur le réseau téléphonique d'entendre des conversations de tiers, sans d'ailleurs pouvoir ni les identifier ni leur répondre, à ma connaissance c'est resté quelque chose de très rare.

Reste à savoir si le phénomène va rester rare sur ChatGPT.
Il n'est d'ailleurs pas impossible que le fait de pouvoir facilement faire des citations précises change l'impact potentiel du phénomène.
0  0 
Avatar de shenron666
Expert confirmé https://www.developpez.com
Le 26/03/2023 à 16:21
Citation Envoyé par plegat Voir le message
Mauvais exemple... si on a 50% d'orange et qu'on détecte ces 50%, on a 100% de positif.
je ne sais pas comment tu fais pour affirmer ça, je n'ai rien compris à la question
Citation Envoyé par jnspunk Voir le message
Si je te montre 100 fois une image, c'est soit une pomme soit une orange
montrer 100 fois 1 image qui est soit une pomme soit une orange OK
mais
Citation Envoyé par jnspunk Voir le message
et en tout il y en a 50 de chaque.
50 de chaque quoi ?
0  0