Le robot ChatGPT a lamentablement échoué à l'examen du Barreau, lors d'une expérience faite à la demande du quotidien La Presse.
Il a obtenu une note de 12%, alors qu'il avait reçu des consignes précises pour répondre aux questions provenant d'un examen utilisé dans le passé.
À ce sujet, l'animateur Paul Arcand demande l'avis de Me Guy-François Lamy, directeur de l’École du Barreau du Québec.
«Ce n'est pas un examen de connaissances. [...] Ce qu'on veut mesurer, ce n'est pas tant ses connaissances du droit, mais sa capacité d'utiliser ses connaissances en droit pour les appliquer à une situation particulière et y répondre justement de façon précise.»
Toujours à l'examen du Barreau, le robot ChatGPT a, par exemple, cité des articles inexacts du Code de déontologie.
Notons qu'il a gagné ses points que dans les questions à choix multiples.