Prix Loebner
Le prix Loebner est une compétition annuelle qui couronne les dialogueurs satisfaisant le mieux les critères du test de Turing (avec lesquels il est le plus difficile de déterminer s'il s'agit d'un robot ou d'un humain). L'inventeur américain Hugh Loebner a créé ce concours en 1990.
Montants
modifierAu départ, le prix était accompagné d'un montant de 2 000 USD pour le gagnant. Le prix a été de 3 000 USD en 2005 et de 2 250 en 2006. En 2008, 3 000 USD ont été remis.
De plus, il y a deux prix, uniques, qui n'ont toujours pas été remportés en 2010. 25 000 USD sont offerts pour le premier agent conversationnel qui trompera au moins deux juges en se faisant passer pour un être humain. 100 000 USD (et une médaille d'or) sont promis pour la première réalisation qui réussira un test de Turing comprenant le décodage et la compréhension de textes, d'images et de textes sonores. En cas de remise de ce dernier prix, la compétition serait alors close.
Histoire
modifier
Le concours a été initié en 1990 par Hugh Loebner en collaboration avec le Cambridge Center for Behavioral Studies au Massachusetts, États-Unis. Depuis, il s'est tenu à l'université Flinders, au Dartmouth College, au Science Museum à Londres et à l'université de Reading. En 2004 et 2005, le concours s'est tenu à l'appartement de Loebner à New York. Depuis 2014 il est organisé à Bletchley Park[1].
En 2008, des juges de différents horizons ont participé, dont des experts et des non-experts, des adultes et des enfants, ainsi que des personnes dont la langue maternelle n'est pas l'anglais[2].
En 2019, la forme du concours a changé, abandonnant le protocole du test de Turing : Le concours a consisté en une exposition de chatbots et un programme de travail sur les systèmes d'IA conversationnels. Les visiteurs ont pu voter pour le meilleur chatbot et pour celui qui semblait le plus humain.
Depuis 2020, aucun concours n'a été organisé.
Gagnants
modifier| Année | Programmeur | Programme |
|---|---|---|
| 1991 | Joseph Weintraub[3] | PC Therapist |
| 1992 | Joseph Weintraub | PC Therapist |
| 1993 | Joseph Weintraub | PC Therapist |
| 1994 | Thomas Whalen | TIPS |
| 1995 | Joseph Weintraub | PC Therapist |
| 1996 | Jason Hutchens | HeX |
| 1997 | David Levy | Converse |
| 1998 | Robby Garner | Albert One |
| 1999 | Robby Garner | Albert One |
| 2000 | Richard Wallace | ALICE |
| 2001 | Richard Wallace | ALICE |
| 2002 | Kevin Copple | Ella |
| 2003 | Juergen Pirner | Jabberwock |
| 2004 | Richard Wallace | ALICE |
| 2005 | Rollo Carpenter | George |
| 2006 | Rollo Carpenter | Joan |
| 2007 | Robert Medeksza | Ultra Hal |
| 2008 | Fred Roberts | Elbot |
| 2009 | David Levy | Do-Much-More |
| 2010 | Bruce Wilcox | Suzette |
| 2011 | Bruce Wilcox | Rosette [4] |
| 2012 | Mohan Embar | Chip Vivant[5] |
| 2013 | Steve Worswick | Mitsuku[6] |
| 2014 | Bruce Wilcox | Rose |
| 2015 | Bruce Wilcox | Rose |
| 2016 | Steve Worswick | Mitsuku |
| 2017 | Steve Worswick | Mitsuku |
| 2018 | Steve Worswick | Mitsuku |
| 2019 | Steve Worswick | Mitsuku |
Critiques
modifierDans la discipline de l'intelligence artificielle, le prix Loebner est controversé. Son critique le plus connu, Marvin Minsky, le qualifie de publicité qui n'aide pas à faire progresser la discipline[7].
Notes et références
modifier- (en) Cet article est partiellement ou en totalité issu de l’article de Wikipédia en anglais intitulé « Loebner Prize » (voir la liste des auteurs).
- « AISB - The Society for the Study of Artificial Intelligence and Simulation of Behaviour - Loebner Prize », sur aisb.org.uk (consulté le )
- Loebner Prize 2008
- (en) « Prix Loebner, on season 4 , episode 3 » [archive du ], Scientific American Frontiers (simple), PBS, 1993–1994
- « Read About the Loebner Award Winning Rosette - A Chatbot By Bruce Wilcox »
- « Chip Vivant - by Mohan Embar »
- « Mitsuku Chatbot »
- Artificial stupidity, Salon.com, 16 February 2003
Liens externes
modifier- (en) Site officiel
- (en) Cocktail-Party Conversation -- With a Computer, The New York Times, . (échanges avec des gagnants de 1992 sur les femmes et les hommes)
- (en) Correspondent reports from the fourth Loebner contest, Wired, .
- (en) Alexander Fiske-Harrison, A.L.I.C.E.'s springs - Do computers really converse?, The Times Literary Supplement, . (sur la 10e compétition tenue en 2000 au Dartmouth College)
