Requisiti specifici del test di Turing


9

Quali sono i requisiti specifici del test di Turing?

  • Quali requisiti deve soddisfare il valutatore per essere qualificato a fornire il test?
  • Devono esserci sempre due partecipanti alla conversazione (un umano e un computer) o possono essercene di più?
  • Sono ammessi o incoraggiati i test placebo (dove non è effettivamente coinvolto un computer)?
  • Possono esserci più valutatori? In tal caso, la decisione deve essere unanime tra tutti i valutatori affinché la macchina abbia superato il test?

Risposte:


9

Il "Turing Test" è generalmente inteso come una versione aggiornata del gioco d'imitazione che Alan Turing ha proposto nel suo omonimo documento del 1951. Una prima versione aveva un essere umano (maschio o femmina) e un computer, e un giudice doveva decidere quale fosse e quale genere fossero se umani. Se fossero corretti meno del 50%, il computer sarebbe stato considerato "intelligente".

L'attuale versione generalmente accettata richiede solo un concorrente e un giudice per decidere se è umano o macchina. Quindi sì, a volte questo sarà un placebo, in effetti, se consideriamo un essere umano un placebo.

La tua prima e quarta domanda sono correlate e non ci sono linee guida rigorose. Se il computer può ingannare un numero maggiore di giudici, ovviamente sarà considerato un AI migliore.

L'Università di Toronto ha una sezione di validità in questo articolo su Turing , che include un collegamento al commento di Jason Hutchens sul perché il test di Turing potrebbe non essere rilevante (anche gli umani potrebbero fallire) e il Premio Loebner , un'istanza formale di un Turing Test.


2

Ci sono davvero due domande qui, che posso vedere. Uno è "quali erano i requisiti specifici del test originale di Turing, come dichiarato dallo stesso Turing?" L'altro è "Quali dovrebbero essere i requisiti specifici di un moderno test di Turing?" Le cose sono progredite molto dai tempi di Turing e penso che sia ragionevole per noi considerare di estendere / modificare il suo test per riflettere la nostra attuale comprensione.

La risposta alla prima domanda è abbastanza facile da guardare, quindi penso che quella interessante sia la seconda. Come dovrebbe essere un test per determinare l'intelligenza? Con questo in mente, penso che la risposta a tutte e quattro le domande poste dall'OP sia "dipende". Non credo che ci sia un consenso universale su come strutturare un perfetto test di Turing, quindi un determinato sperimentatore è davvero libero di impostare le cose come vuole.

Tutto ciò, ovviamente, si basa sul presupposto che il test di Turing o un test simile a quello di Turing sia effettivamente utile. Questo non è necessariamente un dato di fatto. Considera che, in una certa misura, stiamo parlando di progettare un'intelligenza artificiale con un'eccezionale capacità di inganno! Cioè, supponendo che l'interrogatore sia autorizzato a chiedere semplicemente "sei umano", allora dobbiamo presumere che l'IA dovrebbe mentire se vuole superare il test. Quindi si potrebbe giustamente chiedere: progettare un sistema per essere davvero bravo a dire bugie, un approccio prezioso all'IA?


0

Se vuoi capire la relatività, leggi Einstein 1,2 , non un libro sulla relatività scritto da un professore che pensa di averlo. Se vuoi capire il test di Alan Turing per l'intelligence nel contesto del dialogo umano, leggi Turing. 3 Le interpretazioni possono essere peggiori che inutili. Sono spesso fuorvianti. Se i principi sembrano troppo spessi, rileggili fino a quando non li ottieni.

Nel caso del test di Turing per l'intelligence nel contesto del dialogo umano, per comprenderlo appieno, si assume il seguente sfondo quando Turing scrisse, che, se leggi il suo articolo del 1950, diventerà evidente.

  • Come il teorema di completezza di Turing risponde al secondo teorema di incompletezza di Kurt Gödel
  • La strategia di un test controllato
  • La differenza tra (a) udire e parlare e (b) ascoltare e rispondere in modo arguto - Questo è particolarmente pertinente oggi perché i robot di chat fanno (a) e potrebbero trovarsi da 5 a 500 anni di distanza (b). Per raggiungere (c) la comprensione profonda e la risposta con ispirazione, i ricercatori dell'IA devono andare oltre la modellazione della mente umana e affrontare la sfida di modellare le menti di persone come Gödel, Einstein e Turing. Se ciò accadrà mai deve ancora essere rivelato.

I requisiti specifici del gioco d'imitazione, il sottotitolo di Alan Turing sopra la descrizione del suo esperimento mentale, sono una questione record.

Requisiti specifici [Estratto dall'articolo reale]

[Il gioco dell'imitazione] si gioca con tre persone, un uomo (A), una donna (B) e un interrogatore (C) che possono essere di entrambi i sessi. L'interrogatore rimane in una stanza a parte gli altri due. Lo scopo del gioco per l'interrogatore è determinare quale degli altri due è l'uomo e quale è la donna. Li conosce dalle etichette X e Y e alla fine del gioco dice "X è A e Y è B" o "X è B e Y è A." L'interrogatore può porre domande ad A e B in questo modo:

C: X mi dirà per favore la lunghezza dei suoi capelli?

Supponiamo ora che X sia effettivamente A, quindi A deve rispondere. È l'oggetto di A nel gioco provare a far identificare erroneamente C. La sua risposta potrebbe quindi essere:

"I miei capelli sono a strati, e le ciocche più lunghe sono lunghe circa nove pollici."

Affinché i toni della voce non possano aiutare l'interrogatore, le risposte dovrebbero essere scritte o, meglio ancora, dattiloscritte. La disposizione ideale è quella di avere un teleprinter che comunica tra le due stanze. In alternativa, la domanda e le risposte possono essere ripetute da un intermediario. Lo scopo del gioco per il terzo giocatore (B) è aiutare l'interrogatore.

La migliore strategia per lei è probabilmente quella di dare risposte veritiere. Può aggiungere cose come "Io sono la donna, non ascoltarlo!" alle sue risposte, ma non servirà a nulla poiché l'uomo può fare osservazioni simili.

Ora facciamo la domanda "Cosa succederà quando una macchina prende la parte di A in questo gioco?" L'interrogatore deciderà erroneamente tutte le volte che si gioca in questo modo come fa quando si gioca tra un uomo e una donna? Queste domande sostituiscono l'originale "Le macchine possono pensare?"

Ci sono state migliaia di critiche sia sulla relatività di Einstein sia sul test di Turing, nessuna delle quali aggiunge molto valore. Studia il pensiero di grandi contributori attraverso le loro stesse parole e tutti i rifiuti che seguiranno saranno interessanti principalmente nella sua mancanza di grandezza.

Domande secondarie in questa discussione

Quali requisiti deve soddisfare il valutatore per essere qualificato a fornire il test?

L'interrogatore (C) non è un valutatore. La valutazione sarebbe un tentativo di essere oggettivo, tuttavia la premessa dell'esperimento mentale di Turing è che l'interrogatore fornisce il suo giudizio soggettivo. Da un punto di vista statistico, l'interrogatore dovrebbe essere selezionato in modo casuale dalla popolazione del mondo che condivide una lingua parlata con (A) e (B).

Devono esserci sempre due partecipanti alla conversazione (un umano e un computer) o possono essercene di più?

Devono essere esattamente due per adattarsi allo scenario descritto da Alan Turing. (Vedi sotto per maggiori dettagli.)

Sono ammessi o incoraggiati i test placebo (dove non è effettivamente coinvolto un computer)?

Si potrebbero testare tutti i tipi di cose, e i ricercatori fanno, tuttavia, che esulerebbero dall'ambito dell'esperimento mentale di Turing. 4

Possono esserci più valutatori? In tal caso, la decisione deve essere unanime tra tutti i valutatori affinché la macchina abbia superato il test?

Ciò che rivelerebbe la maggior parte delle informazioni a coloro che sponsorizzano un vero gioco di imitazione sarebbe un test in doppio cieco completamente randomizzato in cui (A), (B) e (C) vengono estratti da un campione casuale di quegli uomini, donne o software sistemi del tipo sotto test che possono conversare in un linguaggio comune e il test verrebbe eseguito più volte con selezioni casuali dai campioni.

L'unanimità, la valutazione, la complessità aggiuntiva e la comunicazione diverse da quelle specificate dal test frustrerebbero solo la causa, se si mantiene l'intenzione originale di Turing riguardo alla domanda: "I computer possono pensare?"

Altre viste di intelligenza

Turing, come René Descartes, che ha affermato che le macchine non passeranno mai una versione meno controllata del gioco d'imitazione di Turing, hanno visto l'intelligenza attraverso l'obiettivo del dialogo. Altri hanno considerato altri tipi di dialoghi e altri contesti oltre al dialogo. Ho affrontato questo in un'altra domanda:

Un cervello può essere intelligente senza un corpo?

Riferimenti e note a piè di pagina

[1] Relatività: lo speciale e la teoria generale di Albert Einstein, 1916

[2] The Principle of Relativity di Albert Einstein e Francis A. Davis, 1923

[3] AM Turing (1950) Computing Machinery and Intelligence. Mente 49: 433-460. https://www.csee.umbc.edu/courses/471/papers/turing.pdf

[4] L'articolo del 1950 di Turing non raccomandava che il suo esperimento mentale fosse incorporato e utilizzato nella validazione commerciale dei futuri sistemi di intelligenza artificiale. Alan Turing, tuttavia, si occupava di calcolo pratico in un punto specifico della sua carriera. Fu allora che i nazisti avevano invaso la Francia, stavano polverizzando la sua terra d'origine e avevano affondato una parte significativa della Marina inglese dal basso, con l'aiuto della crittografia Enigma.

Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.