Requisitos específicos do teste de Turing

9

Quais são os requisitos específicos do Teste de Turing?

  • Quais requisitos, se houver, o avaliador deve atender para se qualificar para o teste?
  • Sempre deve haver dois participantes na conversa (um humano e um computador) ou pode haver mais?
  • Os testes de placebo (onde não há realmente um computador envolvido) são permitidos ou incentivados?
  • Pode haver vários avaliadores? Em caso afirmativo, a decisão precisa ser unânime entre todos os avaliadores para que a máquina seja aprovada no teste?
Lucas
fonte

Respostas:

9

O "Teste de Turing" geralmente significa uma versão atualizada do Jogo de Imitação Alan Turing, proposta em seu artigo de 1951 com o mesmo nome. Uma versão anterior tinha um humano (homem ou mulher) e um computador, e um juiz tinha que decidir qual era qual e qual era o sexo se fosse humano. Se eles estavam corretos menos de 50%, o computador foi considerado "inteligente".

A versão atual geralmente aceita requer apenas um competidor e um juiz para decidir se é humano ou máquina. Então, sim, às vezes isso será um placebo, efetivamente, se considerarmos que um humano é um placebo.

Suas primeira e quarta perguntas estão relacionadas - e não há diretrizes rígidas. Se o computador puder enganar um número maior de juízes, é claro que será considerado uma IA melhor.

A Universidade de Toronto possui uma seção de validade neste documento sobre Turing , que inclui um link para o comentário de Jason Hutchens sobre o motivo pelo qual o teste de Turing pode não ser relevante (os humanos também podem falhar) e o Loebner Prize , uma instanciação formal de um Turing. Teste .

Rory Alsop
fonte
2

Há realmente duas perguntas aqui, que eu posso ver. Uma é "quais eram os requisitos específicos do teste de Turing original, como declarado pelo próprio Turing?" O outro é "Quais devem ser os requisitos específicos de um teste de Turing moderno?" As coisas avançaram muito desde os dias de Turing, e acho que é razoável considerarmos estender / modificar seu teste para refletir nosso entendimento atual.

A resposta para a primeira pergunta é fácil de procurar, então acho que a interessante é a segunda. Como deve ser um teste para determinar a inteligência? Com isso em mente, acho que a resposta para todas as quatro perguntas colocadas pelo OP é "depende". Não acho que exista consenso universal sobre como estruturar um teste de Turing perfeito; portanto, um determinado experimentador é realmente livre para definir as coisas da maneira que quiser.

Tudo isso, é claro, é baseado na suposição de que o teste de Turing ou um teste do tipo Turing é realmente valioso. Isso não é necessariamente um dado. Considere que, até certo ponto, estamos falando em projetar uma IA com uma capacidade excepcional de enganar! Ou seja, supondo que o interlocutor possa simplesmente perguntar "você é humano", devemos assumir que a IA deve mentir se quiser passar no teste. Então, alguém poderia perguntar, com razão, está projetando um sistema para ser realmente bom em contar mentiras, uma abordagem valiosa para a IA?

mindcrime
fonte
0

Se você quer entender a relatividade, leia Einstein 1,2 , não um livro sobre relatividade de autoria de um professor que acha que ele conseguiu. Se você quiser entender o teste de inteligência de Alan Turing no contexto do diálogo humano, leia Turing. 3 Interpretações podem ser piores que inúteis. Eles geralmente são enganosos. Se os princípios parecerem muito espessos, leia-os novamente até que você os entenda.

No caso do teste de Turing para a inteligência no contexto do diálogo humano, para entendê-lo completamente, o seguinte cenário é assumido quando Turing escreveu, que, se você ler o artigo de 1950, se tornará aparente.

  • Como o teorema da completude de Turing responde ao segundo teorema da incompletude de Kurt Gödel
  • A estratégia de um teste controlado
  • A diferença entre (a) ouvir e falar e (b) ouvir e responder com inteligência - Isso é particularmente pertinente hoje em dia porque os bots de bate-papo fazem (a) e podem estar entre 5 e 500 anos longe de fazer (b). Para alcançar (c) compreender profundamente e responder com inspiração, os pesquisadores de IA devem ir além da modelagem da mente humana e enfrentar o desafio de modelar a mente de pessoas como Gödel, Einstein e Turing. Se isso acontecerá ainda está para ser revelado.

Os requisitos específicos do jogo de imitação, subtítulo de Alan Turing acima da descrição de seu experimento mental, são uma questão de registro.

Requisitos específicos [Trecho do artigo real]

[O jogo da imitação] é jogado com três pessoas, um homem (A), uma mulher (B) e um interrogador (C) que podem ser de ambos os sexos. O interrogador fica em uma sala à frente dos outros dois. O objetivo do jogo para o interrogador é determinar qual dos outros dois é o homem e qual é a mulher. Ele os conhece pelos rótulos X e Y e, no final do jogo, diz "X é A e Y é B" ou "X é B e Y é A." O interrogador pode fazer perguntas para A e B assim:

C: Por favor, X me diz o comprimento do cabelo dele?

Agora, suponha que X seja realmente A, então A deve responder. O objetivo de A no jogo é tentar fazer com que C faça a identificação errada. Sua resposta pode, portanto, ser:

"Meu cabelo está arrepiado e os fios mais compridos têm cerca de quinze centímetros".

Para que os tons de voz não ajudem o interrogador, as respostas devem ser escritas ou, melhor ainda, datilografadas. O arranjo ideal é ter um teleprinter se comunicando entre os dois quartos. Alternativamente, a pergunta e as respostas podem ser repetidas por um intermediário. O objetivo do jogo para o terceiro jogador (B) é ajudar o interrogador.

A melhor estratégia para ela é provavelmente dar respostas verdadeiras. Ela pode adicionar coisas como "Eu sou a mulher, não dê ouvidos a ele!" às respostas dela, mas não valerá nada, pois o homem pode fazer observações semelhantes.

Agora fazemos a pergunta: "O que acontecerá quando uma máquina fizer parte de A neste jogo?" O interrogador decidirá erroneamente com tanta frequência quando o jogo for jogado assim quanto ele quando o jogo for jogado entre um homem e uma mulher? Essas perguntas substituem nosso original, "As máquinas podem pensar?"

Houve milhares de críticas tanto à relatividade de Einstein quanto ao teste de Turing, nenhuma das quais agrega muito valor. Estude o pensamento de grandes colaboradores por meio de suas próprias palavras e todos os rejeitos que se seguem serão interessantes principalmente por sua falta de grandeza.

Perguntas Secundárias neste Tópico

Quais requisitos, se houver, o avaliador deve atender para se qualificar para o teste?

O interrogador (C) não é um avaliador. A avaliação seria uma tentativa de ser objetivo, no entanto, a premissa do experimento mental de Turing é que o interrogador forneça seu julgamento subjetivo. Do ponto de vista estatístico, o interrogador deve ser selecionado aleatoriamente na população do mundo que compartilha um idioma falado com (A) e (B).

Sempre deve haver dois participantes na conversa (um humano e um computador) ou pode haver mais?

Deve haver exatamente dois para se ajustar ao cenário descrito por Alan Turing. (Veja abaixo para mais detalhes.)

Os testes de placebo (onde não há realmente um computador envolvido) são permitidos ou incentivados?

Pode-se testar todos os tipos de coisas, e os pesquisadores, no entanto, estariam fora do escopo do experimento mental de Turing. 4

Pode haver vários avaliadores? Em caso afirmativo, a decisão precisa ser unânime entre todos os avaliadores para que a máquina seja aprovada no teste?

O que revelaria o máximo de informações para aqueles que patrocinam um Jogo de Imitação real seria um teste totalmente aleatório, duplo-cego, onde (A), (B) e (C) são extraídos de uma amostra aleatória desses homens, mulheres ou software sistemas do tipo em teste que podem conversar em um idioma comum, e o teste seria executado várias vezes com seleções aleatórias das amostras.

A unanimidade, a avaliação, a complexidade adicional e a comunicação além da especificada pelo teste apenas frustrariam a causa, se alguém mantiver a intenção original de Turing em relação à pergunta: "Os computadores podem pensar?"

Outras visões de inteligência

Turing, como René Descartes, que afirmou que as máquinas nunca passarão por uma versão menos controlada do Jogo de Imitação de Turing, viu a inteligência através das lentes do diálogo. Outros consideraram outros tipos de diálogo e outros contextos além do diálogo. Abordei isso em outra pergunta:

Um cérebro pode ser inteligente sem um corpo?

Referências e notas de rodapé

[1] Relatividade: O Especial e a Teoria Geral de Albert Einstein, 1916

[2] O Princípio da Relatividade, de Albert Einstein e Francis A. Davis, 1923.

[3] AM Turing (1950) Computing Machinery and Intelligence. Mente 49: 433-460. https://www.csee.umbc.edu/courses/471/papers/turing.pdf

[4] O artigo de Turing, em 1950, não recomendou que seu experimento mental fosse incorporado e utilizado na validação comercial de futuros sistemas de IA. Alan Turing estava, no entanto, preocupado com a computação prática em um ponto específico de sua carreira. Foi quando os nazistas invadiram a França, pulverizaram sua terra natal do ar e afundaram uma parte significativa da marinha inglesa de baixo, com a ajuda da criptografia Enigma.

Douglas Daseeco
fonte