Existe alguma IA que passou no teste MIST até agora?

11

O MIST é um teste quantitativo da humanidade, consistindo em ~ 80k proposições como:

  • A Terra é um planeta?
  • O sol é maior que o meu pé?
  • As pessoas às vezes mentem?
  • etc.

Alguma IA tentou e passou neste teste até o momento?

kenorb
fonte

Respostas:

8

Sim, embora a utilidade dessa IA seja outra questão.

O mpgac é um "AGI minimamente inteligente" treinado no corpus do GAC-80K de perguntas do MIST. Como resultado, ele deve ser capaz de "minimamente" passar neste teste. No entanto, ser treinado no corpus do GAC-80K obviamente o faz falta para fins práticos. No README:

Obviamente, isso só deve ser capaz de produzir um sinal minimamente inteligente quando as perguntas comuns do senso comum são feitas, do tipo descrito acima, usando perguntas que teriam sentido para um ser humano comum entre os anos 2000 e 2005. Sobre conhecimentos especializados ou assuntos atuais relacionados perguntas, o desempenho não deve ser melhor que o acaso

O objetivo do mpgac é compará-lo com outras IAs que podem ser construídas para passar neste teste. Ou, como o escritor escreveu no README:

Ao escanear os céus, como podemos saber se os sinais de rádio detectados são de uma fonte inteligente ou se são apenas ruído de fundo ou de sensor?

Idealmente, você desejaria criar um programa "melhor" que o mpgac. Da mesma maneira que ELIZA pode ser vista como uma linha de base para o Teste de Turing, mpgac é a linha de base para o teste MIST.

O repositório GitHub de mpgac (assim como o corpus GAC-80K) está disponível aqui .

SE esquerdo em 10_6_19
fonte
2

Acredito que esse é exatamente o tipo de teste em que o cyc de Doug Lenat se sairia muito bem? Mas não consigo responder à pergunta: quanto desse corpus poderia responder corretamente? Provavelmente bastante! (e quantos humanos poderiam passar no teste? provavelmente nem todos, mas muitos podem ...)

[mas o cyc é considerado uma IA? provavelmente não ... então eu posso estar fora de tópico. Mas imo seu banco de dados deve ser incorporado a qualquer IA que atinja algum tipo de "inteligência" ...]

Olivier Dulac
fonte