Recentemente, foi lançado o modelo de linguagem Mistral 7 Billion Version 3, que promete revolucionar a forma como os modelos de linguagem processam e respondem a perguntas. Nesse vídeo, vamos explorar as capacidades do modelo, testando sua habilidade para entender humor, raciocínio lógico e resolver problemas.
Instalação e teste do modelo
O vídeo começa com a instalação do modelo no sistema local usando o LM Studio. Em seguida, o modelo é testado em várias tarefas para avaliar suas capacidades. O modelo demonstra um desempenho bom, mas não perfeito, em tarefas como escrever sentenças que terminam com a palavra “beleza” e responder a perguntas de raciocínio lógico.
Testando a compreensão de humor
O primeiro teste do modelo é uma piada sobre Atena e seu pai, Zeus, rei dos deuses. O modelo demonstra uma compreensão razoável da piada, mas não ri (não que isso seja esperado!).
Em seguida, o modelo é questionado sobre qual objeto não pertence a uma lista (maçã, banana, batata, cadeira), e ele corretamente responde que a cadeira é o item que não pertence ao grupo.
Testando a lógica e o raciocínio
O modelo é então questionado sobre como disciplinar um pedra de estimação com comportamento problemático. A resposta do modelo é divertida e inclui ignorar o mau comportamento, redirecionar sua atenção e usar reforço positivo.
Outro teste envolve prever o que John, um homem com histórico criminal, faria se encontrasse uma carteira cheia de dinheiro e cartões de crédito. O modelo prediz que John guardaria o dinheiro, mas também nota que prever comportamento com base em histórico passado não é sempre correto.
Testando as habilidades matemáticas
O modelo também é testado em suas habilidades matemáticas, respondendo corretamente se 450 é 90% de 500.
Resolvendo um clássico problema de lateral thinking
Por fim, o modelo é testado com um problema de lateral thinking clássico sobre três assassinos em uma sala. O modelo responde corretamente que ainda há três assassinos na sala.
Ao longo do vídeo, o narrador está impressionado com a capacidade do modelo de entender humor, raciocinar logicamente e fornecer respostas precisas a uma variedade de perguntas.