Para avaliar as habilidades dos dois modelos, foram realizados testes em 10 critérios diferentes, incluindo testes de matemática, pesquisas na internet, PDFs, arquivos, livros, detecção de plágio e mais. A análise detalhada destes testes mostra que ambos os modelos têm pontos fortes e fracos.
Em um dos testes, os modelos foram solicitados a gerar um perfil de cliente, e ambos produziram respostas de alta qualidade, com Cloud2 tendo a vantagem de ser gratuito. Já em outro teste, os modelos foram solicitados a gerar ideias novas para problemas antigos, e o modelo GPT se saiu melhor, produzindo ideias mais criativas e atraentes.
Outros testes incluíram a geração de perguntas para uma metodologia de vendas, escrita de emails e análise de dados. Os resultados mostraram que o modelo GPT é mais capaz de gerar ideias criativas, enquanto o modelo Cloud é mais eficaz em gerar perguntas para a metodologia de vendas.
No final, o speaker conclui que nenhum dos modelos é perfeito e que ambos têm pontos fortes e fracos. O modelo GPT é mais capaz em certas áreas, mas o modelo Cloud é mais adequado para conversas longas ou livros. O speaker recomenda usar o modelo Google Bard para certas tarefas.
Portanto, é importante considerar as necessidades específicas do projeto e escolher o modelo de IA mais adequado para atender às suas necessidades.