Artigos mais recentes para Avaliação de Dados

Combinar revisores humanos com LLMs melhora as avaliações de pesquisa biomédica.

Um desafio focado em modelos generativos profundos pra geração de imagens médicas realistas.

Um novo sistema pra avaliar modelos de linguagem usando fluxos de dados do mundo real.

Um novo método pra avaliar o raciocínio de bom senso em modelos de IA através de tarefas abertas.

Novo conjunto de dados GAIA revela a qualidade das ações no conteúdo gerado por IA.

Um novo método pra avaliar modelos generativos com a geração mínima de dados.

Um novo benchmark testa o raciocínio composicional em modelos avançados.

Novo conjunto de dados ajuda a avaliar a precisão e confiabilidade do texto da IA.

Um novo benchmark avalia como os modelos de linguagem lidam com mudanças de texto.

Um conjunto de ferramentas pra avaliar o desempenho de modelos aumentados por recuperação em domínios específicos.

A VideoVista oferece uma avaliação completa para modelos de perguntas e respostas em vídeo.

Métodos para medir efeitos de tratamento em diferentes grupos e períodos de tempo.

Esse artigo apresenta um novo método pra avaliar modelos de texto pra imagem de forma eficaz.

A Dysca apresenta uma nova forma de avaliar o desempenho do LVLM usando dados sintéticos.

Um novo método mede como os modelos de linguagem adaptam suas crenças com novas evidências.

Um novo padrão pra avaliar o desempenho de agentes de IA em literatura biomédica e gráficos de conhecimento.

Apresentando o FairMedFM pra avaliar a justiça dos modelos de fundação na área da saúde.

Este estudo avalia como os LVLMs médicos se saem em meio a alucinações usando um novo conjunto de dados.

Explorando modelos de aprendizado de máquina e novos conjuntos de dados pra melhorar a segurança.

FKEA oferece uma forma nova de avaliar modelos generativos sem precisar de conjuntos de dados de referência.

Uma olhada nos benefícios dos métodos de avaliação de qualidade de tradução em nível de segmento.

Novas métricas e módulo EdgeHead melhoram a detecção 3D para veículos autônomos.

Uma nova abordagem melhora a precisão das avaliações de modelos de linguagem.

Melhorar como os modelos lidam com evidências em documentos longos aumenta a confiança do usuário.

BiasAlert melhora a detecção de viés em modelos de linguagem para resultados de IA mais justos.

Um novo método pra avaliar a precisão nas saídas de modelos de linguagem.

Um novo marco traz à tona a alucinação em modelos de linguagem visual.

Esse estudo destaca a importância da granularidade dos conjuntos de dados para melhorar os sistemas de recuperação de imagem e texto.

Apresentando uma maneira eficiente de avaliar a qualidade das amostras geradas usando pontuações de densidade latente.

Um novo benchmark melhora a compreensão dos modelos sobre vídeos longos e linguagem.

O HaloQuest resolve problemas de alucinação em modelos de visão-linguagem com um novo conjunto de dados.

Um novo parâmetro busca melhorar as avaliações dos sistemas OIE para ter melhores insights de desempenho.

Um novo padrão pra testar modelos de linguagem visual com mudanças mínimas em imagens e legendas.

Este estudo destaca a necessidade dos LLMs saberem quando se abster.

Regras de pontuação adequadas melhoram a avaliação de previsões probabilísticas em várias áreas.

Um esquema pra estimar melhor os efeitos do tratamento em experimentos randomizados em clusters pareados.

Usando marcas de relevância geradas por IA pra avaliar de forma eficiente sistemas de recuperação de informações.

Um novo método melhora a precisão na avaliação de verificação de autoria ao reduzir o vazamento de tópicos.

Uma nova estrutura melhora a avaliação de sistemas RAG em domínios especializados.

Novos métodos oferecem uma avaliação melhor da compreensão de linguagem em modelos.