Shamsuddeen Hassan Muhammad

Apresentando o IrokoBench pra melhorar a avaliação de LLM em línguas africanas.

Um novo benchmark pra avaliar o conhecimento cultural em modelos de linguagem de diferentes culturas.

Um novo método reduz traduções estranhas usando recursos visuais na coleta de dados.

As atualizações melhoram o conjunto de dados FLORES para Hausa, Northern Sotho, Xitsonga e isiZulu.

Avaliando a compreensão de máquinas em línguas africanas com o Uhura Benchmark.