Shamsuddeen Hassan Muhammad

アフリカの言語でLLM評価を改善するためにIrokoBenchを紹介するよ。

多様な文化における言語モデルの文化的知識を評価する新しいベンチマーク。

新しい方法でデータ収集時にビジュアルエイドを使って、ぎこちない翻訳を減らすことができるんだ。

アップデートでFLORESデータセットがハウサ語、ノーザンソト語、シソト語、そしてズールー語が強化されたよ。

アフリカの言語に対する機械の理解をUhuraベンチマークで評価中。