Shauli Ravfogel

バイアスや有害な出力を減らして言語モデルの動作を改善する新しい方法。

言語の不均衡が多言語モデルのパフォーマンスをどう向上させるかを発見しよう。

新しい方法が言語モデルから知識を忘れることの課題を明らかにしている。

研究によると、トレーニングデータの多様性がモデルのパフォーマンス向上に重要なんだって。