データの死角

データの死角

その写真は誰を写していないか——データセットの代表性を問う

編集部の対話形式で、データセットの「写っていないもの」を考える。代表性の欠如がなぜ性能差として現れるのかを平易にたどる。

データの死角

ベンチマーク汚染という盲点——「解けた」の意味が揺らぐとき

評価用の問題が学習データに紛れ込むと、高スコアは実力を意味しなくなる。ベンチマーク汚染がAI評価に投げかける影を追う。

データの死角

低リソース言語の沈黙——訓練データに映らない世界

ウェブ上のテキスト量は言語ごとに極端に偏っている。データが薄い言語で何が起きるのか、言語多様性の研究から読み解く。