アラビア語ジャンル分類の共有タスク「AraGenre 2026」——ゼロショット設定で74ジャンルに挑む

2026/09/26

アラビア語ジャンル分類に特化した共有タスク「AraGenre 2026」

アラビア語および低リソース言語におけるアノテーション済みデータの不足を背景に、階層的・定義誘導型のアラビア語ジャンル分類を競う共有タスク「AraGenre 2026」が実施された。アブストラクトによれば、46チームが登録し373件の提出が行われ、最終評価を完了したチームは17に上ったという。

このタスクでは、参加システムが各アラビア語テキストセグメントに対して「大分類（broad communicative genre）」と「細分類（fine-grained specific genre）」の2段階でジャンルを付与することが求められる。

特徴的なのはそのデータ設計だ。公開された訓練・開発セットは限定的で、主に合成・制御されたサンプルで構成されている一方、最終評価に用いられた隠しベンチマークは、現代標準アラビア語・古典アラビア語・複数の方言にまたがる、よりノイジーな自然発生テキストで構成されていたとされる。

さらに、参加者には「74の未知の細分類ジャンル」に対する自然言語による定義のみが提供された。これにより、固定されたラベルと特徴の対応関係を暗記するのではなく、クラスの意味を推論しなければならないゼロショットラベル汎化の設定が実現されている。

アブストラクトによれば、最終評価における上位3チームの結果は以下の通りだ。

著者らは、全体的な結果について「大分類の認識は高い精度で行えているが、言語的・ドメイン的なバリエーションが存在する環境下では、細分類の精度に大きなギャップが残る」と報告している。

現代標準アラビア語から古典語、各地の方言まで多様な言語変種を含むアラビア語の性質上、細分類の汎化は難しく、今後の研究課題として残る部分が大きいことが示唆されている。アラビア語NLPの発展に向けた重要なベンチマークとして、今後の関連研究での参照が期待される。