生成AI評価用データセットの作成及び公開

事業の目的

令和７年６月13日に閣議決定された重点計画では、「社会全体への AI 実装を促進し、生産性の向上やサービスの維持・強化を図るため、今通常国会において成立した「人工知能関連技術の研究開発及び活用の推進に関する法律」に基づき、AI の社会での活用に向けた政府の体制整備を円滑に実施するとともに、政府が率先して安全・安心な AI 活用を進める。これまでデジタル庁を中心に実施されてきた生成 AI の検証事業や「AI アイデアソン・ハッカソン」等によるユースケースの掘り起こし結果等を踏まえ、同庁の内部開発を更に加速させるための環境を整備した上で、同庁の内部開発により政府等における AI 基盤（ガバメント AI（仮称））を構築するとともに、AI 利活用に資する政府保有データの整備・普及を行う。」としています。政府が保有するデータを活用して評価用データセットを整備・公開することで、国内外において、公平かつ透明にモデル性能を比較できる環境を提供し、政府等においては、生成AIの調達において当該評価用データを使用し、適切な生成AIの選定を行える環境を整備します。

現状・課題

現在、日本語に関する高品質な評価データが不足しており、特に法令や行政文書など日本固有の情報に基づくAI評価が困難です。既存のデータは量的には豊富でも、日本特有の情報が不足しており、日本で使用する上での生成AIの性能を正確に測定することが難しい状況です。また、専門的な知識を要するデータ整備には人的・技術的なリソースが必要であり、継続的な取り組みが求められています。

行政事業レビュー推進チームの所見

事業の有効性・効率性・成果について、適切かつ的確に検証し、効率的執行に努めるべき。

事業所管部局による点検・改善

-

改善の方向性

-