AIの品質保証、AIテスティングに関する記事を個人的に集めているのですが、その中でも体系的に情報がまとめられている資料がいくつか出ています。
品質保証やテストというだけでなく 「AIにおける品質とは何か？」 を言語化している資料として、AIに関して理解を深めるためにも良い資料となっているので、テストエンジニアやQAエンジニアに限らず、広く読まれると良いなと思います。
以下に3つ主要なものをご紹介します。
ISTQB FL Specialist AIテスティングシラバス
- JSTQBが出してる、ISTQBのAIテスティングのシラバスの日本語訳
- AIテスティングに関しての情報がかなり網羅されている
- AIをテストする上での前提となる「AIとは何か？」の説明に紙幅が割かれている
- 更にはAIをテストに活用する事例（QA4AIではなくAI4QA）も記載されている
- とはいえ正確にはガイドラインではなくシラバスなので、具体的な内容が書かれているわけではない
おまけ
- 上記シラバス作成に携わったStuart Raeid氏の記事の日本語版
- AIに対するリスクベースドテストの適用可能性について書かれている
AIプロダクト品質保証ガイドライン
- AIプロダクト品質保証コンソーシアムが出しているガイドライン
- AIプロダクトの品質保証の分類軸ごとのチェックリストが用意されているなど、かなり実用的
- 生成系システム、自動運転、OCRのようにプロダクトの種類ごとの言及もあり
- 実際に機械学習やAIシステムを作るエンジニアにが品質を改善し作り込むために有用
機械学習品質マネジメントガイドライン （AIQM）
- デジタルアーキテクチャ研究センターが出しているガイドライン
- 「機械学習 AI を含むシステム全体を企画開発する企業などが、システム全体の利用時品質をライフサイクルプロセス全体を通じて確保するための必要事項を網羅的に分析し可能な限り列挙することが意図されている」
- 外部品質や内部品質などの考え方がかなり体系的・網羅的に整理されている
QA4AIガイドラインとAIQMガイドラインの関係
引用元
その他ガイドライン
人間中心のAI 社会原則
- 内閣府が発表した、AIの社会規範についてのガイドライン
AI・データの利用に関する契約ガイドライン
- 経済産業省が発表した契約に関するガイドライン
- データ編とAI編とで分かれている