生成AIパスポート 第5回 AIエージェント 問12(全12問)
生成AIの出力の評価に使う「オートレーター評価」について、Google「機械学習用語集」の説明に照らして、不適切なものを1つ選びなさい。
不適切(これが正解)。用語集は、オートレーターを、人による評価で作られたデータで学習したMLモデルとしている。
適切。用語集の定義のとおり。
適切。用語集は、理想的にはオートレーターが人の評価者をまねるよう学習するとしている。
適切。用語集の説明のとおり。
選択肢を押すと答え合わせができます。
論点
生成AIパスポート » AIエージェント » AIエージェントの評価(Eval・モニタリング)
正解
1
解説
用語集は、動いているオートレーター自体は完全に自動の処理で、人は学習用のデータを提供する「だけ」だと補足している。LLMの評価(Eval)は、改善点を見つける、モデルを比べる、安全で倫理的に使えるか確かめる、といった目的で行う。