生成AIパスポート 第4回 AIエージェント 問9(全12問)
生成AIやエージェントの出力の評価について、Google「機械学習用語集」の説明に照らして、不適切なものを1つ選びなさい。
適切。用語集のオートレーター評価の説明のとおり。
不適切(これが正解)。用語集は、人による評価は、正解が1つに決まらないモデルの評価に特に役立つとしている。
適切。用語集のゴールデンレスポンスの説明のとおり。
適切。用語集は、LLMの評価には通常、より幅広い品質と安全性の評価が含まれるとしている。
選択肢を押すと答え合わせができます。
論点
生成AIパスポート » AIエージェント » AIエージェントの評価(Eval・モニタリング)
正解
2
解説
エージェントの評価(Eval)では、あらかじめ用意した課題とよい答えを使って、正しく・安全に作業できるかを繰り返し確かめる。運用中も記録を見て品質を監視する。