AWS認定資格 無料問題集

AWS Certified AI Practitioner
テーマ別 集中演習(基盤モデルの応用)

第16問 創造的な文章生成タスクに対するモデル評価のアプローチ

 Amazon Bedrock などで構築した生成AIモデルの評価において、自動評価と人間による評価は共に重要な手法です。創造的な文章生成タスクでは、自動評価がテキストの品質やニュアンスを十分に捉えられないことがありますが、このような場合に、モデルの性能をより正確に評価するための最も適切なアプローチを選択してください。

 人間による質的評価を実施して、創造性や自然さなどを総合的に判断する。
 ベンチマーク評価のデータセットを追加して、評価の客観性を高める。
 ROUGE、BLEUなどの自動評価指標の組み合わせを増やして評価する。
 モデルの推論温度(temperature)を調整して創造性を制御する。

※この問題にはヒントがあります。必要に応じて、こちらのボタンをクリックして内容をご覧ください。

 「創造的な文章生成タスク」 であることと、「自動評価では品質やニュアンスを捉えきれない」 という2つの条件が重要です。自動評価の指標は、テキストの類似度を測ることは得意ですが、必ずしも人間が良いと感じる文章と一致するわけではありません。

Information

What's New

  • 2026/4/18 問題ID: AIF101C012 生成AIの不適切利用に関する責任あるAIの課題に関する問題を追加しました。
  • 2026/4/13 問題ID: AIF203C020 大規模言語モデルの比較評価に適したデータソースに関する問題を追加しました。
  • 2026/4/12 問題ID: AIF202C016 白黒写真アーカイブのカラー化に適したモデルの選定に関する問題を加筆・修正しました。
  • 2026/4/10 問題ID: AIF202C009 ビジネス上の有効性を測定するメトリクスに関する問題を加筆・修正しました。
  • 2026/4/6 問題ID: AIF202C016 白黒写真アーカイブのカラー化に適したモデルの選定に関する問題を追加しました。

Reference Books

AWS認定 資格試験テキスト AWS認定AIプラクティショナー

AWS認定 資格試験テキスト AWS認定AIプラクティショナー
 AWS認定 AIプラクティショナー試験(AIF-C01)の“緑本”とも呼ばれる定番テキストです。AIや機械学習、生成AIなどの基礎知識を幅広く網羅しており、図解も豊富で初心者にもわかりやすい構成です。練習問題も充実しており、試験対策として安心して使える一冊です。さらに、当サイトの問題演習と組み合わせることで、効率的に知識を定着させることができます。