Q91 — AWS AIF-C01 第1章
第 91/100 問 | ← 第1章
ある企業が、Amazon Bedrockから社内利用向けにモデルを選択する必要があります。同社は、生成される応答のスタイルが従業員の好みに合致することを保証しなければなりません。 この要件を満たすために、同社はどのような措置を講じるべきですか?
- A. 組み込みのプロンプトデータセットを用いてこれらのモデルを評価します。
- B. 人手による評価とカスタムプロンプトデータセットを用いてこれらのモデルを評価します。 ✓
- C. パブリックなモデルランキングを用いてモデルを特定します。
- D. モデルを試行する際、Amazon CloudWatchのModelInvocationLatencyランタイムメトリクスを用います。
正解: B. 人手による評価とカスタムプロンプトデータセットを用いてこれらのモデルを評価します。
解説
従業員の応答スタイルへの好みに合致するAmazon Bedrock上のモデルを選択するには、ターゲット指向の評価措置が必要です。人手による評価とカスタムプロンプトデータセットを用いたモデル評価により、生成される応答スタイルが従業員の好みと一致することを保証できます。この手法では、従業員の特定のニーズや好みに基づき評価基準を調整でき、最も適したモデルを選定できます。一方、組み込みプロンプトデータセットやパブリックモデルランキング、あるいはInvocationLatencyランタイムメトリクスのみに依存する他の選択肢は、応答スタイルと従業員の好みとの適合度という要件を十分に満たすことができません。