Claude Certified Associate – Foundations 無料問題 1 / 10 ・ 分野1: プロンプト作成とタスク実行
あるチームの課題は、応答が遅く、費用が高いことだ。プロンプトの改善に着手する前に、公式ドキュメントが「そのほうが簡単な場合もある」と述べている手はどれか。
- 使うモデルを、より速く低価格のものへ選び直して、結果を比べる
- 評価セットの問題数を増やして、遅くなる原因を統計的に調べる
- 評価の基準を、「速く安いこと」に書き換えて、基準を満たしたことにする
- プロンプトに例(few-shot)を足して、出力の質を高める
正解と解説を見る
正解: A
正解の理由
公式は、成功基準のすべてがプロンプトエンジニアリングで解決するのが最適とは限らないと述べ、遅延と費用については、別のモデルを選ぶほうが簡単に改善できる場合があると説明している。課題の性質を見て、プロンプトで直すか、モデルで直すかを分ける。
違う選択肢
「評価の基準を、「速く安いこと」に書き換えて、基準を満たしたことにする」… 基準を書き換えても、応答の遅さと費用は改善しない。公式は、課題によっては、モデルを選び直すほうが簡単に改善できると述べている。
「プロンプトに例(few-shot)を足して、出力の質を高める」… 例は出力の形や質を整える手だが、応答の速さと費用を下げるものではない。
「評価セットの問題数を増やして、遅くなる原因を統計的に調べる」… 評価を増やしても、遅さや費用は改善しない。公式が挙げる、プロンプトの改善より簡単な手は、モデルの選び直しである。
押さえどころ
モデルは大きいほど高品質だが、遅く高価になりやすい。単純な大量処理は軽いモデル、複雑な推論は高性能なモデルという使い分けが基本になる(分野3で扱う)。
Claude Certified Associate – Foundationsの演習アプリ(無料10問・全問は購入で)へ