WEB問題集
解説
【正解: C】の理由
信頼性と安全性は、正常系の精度を高めるだけでは確保できません。想定される誤用・異常入力・エッジ ケースまで洗い出してテストし、失敗が避けられない状況でも被害を最小化する fail-safe (安全側に倒す) 設計と、人間による監督 (oversight) を組み込むことが核心です。高リスク システムでは『うまくいくとき』より『うまくいかないとき』の振る舞いを設計し、運用後も継続的に検証することが求められます。誤動作が人の安全に直結する場面ほど、こうした事前の備えが被害の抑止につながります。さらに red teaming で想定外の入力を事前に洗い出し、運用中の監視で本番環境の異常を早期に検知する取り組みも安全性の確保に有効です。
【他選択肢が違う理由】
- A: 利用者側にも評価・テストの責任があり、ベンダー任せは説明責任の放棄です。
- B: データ ドリフトで本番品質は劣化するため、リリース後の監視は必須です。
- D: 障害時挙動を未定義にすると被害が拡大し、fail-safe の事前設計が必要です。
【参考】
解説
【正解: D】の理由
頻繁に更新される事実 (最新の社内文書) の参照は RAG が適し、口調や書式など振る舞いの恒久的な固定は fine-tuning が適します。RAG は外部インデックスを更新するだけで最新情報を根拠として引用でき、fine-tuning は学習させたブランド ボイスを追加プロンプトなしで毎回の応答に反映します。事実の鮮度と表現の一貫性という異なる目的を、両手法の役割分担で同時に満たせるため、要件に最も合致します。要件ごとに手法を使い分ける設計が、精度と保守性の両立につながります。RAG は検索インデックスを更新するだけで最新文書を反映でき、モデルの再学習は不要です。
【他選択肢が違う理由】
- A: RAG は事実参照向けで、口調の恒久固定は fine-tuning の役割です。
- B: prompt engineering だけでは最新の社内文書を根拠にできません。
- C: fine-tuning は頻繁な文書更新の反映に毎回再学習が必要で非現実的です。
【参考】
解説
【正解: はい】の理由
頻繁に更新される製品マニュアルを参照して最新の内容で回答する課題には、推論時に外部知識を検索して回答へ反映する RAG (Retrieval-Augmented Generation) が適した適応戦略です。RAG は知識ソースであるインデックスを更新するだけで最新情報を取り込め、モデル本体の再訓練は不要です。検索した根拠に基づいて回答を生成するため事実性が高まり、引用元をたどった検証も可能になります。最新知識を常に参照したいという課題と戦略の性質が正しく一致するため、本解決策は目的を満たします。
【不正解の選択肢の場合】
毎回の fine-tuning (解決策 3) は最新性追随に不向きですが、RAG はソース更新だけで最新情報を反映できます。課題に即した適所の戦略のため、「いいえ」は誤りです。
【参考】
解説
【正解: はい】の理由
新しい出力形式 (JSON 出力) を追加の訓練なしで即座に導入する課題には、指示や例でモデルの出力を制御する prompt engineering が最適な適応戦略です。システム プロンプトに形式の指示や few-shot の例を与え、必要なら構造化出力機能を併用するだけで、モデルの重みを再訓練せずに出力形式を即時に変更できます。学習用データセットの準備や訓練ジョブが不要なため、コストも時間もほとんどかかりません。課題である即時の形式変更と戦略の特性が一致するため、本解決策は目的を満たします。
【不正解の選択肢の場合】
最新知識の参照は RAG (解決策 1) が適所ですが、出力形式の即時変更はプロンプトの工夫で足ります。訓練不要で目的に合致するため、「いいえ」は誤りです。
【参考】
解説
【正解: いいえ】の理由
頻繁に更新される最新情報を反映する課題に対し、更新のたびにモデル全体を fine-tuning で再学習し外部参照も行わないのは、コストと時間の面で非現実的です。fine-tuning は文体や振る舞いの適応には向きますが、学習後に固定される重みへ最新情報を都度焼き込むことはできず、更新頻度に追随できません。最新知識の反映は、推論時に外部ソースを検索して根拠を与える RAG が適所です。RAG であれば再学習なしにインデックス更新だけで最新情報へ追随できます。課題と適応戦略の対応が誤っているため、本解決策は目的を満たしません。
【不正解の選択肢の場合】
RAG (解決策 1) なら再訓練なしで最新情報を反映できます。毎回の fine-tuning は非効率かつ最新性追随に不向きで課題に合わないため、「はい」は誤りです。
【シリーズ全体の正解一覧】
| 問 | ステートメント | 正解 |
|---|---|---|
| 問1 | 頻繁に更新される製品マニュアルを参照して最新の内容で回答する課題に、RAG を選ぶ。 | はい |
| 問2 | 新しい出力形式 (JSON 出力) を追加の訓練なしで即座に導入する課題に、prompt engineering を選ぶ。 | はい |
| 問3 | 頻繁に更新される最新情報を反映する課題に、更新のたびにモデル全体を fine-tuning で再学習し、外部参照は行わない。 | いいえ |