文章題の計算をテキスト生成AIに解かせたところ、途中を飛ばして誤った答えを出すことがあった。そこで、解答例は示さずに、質問の末尾に「ステップバイステップで考えてください」という一文だけを加えたところ、正答率が改善した。この手法として最も適切なものはどれか。
- 1Few-shot Chain-of-Thought
- 2Self-Consistency
- 3Zero-shot Chain-of-Thought
- 4Generated Knowledge Prompting
正解と解説を見る
正解:3
推論の例を示さずに「ステップバイステップで考えて」といった一文を加えるだけで、モデルに段階的な推論を促す手法をZero-shot Chain-of-Thoughtといいます。Few-shot CoTは推論過程つきの解答例をプロンプトに含める点が異なります。Self-Consistencyは複数の推論を生成して多数決をとる手法、Generated Knowledge Promptingは関連知識を先に生成させてから回答させる手法です。「例なし+段階的に考えさせる一文」がZero-shot CoTの目印です。
根拠:Zero-shot CoT(Kojima et al., 2022「Large Language Models are Zero-Shot Reasoners」)