o1モデルのプロンプトエンジニアリングって？

Transcript

1. OpenAI公式から学ぶ！ o1モデルのプロンプトエンジニアリング KINTOテクノロジーズ株式会社 2024/09/18 ついに出た！OpenAIの最新モデル「o1」って何がすごいの？みんなで勉強しよう

2. ©KINTO Corporation. All rights reserved. 2 プロフィール 2022年2月入社。生成AI活用PJT所属。内製アプリケーションの レコメンドアルゴリズム作成や、社内外の分析レポート作成な どに従事。直近は、社内のLLM活用を推進する業務に注力中。

   KINTOテクノロジーズ株式会社 IT/IS部 生成AI活用PJT 生成AIエバンジェリスト 和田 颯馬（@cognac_n）

3. ©KINTO Corporation. All rights reserved. 3 Index 1 KINTOテクノロジーズとは 2

   o1の立ち位置って？（私見含む） 3 6 目次 3 o1モデルのプロンプトエンジニアリング 4 まとめ

4. ©KINTO Corporation. All rights reserved. 4 KINTOテクノロジーズとは 1

5. ©KINTO Corporation. All rights reserved. 5 KINTOテクノロジーズ株式会社について（グループ組織） トヨタ自動車株式会社 トヨタファイナンシャルサービス株式会社 海外販売金融

   現地事業会社 世界40以上の国と地域で サービスを展開 KINTOテクノロジーズ 株式会社 株式会社KINTO トヨタファイナンス 株式会社 販売金融・クレジット カードなど

6. ©KINTO Corporation. All rights reserved. 6 KINTO ONEとは？ クルマにかかる諸費用がコミコミ！ 他に必要なのは「ガソリン代・駐車場代・高速代」など

   自動車税 自動車保険 車検 メンテナンス 消耗品 故障修理・代車 車両代＋登録諸費用

7. ©KINTO Corporation. All rights reserved. 7 KINTOテクノロジーズが関わっているプロダクト

8. ©KINTO Corporation. All rights reserved. 8 o1の立ち位置って？（私見含む） ２

9. ©KINTO Corporation. All rights reserved. 9 GPT-4 (Turbo) GPT-4o o1

   スケールアップ → 地頭の向上 マルチモーダル →目や耳の獲得 じっくり考える →論理的思考の獲得 GPT-3.5 Turbo ※モデルユーザー目線での私見/印象です

10. ©KINTO Corporation. All rights reserved. 10 GPT-4 (Turbo) GPT-4o o1

    スケールアップ → 地頭の向上 マルチモーダル →目や耳の獲得 じっくり考える →論理的思考の獲得 ？？？ ※モデルユーザー目線での私見/印象です

11. ©KINTO Corporation. All rights reserved. 11 GPT-4 (Turbo) GPT-4o o1

    スケールアップ → 地頭の向上 マルチモーダル →目や耳の獲得 じっくり考える →論理的思考の獲得 ？？？ ※モデルユーザー目線での私見/印象です 今のうちから 使い方に慣れておく いつか出てくるとてつもない技術に 備えさせようとしている？？

12. ©KINTO Corporation. All rights reserved. 12 o1モデルのプロンプトエンジニアリング 3

13. ©KINTO Corporation. All rights reserved. 13 参照した記事 Introducing OpenAI o1-preview

    https://openai.com/index/introducing-openai-o1-preview/ OpenAI o1 System Card https://openai.com/index/openai-o1-system-card/ Learning to Reason with LLMs https://openai.com/index/learning-to-reason-with-llms/ Using reasoning for routine generation https://cookbook.openai.com/examples/o1/using_reasoning_for_routine_generation Using reasoning for data validation https://cookbook.openai.com/examples/o1/using_reasoning_for_data_validation Reasoning models https://platform.openai.com/docs/guides/reasoning

14. ©KINTO Corporation. All rights reserved. 14 使うモデル https://platform.openai.com/docs/guides/reasoning

15. ©KINTO Corporation. All rights reserved. 15 プロンプトのコツ https://platform.openai.com/docs/guides/reasoning 余計なことするな 必要な情報だけ

    わかりやすく提供せい 素人は黙っとれ…？

16. ©KINTO Corporation. All rights reserved. 16 公式のサンプルを見てみよう！ https://platform.openai.com/docs/guides/reasoning ・以下のReactコンポーネントを、ノンフィク ションの本のテキストが赤くなるように変更

    してください。 ・返信にはコードのみを含めてください。 ・マークダウンのコードブロックのような追 加のフォーマットは含めないでください。 ・フォーマットには4スペースのタブを使用し、 コードの1行が80文字を超えないようにしてく ださい。

17. ©KINTO Corporation. All rights reserved. 17 公式のサンプルを見てみよう！ https://platform.openai.com/docs/guides/reasoning 私は、ユーザーからの質問を受け取り、それをデータベースで検索する Pythonアプリを作りたいと考えています。そのデータベースでは、

    質問が答えと対応付けられています。もし近い一致があれば、その一致した答えを取得します。 もし一致しなければ、ユーザーに答えを提供してもらい、 その質問/答えのペアをデータベースに保存します。 ディレクトリ構造を計画し、各ファイルの内容を完全に書いてください。 コードの途中ではなく、最初と最後に理由を説明してください。

18. ©KINTO Corporation. All rights reserved. 18 公式のサンプルを見てみよう！ https://platform.openai.com/docs/guides/reasoning 新しい抗生物質の研究を進めるために調査すべき化合物を3つ挙げてください。 それらを考慮すべき理由は何ですか？

    何をして欲しいか、端的に伝える 余計なことはしない ステップバイステップで バイアスを除いて 以下の手順に従い 回答の評価を行い

19. ©KINTO Corporation. All rights reserved. 19 GPT-4oとo1-previewで動作を比較 https://platform.openai.com/docs/guides/reasoning 新しい抗生物質の研究を進めるために調査すべき化合物を3つ挙げてください。 それらを考慮すべき理由は何ですか？

    GPT-4o o1-preview

20. ©KINTO Corporation. All rights reserved. 20 GPT-4oとo1-previewで動作を比較 クルマのサブスクサービスを利用していただいているお客様の満足度を 向上させるために重要な施策を3つ考案してください。それらの施策を選んだ理由は何ですか？ GPT-4o

    o1-preview

21. ©KINTO Corporation. All rights reserved. 21 まとめ 4

22. ©KINTO Corporation. All rights reserved. 22 まとめ ▍これまでの常識は一旦忘れて、素直な欲求をぶつける ・「ステップバイステップ」などのテクニックがむしろ悪影響する場合あり ・「実現したいこと」「必要な情報」にとどめて、論理はAIに任せてみる

    ・リクエスト数が限られるので「理由も教えて」などアウトプットを増やす工夫が有効 ▍GPT-4oとo1-previewの性能差は、もはや素人には分からない領域に ・解決できる課題が高度になったことで、その判定も高度に ・現時点ではとりあえず4o、満足いかなければo1を試す流れか →ただし、4o向けとo1向けではプロンプトを変える必要あり ▍(私見)o1-previewは「プロがよりプロになる」ツールか ・GPT-4oなどは苦手を補ってくれるAIのイメージ ・o1-previewはその道の専門家とも対等にやり取り可能な、プロ向けツールか

23. Thank you !