CIで問題が発生しているため、GPT-5を追加するプルリクエストがオープンされています。
この件について、Dev でトピックを立てました(https://meta.discourse.org/t/unexpected-error-in-discourse-plugin-ci/378165?u=merefield)。
CIで問題が発生しているため、GPT-5を追加するプルリクエストがオープンされています。
この件について、Dev でトピックを立てました(https://meta.discourse.org/t/unexpected-error-in-discourse-plugin-ci/378165?u=merefield)。
マージされました。
GPT-5の推論が遅すぎると感じる場合は、推論レベルを変更できます。新しいminimalレベルが追加されました。
この件にご協力いただいた@NateDhaliwalさんに感謝します!
ボットがタイムアウトしていたため、reasoning を minimal に設定しました。ありがとうございます!
正直なところ、GPT-5は一般的に遅すぎると感じており、応答時間の追加リードタイムに見合うだけの価値があるとは明らかに思えません。
サポートボットではどのように感じましたか?
Chat GPT を介して gpt-5 を試しましたが、API を介して使用するのとは全く異なり、4o や o1 よりもわずかに優れた回答を出すには、非常に長い推論時間が必要でした。迅速な回答が必要な場合、4.1 と比べて何も優れていません。
API を使用する場合、ツールやプロンプトの不足により、状況は同じか、それ以上に悪くなると確信していますが、gpt-5 は非常に遅く、フォーラム環境では光速に近い速度で回答する必要があるため、確信はありません。
コンテンツのパフォーマンスに関して、経験則ですが、gpt-5 は gpt-4o よりも明らかに優れた技術的な回答を出しているようです。それを定量化する方法はわかりませんが、本当に感銘を受けました。
応答にかかる時間にはばらつきがあります。今朝の実験から、gpt-5 は平均して遅いようですが、それほどではなく、gpt-5 の方が速く応答が返ってきたケースもありました。返信には 5 秒から 35 秒かかっています。
RAG を使用しており、レイテンシのどの部分が RAG 検索によるものか、チャット完了によるものかはわかりません。場合によっては RAG 検索を選択しない、検索が速くなる、あるいは何か(検索または完了で)キャッシュされている可能性があります。
顧客に誤った技術的アドバイスを提供することはコストがかかるため、通常は応答速度よりも優れた回答を選択します。ただし、タイムアウトすると非常に悪いユーザーエクスペリエンスになるため、ある程度までは応答速度も重要です。
GPT-5 は、私たちのユースケースでは主に gpt-5-mini を推奨し、状況によっては gpt-5 にエスカレーションすることを推奨しています。それは魅力的ですが、複雑に聞こえます。動的にモデルを切り替えることを検討しましたか?OpenAI はなぜそれを自動的に行わないのでしょうか? ChatGPT - Compare GPT models performance
gpt-4o に戻さなければなりませんでした。なぜなら、gpt-5-mini はできないことをできると思い込んでいるようだったからです。顧客の警報監視サービスをセットアップし、自宅の警報機器に接続することを自信を持って申し出ました。機器の ID 番号を尋ね、すべてをセットアップするコンシェルジュのように幻覚を見ました。当社のウェブサイトならそれができますが、チャットボットにはできません。gpt-4o がしていたように、システムプロンプトのガードレールを尊重していないようです。人々が使用できるようにする前に、さらに絞り込む必要があります。
更新: gpt-5 は、gpt-5-mini よりも指示に従い、プロンプトのルールを尊重する上で優れていることが判明しました。ボットにブランドを代表させたいのであれば、gpt-5 は遅く、5 倍高価ですが、お勧めします。gpt-5-mini が暴走するリスクが高すぎます。
GTP-5-mini を ツール呼び出し、コード記述、構造化データ を介したエージェントフローで非常にうまく活用できています。構造化データの方が、非構造化データよりも AI アプリケーションにとって簡単だと一般的に感じています!… 予想外でしたが!… ガードレール(ループ内のコード、ループ内の人間、ジャッジとしての LLM など)の方が簡単です。
高性能で低コストな gpt-5-mini と gpt-4o の詳細なウォークスルーについては、こちらをご覧ください…
Discourse に構造化データ機能をプラグインなどで組み込むことに興味がある方がいらっしゃいましたら、ご連絡ください。
Data Explorer への SQL/統計/データサイエンス用の NLP 拡張機能がその一例です… しかし、コンテナにロードされた読み取り専用の sqlLite や duckdb などの OLAP ファイルに対する自然言語クエリを可能にするツール/プラグイン/機能を持つことも可能かもしれませんか?… ちょっとした考えです… ![]()
ちなみに、プラグインにGPT 5.1を追加し、いくつかの修正を行いました:
@tom_eric さんは、他のフォーラムメンバーとゲームをプレイする機能について(別のトピックで)尋ねていました。
Chatbotでこのプロンプトを試したところ、GPT 5.1で機能するようです。試してみてください。
@Chatbot、@Other_Playerと私との9x9の囲碁のゲームを、盤面をレンダリングするためにマークダウンテーブルを使って進行してください。私が先手で、自分自身と@Other_Playerからのプレイのみを受け付け、かつ自分の手番の時だけ受け付けてください。盤面をレンダリングし、私に開始するように求めてください…
ああ、ありがとうございます。それは本当に創造的なアイデアですね。ああ、ありがとうございます。それは本当に創造的なアイデアですね。
どういたしまして、うまくいったか教えてください ![]()