監査ログを確認しましたが、空の応答が返されました。ルールを再トリガーしたところ、今回は機能しました。
こんにちは。
これをどこに報告すべきか、あるいは報告する価値があるのか分かりませんが、Discourse AI の要約機能が何度か幻覚を見ているようです。
例:
トピックが作成されましたが、ユーザーからの返信やインタラクションはありませんでした。解決策は議論も調査もされていません。 投稿 を参照してください。
しかし、ボットは自信を持って「いくつかのオプションが議論されましたが、決定的な解決策はありませんでした」と述べています。
投稿に返信がない場合、要約が想像されないようにフィルタリングする方法はありませんか?
「バートの幻覚を止めることができるか」という意味であれば、いいえ、それは私が一貫してできることではありません。![]()
しかし、基盤となるツールは常に改善されており、精度もそれに伴って向上していくと思います。
トピックサマリーセクションについては、最終的にはトピックサマリーのアマルガメーションに移行する予定です。
これにより多くの問題が解消されますが、現在のツールで信頼性を高めるにはコストが大幅に増加します。生成してから検証ラウンドを実行する必要があり、非常にコストがかかる可能性があります。
Daily Summary (5am UTC) - #149 および Daily Summary (5am UTC) - #148 では、いくつかのトピックのスペルが間違っているようです。#site-feedback の代わりに #site feedback となっていたため、トピックにリンクされませんでした。次に、#dev:translations の代わりに #translations となっていました。同様に、#documentation:self-hosting の代わりに #Self-hosting と入力されていました。
はい、これはよくあることです。手動で編集したり、それを回避するためにプロンプトを調整するのに多くの時間を費やす価値はありません。![]()
バートはまた間違ったキノコを食べてしまったようです
でも…でも、そのトピックに投稿すらしてないじゃないですか(笑)。
(あと、バートとキノコって何?)
Bertは一般的にMetaのAIボットのニックネームとして使われているようです。
直ったようですね?元の投稿と同じようにフォーマットされていますか?(こちらの投稿ですが、午後1時の投稿はカテゴリが修正されているようですが、カテゴリが太字になっている最初の数件のようには見えません)
Claude 3.5 Sonnet に移行したため、品質が少し向上しました。
AIはカテゴリを「mention」クラスに含めるのをやめたのでしょうか?それともプロンプトが変更されたのでしょうか?
https://meta.discourse.org/t/daily-summary-5am-utc/291851/179?u=natedhaliwal
編集:次の投稿で自己修正されたようです。
AIが同じカテゴリのトピックをまとめていないようで、投稿には多くのトピックが含まれていますが、順序が明らかではありません。
(この投稿がここに属するかどうかは不明です)
https://meta.discourse.org/t/weekly-summary/291947/30?u=natedhaliwal
ほぼ正解です ![]()
おい、勘弁してくれよ。@Moin が最初のやつをやって、2番目のトピックは全く別のことだったんだぜ、笑
bot が私のことを Moin の仕事をしていると思っているなんて、光栄だよ。![]()
すでに存在する機能リクエストへのリンクを提示しただけです。これは#supportにあったものです ![]()
私はそのトピックに参加していません ![]()
ああ、今度はボットが私をヒューだと思っているようです。
![]()
それは大きな間違いを犯しました


