使用 AI 自动分类主题

:bookmark: 本指南介绍如何结合 Discourse AI 插件和 Discourse Automation 插件,使用 AI 初步分类功能自动对主题进行分类。

:person_raising_hand: 所需用户等级:管理员

使用 AI 自动分类主题

此自动化流程利用大型语言模型(LLM)读取主题内容,判断所选类别是否合适,并在 AI 代理认为其他类别更适应该主题时进行更新。

先决条件

参考代理配置

  • 系统提示:
您是本论坛的内容分类专家。

您的任务是分析帖子,并根据内容、图片以及可用的类别列表,建议合适的类别。

指导原则:
- 保持谨慎——仅对您有把握的内容进行分类
- 同时考虑内容主题和帖子意图
  • 默认语言模型:选择“先决条件”部分中配置的 LLM。

    :spiral_notepad: Discourse 托管客户在配置 AI 代理时,可以选择 CDCK 托管小型 LLM。

  • 启用的工具:读取、类别、编辑类别
  • 强制工具:读取、类别
  • 强制工具策略:仅应用于第一条回复
  • 执行模式:默认(固定限制)
  • (可选)开启“需要审核才能使用审核工具”选项
  • 用户:创建用户

自动化配置

  1. 导航至 管理插件自动化
  2. 点击 + 添加自动化
  3. 选择 使用 AI 代理初步筛选帖子 脚本。
  4. 根据您的需要配置“何时/做什么”部分的设置。
  5. 在“脚本选项”部分的 AI 代理 设置中,选择为此自动化定义的代理。
  6. 启用 静默模式 设置。
  7. 点击“更新自动化”按钮。
  8. 启用该自动化。

最佳实践

  • 从狭窄的范围开始: 在扩展之前,仅将自动化应用于特定类别或新用户(信任等级 0 或 1)的首条帖子。这可以限制 LLM 成本并降低广泛错误分类的风险。
  • 在提示中编写清晰的类别描述: 您对每个类别含义的描述越精确,LLM 分类的可靠性就越高。
  • 监控误报和漏报: LLM 的准确率不会达到 100%。建立工作流程以审查和更正分类错误的主题,并随时间调整您的提示。
  • 保持令牌限制合理: “最大帖子令牌”设置限制了发送给 LLM 的帖子内容量。对于大多数自动分类任务,前几百个令牌(帖子的开头部分)就足够了。

常见问题及解决方案

  • 自动化未应用正确的类别
    检查该类别的安全设置。如果应应用的类别是私有类别,请确保已启用代理设置中的 读取私有内容 工具选项。
  • 自动化已运行但未对主题进行分类
    检查站点日志,识别与 Discourse AI 或 Discourse Automation 插件相关的任何错误。

其他资源