AI 审核

使用 Workers AI 与 EmDash 原生插件钩子,对评论与用户生成内容进行审核。

插件

AI 审核

使用 Workers AI 与 EmDash 原生插件钩子,对评论与用户生成内容进行审核。

  • 分类: AI 智能
  • 状态: 可用
  • 版本: 测试版内置
  • 价格: 测试版内置

产品详情

分类
AI 智能
状态
可用
版本
测试版内置

AI Moderation 展示 EmDash 如何借助 Cloudflare 原生基础设施解决实际的编辑问题:在保持评论区与用户文本安全的同时,不必把每一次决策都外包给黑盒厂商。上游包说明使用 Workers AI 与类 Llama Guard 的护栏;具体模型与策略旋钮请以对应版本的 packages/plugins/ai-moderation 为准。

安装

  1. 确认 EmDash 部署运行在可使用 Workers AI(或文档为该插件指定的 AI 后端)且账户套餐允许的栈上。
  2. 在 EmDash 管理后台启用 AI Moderation,或在开发时从 monorepo 接入。
  3. 按插件 README 设置所需的密钥与环境变量——通常是 API 令牌或绑定,切勿提交到 Git。
  4. 在非生产环境做冒烟测试:提交正常与边界文本,验证审核决策与日志。

配置

通常会调整:

  • 敏感度或策略预设 — 何为拦截、标记或放行(以实际集成为准)。
  • 降级行为 — AI 服务不可用时的策略:严格(待审)或宽松(带警告发布),取决于风险承受度。
  • 审计可见性 — 审核员是否看到分数、类别或仅最终结论。

示例(概念): 社区博客可自动发布低于风险阈值的评论,将边界案例排队人工审核,并拦截高置信度违规。

使用场景

  • 带评论的站点 — 减轻审核负担,模糊案例仍由人工处理。
  • 用户投稿 — 表单或 pitch 中的短文本自动分流。
  • 带建议的内部 wiki 或文档 — 上线前轻量筛查。

运维提示

  • 定期复查误报;在真实流量之后而非仅合成测试后再校准阈值。
  • 若合规要求对审核决策可追溯,可与 Audit Log 联用。
  • 监控 Workers AI 用量与延迟,使审核保持在预算与体验预期内。