最新资讯
wechat 这波杀疯了!旗舰级模型不限量、1个月视频额度免费领 dev.to 如何在专用 GPU 服务器上用 OpenAI 兼容 API 部署 LLM dev.to 审计 153 份 Claude Code 与 Codex 会话记录:User-Agent 与 URL 中的邮箱泄露 dev.to 你的 Agent Harness 应具备的 17 项能力 dev.to 离线 AI 记忆中 0.8 余弦阈值为何失效 dev.to Kimi K3.1 Pro 开放权重:自托管 2.8T 模型前的开发者清单 dev.to 如何通过工具调用引导模型以提升 Harness 质量 dev.to AI Agent 审计轨迹不等于对话记录 dev.to 精简 MCP server 工具数量:更少工具、更小影响面,双重收益 dev.to 为什么 git checkout 无法撤销 AI 编码 agent 的改动? wechat AI短剧门槛降降降!实测即梦短剧工作室:剧本分镜预演一条龙,伙伴计划长期护航 dev.to 让模型改写文档前,先量化事实保真度
多元动态
登录 注册
大模型 dev.to · @Georgi Kalchev

用 LLM 做工单分诊:语气会左右优先级

原文 我的收藏

作者让 Sonnet 和 Haiku 两个 Claude 模型各标注 25 条简短客服消息,要求以 JSON 输出固定列表中的类别、urgent/high/normal/low 优先级和语言代码。在没有书面优先级规则时,Sonnet 与预期标签一致 21 条,Haiku 16 条;类别和语言几乎全对,13 次错误中 12 次涉及优先级,其中 10 次是上调,喊叫、愤怒、询价和包裹延误都足以抬高优先级,两模型还在 7 条消息上互相不一致。把规则作为 skill 加入后两者表现均有改善。

AI推荐理由 这是一次小规模但方法明确的实验:用 Sonnet 和 Haiku 各标注 25 条客服消息,类别和语言几乎全对,13 次错误中 12 次出在优先级,且 10 次是上调,说明模型按语气而非问题本身判断优先级,两模型还在 7 条上互相不一致;加入书面规则后表现改善。样本量小、结论需谨慎,但对 LLM 分类任务中提示规则缺失的影响给出了可复现的具体证据。

74

正文

当前仅保存了标题或简介;并非所有来源都提供正文,可通过下方原文链接查看。

来源报道 · 1 篇 · 以下链接均前往原始媒体

Georgi Kalchev 用 LLM 做工单分诊:语气会左右优先级 10-08 · 原文发布
← 返回精选动态 原文

更多内容