单轮对话指标:

  召回率=机器人能回答的问题数/问题总数

  准确率=机器人正确回答的问题数/问题总数

  问题解决率=机器成功解决的问题数/问题总数

多轮对话指标:

  任务完成率=成功结束的多轮会话数/多轮会话总数

格里斯准则:

  质量准则:只说确认的真实的内容

  数量准则:所说的话需要满足交流所需要的信息量,但不应该超出交流所需的信息量

  相关法则:只说和主题相关的内容

  态度准则:即说话需清晰明了,避免模棱两可

UNIT专业术语

BOT:

  一个BOT对应一个特定场景下独立的对话系统,用来满足特定场景下的对话理解与交互需求。通常按行业垂类划分。

技能:

  某一方向的对话能力,分为自定义技能和系统技能。

  • 自定义技能:完全由用户配置
  • 系统技能:UNIT平台预置的通用能力,支持开发者后期干预。

  技能下包含对话意图与问答意图,即BOT拥有的技能既可以解析用户对话的对话意图,也可以实现简单的FAQ问答。

意图:

  在一个对话任务中BOT要理解的用户目的。

  意图分为对话意图和问答意图。问答意图用于圈定某一范围或主题的问答对。

词槽:

  满足用户对话意图的关键信息或限定条件,可以理解为用户需要提供的筛选条件。词槽一定程度上影响系统对“【动作】”这个对话意图的执行。

  词典:属于词槽的所有词汇组成词典。

对话样本:

  用来给对话系统做示范,教它在用户说的具体句子里,该如何理解对话意图,哪个词是重要信息,对应词槽是什么。

对话模板:

  用来给对话系统按具体语法、句式做出示范,教他在某一特定语法、句式中,该如何理解对话意图,哪个词是重要信息,对应词槽是什么。

  对话模板也可以使用多条对话模板组成对话模板组,实现按片段去匹配用户query,实现更强的对话意图泛化匹配能力,提高模板对用户query的召回率。

特征词:

  约束某条对话模板的匹配范围,提供一定限度的泛化能力。

  活用特征词机制可以事半功倍的提高对话模板的精度和覆盖度。

  特征词词典:开发者需自行导入词典,用于系统识别特征词。

问答对:

  • 问题与答案的组合,称之为问答对。
  • 问答对支持一对一,一对多,多对一,多对多。
  • 当某个问题中包含多个答案,答案随机呈现。

问答集:

  • 问答集是承载问答对的容器,与技能中问答意图的定义一一对应
  • 支持批量将问答内容导入问答集和在线编辑

训练模型:

  把BOT下所有的配置、标注的对话样本、对话模板等打包提交给UNIT平台来训练对话理解模型,训练的时长跟训练的对话样本量、对话模板量有关系,量越多训练时间越长。训练完成后沙河环境中的BOT会自动加载并生效模型,一般几分钟。

沙盒环境:

  沙盒环境是UNIT平台提供开发者创建BOT、训练优化BOT模型的环境。

  每个BOT都配有一个沙盒环境,将训练好的BOT模型生效到沙盒环境后,就可以进行效果验证了,同时可接入到您自己的业务系统中使用。

  可以生成多个模型版本,但只能选择一个放到沙盒环境中。

生产环境:

  生产环境是UNIT平台在百度云上为开发者提供的可定制的稳定的对话服务环境。

知识图谱:

  知识图谱其实就是语义网,描述真实世界中存在的各种实体或概念。它是知识的结构化表示,通常我们用一张巨大的由点和边组成的图来可视化表现知识图谱:点代表实体或概念,用全局唯一确定ID来标识,称为标识符,点包含属性,称为值对(AVP),用来刻画实体的内在特性,边代表实体间的关系,用来连接两个实体。

情感分析:

  情感分析是指为会话赋予情感值,可根据情感值的正负将情感倾向分为正面情感、中立情感和负面情感。

  评测情感分析的指标主要为情感分类的准确率及负情感的召回率。

UNIT对话系统(杂记)的更多相关文章

  1. 百度大脑UNIT3.0详解之知识图谱与对话

    如今,越来越多的企业想要在电商客服.法律顾问等领域做一套包含行业知识的智能对话系统,而行业或领域知识的积累.构建.抽取等工作对于企业来说是个不小的难题,百度大脑UNIT3.0推出「我的知识」版块专门为 ...

  2. Unity插件之plyGame教程:DiaQ对话系统

    本文为孤月蓝风编写,转载请注明出处:http://fengyu.name/?cat=game&id=296 DiaQ是plyGame旗下的一款对话及任务系统.拥有可视化的对话及任务编辑器,能够 ...

  3. ABP(现代ASP.NET样板开发框架)系列之12、ABP领域层——工作单元(Unit Of work)

    点这里进入ABP系列文章总目录 基于DDD的现代ASP.NET开发框架--ABP系列之12.ABP领域层——工作单元(Unit Of work) ABP是“ASP.NET Boilerplate Pr ...

  4. ABP源码分析十:Unit Of Work

    ABP以AOP的方式实现UnitOfWork功能.通过UnitOfWorkRegistrar将UnitOfWorkInterceptor在某个类被注册到IOCContainner的时候,一并添加到该类 ...

  5. Failed to stop iptables.service: Unit iptables.service not loaded.

    redhat 7 [root@lk0 ~]# service iptables stop Redirecting to /bin/systemctl stop iptables.service Fai ...

  6. VS2012 Unit Test 个人学习汇总(含目录)

    首先,给出MSDN相关地址:http://msdn.microsoft.com/en-us/library/Microsoft.VisualStudio.TestTools.UnitTesting.a ...

  7. VS2012 Unit Test —— 我对IdleTest库动的大手术以及对Xml相关操作进行测试的方式

    [1]我的IdleTest源码地址:http://idletest.codeplex.com/ [2]IdleTest改动说明:2013年10月份在保持原有功能的情况下对其动了较大的手术,首先将基本的 ...

  8. VS2012 Unit Test——Microsoft Fakes入门

    如题,本文主要作为在VS2012使用Fakes的入门示例,开发工具必须是VS2012或更高版本. 关于Fakes的MSDN地址:http://msdn.microsoft.com/en-us/libr ...

  9. [Erlang 0118] Erlang 杂记 V

       我在知乎回答问题不多,这个问题: "对你职业生涯帮助最大的习惯是什么?它是如何帮助你的?",我还是主动回答了一下.    做笔记 一开始笔记软件做的不好的时候就发邮件给自己, ...

随机推荐

  1. Kotlin Doc

    { https://www.runoob.com/kotlin/kotlin-eclipse-setup.html }

  2. C++学习 | C++ Implement的使用 | 消除 warning C4251 | 精简库接口

      在编写C++动态库的过程中,我们常常会听到某个要求:请隐藏动态库头文件里类接口里的成员变量!或者自己在编写动态库时,突然意识到自己好像让调用者看到的信息太多了,而这些信息根本无需被调用者看到,往往 ...

  3. Vue-cli中使用vConsole,以及设置JS连续点击控制vConsole按钮显隐功能实现

    最近发现了一个鹅厂的仓库,实现起来比我这个方便[捂脸].https://github.com/AlloyTeam/AlloyLever 一.vue-cli脚手架中搭建的项目引入vConsole调试 1 ...

  4. topjui.common.js

    function getTabWindow() { var curTabWin = null; if (topJUI.config.aloneUse) { curTabWin = window; } ...

  5. Socket心跳包异常检测的C语言实现,服务器与客户端代码案例

    在Socket心跳机制中,心跳包可以由服务器发送给客户端,也可以由客户端发送给服务器,不过比较起来,前者开销可能较大.本文实现的是由客户端给服务器发送心跳包,服务器不必返回应答包,而是通过判断客户在线 ...

  6. C/S通信

    一直在考虑写一个服务端和客户端通信的框架,就现在的需求,打算走http协议. 通信方式打算用Key/Value的形式. 这里面其实还是有很多的问题的,这样的一个通信框架其实是SOA的一部分.其他 但是 ...

  7. SpringBoot-集成PageHelper5.1.2踩坑

    背景就不介绍了,项目是SpringBoot+MyBatis搭建的,需要集成git上的PageHelper5.1.2,这个插件大家都比较熟悉了 之前一直用的PageHelper4.0.3,集成是这样的: ...

  8. c_ 数据结构_图_邻接矩阵

    程序主要实现了图的深度遍历和广度遍历. #include <stdio.h> #include <stdlib.h> #include <string.h> #de ...

  9. bcolz

    raise Exception("this is an ex") bcolz总结: 0.需要用bcolz的columns需要为ndarray的列,不能直接拿list去赋值,因为我发 ...

  10. [JZOJ2679] 跨时代

    题目 题目大意 给你一堆边,你要将它们围成面积最大的矩形. 边不一定要用完,而且围成的矩形不能凸出一块. \(n\leq 16\) \(l_i \leq 15\) 思考历程 看到这题的第一眼,就会立马 ...