本文共 1157 字,大约阅读时间需要 3 分钟。
AI TIME PhD 对话系统专题-5
《低资源场景下的对话系统任务的模型定制》
2020年8月7日 19:30-20:30
划重点
!
直播通道:
哔哩哔哩直播通道
扫码或点击链接
关注AITIME哔哩哔哩官方账号
观看直播
链接:https://live.bilibili.com/21813994
第五期:
2020年8月7日 19:30-20:30
报告题目:
低资源场景下的对话系统任务的模型定制
用最少的语料训练生成模型是构建开放域对话系统的关键挑战之一。现有的方法倾向于使用元学习框架,首先预训练所有非目标任务的参数,然后在目标任务上进行微调。
然而,微调的方法仅仅将不同任务从参数角度区分开来,却忽略了模型的结构,因此容易产生相似的对话模型。
因此,讲者及其团队提出了CMAML算法,可以为每一个对话任务定制一个独特的模型。
在CMAML中,每个对话模型由一个共享模块、一个选通模块和一个私有模块组成。前两个模块是所有任务共享的,第三个私有模块具有独特的网络结构与参数,以捕捉相应任务的特征。训练中,不相似的任务网络结构没有重叠,相似的任务共享部分网络结构和参数,因此CMAML可以适用于低资源场景。
在两个数据集上的实验表明,CMAML在任务一致性、回复质量和多样性方面都优于所有基线模型,且在低资源文本生成任务上具有较强的通用性。
嘉宾简介:
宋伊萍,北京大学信息科学技术学院2015级博士生,导师为张铭教授。主要研究方向为自然语言处理和对话系统,已在相关领域的国际顶级会议如ACL, AAAI, IJCAI等发表多篇论文。
直播结束后我们会邀请讲者在微信群中与大家答疑交流,请添加“AI TIME小助手(微信号:AITIME_HY)”,回复“对话”,将拉您进“AITIME对话系统交流群”!
AI TIME微信小助手
主 办:AI TIME
联合支持:清华大学计算机系、中国工程院知领直播、学堂在线、CSDN
公益合作:智谱·AI、学术头条、biendata、大数据文摘、数据派、AI科技评论、 Ever链动
清华情怀·AITIME基地
1911主题餐厅
待疫情结束,AI TIME期待与您线下相聚!
AI Time欢迎AI领域学者投稿,期待大家剖析学科历史发展和前沿技术。针对热门话题,我们将邀请专家一起论道。同时,我们也长期招募优质的撰稿人,顶级的平台需要顶级的你,请将简历等信息发至yun.he@aminer.cn!
微信联系:AITIME_HY
AI Time是清华大学计算机系一群关注人工智能发展,并有思想情怀的青年学者们创办的圈子,旨在发扬科学思辨精神,邀请各界人士对人工智能理论、算法、场景、应用的本质问题进行探索,加强思想碰撞,打造一个知识分享的聚集地。
更多资讯请扫码关注
转载地址:http://xmgbb.baihongyu.com/