阿里“通义千问”和百度“文心一言”大模型实测对比

新知榜官方账号

2023-07-06 10:14:28

背景

近年来,随着人工智能技术的不断发展,大语言模型也逐渐成为了研究热点之一。其中,阿里“通义千问”和百度“文心一言”是国内比较知名的两个大模型。

沟通能力测试

本文在实测中对“通义千问”和“文心一言”的沟通能力进行了测试。结果显示,“通义千问”在面对自己知识库中没有或本身就是错误的提问时,会积极认错,还懂在用户纠正后进行挽尊。而“文心一言”则不能保证能分辨出所有的错误描述相同的问题,并且显得更“话痨”一些,偶尔出现一本正经地胡说八道的问题。

多轮对话能力测试

多轮对话能力是指在一段涉及几十个回合的对话中体现出来的上下文处理能力。在这方面,“通义千问”比“文心一言”表现更好一些。虽然“通义千问”在10轮之内出现否认前期回答的情况,但当用户详细给出预设条件时,通义千问确实能够理解并按照设定条件对话。而“文心一言”则无法理解身份转换,不能很好地理解内容。

对职业的辅助能力测试

对话式AI能否替代某些工作一直是业界争论的一个焦点。本文对“通义千问”和“文心一言”进行了记者采访工作的测试。结果显示,两者都还做得不够好。

技术细节

“通义千问”和“文心一言”都没有公布更多的技术细节。当询问“通义千问”其模型的训练数据及量级时,“通义千问”表示无法提供准确数量级。此外,“通义千问”当前并无多模态生成能力,也就是无法生成图像、视频等。

本页网址:https://www.xinzhibang.net/article_detail-6318.html

寻求报道,请 点击这里 微信扫码咨询

关键词

阿里 通义千问 百度 文心一言 大模型 AI

分享至微信: 微信扫码阅读

相关工具

相关文章