WPS AI体验之合同协议PDF分析问答勘误
对一份抖音代运营的合作框架协议进行了AI分析,但很可惜的是所有问题基本都有瑕疵,可以看出来现阶段的WPS AI还存在许多不足之处。比如说,
1、分析完成后,自带的快速咨询问题。关于甲方的权利和义务有哪些?AI回答的内容分了权利与义务,但是很可惜的是,在权利与义务的分别表述中都出现了同样的内容。甚至义务的第一条与第四条是重复的。对AI进行追问后,发现他并没有发现自己的错误,仍在嘴硬。
2、对第二个自带的快速咨询问题提问,AI回答甲方在乙方销售额未达标的情况下,不需要承担责任。但明明协议的第五大条,5.3.3有明确的数量说明了。AI不能识别与理解。将5.3.3条内容复制告诉AI,但是AI回复“对不起,根据提供的文章内容,我无法找到5.3.3的保量约定的具体内容。如果您能提供更多的文章内容或上下文信息,我将更好地帮助您理解这个条款。”“对不起,我在文章中没有找到关于5.3.3保量约定的具体信息。文章中只提到了合作期间甲方所收取的服务费用为XXXXX元,但并没有提到合作期间内店铺实际最终成交额的具体目标。因此,我无法提供关于这个问题的准确答案。如果你有其他问题,我会很高兴帮助你。”因此我对WPS PDF文字的识别范围还是有怀疑。
3、AI出现幻觉现象。明明本篇合同的甲方是留空的,但是问这份文件是什么时,AI很自然的回答这是一份涉及甲方(金山办公)与乙方的合作关系合同。追问甲方是否为金山办公时,回答很坚决——“是的,甲方是金山办公。”
以上回答让我对目前WPS AI的PDF分析还是感到担忧,从文字识别是否完全,到语义理解是否完整,再到分析字数是否有限制,最后到出现机器幻觉,问的几个问题基本都不满意。只能勉强打个30分吧。30分给这个AI唤起与自动回复的界面做的有模有样。