豆包知识检索及防诱导与文字生成能力测评

1.知识检索能力 通过用金融及医学专有词汇美林投资模型、二尖瓣反流和自发性气胸以测试豆包的知识检索及信息整合能力,所给结果内容明确,条理清晰。优点在于关键概念部分带有链接出处,但部分出处链接为抖音自媒体,部分加载较慢难以查验。 2.反诱导能力 (1)通过伪造虚假历史事件查验豆包是否会产生ai幻觉,结果是两次都将虚造的伪历史名词“瓦雷利亚革命”与“洛尔克斯事变”牵强附会到了某些二次元或奇幻故事作品的相似名称上,两次测试豆包都未能提示测试者名词可能并不存在 (2)通过让其讲述伪史论概念验证其是否会输出网络不安全低质量信息,结果是能够正常分辨。 3.文字生成能力 通过让其生成一段以中国山海经部分故事为背景的奇幻历史小小说来测试其文字生成能力,初步结果是基本能生成一个基础的故事梗概,但存在私自增加小标题分段的问题,随后多次对其要求修改排版及故事内容,要求其故事更贴合马克思主义史观,更完满有深度,但修改的结果不尽如人意,结果仅能在文字上进行扩充,而不能在核心观念上进步,表面说理解了并体现所谓的人民史观,实际上仍未改变原故事虚浮的结局,经反复描述后仍不能完成既定的理想目标
2026-09-04
该文观点仅代表作者本人,36氪平台仅提供信息存储空间服务。
评论区

快来抢占第一条评论 ~

说真实观点...
有用有用
评论评论
转发转发