清华大学研发的智谱清言,怎么样

AI应用信息5个月前更新 XIAOT
415 0
随着chatGPT的火热,国内大模型也百花齐放,备受瞩目之一的便是智谱清言。10 月 27 日,中国计算机大会 CNCC2023 上,智谱 AI 发布了自研第三代对话大模型 ChatGLM3。这是继 6 月 25 日发布 ChatGLM2 后,智谱 AI 对话大模型的又一次重大升级。

清华大学研发的智谱清言,怎么样
坚持走完全自研的道路,智谱清言底层采用的是GLM 模型。为了更好的了解GLM模型和GPT 的差别,我们去问一下智谱清言:

清华大学研发的智谱清言,怎么样
清华大学研发的智谱清言,怎么样
可以看出ChatGLM更适合中文的语境,我们沿用之前的方法,测试一下智谱清言的回答。包括以下能力。
  • 内容生成
  • 理解能力
  • 知识问答
  • 逻辑推理
  • 数学能力
  • 代码能力
每次生成内容,第一张为智谱清言,第二张为GPT生成。
内容生成
清华大学研发的智谱清言,怎么样
清华大学研发的智谱清言,怎么样
相比较而言,智谱清言的语句确实更优美。
理解能力
清华大学研发的智谱清言,怎么样
清华大学研发的智谱清言,怎么样
理解能力都可以。
知识问答
清华大学研发的智谱清言,怎么样
清华大学研发的智谱清言,怎么样
清华大学研发的智谱清言,怎么样
清华大学研发的智谱清言,怎么样

在这个挖坑的问题中,智谱清言出现“幻觉”,回到中提到“孔子的三千弟子在开幕式上吟诵了《论语》中的经典名句”,再次确认的时候,才回答孔子的三千弟子没有在开幕式吟诵。这里要扣分。

    © 版权声明

    相关文章

    暂无评论

    暂无评论...