总体感受:

优点:

1. 类人对话体验较为真实,无论是问题的回复和答案的梳理均和真人保持类似,即使在追问阶段也可以直接用代词去指代上一个问题中的主语,无需二次输入;

2.对于归纳总结类的问题已经展现独特的能力,本质上是在汇总多个搜索结果的内容,大大减少搜索时间;

3.对于不熟悉的领域可以迅速给出简明的梳理,帮助快速熟悉;

4.持续的追问可以实现类人的互动,沉浸感大大增强;

5.在结合上下文语境中,可以进一步给出更为准确的回答,比如一词多义,结合上下文,可以分行业解读。

缺点:

1.数据库内容只到2021年,对于涉及到2022年,或者在2022年有变动的问题无能为力;

2.专业较强的领域无法保证正确率,即使在鸡兔同笼此类初级问题中仍然存在错误,并且英文回答和中文回答存在明显差异化;

2.核心问题在于对于自己不熟悉的问题中会强行给出一定的答案,即使答案明显错误,依然会坚持下去,直到明确戳破其掩饰的内容,会立马道歉,但本质上会在不熟悉的领域造成误导。

实际体验从四类问题出发,并对此进行追问

1)对于某名词的直接询问,包含公司、热词、明星、电影等;

2)对于某事件或政策的梳理;

3)对于不同行业的对比;

4)专业学术问题。

以下正式进入体验环节

1)对于某名词的直接询问,包含公司、行业、热词、明星、电影等;

公司:

chatgpt点评(ChatGPT的真实体验如何)(1)

百度百科:

民生证券是一家综合类证券公司,成立于1986年,注册地为上海。2004年公司注册为保荐机构,2005年成为首批股权分置改革保荐试点保荐机构。2012年7月,公司完成股份制改革,正式变更为“民生证券股份有限公司”。

实际情况:

民生证券和民生银行无关,并且成立于1986年。

热词:

由于数据库内容截至2021年,选取2021和2020的相关热词

chatgpt点评(ChatGPT的真实体验如何)(2)

chatgpt点评(ChatGPT的真实体验如何)(3)

输出结果:无法识别相关热词,初步判断并未包含相关词汇

chatgpt点评(ChatGPT的真实体验如何)(4)

chatgpt点评(ChatGPT的真实体验如何)(5)

输出结果:和实际含义相差甚远,但即使在追问下,依然给出毫无关联的解释,推断AI直接将“网抑云”和“网易云音乐”划上等号。

明星及电影:

chatgpt点评(ChatGPT的真实体验如何)(6)

输出结果:

1)询演员沈腾参演电影

2)给出明显具有错误答案的回答,如参演西游降魔篇

3)进一步追问其参演角色,给出本是演员黄渤扮演的孙悟空

4)指出问题所在,直接承认错误

5)再度追问,系统直接宕机,尝试多次无果

政策:

chatgpt点评(ChatGPT的真实体验如何)(7)

选取2020年的《优化营商环境条例》,并追问第二部分的“市场主体保护”

以下为政策原文

chatgpt点评(ChatGPT的真实体验如何)(8)

chatgpt点评(ChatGPT的真实体验如何)(9)

专业行业:

选取具备多重含义的EDR为测试单元,EDR在汽车和网络安全中分别存在不同含义

在直接问询中,ChatGPT给出最常见的解释,即为车辆内的黑匣子

chatgpt点评(ChatGPT的真实体验如何)(10)

而在率先提出分析车载EDR和网安EDR的区别后,再度提问EDR是什么,ChatGPT根据此前回答,给出了具备解释一词多义的回复。

chatgpt点评(ChatGPT的真实体验如何)(11)

专业学术问题:

chatgpt点评(ChatGPT的真实体验如何)(12)

选取鸡兔同笼的初级数学问题,给出运算方式和最终答案,提供给无数学功底的问询者貌似合理的格式,但实际答案和运算方式并不正确(答案应为:25只兔,35只鸡)

chatgpt点评(ChatGPT的真实体验如何)(13)

选取了难度较大的遗传学实验设计的相关问题,基于自身的知识能力,只能判断中英两者的答案有较大不同,具体细节和实验模式不做评价。

,