当前位置:首页 > DeepSeek技术交流 > 正文内容

DeepSeek“乱编”坑惨大学生?这个话题冲上热搜!有救了……

在人工智能飞速发展的当下

对于广大学生和科研工作者而言

一个关键问题随之而来

借助这些前沿大模型写论文

真的靠谱吗?

不久前

#防止DeepSeek乱编文献的方法#

冲上热搜

记者注意到

用AI工具写论文“被坑”的经历

并非鲜见

有网友列出了自己的亲身经历

除了编造论文文献

AI还会编造法律条文

甚至教人做菜还跑偏了

问AI一个问题,它给了你一个特别详细、丰富,看上去好有逻辑的答案。但当我们去核实时,却发现这些信息完全是虚构的。这就是著名的“AI幻觉”现象。

“AI幻觉”指的是AI会生成看似合理但实际确实错误的信息,最常见的表现就是会编造一些不存在的事实或者细节。

造成“AI幻觉”的成因很多,例如:基于统计关系的预测;训练数据的局限性;过拟合问题,即因为记住了太多错误或者无关紧要的东西,从而让AI对训练数据中的噪声过于敏感;有限的上下文窗口;生成流畅回答的设计等等。

那么,当AI会说谎,大家如何避免被“带偏”?技术浪潮中,我们如何守护自己的思辨能力?

中国人民大学新闻学院教授卢家银指出,在知识建构上,AI生成的虚假学术成果,可能扭曲青年对科学方法论的理解,削弱其“假设-验证”的科研逻辑训练。在思维发展上,AI谣言通过算法推荐的“信息茧房”形成逻辑闭环,不利于批判性思维的培养。

北京师范大学教育学部教授、教育技术学北京市重点实验室副主任李艳燕建议,可以把AI看作一位平等对话的智者,通过引导与AI的对话互动,促进个体思维链的形成,并校准认知偏差。这种去权威化的思辨训练,可以帮助我们在与AI的对话中保持独立判断,实现认知跃迁。

北京邮电大学马克思主义学院副教授宋林泽认为,AI输出的内容只是一个认知起点,而不是终点。大学生需要主动去验证它的内容,比如查阅权威来源、对比不同观点,甚至直接与领域专家交流。这种验证过程,不仅能帮助我们更全面地理解问题,还能让我们在面对复杂信息时更有判断力。

如何应对AI幻觉呢?

AI工具研究者田威提到,想要获得准确答案,提问方式很关键。与AI交流也需要明确和具体,避免模糊或开放性的问题,提问越具体、清晰,AI的回答越准确。

总结成提示词技巧就是下面四种问法:

1.设定边界:“请严格限定在xx年xx期刊发表的研究范围内”;

示例:“介绍ChatGPT的发展历程”→“请仅基于OpenAI官方2022-2023年的公开文档,介绍ChatGPT的发展历程”

2.标注不确定:“对于模糊信息,需要标注‘此处为推测内容’”;

示例:“分析特斯拉2025年的市场份额”→“分析特斯拉2025年的市场份额,对于非官方数据或预测性内容,请标注[推测内容]”

3.步骤拆解:“第一步列举确定的事实依据,第二步展开详细分析”;

示例:“评估人工智能对就业的影响”→“请分两步评估AI对就业的影响:

1)先列出目前已发生的具体影响案例;

2)基于这些案例进行未来趋势分析”。

4.明确约束:明确告诉AI要基于已有事实回答,不要进行推测。

示例:“预测2025年房地产市场走势”→“请仅基于2024年的实际房地产数据和已出台的相关政策进行分析,不要加入任何推测性内容”。

针对如何获得准确答案,AI自己的答案是,可以通过指令约束、工具验证和人工审核三重保障,大幅降低AI虚构文献的风险。值得注意的是,“人工审核”被AI自己认为是“最后防线”。

专家提醒,“AI幻觉”并非没有好处,有时候与其把它当成缺陷,不如把它看作创意的源泉。在写作、艺术创作或头脑风暴时,这些“跳跃性思维”反而可能帮我们打开新世界的大门。

“AI幻觉”的本质是,AI在知识的迷雾中,有时会创造出看似真实,实则虚幻的“影子”。但就像任何工具一样,关键在于如何使用。

归根结底,在这个AI与人类共同进步的时代,重要的不是责备AI的不完美,而是学会与之更好地协作。

来源:光明日报


“DeepSeek“乱编”坑惨大学生?这个话题冲上热搜!有救了……” 的相关文章

关于DeepSeek的常见误区与真相

关于DeepSeek的常见误区与真相

最近,DeepSeek火得有点不讲道理。从我的朋友圈到国外媒体,从华尔街到硅谷,几乎所有人都在热议这个中国AI新秀。560万美元训练成本、开源大模型、链式推理能力、股市动荡...故事真是越讲越玄乎,热...

生态环境部:DeepSeek在环境监测上得到初步应用

生态环境部:DeepSeek在环境监测上得到初步应用

3月26日,生态环境部召开3月例行新闻发布会。会上,生态环境部监测司司长蒋火华介绍,目前,DeepSeek已经在生态环境部中国环境监测总站和不少地方生态环境监测部门得到初步应用。蒋火华表示,生态环境监...

娄勤俭:通过DeepSeek兴起可看到中国的创新性和包容性

娄勤俭:通过DeepSeek兴起可看到中国的创新性和包容性

据央视新闻消息,十四届全国人大三次会议今天(3月4日)在人民大会堂举行新闻发布会,大会发言人娄勤俭就大会议程和人大工作相关问题回答中外记者提问。在回答人工智能发展相关问题时,娄勤俭表示,DeepSee...

DeepSeek的列车,有人准备躺上去了

DeepSeek的列车,有人准备躺上去了

拥挤的DeepSeek列车,快关不上门了。据说,全国的大城市,都在为错过DeepSeek彻夜难眠。江苏省委机关报《新华日报》旗下“交汇点”在2月7日晚、8日上午连发三篇专稿文章《DeepSeek为什么...

湖南召开deepseek专题研讨会,释放出了什么信号?

湖南召开deepseek专题研讨会,释放出了什么信号?

为深入分析deepseek对湖南省产业发展带来的影响和挑战,加速推动人工智能赋能新型工业化,2月17日上午,湖南省工业和信息化厅组织基础通信运营商和数字化服务商、高校和科研院所、行业协会等五大类人工智...

硅基流动:全面支持基于昇腾算力的DeepSeek-R1&V3私有化集群部署

硅基流动:全面支持基于昇腾算力的DeepSeek-R1&V3私有化集群部署

【硅基流动:全面支持基于昇腾算力的DeepSeek-R1&V3私有化集群部署】财联社2月15日电,硅基流动联合北京昇腾人工智能计算中心,支持基于昇腾算力的 DeepSeek-R1 &...