笔趣阁

手机浏览器扫描二维码访问

第827章 没经过标注学习的大模型直接拿训练结果会不完整(第3页)

老师出题、讲解并纠错

能建立清晰的“任务-结果-反馈”链条

强化学习

实践中不断试错并获得反馈

学会策略优化,但很依赖奖励设计

未训练领域

没人讲解、也从没见过的知识

只能“猜”而不是“知道”

所以,大模型并非“全知”,而是“巨量输入+相关性建模”的结果。没有明确监督和反馈,它可以“模仿得很好”,但无法“知道得准确”。

?

四、哲学层面:知识的完整性依赖于目的性与验证路径

知识完整性的构建不仅依赖数据,而更依赖:

1.

目的性(goal-oriented

learning):你学习是为了什么?没有目标就没有选择与筛选;

2.

验证路径(validation

mechanism):你怎么知道你学对了?没有反馈就无法修正偏差;

3.

理论抽象(theory

abstraction):你是否能将个例升华为结构?这需要引导和模型建设。

ai大模型很多时候是在缺乏明确目标与反馈的语料中“游荡式学习”。它学得多,但结构不稳、推理不深,因此无法获得“完整性”。

?

五、现实世界中的补救机制

正因为自监督训练存在这些问题,现代大模型在预训练之后通常会做:

1.

微调(fine-tuning):用有标注数据进行小范围有针对性训练;

2.

rlhf(人类反馈强化学习):用人工打分机制优化模型输出结果,使其更符合人类价值;

3.

插件系统(tool

use):通过嵌套计算器、数据库、搜索引擎等,补足知识结构的“缺口”;

4.

多模态协同:语言+图像+动作等维度补充信息结构的不完整性。

这些都是在弥补“无标注训练”的先天缺陷。

北域时空  开局创建杀手组织,我威压诸天  等你一直等到老  三国:身为反贼,没有金手指  庶女当家日常  系统沙雕我添堵,一身反骨离大谱  穿书七十年代,过好自己的日子  遗笑苍天  兽世溺宠:蛇蛇我啊,万龙之母  直播算命:你爹让你扔下水道了  高中三年,无人知道我已觉醒  被废静心多年,你们才开始后悔?  穿越之异世女领主  大反派女魔头,前世居然是男的  开局就长生,可我咋是奴隶啊  异能太强,大佬被特殊部门收编了  斩神:我道系青年,请个神合理吧  开局逃荒直接掀桌  海贼:从女帝开始,路飞持续崩溃  轮回塔  

热门小说推荐
总裁大人超给力

总裁大人超给力

嫁给我,我可以替你报仇。陆白,亚洲第一跨国集团帝晟集团总裁,商业界最可怕的男人。传闻他身后有着最庞大的金融帝国,身边从未有过什么女人,传说他是夏儿想,管他呢,安心地做她的总裁夫人虐虐渣最好不过了。只是婚后生活渐渐地不一样了,看着报纸上帝晟总裁的采访,安夏儿方了你你你什么意思,不是说好我们隐婚的么老...

大国工程

大国工程

余庆阳一个搬砖二十年的老工程,梦回世纪之交,海河大学毕业,接老爸的班继续搬砖。用两辈子的行动告诉老师,搬砖不是因为我学习不好!是我命中注定要搬砖已有两本百万字完本书超级村主任最强退伍兵,可以放心入坑!大国工程书友群,群聊号码492691021新书重生之大国工匠...

凌天至尊

凌天至尊

最强系统,我就是最强!还有谁?叶风看着众多的天骄,脸色淡定无比!获得最强系统,经验可复制对方的功法神通,可升级功法神通品阶无所不能,唯有最强!碾压苍穹,打爆世间一切不服者!...

特种岁月

特种岁月

男人一辈子最值得骄傲的事里包括服一次役,当一回特种兵,和世界上最强的军人交手。还有,为自己的祖国奉献一次青春,为这片热土上的人民拼一次命。这些,庄严都做到了。(此书致敬每一位曾为国家奉献过青春,流过血洒过汗的共和国军人!读者群号764555748)...

每日热搜小说推荐