[问题] 为什么GPT对动漫游戏的问题错误率极高?

楼主: d012375913 (阿利)   2024-11-15 19:32:08
饿死抬头
最近懒得动脑的时候都用GPT代替搜寻
一般民生问题还好 答案可以参考
但每次问到动漫游戏领域
尤其是游戏 几乎谎话连篇疯狂瞎说
错误率高到几乎无法参考
为什么生成式Ai在游戏动漫领域这么弱
作者: AoyamaNanami (七海)   2024-11-15 19:33:00
AI不需要机油
作者: ssarc (ftb)   2024-11-15 19:33:00
对一般外行人来说很有参考性啊
作者: s203abc (SamFu)   2024-11-15 19:33:00
看不够多动漫叫Ai去看动漫就搞定了
作者: kirimaru73 (雾丸)   2024-11-15 19:35:00
简单一点说他大部分吃过的东西还是网络上爬下来的ACG比例就真的没那么高另外他在研发过程有被要求不要动不动就说窝不知道所以他会倾向硬掰而不愿意说窝不知道
作者: aaaaooo (路过乡民)   2024-11-15 19:35:00
基数小没什么人帮训练阿
作者: sokayha (sokayha)   2024-11-15 19:36:00
类似概念的东西太多 所以在算比重的时候全都是类似的分数所以全混在一起吧 也不是只动漫 估计电影也一样吧 V的团体它也都混一起 猜演艺界也会一样
作者: BOARAY (RAY)   2024-11-15 19:37:00
一直喂他他就变更好了啊
作者: a2156700 (斯坦福桥)   2024-11-15 19:37:00
作者: jcaosola (纸袋)   2024-11-15 19:38:00
版权问题,training data 只有心得文
楼主: d012375913 (阿利)   2024-11-15 19:40:00
很拢统的问题他还可以 问细一点就直接爆
作者: a05150707 (Tw)   2024-11-15 19:40:00
因为他叫生成式AI 不是百科全书
作者: gaym19 (best689tw)   2024-11-15 19:42:00
因为他是AI 不是百科全书没人喂资料的话他当然瞎扯啊
作者: midas82539 (喵)   2024-11-15 19:42:00
这种Google就能解决的东西,靠会鬼扯随机生成的gpt?你要准确度100%的东西,问AI本来就有问题
作者: vsepr55 (vsepr55)   2024-11-15 19:43:00
你以为不是动漫gpt就不是胡说八道喔==
作者: sokayha (sokayha)   2024-11-15 19:43:00
年轻世代好像有误解AI功能的趋势 不太愿意google而是都在gpt
作者: kirimaru73 (雾丸)   2024-11-15 19:44:00
现在先进的版本有把 [网络搜寻] [阅读搜寻内容] 作为和[讲出下一个字]类似的动作来训练就是他做了一个搜寻且偷看的动作,但你以为他只是瞬间没讲话,所以确实有机会答对他完全没看过的资料当然就跟乡民自己去搜寻一样,还是很容易搞错早期的版本没这功能,所以会容易跳针说自己不知202X年Y月以后的事情
作者: midas82539 (喵)   2024-11-15 19:45:00
文字接龙随机生成的问题还是存在阿,比如说你问个智力
作者: kirimaru73 (雾丸)   2024-11-15 19:45:00
其实第一个动作先问GPT再Google确实是有效率的策略只是这样做的人98.7%对GPT的本质有误解
作者: midas82539 (喵)   2024-11-15 19:46:00
测验的,问他:设计一个胜率*赔率恒等1的公式它100%会随机生成一个乍看合理但期望值验算就是错的答案,因为它本身就不是纯逻辑推演的
作者: kirimaru73 (雾丸)   2024-11-15 19:48:00
GPT的超级大弱点 怎么戳怎么爆炸https://i.imgur.com/GNALWO1.jpeg
作者: sokayha (sokayha)   2024-11-15 19:49:00
就靠资料堆叠出来的 不知道是先会进化到最后这些也都能正常处理 还是会先撞到这种生成方式的极限
作者: kirimaru73 (雾丸)   2024-11-15 19:49:00
他做的事情从头到尾都只有一个 就是 “回你的话”其他“功能”都只是想像出来的
作者: willytp97121 (rainwalker)   2024-11-15 19:49:00
因为google要先花时间筛一堆无用资料 越科学的领域问GPT越不会出错
作者: midas82539 (喵)   2024-11-15 19:50:00
笑死,连数数都不会,可怜
作者: sokayha (sokayha)   2024-11-15 19:50:00
叫它列15个英文字母的单字也是炸w
作者: meatybobby (Bobby)   2024-11-15 19:52:00
没让他上网搜寻吧 有搜寻的准确度蛮高的
作者: willytp97121 (rainwalker)   2024-11-15 19:52:00
现在用google查游戏攻略应该就深有体会 洗流量的内容农场网站一大堆
作者: k960608 (雾羽‧浪沙)   2024-11-15 19:52:00
一堆农场文在骗 是要怎么正确
作者: kirimaru73 (雾丸)   2024-11-15 19:53:00
GPT有没有针对“正确回答专业问题”这点去训练?有,因为人类有介入去强化这点但是人类的力量在海量的资料面前不值一提所以只是“稍微有点努力往这方面走”而已
作者: sokayha (sokayha)   2024-11-15 19:53:00
农场文也不会编假的holo三期生成员啊 但是gpt就是会回答出不存在的名字
作者: ringtweety (tark)   2024-11-15 19:54:00
他也不是乱找 乱找随便去google或wiki都不会找到错的
作者: qd6590 (说好吃)   2024-11-15 19:55:00
你在西洽问有时候也会得到一堆莫名其妙的答案阿 对阿
作者: sokayha (sokayha)   2024-11-15 19:55:00
啊 我看到gpt显示去查网页了w
作者: kirimaru73 (雾丸)   2024-11-15 19:55:00
楼主: d012375913 (阿利)   2024-11-15 19:55:00
问游戏开始瞎掰了https://i.imgur.com/G55h5FD.jpeg
作者: kirimaru73 (雾丸)   2024-11-15 19:56:00
他有时候会这样 讲完才觉得和自己找到的资料好像不太一样 所以就打个**表示怪怪的
作者: a1379 (超☆鲁肥宅)   2024-11-15 19:57:00
因为是“生成式”AI 他只负责拉东西给你吃至于拉的是屎还是咖哩你要自己分辨
作者: PunkGrass (庞克草)   2024-11-15 20:02:00
因为这个领域对整个人类的进步来说根本不重要 所ai就敷衍学习吧
作者: kirimaru73 (雾丸)   2024-11-15 20:02:00
这个被讲起来根本只是在拉屎的东西已经很伟大了人类之试过的其他方式根本拉不出这种整坨成型的东西而且认真观察屎的形状还是有机会提升工作效率
作者: kirimaru73 (雾丸)   2024-11-15 20:05:00
问问题时要求是一门技术 也有人在研究这个有些要求你不先讲他还不肯开金口https://i.imgur.com/eZ8ZXW3.pnghttps://i.imgur.com/vXQR937.png因为没有说对方是专业的研究者,所以他死都不说
作者: roger840410 (roger)   2024-11-15 20:15:00
作者: XFarter (劈哩啪啦碰碰碰)   2024-11-15 20:15:00
总之基本的 CoT 的 Custom instructions 要下好以及一些增强的 prompts 有下的话,以 4o 来说应该许多问题的答案都算准确,但是前提是问问题的单字、分段以及标记(e.g: LaTeX, Markdown) 对于得到正常答案也蛮重要的
作者: choosin (秋心)   2024-11-15 20:17:00
没什么问题是还好 只是你ACGN比较熟
作者: XFarter (劈哩啪啦碰碰碰)   2024-11-15 20:17:00
加上 GPT4o 当前版本如果发现问题猜不太出来,它是有可能直接去搜寻引擎找的http://i.imgur.com/53jTJE3.jpg
作者: clothi58707 (唉)   2024-11-15 20:28:00
最后那个喵是楼上的性癖吗
作者: zChika (滋琪卡)   2024-11-15 20:30:00
我猜第一句是先喂GPT说你是一只猫
作者: ianpttptt (你小海岸)   2024-11-15 20:34:00
gpt对火影特别擅长 海贼他都不一定懂了 可以试试编火影故事
作者: kaimai (折翼天使)   2024-11-15 21:28:00
AI不看卡通
作者: nggfn (nggfn)   2024-11-15 21:35:00
叫GPT列柯南剧场版还会错,叫他去参考WIKI也还是错
作者: kaltu (ka)   2024-11-15 21:44:00
所有东西错误率都极高,只是你懂动漫类所以马上知道它在唬烂而已
作者: KaguraCat (神乐喵)   2024-11-15 22:02:00
他瞎掰的可多了
作者: jhkujhku (梧桐)   2024-11-15 22:14:00
不要说游戏 问历史问题也是几乎全错
作者: laechan (挥泪斩马云)   2024-11-15 22:21:00
因为被c洽板的白痴废文干扰,例如:贝尔克朗尼守得住街亭吗
作者: sokayha (sokayha)   2024-11-15 22:24:00
这样应该很多挥泪斩马超https://i.imgur.com/VuKLilq.png
作者: linzero (【林】)   2024-11-15 22:28:00
圈子大小资料多寡吧
作者: XFarter (劈哩啪啦碰碰碰)   2024-11-15 22:45:00
其实我只是要求它每一句话都得喵喵叫而已

Links booklink

Contact Us: admin [ a t ] ucptt.com