Re: [闲聊] 现在横空出世的NPU

楼主: oopFoo (3d)   2023-12-29 06:44:08
NPU还是很有用的,以后应用会越来越多。
我举个游戏应用的例子。
现在游戏对话都是固定死的。但用现代ai可以活泼很多。我大概解释一下技术流程。
玩家用语音跟游戏角色对话。
用Whisper转换语音到文字。
用bert/gpt来分析文字的情绪与关键字。
用RAG(embedding vector database)来取出游戏设计的答案。
如果跑得动,用gpt+答案+情绪prompt来回答。这是最有变化的。
跑不动gpt,就用预先(gpt+答案+prompt)录好的回答。这只要bert+vector database。
也可跑自然声的TTS来说话,这个目前还有很大的(问题/发展空间)
这些是npu刚好可以实践的东东。

Links booklink

Contact Us: admin [ a t ] ucptt.com