你说的比较像star trek里面出现的全像投影那种概念？
观众自己决定视角甚至剧情分支的AR/MR沈浸式体验。
不过这种比较接近电影贴近现实的体验，动画的一些东西现在光是真人化就呵呵….
至于运算问题，现在的文字转动画或图片转动画。
是可以像你说的下指令随着你的视角去改变，但是运算速度跟长时间下的一致性还是问题。
运算速度是很快速在发展
现在最新的文字转图片一个礼拜前刚出的SDXL turbo
跟一个月前的LCM一样可以省步数偷时间，但是细节保留度更好。
SDXL turbo下，4090算一张图只要30ms，一秒钟可以画30张1024*1024。
所以你说把以前的动画（720p)改造也是有可能，每秒29张图片拆开后重画
但是就面临重画后的一制性，新的视角你要怎样推估新的图长怎样？
现在常用的转动画（文字或图片）是用controlnet抓人物的体态或景色的轮廓去推估下一张
图片的变化
老实说这方法目前只是堪用，人物体态的一制性看起来是ok，但人物细节还有待努力
而且背景也是没有很好的一制性，因为目前资源都还集中处理人眼优先看的东西。
目前主流的动画方法才出来半年不到，你说的东西搞不好2025有机会弄出雏形。