Meta又开源AI模型，算盘打的是“AI元宇宙”！ImageBind如何带来多感官体验？
https://www.bnext.com.tw/article/75211
当各大科技公司在AI人工智能的战场上各显身手，试图占据AI市场的一席之地时，有个看
似沉寂许久的科技巨头，看似把未来押在虚拟世界“元宇宙”而错失了先机，却正在迎头
赶上，不断推出、甚至开源自家的AI研究成果──那就是Meta。
Meta于5月9日宣布了一个新的开源AI研究项目，名为“ImageBind”，且不只可以生成文
字、或是图片，还可以串联起文本、听觉、视觉数据、3D深度资讯、温度、动作数据。这
可能将是虚拟世界“元宇宙”计画的一大步，也代表未来AI的走向，将会是创造身历其境
的多感官体验。
虽然这还在研究阶段，Meta近期也还称不上高调，但也不断公开自家的研究项目，与相较
之下越来越神秘的OpenAI和Google形成强烈对比。
人工智能“多模型”型态，将是生成式AI的趋势？
早先广为人知的生成式AI如Midjourney、Stable Diffusion和DALL-E，都是在训练阶段时
就已经把文字和图片“连接”在一起的系统，在训练时，这些模型就会以文字叙述来寻找
视觉资料中的模式。目前其他生成声音或是短片的生成式AI也是如此。
但Meta表示ImageBind模型连结的不只文字和图片，还包括了温度（红外线影像）、3D深
度距离、还有用惯性测量装置（inertial measuring unit，IMU，可在手机或智慧手表中
追踪萤幕转向等活动）所取得的动作数据。
这个模型将预期的成果是： 模拟人的感知 ，用有限的数据来生成复杂的场景。如果未来
能够搭配虚拟实境设备使用，ImageBind不仅可以生成感官效果，还可以在使用者所在的
站台或座椅环境生成动作或效果。例如：输入“长途旅行”，ImageBind可能就可以让你
置身于摇晃的甲板，让你听到海浪声，并给你阵阵凉爽的海风。
Meta也在官方部落格指出，未来其他感觉数据也会添加到模型当中，例如触觉、嗅觉和大
脑fMRI信号等。文章中也指出，这个研究让AI生成模型“更接近人类在许多不同形式的资
讯当中，同步、整体且直接的学习。”
不过，这都还只是研究项目，目前都没有实际的应用成果或消费者心得。不过，继去年9
月Meta低调推出短片生成AI模型后，这个研究项目在未来，也可能会是Meta元宇宙大梦的
重要里程碑。
Meta早就是AI老手？大方开源AI研究，能抢先订下标准？
尽管低调，人工智能在Meta早就已经是旗下Facebook或Instagram贴文与短影音的幕后关
键。用户在Instagram上看到的所有内容中，就约有40%是由AI推荐的，而Instagram和
Facebook两个一起算的话，比率则是20%。在业务方面，Meta的主要业务──销售广告，
也是AI来操盘的。
Meta在AI领域的最大优势之一，就是旗下的研究部门，许多专家认为，Meta团队的竞争力
并不输Google和OpenAI等同行。
虽然Facebook和Instagram大量使用AI，但Meta的应用程式都不允许人们创建新内容，如
文本或影像。外媒《Vox》指出，可能跟Meta长期被控“散播仇恨言论、错误讯息”的骂
名有关，Meta还不想仓促建立一个会产生更多有害或是不正确内容的工具。
其实，Meta已经尝试过了，他们去年11月所发布、以学术论文进行训练的实验性AI工具“
Galactica”吐出了不符合事实的种族主义讯息，在三天内就被撤下了。
Meta同时也面临硬件设备难以执行人工智能系统的问题。去年9月，Meta内部发布的一份
备忘录表示，该公司“在AI开发方面，工具、工作流程和制程方面存在重大差距”，并且
需要“在这方面进行大量投资”。
不过，Meta的人工智能研究部门仍定期发布公开的AI研究论文（不包括社群媒体算法的
AI）。其他AI公司，如Google和OpenAI因竞争而不那么愿意公开研究成果。
Meta执行长马克．祖克柏就曾表示， 公开研究成果可以让Meta率先制定AI产品开发的行
业标准，并让外部开发者更好地融入Meta的生态系统 。今年2月，Meta的研究部门与研究
人员就开放LLaMA的大型语言模型给AI社群索取使用权限。
LLaMA的能力目前落后于OpenAI最新的GPT4模型以及Google的Bard，但开放资源仍然代表
著AI研究社区不须强大的电脑，就可以修改底层程式码。但这也有专家认为，过于自由的
开放可能会遭到恶意使用。
====
用AI来做虚拟实境的感觉模拟是很不错。
看来野心不小，各种感觉都想加进去。
真让它成功了，以后搞虚拟实境游戏就要用它的技术了。
但问题还是一样，这些资讯要怎进入使用者的脑中？
现在可没这种脑机连接技术，也不知道那时才会有。

部门都砍了 还要继续骗钱吗？

还敢来骗阿

股东请加码给钱

元宇宙已经死了 现在还要来骗钱

大师又要写文章了

改玩 多元宇宙啊

有一说一meta开源的东东有几个还不错用

嘎尾老苏99会员

元宇宙也不算死了 就这些大佬想要的东西技术跟不上就像这篇的内容 感觉模拟技术是需要的没错...但最根源的脑机连接技术就没有 弄再多都没底像Cover老老实实地弄虚拟演唱会就很实际....

拜托他们拿个五十亿给Star Citizen 好不好？

没那么多高大上的东西 就是用VR看V开演唱会而已

拿钱给2023还不会做枪战的公司干嘛= =

脑机接口现在要实用不是装备太多就是得脑袋开洞插UCB

看目标是什么啊，研究也是需要一篇又一篇的引用论文堆上去终点订好在那里的话，中间不做永远走不过去Meta比较尴尬的是语言模型之前外泄，虽然也有阴谋论

太狠了

但如果不把目标放远一点的话，近期就... 已经一堆人在改他外泄的语言模型了

他们之前流出的LLama很有料啊 有些团队用那个搞出可以装在自机的gpt了 表现好像能到七八成

说真的我们现有脑研究都还只摸到一些皮毛而已，脑机或基本的头戴式微波炉要问世还需要一段时间

AwIw元w宇w宙

他们的AI领域不是被超车了吗?因为中途中断跑去赔137亿

NVDA喷烂

继续骗

所以现在放大绝啊 直接外流 全世界都在帮他们改进

他们之前被外泄的语言模型是现在许多开源语言模型的基底

凑在一起做撒尿牛丸

阴谋论的说法是他们在找全世界免费的开源工程师帮忙打工

这也是先画大饼而已 而且里面的内容其实也是当初元宇宙希望能达到的最终境界 只是现在又塞AI进来而已

旧坛装旧酒 然后贴了一张写着AI的新标签

不太看好

又在骗股东钱

没东西才需要一直报出来骗钱

开源真的是很可怕的大绝

云端大数据区块炼AI元宇宙 就问你怕不怕

阿祖又要炒一波股价喔

他们ai比源宇宙强太多了 现在还有全世界的人一起改进不要太小看

元宇宙 meta 一个游戏都不会做 是元个毛 虚拟世界靠幻想哦 元宇宙制作难度怕是Mate压身家都做不出来

骗钱元宇宙

再次推出要你命3000 股价再涨一倍

没有啥吧本来就是有AI的只是用途不同

Meta

这篇的重点完全不在原宇宙而是在ai

不过最近红的就是AI图像与AI聊天

没想到还不想放弃耶

设备多少钱

说真的 meta这样干对你各位完全是利多好不好，开源ai不用和chatgpt那样还要想尽办法绕过ㄌㄨㄟㄌㄧ限制，它不香吗？

亏烂了不找点韭菜怎么止损

2023了 还在元宇宙

怎么看都像是是项目亏烂赶紧攀上最新的潮流以止损

又在画饼

跟风马笑死，人傻钱多？

他们搞ai也不算跟风 而且其实挺强

meta的AI很强啊，只是不知道为什么傻了去做元宇宙

Meta AI不差啊，就不晓得元宇宙长那样...

有一说一 从小看FAIR论文长大

开源要有能量也是要社群领袖出来说真香 才有爆发的可能偏偏这群人是最不受控的

LLaMA已经一堆团队再搞了阿

看开源的内容就知道以为meta只是单纯的大型GTA或者MMO的想法有多么可怜

你首先要先开源 才能吸引人来帮你开源打工 最后才收割

记得有加霸王条款,只能研究用。要商用就要看meta的心情了

商用开源最近好像有别的团队放出

连大型GTA跟MMO都做不出来的meta比较可怜

llama 有料