总结 GPT-4O (for All) 的新功能
能从图片、文本、音频、视讯 作逻辑推理
速度比 GPT-4 Turbo 快一倍
可以上电脑看营幕内容 帮忙程式 debug
可以讲睡前故事 口语有情绪
可以唱歌 可以自动产生音乐
免费
https://www.youtube.com/watch?v=DQacCB9tDaw
每个人
大家谢谢你们
谢谢
很高兴今天你能来到这里
今天我要讲三件事
就是这样，我们将从为什么开始
拥有这样的产品对我们来说非常重要
我们可以免费提供
并广泛提供给所有人
我们一直在努力寻找减少摩擦的方法
这样每个人无论身在何处都可以使用 ChatGPT
所以今天我们将发布 ChatGPT 的桌面版本
更新后的使用者接口使使用更加简单也更自然
但今天的大新闻是
我们正在推出新的旗舰型号
我们称之为 GPT 是因为 GPT-4O 的特殊之处
就是它带给大家了GPT4等级的智能
包括我们的免费用户，我们今天将展示一些现场演示
展示我们新模型的全部功能
我们将推出它们
在接下来的几周内迭代
好吧所以
让我们开始一个非常重要的事情
我们使命的一部分
就是能够让我们先进
每个人都可以免费使用人工智能工具
我们认为这非常非常重要
让这个人对科技的用途有直觉的感受
所以我们真的想将它与更广泛的理解结合起来
我们一直在寻找减少摩擦的方法
以及最近我们无需注册流程即可提供收费服务
今天我们还带来了桌面应用程式到 ChatGPT，
因为我们希望无论您身在何处您者能够使用它
如您所见，这都很容易，这很简单
它非常非常容易地整合到您的工作流程中
我们也刷新了使用者接口
我们知道这些模型变得越来越复杂
但我们希望互动体验能真正变得更加
自然简单，让您根本不用关注使用者接口，只关注合作
其中有 GPT
现在是今天的大新闻
我们正在发布我们最新的旗舰型号，这是 GPT-4O
GPT-4O提供GPT-4级智能
但它的速度要快得多，而且它的功能也有所提高
AI 过去几年跨越文字视觉和音频的发展
我们一直非常关注如何提高这些模型的智能
他们已经变得相当不错了
但这是我们第一次真正向前迈出一大步
当谈到易用性时
这非常重要
因为我们正在展望互动的未来
我们和机器之间
我们认为 GPT-4O 正在真正改变这个范式
迈向合作的未来
这种互动变得更加自然
并且容易得多
但你知道实现这一目标其实相当复杂
因为当我们彼此互动时
有很多事情我们认为是理所当然的
你知道我们对话的轻松程度
当我们打断
彼此的背景噪音
对话中的多种声音
或理解语气
所有这些事情实际上都相当
这些模型的复杂性
到现在为止还有语音模式
我们有三个模型组合在一起来提供
这次经历
我们有转录智能
然后文字转语音
所有这些都在编排中组合在一起以提供语音模式
这也为体验带来了很大的延迟
这确实打破了协作的沉浸感
其中有 GPT
但现在有了 GPT-4O
这一切都发生在年轻时，有以下原因
跨越语音文字和视觉
凭借这些令人难以置信的效率
它还允许
我们将 GPT-4 类智慧带给我们的免费用户
这是我们一直在努力为很多人做的事情
好几个月了，我们非常非常兴奋终于
将 GPT-4O 带给我们所有的用户
今天有 1 亿人，事实上超过 1 亿
他们使用 ChatGPT 来创建工作学习
我们有这些先进的工具
仅适用于我们的付费用户
至少到目前为止
效率为 40%
从今天开始我们可以把这些工具带给每个人
您可以使用 GPTs 和 GPT 商店
到目前为止我们已经拥有超过一百万用户
使用 GPTs 创造令人惊叹的体验
这些是乍得定制的 GPT
适用于商店中可用的特定用例
现在我们的建设者拥有了更多的受众
大学教授在哪里
可以为学生或播客创建内容
可以为听众创造内容
您也可以使用视觉，因此现在您可以上传萤幕截图
照片文件
包含文字和图像
你可以开始与 ChatGPT 对话
关于所有这些内容
你也可以在它造成痛苦的地方使用记忆
更有用和有帮助，因为现在
它有一种连续性的感觉
在你所有的对话中
你可以使用浏览
您可以在其中搜寻实时资讯
在你们的谈话中
和进阶数据分析
您可以在其中上传图表或任何信息
它会分析这些资讯
它会给你答案等等
最后我们也提高了品质和速度
50 种不同语言
关于收费
这非常非常重要
因为我们希望能够带来这种体验
给尽可能多的人
所以我们非常非常高兴能够将 GPT-4O 带给我们所有的免费用户
对于付费用户来说
他们将继续有多达五次
我们的免费用户的容量限制
但 GPT-4O 不仅在 ChatGPT 中可用
我们还将它引入 api，以便
所以我们的开发人员今天就可以开始使用 GPT-4O 来进行构建
并制作令人惊叹的人工智能应用程式来部署它们
规模为 40 时速度提高 2 倍
便宜 50%
与 GPT4 Turbo 相比，速率限制高出 5 倍
但当我们将这些技术带入世界时
弄清楚如何以某种方式做到这一点非常具有挑战性
这既有用又安全
和GPT-4O
在安全方面为我们带来了新的挑战
因为我们正在处理实时音频
即时视觉
我们的团队一直在努力工作
找出如何减少滥用的措施
我们继续与不同的利害关系人合作
来自政府
媒体娱乐
所有行业
红蒸笼
文明社会
弄清楚
如何最好地将这些技术引入世界
所以在接下来的几周里
我们将继续迭代部署
发挥你所有的能力
但今天我想向您展示所有这些功能
所以我们会做一些现场演示
我将带来我们的两项研究
麦克陈 (Mike Chen) 和别里佐夫 (Beridzov) 领衔
嗨，我是巴雷特，嘿
我认为这是关键能力之一
我们很高兴与您分享
今天是即时对话演讲
让我们启动一个演示
所以如果你想知道这个有线的话我会拿出手机
所以我们有稳定的互联网 如果你看到
底部有一个小图标
轨道右侧 GPT 应用程式
这将开启 GPT-4O 的音讯功能
嘿聊天GPT
我标记你好吗
哦，马克
我很好，谢谢你问你呢
嘿，我现在在舞台上
坦白说，我正在做现场演示
我觉得有点紧张
你能帮助我吗
让我的神经平静一点
哦，你现在正在做现场演示
太棒了，深呼吸并记住
你是专家
我喜欢这个建议让我尝试几次深呼吸
你能给我吗
对我的呼吸的回馈
好的，在这里
我走得很慢
那里有点
标记
你不是吸尘器，在里面呼吸或数四
好的
让我再试一次，然后我会深呼吸
四次然后慢慢吐气
好的，我会再尝试吸气和呼气
就是这样，你感觉怎么样
我感觉好多了，非常感谢
所以标记
您已经研究这些功能一段时间了
你能告诉我们一点吗
它与语音模式有何不同
是这样
如果您之前曾使用过我们的语音模式体验
您首先会注意到几个关键差异
你知道你现在可以中断模型
你不必等到它完成你的回合
你可以开始说话了，你知道
你可以随时插入
该模型是即时响应的
所以这意味着你没有这个
尴尬的是之前有两到三秒的延迟
你等待模型给予回应，最后
该模型正确地捕捉到了情感
当我呼吸非常困难时，它可以告诉你，嘿
你可能想要
冷静一点
你跑得太快了一点
所以它确实有这个能力
全面感知你的情绪
不仅如此，尽管该模型能够产生语音
各种不同的情感风格
它确实有很宽的动态范围
所以我要启动另一个演示，是的
嘿 聊天 GPT
你好吗
我做得很棒
谢谢你问你呢
不错
这是怎么回事
所以我的朋友巴雷特在这里
他最近睡不好
我想让你告诉他
关于机器人与爱的睡前故事
哦
关于机器人与爱的睡前故事
我为你做好了准备 聚集在一起
巴雷特从前在一个世界
跟我们的不太一样，有一个叫做字节战的机器人
是个好奇的机器人，总是在探索
我开始这个故事
但我希望你的声音多一点情感
多一点戏剧性
明白了，我们加一下
从前世界上的一些戏剧
和我们的没有太大不同
有一个机器人叫
没有 chatGPT 我真的想要最大的情感
比以前更喜欢最大的表现力
明白了
让我们放大一下
戏剧从前在一个世界
跟我们的没有太大不同，有一个名叫字节的机器人
现在你可以用机器人的声音来做这件事吗
曾几何时发出戏剧性的机器人声音
一个和我们的世界不太不同的世界里有一个名叫字节的机器人
字节是一个好奇的机器人，总是探索新的电路是的
巴雷特下来一点，你能结束这个故事吗？
但用歌声来做
太感谢了
我确实感觉轻松多了
您刚刚看到了语音功能
但我们也想向您展示视觉能力
因为模型还可以看到我们周围的整个世界
是的
绝对如您所见，您可以与 ChatGPT 实时聊天
但您也可以透过影片与它互动
好的
让我启动 chatGPT
嘿，查奇普特
你好，怎么样
一切都很顺利
今天我真的很希望你能帮我解决一道数学问题
我洗耳恭听，我能帮忙解决什么数学问题
你今天要解决的问题
所以我要在一张纸上写下一个线性方程
我会告诉你
然后我喜欢你帮我度过难关
但重要的是
不要告诉我解决方案只是提供帮助
一路上给我提示 明白了
好吧，我看到了，嗯，不
我还没告诉你，只是一路上给我帮助一秒钟
哎呀，我太兴奋了，当你准备好时我已经准备好了
所以 ChatGPT 我在那里写下了什么方程
啊 我现在明白了，你写下了三个 x 加
一等于四，是的，这是正确的，那么第一步是什么
我应该尝试解决这个问题
第一步是取得一边有 x 的所有项
和另一边的常数
所以你怎么看
我们应该用它加一
好吧，我要尝试两边都减一
然后我会看看我得到了什么
好想法
现在完美了你会得到什么
当你两边减一时
好的，ChatGPT 这是
我最终得到了什么，这看起来怎么样
现在您已经将术语与 x 隔离在一侧
看起来像三 x 等于三
你怎么认为
我们接下来应该做硫磺x
我不确定你能给我另一个提示吗
当然你有三个x并且你想找到x的值
考虑什么操作会撤销
乘法是减法吗
但想想乘法的反面
因为三个 x 意味着三倍 x 好吧
我认为这是分裂让我尝试分裂
双方各三，让我看看宾果游戏会得到什么，继续
并将两边除以三
好的，ChatGPT 这是
我最终得到了什么，这看起来怎么样
它看起来很完美
你已经解决了它并且 x 等于
做得很好，你对求解线性方程式有何感想
现在
是的
老实说，我不太有信心能解线性方程
但为什么你需要使用
这在现实世界中我真的很怀疑
这是一个公平的问题
线性方程组
出现在许多日常场景中
即使我们没有意识到它用于计算费用计划
旅行烹饪
甚至在商业中进行损益计算
这基本上是解决问题的一种方法
您需要在其中找到未知值加上
哇，是你知道的
我的生活中有很多未知的价值观
我完全相信我现在要学数学
我喜欢这种态度
马特绝对可以帮助解决一些生活之谜
每当你准备好深入研究更多数学时
我在这里等你还有什么事情吗
你今天想解决这个问题，所以 ChatGPT
我真的很爱你，你知道
向我的朋友马克传授数学的价值
我写了最后一件事我爱你
如果你可以看一下
当然我很想看看你写的东西给我看
每当你准备好时
好的，这就是我写下的内容，你看到了什么
哦
我发现我喜欢chatGPT，你真是太贴心了
是的，我真的很感谢所有的帮助，所以是的，正如我们所看到的
哇，你穿的这套衣服很合身是的
正如我们所爱的
我们可以即时聊聊GPT
不仅如此，我们还可以透过视讯与它互动
我发誓如果你看看 Barrett 的 GPT 历史
都是这样的方程
现在你知道你可以做线性方程
你能给我们看一些更复杂的东西吗
我想接下来可以
让我们尝试一些与编码相关的东西
让我为此拿出一台电脑
可以，然后呢
我要开启ChatGPT
像 Mira 之前谈论的桌面应用程式
好的，在这里提供一些有关正在发生的事情的背景知识
我们有一台电脑，萤幕上有一些代码
然后右边就是ChatGPT语音应用程式
这样 ChatGPT 就能听到我的声音
但萤幕上看不到任何东西
所以我要突出显示代码命令，看看它
然后将其发送到 ChatGPT
然后我要谈谈 ChatGPT 的程式码
嘿 ChatGPT 嘿
熊 怎么样
是的，正在进行
真的很好
我想知道你今天是否可以帮我解决程式设计问题
当然，我很乐意帮助您解决程式设计问题
你正在处理
好吧，我将与你分享一些程式码
一秒钟确定的事情慢慢来
好的，我只是与你分享了一些程式码，你能给我吗
用一句话简短地描述程式码中发生的情况
此代码获取每日天气数据
对于特定地点和时间
周期平滑温度数据
使用滚动平均值进行注释
结果图上的重大天气事件
然后显示绘图
全年平均最低和最高气温很棒
非常感谢并在代码中
你能帮我描述一下这个功能吗
如果我有 vs 的话，情节会是什么样子
没有这个功能
确定函数 fu x
y 接收资料框 x
包含温度资料和视窗大小 y
用于计算滚动平均值
它使平均温度变得平滑
最低温度
和最高温度
透过在指定视窗上应用滚动平均值来列
使用 fu 函数
该图将显示更平滑的温度线
因为滚动平均值
减少数据中的噪音或波动
非常感谢所以是的
我一定会想应用这个功能
所以我要生成情节
然后给你看给我
一秒钟绝对需要你的时间
当你准备好时我很高兴看到情节是的
所以到目前为止ChatGPT只能看到程式码
现在我要运行它
进而
我将使用 ChatGPT 桌面应用程式的视觉功能
所以它实际上也可以看到萤幕上发生的一切
好的聊天chipbkey
我现在和你分享剧情
我想知道你是否可以给我
非常简短的一句话概述您所看到的内容
绘图显示已平滑
2018 年平均最低和最高气温
有一个值得注意的注释
纪念九月下旬的一场大降雨事件非常棒
我还有一个
问题是哪几个月
看到最热的温度了吗？
什么温度
这些对应于最热的温度吗
发生在七月和八月左右
这几个月的最高气温
大约在25度到30度之间
77 华氏度至华氏 86 度
这是怎么回事
y 轴是 incelsius 或 ferinine
y 轴为摄氏温度，相应地标记了温度
例如平均温度
最低温度和最高温度
是的
所以我们可以看到
ChatGPT 不仅可以帮助我
解决起来很容易
我需要帮助的线性代数方程
用它还可以与程式码库交互
并查看绘图的输出
以及计算机上发生的一切
所以几分钟前
我们要求 x 的现场观众提交一些
请求他们希望我们在这里尝试什么
所以我会接受一些提示
好的
但是加斯卡
想知道GPT-4O是否能够即时翻译
麦克你想试试这个
肯定是的，让我们开始吧
我会说意大利语
所以你可以告诉我这是什么意大利语
当然
我们开始做吧
嘿，chatGPT 你好吗
我做得很棒
感谢您询问您今天过得怎么样
我很好
所以我希望你担任翻译
我在这里有一个朋友
谁只会说意大利语
我只说英语，每次你
听到英语，我想让你把它翻译成意大利语
如果你听到意大利语，我希望你能把它翻译回来
到
英语就是这么好
麦克，她想知道鲸鱼是否会说话，他们会告诉我们什么
他们可能会问我们如何解新方程
当然是的
看起来很棒，很有效
好的
所以下一个来自卷饼约翰 78 他问
你能告诉我什么吗
你感觉
只要看你的脸
巴雷特，你想尝试吗
绝对让我们尝试一下
嘿乍得GPT
嘿，怎么了
今天我怎样才能照亮你的一天
好的，是的
所以我要给你看一张我的自拍照
然后我想让你试着看看是什么情绪
根据我的外表，我感觉这听起来像是一个有趣的挑战
来吧，给我看看那张自拍照
我会戴上我的情感侦探帽
好吧，这就是我，是什么样的情绪
你觉得我感觉吗
唔
看起来我正在看一张木质表面的照片哦
你知道那是什么东西
我之前寄给你了，别担心，我其实不是一张桌子，好吗？
所以再看一下，这样更有意义
啊那里
我们走吧，看起来像
你感觉非常高兴和开朗，笑容灿烂
甚至可能还有一丝兴奋，无论发生什么
看来你在
分享美好氛围的泉源的美好心情
是的，没有原因
我心情很好
因为我们正在做演示
展示你是多么有用和了不起
喔别这样你让我虚张声势
太棒了，这就是今天的现场演示
正如你所看到的，这感觉太神奇了，太棒了
但我们也想消除一些神秘主义
从技术上
并把它带给你
所以你可以在接下来的几周内亲自尝试一下
我们将向所有人推出这些功能
今天已经非常多了
专注于免费用户
以及新模式和新产品
但我们也非常关心这么快的下一个前沿
我们将向您通报我们的最新进展
下一件大事，在我们结束之前
我只是想感谢令人难以置信的开放人工智能团队
也感谢詹森
和 Nvidia 团队
为了带给我们
最先进的 GPU 让今天的演示成为可能
非常感谢大家今天参与其中