o1推理将用于图像意会，OpenAI在伦敦捅了诞生者窝

西风 发自 凹非寺

量子位 | 公众号 QbitAI

OpenAI在Cursor里用o1-mini现场抓应用，两分钟，径直胁制无东说念主机遨游。

引得台下不雅众传来阵阵惊呼：

如斯操作，刚刚发生在OpenAI伦敦诞生者日行为上。算作OpenAI的“科技春晚”，确凿好不滋扰，现场挤满了东说念主从众。

OpenAI居品部肃穆东说念主Olivier Godement还剧透了一波o1新功能——

包含功能调用、诞生者音讯、流媒体、结构化输出、图像意会5个方面。

奥特曼在之后的问答样式暗示不想剧透，但知道“图像模子将很快迎来权贵提高”。他提到，复制现存模子并不难，而让他为OpenAI感到自爱的是，他们遥远在创造新的唐突。

网友们听到这里更感奋了：

不细目他指的是图像生成也曾图像分析，也曾两者皆有。但瞎想一下用图像token进行推理。若是你面对一个视觉问题，或者不错徐徐地把问题可视化。我咫尺还莫得在其它模子中确实看到过肖似的功能。

OpenAI要在图像方面发力其实也早有迹可循。

不久前，两位清华学友路橙、宋飏就在OpenAI发布最新图像生成参议。

他们简化了一致性模子，仅用两步采样，就能使生成质料与扩散模子相失色，速率是扩散模子的50倍。

此外，对于OpenAI所说的图像模子，还有东说念主揣测不会是前几天登顶文生图竞技场的爆火巧妙小熊猫（red_panda）吧？

但这种说法很快就被诡辩了。

小熊猫背后团队Recraft AI已发推文认领，这是他们的新模子recraft-v3。

总之，o1此次算是吊足了大伙儿的胃口，网友喊话飞速发4.5o和5-preview：

固然很棒，但咫尺仍莫得一款编码能打Sonnet的模子。

奥特曼还说了啥

在现场，奥特曼还被问到OpenAI的发展主见是更像o1这么的模子，也曾会有更大边界的模子？

他暗示想在各方面皆变得更好，但推理模子的发展对OpenAI尤其紧迫。

我觉得推理才调将解锁咱们多年来守望达成的许多事情，比如在新科学边界作念出孝顺，或匡助编写相等复杂的代码，这些皆会带来权贵的鼓吹。是以，环球应该期待o系列模子会快速纠正，这对咱们来说具有紧迫的计谋意旨。

在指摘到“什么是Agent”、“它们不错作念什么”，奥特曼暗示Agent是一个不错遴选经久奉行任务，并在奉行流程中只需很少监督的东西。

奥特曼觉得环球最常举的一个例子是不错让Agent襄理预订餐厅，它不错用在线餐厅预订平台OpenTable或者是径直打电话到餐厅。

这确乎能为东说念主们减少一些使命，但更真谛的事是能创造一个寰宇，在那边不错作念一些东说念主类无法或不肯作念的事。

比如与其让Agent打电话给餐厅预订座位，不如让Agent打给300家，找到最佳吃或是最有特质的那一家，它不错并行处理多数任务。

Agent成为一个相等灵巧的高等共事，你不错和它在格式上相助，也不错让它独处去作念两天致使两周的任务，作念好后带着后果转头与你交流。

接下来，奥特曼还被问到最垂青的竞争敌手是哪个，他提到的第一个即是Cursor AI，但随后又补充说念：

我的真谛是，我咫尺有点尊敬这个边界里的每个东说念主。我觉得统共这个词边界正在涌现出相等了不得的使命，况兼有许多才华横溢、相等英勇的东说念主。我不是想侧目问题，而是想说我不错指出许多相等犀利的东说念主在作念相等出色的使命。

要知说念，昨天微软刚刚秘书了GitHub Copilot接入Claude和Gemini。

奥特曼转头给了微软竞争敌手Cursor AI一个点赞……

此外，奥特曼还被问到最令东说念主感奋的AI应用场景是什么，他再次Q到Agent：

环球存眷的点各不疏浚，有许多不同的方式不错经管这个问题，但我但愿能有一种AI能够意会你统共这个词东说念主生。它不一定需行径有无穷的高下文，但能够有一个AI Agent，某种进度上知说念对于你的一切，能够考查你统共的数据之类的东西。

奥特曼还觉得大模子的大多数错误将在改日几代中徐徐澌灭。

不要构建一个填补舛讹或绕过模子弱势的器具，而是构建一个能运用改日上风的模子。

One More Thing

除了预报，OpenAI还有最新动作——

开源了一个评估话语模子复兴粗略、事实性问题才调的新基准，名为SimpleQA。

论文共统一作是旧年在X上约战教唆词决斗引得大伙儿纷繁围不雅的Jason Wei（想维链开山论文一作）和Karina Nguyen（教唆词决斗那会儿还在Anthropic，现已是OpenAI工程师）。

迥殊想的是，o1-mini和o1-preview在此基准上皆不足格，况兼两者出入还很大：

参考流畅：[1]https://twitter.com/idonotwritecode/status/1851565982889713962[2]https://twitter.com/stevenheidel/status/1851574257819562195[3]https://x.com/kimmonismus/status/1851708364503552312[4]https://twitter.com/OpenAI/status/1851680760539025639[5]https://twitter.com/AymericRoucher/status/1851657127410151461[6]https://www.youtube.com/watch?v=VTeRZqUHi4E[7]https://x.com/caromcc_/status/1851570587287601237

— 完 —

量子位 QbitAI · 头条号签约

存眷咱们，第一手艺获知前沿科技动态