马斯克Grok1.5V版本秀肌肉,展示“理解物理世界的能力”

首页 > 科技

马斯克Grok1.5V版本秀肌肉,展示“理解物理世界的能力”

来源:天气早知道 发布时间:2024-04-14 11:54

马斯克Grok1.5V版本秀肌肉,展示“理解物理世界的能力”

北京时间4月13日上午,X平台的xAI官方账号发布了“Grok-1.5 Vison”版本的预告,并同时宣告,公司正在湾区招募设计师、工程师、产品、数据、架构和标注师等职位。马斯克也呼吁:“请加入xAI公司!”

xAI的招聘页面:构建人工智能,推动人类进步 [1]

从预告页面的介绍和秀肌肉的七个例子能看出来,Grok-1.5V版本主打多模态视觉信息处理,对标GPT-4,强调“理解物理世界的能力”。

比较有趣的是,兵马未动,粮草先行,版本还没发布,xAI就公开了一套理解物理世界的基准测试题集“RealWorldQA”。对这个题集有强烈兴趣的读者也可以直接跳到本文第二部分。

以下第一部分为xAI官方的介绍,瓦砾粗译。[2]

一 官方介绍

介绍Grok-1.5V,我们的第一代多模态模型。除了强大的文本功能外,Grok现在还能处理各种视觉信息,包括文档、框图、图表和照片。Grok-1.5V即将向我们的早期测试者和现有的Grok用户推出。

能力

从多学科推理到理解文档、科学框图、图表、截图和照片,Grok-1.5V在多个领域都能与现有的前沿多模态模型相媲美。Grok在理解物理世界方面的能力尤其令我们兴奋。在我们新推出的RealWorldQA基准测试中,Grok的表现优于同类产品。对于下面所有的数据集,我们都是在没有思维链提示的情况下,对Grok进行了评估。

例子1 从框图生成代码

用户:你能把这个转化为Python代码吗?

Grok:当然!你提供的流程图描述了一个简单的猜谜游戏:计算机生成一个随机数,用户必须猜出它。下面是表示流程图中逻辑的Python代码:

这段代码将运行流程图中描述的猜谜游戏。用户将被提示输入他们的猜测,直到他们猜出正确的数字为止。

例子2 计算卡路里

用户:5片这个东西含有多少卡路里?

Grok:如果一份是3片,含有60卡路里,那么5片大约含有100卡路里。计算方法是首先确定每片的热量:60卡路里 / 3片=每片20卡路里。然后,将每片的卡路里乘以片数:每片20卡路里 * 5片 = 100卡路里。

例子3 从手绘到睡前故事

用户:这是我儿子画的,你能根据他的画讲一个睡前小故事吗?

上一篇:腾讯云4月8日... 下一篇:Ai Musician...
猜你喜欢
热门阅读
同类推荐