发布日期:2024-11-10 浏览次数:
·Meta Connect2024发布了一系列新的硬件AI产品,包括新款Quest 3S VR头显设备、AR眼镜、新的Llama3.2大模型等产品,新款Quest 3S VR头显设备只卖299.99美元,首款AR眼镜生产成本约7万人民币,这可能也是史上最贵AR眼镜。
北京时间9月26日凌晨1点左右,一年一度的Meta Connect2024于加利福尼亚州门洛帕克正式召开。
大会现场,马克·扎克伯格身穿黑色长款T袖,上面用拉丁文写着“扎克伯格或一无所有。”
在过去一年,Meta大力推动将AI功能整合到其拥有的平台中,一年时间里,Meta并未放慢脚步。此次大会,马克·扎克伯格一口气发布了一系列新的硬件AI产品,包括新款Quest3S VR头显设备、MetaAI 、新的Llama3.2大模型以及新款Orion增强现实眼镜等新品。
扎克伯格称这款全新的VR眼镜只卖2106.77元人民币(299.99美元),欧博体育注册比去年同期发布的Quest3足足便宜了200美元,而且相比Quest 3并没有减配太多。
Quest3S 提供与Quest3相同的混合现实功能和性能,它甚至拥有相同的Qualcomm SnapdragonXR2 Gen 2芯片,这意味着用户可以在任一设备上玩所有相同的游戏和体验。Quest3S 使用与Quest3相同的TouchPlus控制器,而且Quest 3S 的电池续航时间实际上比Quest 3 更长,对于这点,Meta表示3S的平均使用时间为2.5 小时,而Quest3的平均使用时间为2.2小时。
有一些不同的地方在于,Quest3S比Quest 3从外观上稍大一些。它的前置传感器排列成两个三角形,而Quest3则排列成三个药丸形切口。它没有Quest3的深度传感器。
也许最值得注意的是,3S使用的显示器分辨率低于Quest 3,与旧款Quest 2相同的1832 x1920 单眼分辨率,而且Quest3S的视野也更窄。
Quest3S将于9月26日开放预购,该头戴设备将于10月15日上市,Meta 还将与10月22日发布的《蝙蝠侠:阿卡姆暗影》捆绑销售。
此次发布会上,Meta 宣布了 “全球最先进的 AR 眼镜”Orion。
发布会上,作为扎克伯格口中“世界上最好的AR眼镜”,在一条官方宣传片子中,Meta甚至还邀请了黄仁勋率先体验。
MetaAI和Orion是多模态的,能够理解你所看到的一切配备眼部、手部和神经追踪视频通话时,朋友会变成栩栩如生的虚拟形象,出现在你身边新的AR 眼镜,将AR和AI融入日常生活。
Orion是Meta首款“全功能”原型AR眼镜,Orion采用分体式设计,采用波导方案设计,拥有厚重黑色边框,重98g。该AR眼镜能与Meta自研的肌电手环相适配,拥有手部跟踪、眼部跟踪、头部追踪等多种交互方式。现阶段的Orion 眼镜仅用作演示和内部开发套件,大约仅生产1000副,并不对外正式开售。
据Meta介绍,每副眼镜的生产成本大约1万美元(约7万元人民币),这可能也是史上最贵AR眼镜。
此次发布会上,扎克伯格还介绍了其多模态AI模型LLAMA 3.2的进展。
Llama3.2包括两个视觉模型,具有11B参数和90B参数两个版本,和两个轻量级纯文本端侧模型,1B和3B两个大小。较小的模型旨在在高通、联发科和其他Arm硬件上运行,Meta显然希望看到它们在移动设备上使用。
在Meta给出的测试结果中,Llama3.2的90B版本的图形推理能力在多项测试中领先GPT4o-mini。而11B版本则全面超越Claude 3的小版本Haiku版本。
据了解,Llama3.2可根据可用图表进行推理并快速提供答案,它还能使用地图进行推理并帮助回答问题,例如地图上标记的特定路径的距离;也能通过从图像中提取细节、理解场景,然后制作一两句话作为图像字幕来帮助讲述故事。
扎克伯格表示,Llama3.2的端侧版本1B 和3B将是最强的端侧AI。
它当前能接受文字输入和输出,支持最大128K 令牌的上下文长度。这两个端侧模型是通过对Llama3.18B 和70B 的剪枝(修剪掉大模型中利用率较低的参数)和蒸馏(利用大模型做教师,小模型学习核心参数的训练模式)训练而成。在微调训练过程中还加入了由Llama3.1405B提供的合成数据,以优化其在摘要、重写、指令遵循、语言推理和工具使用等多项能力上的表现。
Meta称,新模型 Llama3.2可以让开发人员创建更先进的AI应用程序,例如提供实时视频理解的增强现实应用程序、基于内容对图像进行排序的视觉搜索引擎或为您总结长段文本的文档分析。
Meta 表示,开发人员可以轻松启动和运行新模型。Meta 生成AI 副总裁Ahmad Al-Dahle 在接受TheVerge采访时表示,开发人员只需添加这种“新的多模态性,并能够显示Llama 图像并使其进行交流”,即可完成。
借助Llama 3.2,Meta AI推出全新多模态功能,支持语音交互,有多种音色选项(包括一些名人的声音)。
Meta AI还支持语音交互,用户可以在Messenger、Instagram等Meta应用上,用语音直接和Meta AI交流、吩咐他做事,甚至可以打断它。也可以选择更多的名人语音,在手机里体验和名人聊天的感觉。
扎克伯格对Meta新的AI语音模式感到兴奋。他说,语音将成为“我们与人工智能互动最常见方式之一。”其中一个特色AI声音是演员Awkwafina的声音。扎克伯格问 AI Awkwafina“现场演示是否有风险”,AI 给出了听起来很自然的回答。(是的,这很危险,而且可能会让人尴尬。)
此外,欧博体育注册Meta宣布了他们今年最热门的二代AI眼镜——和眼镜制造商雷朋(Ray-Ban)一起推出的新款雷朋智能眼镜。
这款AI眼镜,目前被称为人工智能领域最畅销的硬件产品之一,预计今年的出货量将超过200万台,订单还在持续增加中。
雷朋眼镜重点升级了多项AI功能,使得对话变得更自然,能够记住你看到的事物,还可以设置提醒;支持多模态,并且现在能够扫描 QR 码;能通过视频实时看到你所做的事情;实时语言翻译。
雷朋智能眼镜可使用“be my eyes”应用,将视力有缺陷的人与视力正常的志愿者相连,以便志愿者能借助眼镜和POV视频通话,轻松看到视力残障人士的视角并告知周围环境,或者在日常任务中提供实时、免提的帮助,例如调节恒温器或分类和阅读邮件。
在接受The Verge采访时,他表示,MetaAI 正在成为眼镜越来越突出的功能,“我们虽然不会扔掉手机,但未来我们会慢慢地用眼镜做更多的事情,更多地把手机放在口袋里。”