近日,谷歌和柏林工业大学的团队重磅推出了史上最大的视觉语言模型——PaLM-E。通过PaLM-540B语言模型与ViT-22B视觉Transformer模型相结合,PaLM-E参数量高达5620亿(GPT-3的参数量为1750亿)。
作为一种多模态具身视觉语言模型(VLM),PaLM-E不仅可以理解图像,还能理解、生成语言,可以执行各种复杂的机器人指令而无需重新训练。谷歌研究人员还观察到一些有趣的效果,这些效果显然来自PaLM-E的核心——大型语言模型。PaLM-E表现出了“正迁移”能力,即它可以将从一项任务中学到的知识和技能迁移到另一项任务中,从而与单任务机器人模型相比具有“显着更高的性能”。
谷歌研究人员计划探索PaLM-E在现实世界场景中的更多应用,例如家庭自动化或工业机器人。他们希望PaLM-E能够激发更多关于多模态推理和具身AI的研究。
文章来源于:ECCN 原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
相关文章

恩智浦与NVIDIA合作,将TAO工具套件集成到恩智浦边缘设备,加速人工智能部署(2024-03-21)
TAO工具套件API直接集成到其人工智能产品(eIQ机器学习开发环境)中的半导体供应商
●将NVIDIA经过训练的人工智能模型部署在恩智浦边缘处理设备中
●简化在边缘部署经过训练的人工智能模型......

恩智浦与NVIDIA合作,将TAO工具套件集成到恩智浦边缘设备,加速人工智能部署(2024-03-21)
半导体供应商
将NVIDIA经过训练的人工智能模型部署在恩智浦边缘处理设备中
简化在边缘部署经过训练的人工智能模型的过程,加速人工智能的开发
恩智浦半导体(NXP Semiconductors N.V.,纳斯......

恩智浦与NVIDIA合作,将TAO工具套件集成到恩智浦边缘设备,加速人工智能部署(2024-03-21 11:21)
半导体供应商 • 将NVIDIA经过训练的人工智能模型部署在恩智浦边缘处理设备中• 简化在边缘部署经过训练的人工智能模型的过程,加速人工智能的开发
恩智浦半导体(NXP Semiconductors......

深圳出台18条措施支持人工智能产业发展(2024-12-19)
产业发展环境等4个方面提出18条具体举措,支持人工智能产业。
其中,对于符合条件的企业、项目与活动,深圳将给予资助,最高资助达3000万元。此外,深圳还将通过发放“训力券”、“语料券”、“模型券”等方......

人工智能安全关键型系统中的验证和确认(2024-02-29)
法规的行政命令,强调稳健的验证和确认(V&V)过程对基于人工智能的系统至关重要。该指令要求人工智能公司报告和测试特定模型,以确保人工智能......

对自动驾驶的认识七(2024-06-01)
对自动驾驶的认识七;本文引用地址:七、验证SDL人工智能小模型的意义
被尊为人工智能教父的发明深度学习大模型的杰弗里.辛顿Jeoffrey.Hinton教授,在发现深度学习存在不可解释、有黑......

对自动驾驶的认识(七)(2024-07-30)
对自动驾驶的认识(七);七、验证SDL人工智能小模型的意义
被尊为人工智能教父的发明深度学习大模型的杰弗里.辛顿Jeoffrey.Hinton教授,在发现深度学习存在不可解释、有黑......

人工智能安全关键型系统中的验证和确认(2024-02-29)
白宫也颁布了一项关于法规的行政命令,强调稳健的(V&V)过程对基于人工智能的系统至关重要。该指令要求人工智能公司报告和测试特定模型,以确保人工智能系统按预期运行并满足指定要求。本文引用地址:
人工智能法规和 V&V......

人工智能安全关键型系统中的验证和确认(2024-03-01)
法规的行政命令,强调稳健的验证和确认(V&V)过程对基于人工智能的系统至关重要。该指令要求人工智能公司报告和测试特定模型,以确保人工智能......

人工智能安全关键型系统中的验证和确认(2024-02-29)
法规的行政命令,强调稳健的验证和确认(V&V)过程对基于人工智能的系统至关重要。该指令要求人工智能公司报告和测试特定模型,以确保人工智能......