行行查

行行查

行业研究数据库

行业研究问答

无人驾驶行业研究:OpenVLA模型架构

  • 无人驾驶

OpenVLA模型架构展示了一种结合视觉、语言和动作的开源模型设计。该模型的核心组件包括Llama 2 7B,这是一个大型语言模型,负责理解和生成文本。在输入阶段,模型接收图像(如示例中的“将茄子放入碗中”场景)和相应的语言指令。

具体流程如下:首先,通过DinoV2和SigLIP两个模块对输入图像进行处理,这两个模块分别负责提取图像的视觉特征和理解图像与文本之间的关联。接着,这些视觉特征通过MLP Projector(多层感知机投影器)进行转换,以便与语言模型兼容。

然后,Llama Tokenizer将语言指令转化为模型可以理解的token形式,并与经过处理的视觉信息一起输入到Llama 2 7B模型中。Llama 2 7B模型整合这些信息,生成相应的动作指令。

最后,Action De-Tokenizer将模型输出的token转化为具体的动作参数(如Δx、Δθ、ΔGrip),指导机器人执行具体任务,例如调整位置、角度和抓取力度等。这一系列步骤实现了从视觉和语言输入到机器人动作输出的完整闭环,展示了OpenVLA在视觉-语言-动作领域的创新应用。

关联报告

2020年中国无人驾驶行业研究报告
2020年中国无人驾驶行业研究报告
24页
无人驾驶即无人驾驶汽车,是智能汽车的一种,也称为轮式移动机器人,主要依靠车内的以计算机系统为主的智能驾驶仪来实现无人驾驶的目的。无人驾驶依靠人工智能 、视觉计算 、雷达 、监控装置 和 全球定位系统 协同合作,让电脑可以在没有任何人类主动的操作下,自动安全地操作机动车辆。
2020-12
1909
查看报告
2022年中国自动驾驶行业研究报告
2022年中国自动驾驶行业研究报告
53页
自动驾驶是一种机汽车驾驶系统,它通过 人工智能、视觉计算、雷达、监控装置 和 全球定位系统 协同合作,让电脑可以在没有人类主动操作的情况下,自动安全地操作机动车辆。自动驾驶汽车是技术的载体,也是智能汽车的一种,又称轮式移动机器人,主要依靠车内的以计算机系统为主的智能驾驶仪来实现自动驾驶的目的。在自动驾驶等级划分上,SAE(国际汽车工程师学会)将自动驾驶技术分为L0-L5,共6个等级。目前部分车企已经推出了具有L2功能的车型,L1和L2仍然需要驾驶员驾驶,属于ADAS(高级辅助驾驶系统)范畴。而L3将是一个风水岭,从L3开始,汽车才真正进入到自动驾驶范畴,L3指在特定场景下,系统可以实现对车辆的完全接管,当驾驶员在系统失效时,驾驶员取得驾驶权。
2022-09
3131
查看报告
2025年中国网约车行业研究报告
2025年中国网约车行业研究报告
34页
网约车,即网络预约出租汽车经营服务的简称,是指以互联网技术为依托构建服务平台,整合供需信息,使用符合条件的车辆和驾驶员,提供非巡游的预约出租汽车服务的经营活动。用户可以通过手机应用软件选择车型和司机,快速叫车并享受出行服务。相较于传统出租车,网约车具有价格透明、叫车方便、服务质量可控等优势,因此在全球范围内迅速流行。
2025-02
1295
查看报告
2025年中国自动驾驶行业研究报告
2025年中国自动驾驶行业研究报告
47页
自动驾驶是指通过人工智能、传感器和其他技术实现车辆在没有人为干预的情况下自主行驶的能力。自动驾驶汽车依靠人工智能、视觉计算、雷达、监控装置和全球定位系统协同合作,让电脑可以在没有任何人类主动的操作下,自动安全地操作机动车辆。
2026-01
1185
查看报告
2026年无人矿卡行业研究报告
2026年无人矿卡行业研究报告
25页
无人矿卡是智慧矿山工业体系下的重载移动作业终端。不同于开放道路自动驾驶,矿卡摒弃乘员舒适性冗余,采用去驾驶室化与高刚性重载底盘,依托矿规级传感与线控技术,在无车道线、高粉尘的极端恶劣工况下,实现全天候装运卸连续运转与车铲排工业级深度协同。
2026-09
1072
查看报告
2026年挖掘机行业研究报告
2026年挖掘机行业研究报告
22页
挖掘机是以液压系统为主要驱动方式,通过动臂、斗杆及铲斗等工作装置完成土石方挖掘、装载和物料搬运的工程机械,主要分为履带式和轮式。其核心价值在于替代高强度人工作业,提高施工效率与作业精度,广泛应用于基础设施建设、房地产施工、矿山开采及市政工程等领域,是土石方施工的核心装备。
2026-10
1036
查看报告
标题 时间 页数 目录 下载
智启全球出行生态与无人驾驶新局 2026-04-09 28 下载
交通运输行业深度研究:电车和无人驾驶,公路运费或降50% 2026-04-21 22 下载
2026中国无人驾驶出租车上路:迈向规模化商业化研究报告 2026-04-24 26 下载
泰凯英-920020.BJ-国内工程子午线轮胎领先者,场景化研发厚筑差异化壁垒,受益于新能源化和无人驾驶 2026-05-30 26 下载
希迪智驾(03881.HK)深耕商用车智能驾驶,开拓无人驾驶矿卡新蓝海 2026-06-04 24 下载
北交所行业主题报告:智能矿山和无人驾驶催生轮胎革命,掘金千亿智能矿卡后市场 2026-06-11 30 下载
泰凯英-920020.BJ-矿山建筑轮胎领军企业,受益于矿业增长、智能矿山和无人驾驶 2026-06-28 29 下载
2026智能矿山暨无人驾驶行业蓝皮书 2026-07-03 71 下载
智驾行业之三:矿区无人驾驶-封闭场景自动驾驶最优商业化赛道 2026-08-17 37 下载
北交所科技成长产业跟踪第八十九期:25台无人驾驶接驳车将亮相2026数博会,关注北交所智能驾驶产业链标的 2026-08-24 18 下载

推荐阅读

行业图谱