news 2026/4/23 12:45:58

自动驾驶—CARLA仿真(12)client_bounding_boxes demo

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
自动驾驶—CARLA仿真(12)client_bounding_boxes demo

📌测试用例

PythonAPI/examples/client_bounding_boxes.py

客户端侧 3D 边界框(Client-Side Bounding Boxes)可视化示例,用于:

  1. 手动驾驶一辆主车(WASD 控制)
  2. 实时计算并绘制周围车辆的 3D 边界框
  3. 所有边界框计算在客户端(Python)完成,不依赖 CARLA 服务端


🔑 主要模块解析

1.ClientSideBoundingBoxes类:3D 边界框核心引擎

这是脚本的核心技术模块,完全在客户端实现 3D→2D 投影。

核心方法:
  • get_bounding_box(vehicle, camera)

    • 获取车辆 8 个 3D 顶点的世界坐标
    • 通过世界→相机坐标变换相机内参投影归一化设备坐标
    • 返回 8 个 2D 像素点 + 深度值
  • _create_bb_points(vehicle)

    • 根据vehicle.bounding_box.extent生成局部坐标系下的 8 个顶点
    • 顺序:底面 4 点(顺时针)+ 顶面 4 点(对应底面)
  • 坐标变换链
    车辆局部坐标世界坐标相机坐标2D 像素

  • draw_bounding_boxes()

    • 使用pygame.draw.line绘制 12 条边(底面 4 + 顶面 4 + 竖边 4)
    • 颜色固定为BB_COLOR = (248, 64, 24)(橙红色)

关键优势
不依赖 CARLA 的实例分割传感器,仅需 RGB 摄像头 + 车辆列表即可生成 3D 框。


2.BasicSynchronousClient类:主控制循环

管理仿真、渲染和用户输入。

核心组件:
  • 同步模式

    self.set_synchronous_mode(True)
    • 确保每帧精确控制,避免传感器数据错位
  • 自定义摄像头

    • 分辨率:960x540(1920/2 x 1080/2)
    • FOV:90°
    • 位置:车后方 5.5 米,高度 2.8 米,俯角 -15°(第三人称视角)
  • 手动控制逻辑

    按键功能
    W前进(throttle=1, reverse=False)
    S倒车(throttle=1, reverse=True)
    A/D左/右转向(±0.05 增量)
    Space手刹
  • 图像同步机制

    self.capture=True# 请求下一帧# 回调中: if self.capture: self.image = img; self.capture = False
    • 避免多线程竞争,确保渲染与控制同步

3. **坐标系处理

脚本完整实现了CARLA 坐标系到标准计算机视觉坐标系的转换

步骤变换
1. 车辆局部坐标(x,y,z)(CARLA 标准)
2. 世界坐标通过vehicle.get_transform()
3. 相机坐标通过camera.get_transform().get_inverse_matrix()
4.CV 坐标系(x,y,z) → (y, -z, x)(关键!)
5. 2D 投影K * [y, -z, x]^T

💡 注释中的cords_y_minus_z_x正是这一步转换。


4.相机内参校准
calibration=np.identity(3)calibration[0,2]=VIEW_WIDTH/2.0# cxcalibration[1,2]=VIEW_HEIGHT/2.0# cycalibration[0,0]=calibration[1,1]=VIEW_WIDTH/(2.0*tan(FOV/2))# fx=fyself.camera.calibration=calibration
  • 手动构建3x3 相机内参矩阵 K
  • 用于get_bounding_box()中的 3D→2D 投影

🎯 与服务端方案对比

特性客户端方案(本脚本)服务端方案(instance_segmentation)
依赖仅需 RGB 摄像头 + 车辆列表需要 instance_segmentation 传感器
精度基于车辆真实 bounding_box基于像素分割,可能有锯齿
性能CPU 计算投影(Python)GPU 渲染分割图

⚠️ 注意事项

  1. 仅显示其他车辆

    • vehicles = self.world.get_actors().filter('vehicle.*')包含所有车
    • 但未过滤主车,主车自身也会显示边界框(可通过if vehicle.id != self.car.id过滤)
  2. 深度过滤

    bounding_boxes=[bbforbbinbounding_boxesifall(bb[:,2]>0)]
    • 移除相机后方的物体(深度 ≤ 0)
  3. 坐标系假设

    • 假设车辆 bounding_box 中心在(0,0,0)(CARLA 默认)
    • 若车辆模型偏移,需调整_vehicle_to_world

✅ 总结

该脚本是 CARLA客户端 3D 感知的经典实现,展示了:

  1. 如何从车辆物理属性(bounding_box)生成 3D 顶点
  2. 如何实现完整的 3D→2D 投影管线
  3. 如何在纯 Python 客户端实现 3D 边界框可视化

它是学习自动驾驶 3D 目标检测基础的绝佳起点,尤其适合理解坐标变换、相机模型、投影几何等核心概念。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/23 7:50:41

5倍性能提升!Rerun海量点云实时渲染优化完全指南

5倍性能提升!Rerun海量点云实时渲染优化完全指南 【免费下载链接】rerun Visualize streams of multimodal data. Fast, easy to use, and simple to integrate. Built in Rust using egui. 项目地址: https://gitcode.com/GitHub_Trending/re/rerun 在处理自…

作者头像 李华
网站建设 2026/4/23 7:52:13

Dify平台版本发布机制及其在生产环境的应用

Dify平台版本发布机制及其在生产环境的应用 如今,企业对大语言模型(LLM)的期待早已超越“能说会道”的初级阶段——他们真正关心的是:如何让AI系统稳定、可控、可追溯地运行在核心业务中? 这个问题在智能客服、知识问答…

作者头像 李华
网站建设 2026/4/23 7:52:11

LUT调色包下载网站运营启示:结合Linly-Talker做AI内容营销

LUT调色包下载网站运营启示:结合Linly-Talker做AI内容营销 在数字内容创作门槛不断降低的今天,视频后期处理已成为创作者日常流程中不可或缺的一环。而LUT(Look-Up Table)调色预设,作为提升画面质感的“快捷键”&#…

作者头像 李华
网站建设 2026/4/23 7:54:09

如何在本地部署PaddlePaddle并连接云端GPU算力资源

如何在本地部署PaddlePaddle并连接云端GPU算力资源 在如今深度学习项目动辄需要数十小时训练时间的背景下,一个常见的困境摆在开发者面前:手头的笔记本跑不动ResNet,本地实验室的小型服务器又赶不上模型迭代的速度。更别提那些依赖中文语境的…

作者头像 李华
网站建设 2026/4/23 7:51:17

Bootstrap 5.3 轻量化实战:从臃肿框架到精准组件的性能跃升

Bootstrap 5.3 轻量化实战:从臃肿框架到精准组件的性能跃升 【免费下载链接】bootstrap 项目地址: https://gitcode.com/gh_mirrors/boo/bootstrap 你是否曾经面对加载缓慢的网页感到无奈?数据显示,完整版Bootstrap 5.3的CSS和JS文件…

作者头像 李华
网站建设 2026/4/23 9:22:43

选对工具,提升成交率:新能源汽车客户跟进管理软件评测与指南

在新能源汽车零售领域,门店运营的核心挑战之一是如何系统化地管理客户跟进流程。跟进环节直接决定线索转化效率与客户体验,但传统依赖个人记录与分散沟通的方式,往往导致信息不透明、客户流失和团队协同效率低下。一、现有跟进模式的主要局限…

作者头像 李华