Paddle3D icon indicating copy to clipboard operation
Paddle3D copied to clipboard

A 3D computer vision development toolkit based on PaddlePaddle. It supports point-cloud object detection, segmentation, and monocular 3D object detection models.

Paddle3D

License

camera lidar

Paddle3D是飞桨官方开源的端到端深度学习3D感知套件,涵盖了许多前沿和经典的3D感知模型,支持多种模态和多种任务,可以助力开发者便捷地完成 『自动驾驶』 领域模型 从训练到部署的全流程应用。Paddle3D具备以下特性:

  • 【丰富的模型库】聚合主流3D感知算法及精度调优策略,覆盖单目、点云等多种模态及检测、分割等多种任务类型

  • 【灵活的框架设计】针对各类3D数据格式,灵活构建数据处理、骨干网络等核心模块,支持基于PaddleDet/PaddleSeg灵活扩展2D视觉感知能力,并提供API与脚本两种训练评估方式,满足开发者灵活定制的差异化需求

  • 【端到端全流程】支持KITTI、nuScenes等主流3D数据集,提供从数据处理、模型搭建、训练调优到部署落地的全流程能力

  • 【工业级部署方案】极致优化模型性能,适配多种自动驾驶主流芯片,支持计算图优化、TensorRT/OpenVINO等加速库,并提供了开箱即用的部署教程,5分钟即可完成模型部署

  • 【无缝衔接Apollo】无缝对接Apollo自动驾驶平台,支持真机与仿真平台实验效果快速验证、多模态模型高性能融合,实现自动驾驶全栈式技术方案的高效搭建

目前Paddle3D还在快速发展中,大量的模型将被集成进来,如果您有特定的模型需求,请反馈给我们

🔥 热门活动

  • 【百度自动驾驶技术大揭秘】Apollo自动驾驶技术架构概览 & 飞桨Paddle3D在自动驾驶中的应用与实战
    • 课程回放及PPT材料(Day2待更新):https://aistudio.baidu.com/aistudio/course/introduce/26961

模型库

骨干网络 3D检测 3D分割
  • HRNet
  • DLA

📸 单目

  • SMOKE
  • CaDDN

📡 点云

  • PointPillars
  • CenterPoint

📸 + 📡 多模态

支持中

📸 + 📸 多视角

支持中

📡点云

  • SqueezeSeg v3

数据集

  • [x] KITTI

  • [x] NuScenes

  • [x] SemanticKITTI

  • [ ] waymo - 支持中

使用教程

  • 安装

  • 全流程速览

  • 模型使用教程

    • SMOKE

    • CaDDN

    • PointPillars

    • CenterPoint

    • SequeezeSeg v3

  • 自定义数据准备

  • 配置文件详解

  • API

  • 常见问题

  • 更新日志

技术交流

  • 如果你发现任何Paddle3D存在的问题或者是建议, 欢迎通过GitHub Issues给我们提issues。

  • 欢迎加入Paddle3D 微信用户群

许可证

本项目的发布受Apache 2.0 license许可认证。