推荐星级:
  • 1
  • 2
  • 3
  • 4
  • 5

面向存算一体芯片的模拟计算阵列中存算一体芯片的车载存算一体芯片的BEV Transformer感知

资料介绍

面向存算一体芯片的模拟计算阵列中存算一体芯片的车载存算一体芯片的BEV Transformer感知加速架构

摘要

BEV(Bird's Eye View)Transformer已成为自动驾驶感知的主流架构,通过将多摄像头图像从透视图投影到鸟瞰图空间,在统一坐标系下完成目标检测和路径规划。然而,BEV Transformer的计算量巨大——以LSS(Lift-Splat-Shoot)为核心的BEV转换需要将多摄像头特征图投影到BEV网格,计算量随摄像头数量和BEV分辨率线性增长。本文针对车载BEV Transformer的加速需求,设计了一种面向存算一体芯片的BEV感知加速架构,通过将BEV投影的权重矩阵存储在RRAM阵列中,在存算阵列中直接完成视图投影运算,将BEV变换的延迟降低至5ms以内,芯片功耗仅为传统GPU方案的1/4,为车载存算一体芯片提供了高效BEV感知加速架构。

一、BEV Transformer的计算特征

1.1 视图投影计算

LSS算法将多摄像头(6-12路)的特征图从透视图投影到BEV空间。每个像素点需要计算在BEV网格中的对应位置,计算量约为每帧10-50GOPS,是BEV感知的主要计算瓶颈。


部分文件列表

文件名 大小
1789812760面向存算一体芯片的模拟计算阵列中存算一体芯片的车载存算一体芯片的BEV_Transformer感知加速架构.docx 37K

全部评论(0)

暂无评论

上传资源 上传优质资源有赏金

  • 打赏
  • 30日榜单
  • 21下载积分 打赏60.00元   3天前

    用户:gsy幸运

  • 21下载积分 打赏70.00元   3天前

    用户:铁蛋锅

  • 21下载积分 打赏65.00元   3天前

    用户:xzxbybd

  • 21下载积分 打赏60.00元   3天前

    用户:jh0355

  • 21下载积分 打赏60.00元   3天前

    用户:w178191520

  • 21下载积分 打赏20.00元   3天前

    用户:jh03551

  • 21下载积分 打赏20.00元   3天前

    用户:sun2152

  • 21下载积分 打赏20.00元   3天前

    用户:kk1957135547

  • 21下载积分 打赏25.00元   3天前

    用户:w1966891335

  • 21下载积分 打赏20.00元   3天前

    用户:xuzhen1

  • 21下载积分 打赏15.00元   3天前

    用户:x15580286248

  • 21下载积分 打赏25.00元   3天前

    用户:pcb

  • 21下载积分 打赏20.00元   3天前

    用户:bhacker

  • 21下载积分 打赏15.00元   3天前

    用户:liqiang9090

  • 21下载积分 打赏25.00元   3天前

    用户:有理想666

  • 21下载积分 打赏15.00元   3天前

    用户:godbox

  • 21下载积分 打赏15.00元   3天前

    用户:aetek

  • 21下载积分 打赏5.00元   3天前

    用户:mulanhk

  • 21下载积分 打赏5.00元   3天前

    用户:JuneLin61

推荐下载