推荐星级:
  • 1
  • 2
  • 3
  • 4
  • 5

面向存算一体芯片的模拟计算阵列中存算一体芯片的存算一体芯片在智能座舱中的多模态交互.docx

资料介绍

面向存算一体芯片的模拟计算阵列中存算一体芯片的存算一体芯片在智能座舱中的多模态交互

摘要

智能座舱需要同时处理语音交互、手势识别和驾驶员监控等多模态交互任务,对芯片的算力和能效提出了较高要求。本文面向智能座舱的多模态交互需求,设计了一种面向存算一体芯片的座舱交互加速方案,通过存算一体阵列同时处理语音信号、手势图像和驾驶员面部图像,在存算域完成多模态特征的融合和交互决策。在典型座舱交互场景中,芯片功耗仅为2W,语音识别延迟为100ms,手势识别延迟为50ms,驾驶员疲劳检测延迟为30ms,为智能座舱提供了高能效的多模态交互解决方案。

一、智能座舱的多模态交互需求

1.1 多任务并行

智能座舱需要同时处理语音交互(语音识别、语义理解)、手势识别(手势分类、手势控制)和驾驶员监控(疲劳检测、分心检测)。

1.2 实时性要求

语音交互需要200ms内响应,手势识别需要100ms内响应,驾驶员监控需要50ms内响应。

二、存算一体座舱交互方案

2.1 三任务并行处理

在存算一体芯片中,语音识别、手势识别和驾驶员监控的模型权重分别存储在RRAM阵列的不同区域。三个任务在存算阵列中并行执行,互不干扰。


部分文件列表

文件名 大小
面向存算一体芯片的模拟计算阵列中存算一体芯片的存算一体芯片在智能座舱中的多模态交互.docx 37K

全部评论(0)

暂无评论

上传资源 上传优质资源有赏金

  • 打赏
  • 30日榜单
  • 21下载积分 打赏60.00元   3天前

    用户:gsy幸运

  • 21下载积分 打赏70.00元   3天前

    用户:铁蛋锅

  • 21下载积分 打赏65.00元   3天前

    用户:xzxbybd

  • 21下载积分 打赏60.00元   3天前

    用户:jh0355

  • 21下载积分 打赏60.00元   3天前

    用户:w178191520

  • 21下载积分 打赏20.00元   3天前

    用户:jh03551

  • 21下载积分 打赏20.00元   3天前

    用户:sun2152

  • 21下载积分 打赏20.00元   3天前

    用户:kk1957135547

  • 21下载积分 打赏25.00元   3天前

    用户:w1966891335

  • 21下载积分 打赏20.00元   3天前

    用户:xuzhen1

  • 21下载积分 打赏15.00元   3天前

    用户:x15580286248

  • 21下载积分 打赏25.00元   3天前

    用户:pcb

  • 21下载积分 打赏20.00元   3天前

    用户:bhacker

  • 21下载积分 打赏15.00元   3天前

    用户:liqiang9090

  • 21下载积分 打赏25.00元   3天前

    用户:有理想666

  • 21下载积分 打赏15.00元   3天前

    用户:godbox

  • 21下载积分 打赏15.00元   3天前

    用户:aetek

  • 21下载积分 打赏5.00元   3天前

    用户:mulanhk

  • 21下载积分 打赏5.00元   3天前

    用户:JuneLin61

推荐下载