- 1
- 2
- 3
- 4
- 5
面向存算一体芯片的模拟计算阵列中存算一体芯片在端侧AI中的部署优化与推理加速.docx
资料介绍
面向存算一体芯片的模拟计算阵列中存算一体芯片在端侧AI中的部署优化与推理加速
——从模型压缩到硬件加速的端侧AI推理优化
引言
端侧AI推理在智能手机、可穿戴设备和IoT设备中具有广泛的应用前景。存算一体芯片通过消除数据搬运的冯·诺依曼瓶颈,在低功耗、低延迟和高能效方面具有优势,适合端侧AI推理。在端侧AI中,存算一体芯片的部署优化需要综合考虑模型压缩、硬件加速和功耗管理等多方面技术。本文系统分析面向存算一体芯片的模拟计算阵列中存算一体芯片在端侧AI中的部署优化与推理加速。
端侧AI的挑战
功耗约束
端侧AI推理的功耗约束:
1. 电池供电设备:在电池供电设备中,功耗需小于1W,如可穿戴设备、智能传感器和IoT设备。
2. 有限供电设备:在有限供电设备中,功耗需小于10W,如智能摄像头、智能音箱和边缘网关。
3. 连续供电设备:在连续供电设备中,功耗需小于100W,如边缘服务器、工业控制器和机器人。
延迟约束
端侧AI推理的延迟约束:
1. 实时推理:在实时应用中,推理延迟需小于10ms,如自动驾驶、工业视觉和机器人控制。
2. 准实时推理:在准实时应用中,推理延迟需小于100ms,如智能安防、智能零售和智能家居。
3. 非实时推理:在非实时应用中,推理延迟需小于1s,如数据分析、日志处理和离线处理。
部分文件列表
| 文件名 | 大小 |
| 面向存算一体芯片的模拟计算阵列中存算一体芯片在端侧AI中的部署优化与推理加速.docx | 39K |
最新上传
-
tangyu1 打赏1.00元 1天前
-
jjjjkkkkk 打赏1.00元 3天前
-
emlimei 打赏1.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏3.00元 3天前
资料:低频功率放大器的设计.
-
21ic小能手 打赏3.00元 3天前
-
21ic小能手 打赏3.00元 3天前
-
21ic小能手 打赏3.00元 3天前
-
21ic小能手 打赏3.00元 3天前
-
21ic小能手 打赏5.00元 3天前
资料:51单片机数字频率计
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
13573902396 打赏1.00元 3天前
-
21下载积分 打赏310.00元 3天前
用户:江岚
-
21下载积分 打赏310.00元 3天前
用户:潇潇江南
-
21下载积分 打赏60.00元 3天前
用户:他山之石可攻玉
-
21下载积分 打赏310.00元 3天前
用户:小猫做电路
-
21下载积分 打赏210.00元 3天前
用户:zhengdai
-
21下载积分 打赏210.00元 3天前
用户:w993263495
-
21下载积分 打赏10.00元 3天前
用户:烟雨
-
21下载积分 打赏60.00元 3天前
用户:gsy幸运
-
21下载积分 打赏70.00元 3天前
用户:铁蛋锅
-
21下载积分 打赏65.00元 3天前
用户:xzxbybd
-
21下载积分 打赏60.00元 3天前
用户:jh0355
-
21下载积分 打赏60.00元 3天前
用户:w178191520
-
21下载积分 打赏20.00元 3天前
用户:jh03551
-
21下载积分 打赏20.00元 3天前
用户:sun2152
-
21下载积分 打赏20.00元 3天前
用户:kk1957135547
-
21下载积分 打赏25.00元 3天前
用户:w1966891335
-
21下载积分 打赏20.00元 3天前
用户:xuzhen1
-
21下载积分 打赏15.00元 3天前
用户:x15580286248
-
21下载积分 打赏25.00元 3天前
用户:pcb
-
21下载积分 打赏20.00元 3天前
用户:bhacker
-
21下载积分 打赏15.00元 3天前
用户:liqiang9090
-
21下载积分 打赏25.00元 3天前
用户:有理想666
-
21下载积分 打赏15.00元 3天前
用户:godbox
-
21下载积分 打赏15.00元 3天前
用户:aetek
-
21下载积分 打赏5.00元 3天前
用户:mulanhk
-
21下载积分 打赏5.00元 3天前
用户:JuneLin61




全部评论(0)