- 1
- 2
- 3
- 4
- 5
MMPretrain 介绍
资料介绍
什么是 MMPretrain
MMPretrain是由香港中文大学、商汤科技、上海AI实验室等单位联合开发的开源多模态预训练基准框架,属于OpenMMLab项目生态下的重要组成部分,专注于提供统一的多模态预训练、自监督学习代码实现与评测基准,帮助研究人员和开发者快速开展预训练相关的研究与应用开发。
核心特点
1. 统一框架设计:整合了多种主流的自监督学习、多模态预训练算法,提供统一的调用接口,支持不同算法的快速对比与验证。
2. 模块化架构:采用组件化设计,将数据加载、模型构建、训练流程、评测模块拆分为独立可复用组件,支持用户根据需求自定义修改与扩展。
3. 支持多种预训练范式:覆盖单模态自监督学习、多模态跨模态预训练两大方向,既支持图像、文本等单模态的预训练,也支持图文跨模态的对比学习、生成式预训练。
4. 完备的评测体系:内置多个标准评测任务,支持预训练模型在下游任务的快速迁移评测,方便开发者验证预训练效果。
5. 兼容性好:基于PyTorch开发,支持主流的GPU硬件环境,兼容Hugging Face等生态的模型导入导出,可以和其他深度学习工具链无缝衔接。
支持的主流算法
单模态自监督学习
· 对比学习类:MoCo v1/v2/v3、SimCLR v1/v2、BYOL、SimSiam等
· 掩码建模类:MAE、SimMIM、CAE等
多模态预训练
· 对比学习类:CLIP、ALBEF、BLIP、FLAVA等
· 生成式预训练类:支持图文生成、文本图像跨模态生成相关的预训练架构
部分文件列表
| 文件名 | 大小 |
| MMPretrain_介绍.docx | 13K |
最新上传
-
21ic小能手 打赏5.00元 1天前
-
21ic小能手 打赏5.00元 1天前
-
21ic小能手 打赏5.00元 1天前
-
21ic小能手 打赏5.00元 3天前
-
21ic下载 打赏310.00元 3天前
用户:gsy幸运
-
21ic下载 打赏320.00元 3天前
用户:jh03551
-
21ic下载 打赏320.00元 3天前
用户:jh0355
-
21ic下载 打赏210.00元 3天前
用户:zhengdai
-
21ic下载 打赏210.00元 3天前
用户:江岚
-
21ic下载 打赏210.00元 3天前
用户:潇潇江南
-
21ic下载 打赏60.00元 3天前
用户:小猫做电路
-
21ic下载 打赏60.00元 3天前
用户:烟雨
-
21ic下载 打赏60.00元 3天前
用户:mulanhk
-
21ic下载 打赏60.00元 3天前
用户:w993263495
-
21ic下载 打赏20.00元 3天前
用户:w178191520
-
21ic下载 打赏20.00元 3天前
用户:liqiang9090
-
21ic下载 打赏20.00元 3天前
用户:kk1957135547
-
21ic下载 打赏20.00元 3天前
用户:sun2152
-
21ic下载 打赏20.00元 3天前
用户:w1966891335
-
21ic下载 打赏15.00元 3天前
用户:xuzhen1
-
21ic下载 打赏15.00元 3天前
用户:x15580286248
-
21ic下载 打赏10.00元 3天前
用户:wjr111
-
21ic小能手 打赏10.00元 3天前
-
21ic小能手 打赏5.00元 3天前
资料:STM32密码锁仿真
-
x1707 打赏1.00元 3天前
-
lanmukk 打赏60.00元 3天前
-
lanmukk 打赏10.00元 3天前
-
21ic小能手 打赏5.00元 3天前
-
21ic下载 打赏310.00元 3天前
用户:江岚
-
21ic下载 打赏310.00元 3天前
用户:mulanhk
-
21ic下载 打赏310.00元 3天前
用户:潇潇江南
-
21ic下载 打赏210.00元 3天前
用户:小猫做电路
-
21ic下载 打赏210.00元 3天前
用户:gsy幸运
-
21ic下载 打赏210.00元 3天前
用户:zhengdai
-
21ic下载 打赏140.00元 3天前
用户:jh0355
-
21ic下载 打赏130.00元 3天前
用户:jh03551
-
21ic下载 打赏60.00元 3天前
用户:lanmukk
-
21ic下载 打赏60.00元 3天前
用户:kkkopj
-
21ic下载 打赏70.00元 3天前
用户:cooldog123pp
-
21ic下载 打赏20.00元 3天前
用户:烟雨




全部评论(0)