Skip to content
简体中文

切换主题

// ◐ 世界模型与自监督表征

联合嵌入预测架构 JEPA

在抽象表征空间里预测被遮住的部分,而不是重建像素。

Joint-Embedding Predictive Architecture (JEPA) 2023 高级 核心

通俗解释

LeCun 倡导的路线:用上下文块的表征去预测目标块的表征,忽略不可预测的细节,学到更语义化的特征。I-JEPA 用于图像,V-JEPA 用于视频。

用在哪里:Meta I-JEPA / V-JEPA / V-JEPA 2(视频理解、预测与机器人规划);2026-09 的 PDE-JEPA(arXiv 2609.34715)把它用于偏微分方程动力学

时间轴 · 前置 → 当前 → 后继

2020 视觉 Transforme…2021 掩码自编码器 MAE2023 联合嵌入预测架构 JEPA

01原始论文

Self-Supervised Learning from Images with a Joint-Embedding Predictive Architecture

Mahmoud Assran, Quentin Duval, Ishan Misra, et al. · 2023

arXiv ↗ ✓ 已核实 · arXiv API

备注:V-JEPA:arXiv:2404.08471;V-JEPA 2:arXiv:2506.09985(2025-06,DataCite 核实)

02知识位置

左边先学;右边是学完它之后可以学的。

先学

联合嵌入预测架构 JEPA

学完可以学

  • 图谱里暂无后继

相关:世界模型(Ha & Schmidhuber)

掩码自编码器 MAE视觉 Transformer …世界模型(Ha & Schmi… 联合嵌入预测架构 JEPA

左:前置 · 右:后继 · 虚线:相关。看完整关系图 →

03学习资料

官方文档、图解、课程和参考实现,链接都核对过。

04在课程里哪里学

所在学习路线:生成式与前沿研究

给 AI 读 / 数据说明

数据更新于:AI 算法图谱与课程体系(北京时间)