Blog de Simon🫣
历史归档
文章分类
文章标签
Github
About Me
友链
开往
文章
63
分类
4
标签
37
历史归档
文章分类
文章标签
Github
About Me
友链
开往
目录
0%
第一部分:视觉编码器 (Vision Encoder) —— “眼睛”
1. visual.patch_embed (图像块嵌入层)
2. visual.blocks (视觉 Transformer 块)
3. visual.deepstack_merger_list (深度堆叠合并器)
第二部分:多模态投影器 (Multi-modal Projector) —— “视神经/桥梁”
1. visual.merger (视觉-语言映射层)
3.4 DeepStack 部分的训练细节
第三部分:语言模型 (Language Model) —— “大脑”
1. language_model (语言模型主体)
2. lm_head (语言模型输出头)