Tech
[分享创造] 这是地球上第一个硅基生命的蓝图
根据人类大脑结构 {额叶+脑干+左海马体+右海马体+小脑} 五大部件组成: 上文(左海马体) | AI 模型(额叶)-----指针(脑干)------外界接口(小脑) | 下文(右海马体) 模型训练:文音图帧喂入 Embedding 表(迭代)转为向量(顺变) 与 Transformer 矩阵里的标量(逆变) 正反向乘积和并(微调) 文字:原始文本 -> 分词器 -----> TokenID --> 文本 Embedding 向量表 -------> X -> Transformer 浮点矩阵+外挂 LoRA 音频:原始波形 -> 梅尔频谱提炼 -> H/W 编码 --> 音频 Embedding 向量表 --> X -> Transformer 浮点矩阵+外挂 LoRA 图片:原图归一缩放 -> 切分 Patch 块 -> 单帧图像 Patch 向量 -----------------> X -> Transf...
Read the full discussion on V2EX
This article was aggregated from V2EX. Click to join the conversation.
View on V2EX