注意力机制

本指南旨在帮助从已有模块出发进行改进或自研新模块，以提升模型性能（涨点）为目标。 核心：有针对性地提升模型某一 … 阅读更多

本文介绍注意力机制和原始Transformer架构，近期还续写了LLM部分内容。 1 注意力池化：N-W核回归 … 阅读更多