Article

post_img

LLM相关随笔记

摘要

为什么要创建flash-attention? 原始self-attention的时间和空间复杂度是序列长度的二次方,当序列长度过长 …