attention-mechanism

Enformer 的 Pytorch 实现，这是 Deepmind 用于预测基因表达的注意力网络

在 Pytorch 中实现 Berkeley AI 的 Liu 等人提出的 💍 Ring Attention

论文「SAITS: Self-Attention-based Imputation for Time Series」的官方 PyTorch 实现。这是一个用于高效时间序列插补的快速且最先进（SOTA）深度学习神经网络模型（利用机器学习填补包含 NaN 缺失值的多变量不完整时间序列）。https://arxiv.org/abs/2202.08516

Implementation of Slot Attention from GoogleAI