lucidrains/native-sparse-attention-pytorch

Deepseek チームの論文「Native Sparse Attention」で提案されたスパースアテンションパターンの実装

↗ GitHub で開く

スター

813

フォーク

53

言語

Python

ライセンス

MIT

最終プッシュ

1 年前

Python deep-learning artificial-intelligence attention sparse-attention

関連 Intel はまだありません

このリポジトリは radar が追跡するソースにまだ登場していません。コレクターはスケジュールで動いています——このリポジトリがカバーされたらまた見てください。