メインコンテンツへスキップ
buildradar
Sign in

feifeibear/long-context-attention

@feifeibear

USP: 長文脈 Transformer モデルのトレーニングと推論のための統一型(ハイブリッド / 2D)シーケンス並列アテンション

スター
692
フォーク
85
言語
Python
ライセンス
Apache-2.0
最終プッシュ
6 日前
Pythonllm-inferencepytorchllm-trainingattention-is-all-you-needdeepspeed-ulyssesring-attention

関連 Intel はまだありません

このリポジトリは radar が追跡するソースにまだ登場していません。コレクターはスケジュールで動いています——このリポジトリがカバーされたらまた見てください。