Aller au contenu principal
buildradar
Sign in

feifeibear/long-context-attention

@feifeibear

USP : Parallélisme de séquence unifié (hybride, 2D) pour l'entraînement et l'inférence de modèles Transformers à long contexte

Étoiles
691
Bifurcations
84
Langage
Python
Licence
Apache-2.0
Dernier push
il y a 4 jours
Pythonllm-inferencepytorchllm-trainingattention-is-all-you-needdeepspeed-ulyssesring-attention

Aucune intel associée pour le moment

Ce dépôt n'est encore apparu dans aucune des sources que le radar suit. Le collecteur suit un calendrier — revenez une fois qu'il couvre ce dépôt.