transformers

論文「MiniGPT-5: Interleaved Vision-and-Language Generation via Generative Vokens」的官方實作

MeshGPT 實作，使用 Attention 的 SOTA 網格生成技術，基於 PyTorch

包含用於微調 transformers 以處理各種 NLP 任務教學的 GitHub 儲存庫

我的著作《A Hands-On Guide to Fine-Tuning LLMs with PyTorch and Hugging Face》官方儲存庫

MOMENT：一系列開放的時間序列基礎模型，ICML'24

🤖✨ ChatMLX 是一個基於大型語言模型、適用於 macOS 的現代化、開源且高效能的聊天應用程式。

以純 Java 實現的 Llama 3+ 推理

NMA 深度學習課程

PhoBERT：越南語預訓練語言模型 (EMNLP-2020 Findings)

在 PyTorch 中進行對比模型訓練

評估 Hugging Face 模型是否能在您的本地 GPU 上運行並進行微調。

Phenaki Video 的 PyTorch 實作，使用 Mask GIT 來產生長達 2 分鐘的文字引導影片

在 GPT 中定位與編輯事實關聯 (NeurIPS 2022)

大上下文注意力機制

Transformers PHP 是一個讓 PHP 開發者能輕鬆將機器學習功能加入專案的工具包。

用於製作 RepE 控制向量的函式庫

JointBERT 的 Pytorch 實作：「BERT for Joint Intent Classification and Slot Filling」

此儲存庫為 CVPR 2024 最精彩且最具影響力的論文精選集合。🔥 [論文 + 程式碼 + 展示]

在常數記憶體用量下，將現有 LLM 的長度大幅擴充套件至原始訓練長度之外，且無需重新訓練

LLM-PowerHouse：透過精選教學、最佳實踐以及可用於自訂訓練與推論的即用程式碼，釋放 LLM 的潛力。

使用 Kolmogorov-Arnold Networks (KANs) 進行語言建模的 Generative Pre-trained Transformers (GPTs) PyTorch 實現

重新審視中文自然語言處理的預訓練模型（MacBERT）。

純 Rust 推論引擎

在 Pytorch 中實作 MagViT2 Tokenizer

用於情感分析與社群 NLP 任務的 Python 多語言工具包

在 Pytorch 中實作 MEGABYTE（透過多尺度 Transformer 預測百萬位元組序列）。

此儲存庫是 CVPR 2023 最精彩且最具影響力的論文精選集。🔥 [論文 + 程式碼]

Python 文字分類的主動學習

「Neural Thickets: Diverse Task Experts Are Dense Around Pretrained Weights」（ICML 2026 Spotlight）官方程式碼庫。

韓語預訓練 ELECTRA 模型