language-model

Thư viện Học máy và Xử lý Ngôn ngữ Tự nhiên độc lập bằng Go

Bộ từ vựng mở rộng giản/phồn thể / mã hóa thanh điệu / bộ công cụ chú thích thanh điệu đầy đủ nhất / bộ công cụ cập nhật Vạn Tượng / mô hình ngôn ngữ Rime: LMDG - Ngôn ngữ, Mô hình, Từ điển, Ngữ pháp. Đúng vậy, đây chính là "Đế chế La Mã" của Pinyin Vạn Tượng!

Mã nguồn chính thức của RAPTOR: Recursive Abstractive Processing for Tree-Organized Retrieval

Mô hình ngôn ngữ hội thoại tiếng Trung nhỏ 0.2B (ChatLM-Chinese-0.2B), mã nguồn mở cho toàn bộ quy trình bao gồm nguồn dữ liệu, làm sạch dữ liệu, huấn luyện tokenizer, tiền huấn luyện mô hình, tinh chỉnh lệnh SFT, tối ưu hóa RLHF, v.v. Hỗ trợ tinh chỉnh sft cho các tác vụ hạ nguồn, cung cấp ví dụ tinh chỉnh trích xuất thông tin bộ ba.

Tự động tạo biểu đồ kiến trúc từ mã nguồn sử dụng các mô hình ngôn ngữ lớn (LLM).

Macaw-LLM: Mô hình hóa ngôn ngữ đa phương thức tích hợp hình ảnh, video, âm thanh và văn bản

Suy luận INT4/INT5/INT8 và FP16 trên CPU cho mô hình ngôn ngữ RWKV

[EMNLP 2025 Oral] MemoryOS được thiết kế để cung cấp hệ điều hành bộ nhớ cho các tác nhân AI cá nhân hóa.

Mô hình nhỏ, Logic lớn: Tối ưu hóa hướng đa dạng kích hoạt khả năng suy luận của mô hình lớn trong VibeThinker-1.5B

Chương trình giảng dạy về mô hình nền tảng, từ số không đến biên giới

Mô hình ELECTRA tiếng Trung được huấn luyện trước

Tổng quan về các LLM tiếng Nhật

Mô hình Korean BERT đã huấn luyện trước có phân biệt hoa thường (KoBERT)

🛸 Sử dụng các mô hình transformers được huấn luyện trước như BERT, XLNet và GPT-2 trong spaCy

Tính toán tốc độ token/s và yêu cầu bộ nhớ GPU cho bất kỳ LLM nào. Hỗ trợ lượng tử hóa llama.cpp/ggml/bnb/QLoRA.

Một framework mô hình ngôn ngữ lớn (LLM) mã nguồn mở có khả năng hiểu biết.

Nhồi nhét quá trình huấn luyện mô hình ngôn ngữ (kiểu BERT) vào tài nguyên tính toán hạn chế.

Bản cài đặt của "Prismer: A Vision-Language Model with Multi-Task Experts".

Transformers4Rec là một thư viện linh hoạt và hiệu quả dành cho hệ thống gợi ý dạng chuỗi (sequential) và theo phiên (session-based), hoạt động với PyTorch.

Danh sách các tác nhân ngôn ngữ dựa trên bài báo "Cognitive Architectures for Language Agents"

Ứng dụng trò chuyện thoại

💁 Kho tàng tuyệt vời các mô hình Transformers cho Xử lý ngôn ngữ tự nhiên, bao gồm các bài báo, video, blog, kho lưu trữ chính thức cùng với các Colab Notebook. 🛫☑️

Bộ sưu tập tập dữ liệu mã nguồn mở để huấn luyện các LLM tuân theo hướng dẫn (ChatGPT, LLaMA, Alpaca)

Danh sách các tài nguyên NLP được tuyển chọn tập trung vào mạng Transformer, cơ chế chú ý, GPT, BERT, ChatGPT, LLM và học chuyển giao.

[NeurIPS 2023] LLM-Pruner: Về việc cắt tỉa cấu trúc của các Mô hình Ngôn ngữ Lớn. Hỗ trợ Llama-3/3.1, Llama-2, LLaMA, BLOOM, Vicuna, Baichuan, TinyLlama, v.v.

ToRA là một chuỗi các LLM Agent tích hợp công cụ, được thiết kế để giải quyết các bài toán suy luận toán học phức tạp thông qua việc tương tác với các công cụ [ICLR'24].

Z80-μLM là một mô hình ngôn ngữ lượng tử hóa 2-bit đủ nhỏ để chạy trên bộ vi xử lý 8-bit Z80. Huấn luyện mô hình hội thoại bằng Python, xuất ra các tệp nhị phân CP/M .COM và trò chuyện với máy tính cổ điển của bạn.

Các triển khai LangSmith Client SDK.

Một trình bao bọc Python cho Kaldi

Plugin dịch phụ đề thời gian thực tích hợp API ChatGPT của OpenAI (hoặc bất kỳ mô hình nào có phương thức gọi API tương tự) vào PotPlayer, giúp bạn dịch phụ đề ngay khi xem video và phá vỡ rào cản ngôn ngữ.