nlp

Trung tâm mã nguồn mở để xây dựng và triển khai GPT/LLM Agent ⚡️

Các tập lệnh Deep Learning tiên tiến được sắp xếp theo các mô hình - dễ huấn luyện và triển khai với độ chính xác và hiệu suất có thể tái tạo trên cơ sở hạ tầng cấp doanh nghiệp.

Mã nguồn NLTK

Một framework rất đơn giản dành cho Xử lý Ngôn ngữ Tự nhiên (NLP) tiên tiến

Lộ trình học tập trí tuệ nhân tạo, tổng hợp gần 200 trường hợp thực chiến và dự án, cung cấp miễn phí tài liệu học tập đi kèm, bắt đầu từ con số không, thực chiến việc làm! Bao gồm các lĩnh vực hot như: Python, toán học, học máy, phân tích dữ liệu, học sâu, thị giác máy tính, xử lý ngôn ngữ tự nhiên, PyTorch tensorflow machine-learning, deep-learning data-analysis data-mining mathematics data-science artificial-intelligence python tensorflow tensorflow2 caffe keras pytorch algorithm numpy pandas matplotlib seaborn nlp cv, v.v.

🔥 Nổi bật các bài báo nghiên cứu ML hàng đầu mỗi tuần.

Thư viện LLM và SLM mạnh mẽ, dễ sử dụng đi kèm kho mô hình tuyệt vời.

💡 Khung AI tất cả trong một dành cho tìm kiếm ngữ nghĩa, điều phối LLM và quy trình làm việc của mô hình ngôn ngữ

Xử lý ngôn ngữ tự nhiên gọn nhẹ.

💥 Các Tokenizer tiên tiến, tốc độ cao được tối ưu hóa cho Nghiên cứu và Sản xuất

OpenVINO™ là bộ công cụ mã nguồn mở để tối ưu hóa và triển khai suy luận AI

Một framework mã nguồn mở để phát hiện, chỉnh sửa, che giấu và ẩn danh dữ liệu nhạy cảm (PII) trên văn bản, hình ảnh và dữ liệu có cấu trúc. Hỗ trợ NLP, khớp mẫu và các pipeline có thể tùy chỉnh.

🌸 Chạy LLM tại nhà theo phong cách BitTorrent. Tinh chỉnh và suy luận nhanh hơn tới 10 lần so với việc giảm tải

Tiền huấn luyện với Whole Word Masking cho các mô hình BERT tiếng Trung (dòng BERT-wwm)

Danh sách các tài nguyên hướng dẫn thực tế về LLM được tuyển chọn (Cây LLM, Ví dụ, Tài liệu nghiên cứu)

CoreNLP: Bộ công cụ NLP cốt lõi bằng Java hỗ trợ tách từ, phân đoạn câu, NER, phân tích cú pháp, đồng tham chiếu, phân tích cảm xúc, v.v.

Corpus tiếng Trung quy mô lớn dành cho NLP (Large Scale Chinese Corpus for NLP)

Một bản cài đặt PyTorch của mô hình Transformer trong "Attention is All You Need".

Xử lý văn bản đơn giản theo phong cách Python — Phân tích cảm xúc, gán nhãn từ loại, trích xuất cụm danh từ, dịch thuật và nhiều tính năng khác.

ModelScope: Hiện thực hóa khái niệm Model-as-a-Service.

Danh sách tài liệu của bài báo trang bìa SCIS dài 86 trang "The Rise and Potential of Large Language Model Based Agents: A Survey" bởi Zhiheng Xi và các cộng sự.

BertViz: Trực quan hóa cơ chế Attention trong các mô hình Transformer

Thư viện Python Stanford NLP hỗ trợ tách từ, phân đoạn câu, NER và phân tích cú pháp cho nhiều ngôn ngữ tự nhiên

Tận dụng BERT và c-TF-IDF để tạo ra các chủ đề dễ diễn giải.

Phiên bản tiếng Trung của mã huấn luyện GPT2, sử dụng BERT tokenizer.

Trở thành một nhà nghiên cứu/kỹ sư AI/ML xuất sắc với cuốn sách giáo khoa phi truyền thống này bao gồm toán học, điện toán và ML bằng trực giác.

Dự án mô hình lớn Chinese LLaMA-2 & Alpaca-2 giai đoạn 2 + mô hình ngữ cảnh siêu dài 64K

Một thư viện mã nguồn mở dành cho các hệ thống hội thoại và chatbot học sâu đầu cuối.

Nhật ký những gì tôi đang học

Được duy trì chính thức, hỗ trợ bởi PaddlePaddle, bao gồm CV, NLP, Speech, Rec, TS, mô hình lớn v.v.