nlp

[EMNLP 2022] Bộ công cụ mã nguồn mở để trích xuất và xây dựng Knowledge Graph

Công nghệ chung để kích hoạt các tính năng AI với LLM và MLLM

Mã nguồn huấn luyện LLM cho các mô hình nền tảng Databricks

Phát hiện ngôn ngữ tự nhiên

Dự án này tái tạo cuốn sách Dive Into Deep Learning (https://d2l.ai/), chuyển đổi mã nguồn từ MXNet sang PyTorch.

Lộ trình Khoa học Dữ liệu từ A đến Z

Bộ ngữ liệu tiếng Trung quy mô cực lớn MNBVC (Massive Never-ending BT Vast Chinese corpus). Tương đương với dữ liệu 40T được huấn luyện cho ChatGPT. Tập dữ liệu MNBVC không chỉ bao gồm văn hóa chủ đạo, mà còn bao gồm dữ liệu của các nền văn hóa ngách thậm chí là văn bản sao Hỏa. Tập dữ liệu MNBVC bao gồm tin tức, bài văn, tiểu thuyết, sách, tạp chí, luận văn, lời thoại, bài đăng, wiki, thơ cổ, lời bài hát, giới thiệu sản phẩm, truyện cười, chuyện cười nhảm, lịch sử trò chuyện và tất cả các hình thức dữ liệu văn bản thuần túy bằng tiếng Trung.

LightLLM là một framework suy luận và phục vụ LLM (Large Language Model) dựa trên Python, nổi bật với thiết kế nhẹ, dễ mở rộng và hiệu suất tốc độ cao.

AdalFlow: Thư viện để xây dựng và tự động tối ưu hóa các ứng dụng LLM.

Tổng hợp tài liệu học tập ChatGPT, cập nhật liên tục......

Khóa học Hugging Face về Transformers

Xử lý Ngôn ngữ Tự nhiên Tiên tiến nhất (State of the Art)

Token hóa mô hình ngôn ngữ ở tốc độ GB/s

Bộ công cụ phân tích và tiền xử lý NLP tiếng Trung, chính xác, hiệu quả và dễ sử dụng. www.jionlp.com

Ra quyết định bằng AI siêu nhanh và xử lý thông minh dữ liệu đa phương thức.

Giải pháp NLP tiếng Trung (mô hình ngôn ngữ lớn, dữ liệu, mô hình, huấn luyện, suy luận)

Tài liệu phỏng vấn được tổng hợp bởi các thành viên Datawhale, bao gồm học máy, CV, NLP, hệ thống gợi ý, phát triển phần mềm, v.v. Chào đón các bạn bấm star.

Các hướng dẫn và tài nguyên được tuyển chọn cho Large Language Models, Text2SQL, Text2DSL, Text2API, Text2Vis và nhiều hơn nữa.

Mô-đun tự động tóm tắt tài liệu văn bản và trang HTML.

[EMNLP 2021] SimCSE: Học tương phản đơn giản cho biểu diễn câu https://arxiv.org/abs/2104.08821

Khóa học nhập môn, nâng cao, chuyên sâu về học sâu, các trường hợp nghiên cứu học thuật, thực tiễn công nghiệp, bách khoa toàn thư kiến thức học sâu và ngân hàng câu hỏi phỏng vấn.

Nhanh chóng làm quen với lý thuyết AI và thực hành ứng dụng: kiến thức cơ bản, Transformer, NLP, ML, DL, các cuộc thi. Bao gồm nhiều chú thích và bộ dữ liệu, nỗ lực giúp mọi người đều có thể hiểu và tái hiện được.

🛠 IDE nền tảng web tất cả trong một chuyên dụng cho machine learning và data science.

TextAttack 🐙 là một framework Python dành cho tấn công đối kháng, tăng cường dữ liệu và huấn luyện mô hình trong NLP https://textattack.readthedocs.io/en/master/

Danh sách tổng hợp các nghiên cứu về mô hình ngôn ngữ cho mã (và các hoạt động kỹ thuật phần mềm khác), cùng với các tập dữ liệu liên quan.

chúng tôi muốn tạo một kho lưu trữ để minh họa cách sử dụng các mô hình transformers bằng tiếng Trung

Một kho lưu trữ dành cho Document AI

100 ví dụ về học sâu (Deep Learning), học sâu DL, phân loại hình ảnh, nhận dạng mục tiêu, phát hiện mục tiêu, xử lý ngôn ngữ tự nhiên nlp, phân loại văn bản, TensorFlow, PyTorch

textlint là công cụ kiểm tra lỗi dạng plugin dành cho văn bản ngôn ngữ tự nhiên.

Các bài báo phải đọc về LLM Agent.