nlp

GPT/LLM Agent를 구축하고 배포하기 위한 오픈소스 허브 ⚡️

모델별로 정리된 최첨단 딥러닝 스크립트 - 엔터프라이즈급 인프라에서 재현 가능한 정확도와 성능으로 쉽게 학습 및 배포 가능

NLTK 소스

최신 자연어 처리(NLP)를 위한 매우 간단한 프레임워크

인공지능 학습 로드맵, 약 200개의 실전 케이스와 프로젝트 정리, 무료 교재 제공, 노베이스 입문 및 취업 실전! Python, 수학, 머신러닝, 데이터 분석, 딥러닝, 컴퓨터 비전, 자연어 처리, PyTorch, tensorflow 등 인기 분야 포함.

🔥 매주 최고의 ML 논문을 소개합니다.

멋정한 모델 주를 제공하는 사용하기 쉽고 강력한 LLM 및 SLM 라이브러리입니다.

💡 시맨틱 검색, LLM 오케스트레이션, 언어 모델 워크플로우를 위한 올인원 AI 프레임워크

가벼운 자연어 처리

💥 연구 및 프로덕션에 최적화된 고성능 최신 Tokenizers

OpenVINO™는 AI 추론 최적화 및 배포를 위한 오픈 소스 툴킷입니다

텍스트, 이미지, 구조화된 데이터 전반에서 민감한 데이터(PII)를 감지, 편집, 마스킹, 익명화하기 위한 오픈소스 프레임워크입니다. NLP, 패턴 매칭, 사용자 정의 가능한 파이프라인을 지원합니다.

🌸 BitTorrent 방식으로 집에서 LLM을 실행하세요. 오프로딩보다 최대 10배 빠른 파인튜닝과 추론을 제공합니다.

중국어 BERT를 위한 Whole Word Masking 사전 학습(중국어 BERT-wwm 시리즈 모델)

LLM 실용 가이드 리소스 모음 (LLM 트리, 예제, 논문)

CoreNLP: 토큰화, 문장 분할, 개체명 인식(NER), 구문 분석, 상호참조, 감성 분석 등을 위한 Java 기반 핵심 NLP 도구 모음입니다.

대규모 중국어 자연어 처리 말뭉치

"Attention is All You Need" 논문의 Transformer 모델을 PyTorch로 구현한 것입니다.

간단하고 파이썬다운 텍스트 처리--감성 분석, 품사 태깅, 명사 구 추출, 번역 등.

ModelScope: Model-as-a-Service 개념을 현실화합니다.

Zhiheng Xi 외 저의 86페이지 분량 SCIS 커버 논문 "The Rise and Potential of Large Language Model Based Agents: A Survey"의 논문 목록입니다.

BertViz: Transformer 모델의 어텐션 시각화

다양한 인간 언어의 토큰화, 문장 분할, 개체명 인식(NER), 구문 분석을 위한 스탠퍼드 NLP Python 라이브러리

BERT와 c-TF-IDF를 활용하여 쉽게 해석 가능한 토픽 생성

BERT 토크나이저를 사용하는 GPT2 학습 코드 중국어 버전

직관을 바탕으로 수학, 컴퓨팅, ML을 다루는 파격적인 교과서를 통해 뛰어난 AI/ML 연구원/엔지니어되기

중국어 LLaMA-2 & Alpaca-2 대형 언어 모델 2기 프로젝트 + 64K 초장문 컨텍스트 모델

엔드투엔드 대화 시스템 및 챗봇을 위한 오픈소스 딥러닝 라이브러리

학습 중인 내용에 대한 기록

PaddlePaddle이 공식적으로 유지 관리 및 지원하며, CV, NLP, Speech, Rec, TS, 대형 모델 등을 포함합니다.