natural-language-processing

Transformers 라이브러리 빠른 시작 튜토리얼

[ICML 2024] LLMCompiler: 병렬 함수 호출을 위한 LLM 컴파일러

최신 반지도학습(Semi-supervised Learning) 논문, 방법론 및 리소스 모음

Go로 작성된 독립 실행형 머신러닝 및 자연어 처리 라이브러리

NLTK 데이터

Google AI Language 팀의 오픈소스 프로젝트를 위한 공유 저장소

짧은 텍스트와 혼합 언어 텍스트에 적합한, 가장 정확한 Python용 자연어 감지 라이브러리

빠르고 효율적인 비정형 데이터 추출. 다양한 언어 바인딩을 지원하는 Rust로 작성됨.

사후 학습 및 구조화된 데이터 추출을 위한 합성 데이터 큐레이션

학습 과정에서 정리한 인공지능, 머신러닝, 딥러닝 관련 유용한 리소스 및 학습 노트 모음입니다.

🤗 Hugging Face 트랜스포머 모델을 위한 효율적이고 확장 가능한 엔터프라이즈급 CPU/GPU 추론 서버 🚀

Graph4nlp는 NLP에 그래프 신경망(GNN)을 쉽게 사용할 수 있도록 해주는 라이브러리입니다. 다양한 학습 리소스는 DLG4NLP 웹사이트(https://dlg4nlp.github.io/index.html)를 방문해 주세요!

LLM(😽)

🦆 문맥 키 기반 단어 벡터

사전 학습된 중국어 XLNet 모델

정형화되지 않은 미국 주소 문자열을 주소 구성 요소로 파싱하는 Python 라이브러리

재현 가능한 딥러닝 연구를 위해 PyTorch로 구축된 코딩 없는 프레임워크. PyTorch 에코시스템. 🏆 TPAMI, CVPR, ICLR, ECCV, NeurIPS, ICCV, AAAI 등에 발표된 26개의 지식 증류(knowledge distillation) 메서드가 구현되어 있습니다. 🎁 재현성과 벤치마크를 보장하기 위해 학습된 모델, 학습 로그 및 설정이 제공됩니다.

워싱턴 DC에서 진행된 General Assembly의 2015년 데이터 사이언스 과정

WikiChat은 개선된 RAG입니다. 코퍼스에서 데이터를 검색하여 대형 언어 모델의 환각 현상을 방지합니다.

Macaw-LLM: 이미지, 비디오, 오디오, 텍스트 통합을 지원하는 멀티모달 언어 모델링

DAMO-ConvAI: Alibaba DAMO Conversational AI의 소스 코드가 포함된 공식 저장소

통합 준지도 학습 코드베이스 (NeurIPS'22)

텍스트 적대적 공격 및 방어 관련 필독 논문 모음

개체명 인식(NER) 및 엔티티 인식 작업을 위한 말뭉치 모음. 다양한 언어, 도메인, 개체 유형을 다루는 주석 부착 데이터셋입니다.

ChatArena(또는 Chat Arena)는 LLM을 위한 멀티 에이전트 언어 게임 환경입니다. 목표는 AI의 커뮤니케이션 및 협업 능력을 개발하는 것입니다.

Awesome Search - (이커머스뿐만 아니라) 검색과 그 유용성에 관한 모든 것

감정, 감정 상태, 반어법 등을 분석하기 위한 최신 딥러닝 모델입니다.

대화 속 감정 인식을 위한 다양한 아키텍처 구현체 포함 리포지토리

자연어 데이터를 확장, 평가 및 유지 관리하기 위한 데이터 사이언티스트의 오픈소스 선택지. 학습 데이터를 소프트웨어 산출물처럼 관리하세요.

🪐 프로토타입부터 프로덕션까지 아우르는 엔드투엔드 NLP 워크플로