nlp

짧은 텍스트와 혼합 언어 텍스트에 적합한, 가장 정확한 Python용 자연어 감지 라이브러리

📄 🤖 의학 및 과학 논문을 위한 AI

빠르고 효율적인 비정형 데이터 추출. 다양한 언어 바인딩을 지원하는 Rust로 작성됨.

자연어 처리, 지식 그래프, 대화 시스템, 대형 모델 등의 기술 연구 및 응용

PaddlePaddle을 이용한 최신 딥러닝 연구 구현

아키텍처 변경과 스케일링을 통해 BERT를 현대화

학습 과정에서 정리한 인공지능, 머신러닝, 딥러닝 관련 유용한 리소스 및 학습 노트 모음입니다.

📚 수천 편의 AI, LLM, NLP, CV 최우수 학회 논문 해설, 편당 5분 만에 핵심 아이디어를 이해하세요.

Graph4nlp는 NLP에 그래프 신경망(GNN)을 쉽게 사용할 수 있도록 해주는 라이브러리입니다. 다양한 학습 리소스는 DLG4NLP 웹사이트(https://dlg4nlp.github.io/index.html)를 방문해 주세요!

🦆 문맥 키 기반 단어 벡터

Tika-Python은 Apache Tika™ REST 서비스에 대한 Python 바인딩으로, Python 커뮤니티에서 Tika를 네이티브로 호출할 수 있게 해줍니다.

사전 학습된 중국어 XLNet 모델

정형화되지 않은 미국 주소 문자열을 주소 구성 요소로 파싱하는 Python 라이브러리

재현 가능한 딥러닝 연구를 위해 PyTorch로 구축된 코딩 없는 프레임워크. PyTorch 에코시스템. 🏆 TPAMI, CVPR, ICLR, ECCV, NeurIPS, ICCV, AAAI 등에 발표된 26개의 지식 증류(knowledge distillation) 메서드가 구현되어 있습니다. 🎁 재현성과 벤치마크를 보장하기 위해 학습된 모델, 학습 로그 및 설정이 제공됩니다.

WikiChat은 개선된 RAG입니다. 코퍼스에서 데이터를 검색하여 대형 언어 모델의 환각 현상을 방지합니다.

Apache OpenNLP

ExtractThinker는 LLM을 위한 문서 지능(Document Intelligence) 라이브러리로, 유연하고 강력한 문서 워크플로우를 위해 ORM 스타일의 상호작용을 제공합니다.

"WebArena: 자율 에이전트 구축을 위한 현실적인 웹 환경" 코드 저장소

similarity: 자바용 텍스트 유사도 계산 툴킷. 텍스트 유사도 계산, 감성 분석 등의 작업에 사용할 수 있으며 즉시 사용 가능합니다.

문헌 속 최신 Text-to-SQL 기법을 독자들이 쉽게 추적하고 연구자와 실무자에게 실용적인 가이드를 제공하기 위해 지속적으로 업데이트되는 핸드북입니다.

데이터셋에서 스키마, 통계, 엔티티 추출

텍스트 적대적 공격 및 방어 관련 필독 논문 모음

개체명 인식(NER) 및 엔티티 인식 작업을 위한 말뭉치 모음. 다양한 언어, 도메인, 개체 유형을 다루는 주석 부착 데이터셋입니다.

Robot Framework 및 Python과 함께 사용하도록 설계된 로봇 프로세스 자동화(RPA)용 오픈 소스 라이브러리 및 도구 모음

감정, 감정 상태, 반어법 등을 분석하기 위한 최신 딥러닝 모델입니다.

CPU와 GPU에서 transformer 추론(Bert, Albert, GPT2, Decoders 등)을 위한 빠르고 사용자 친화적인 런타임

OLMo 사전 훈련 데이터를 생성하고 검사하기 위한 데이터 및 도구.

이 프로젝트는 기본 패키지로, 대부분의 NLP 프로젝트에서 자주 사용되는 도구들을 캡슐화했습니다.