nlp

[ICLR 2025] 정렬된 LLM에 아무것도 입력하지 않고 프롬프트를 통해 처음부터 정렬 데이터 합성. 효율적이고 고품질의 합성 데이터 생성 파이프라인!

빠른 국제 주소 구문 분석 및 정규화를 위한 libpostal의 Python 바인딩

오픈소스 LLM의 미세 조정(fine-tuning), 제거 연구(ablating) 및 단위 테스트를 위한 툴킷.

Eigen 기반의 가벼운 C++ 비선형 프로그래밍 솔버 인터페이스 (Ipopt, Snopt)

👑 Streamlit 앱을 위한 spaCy 빌딩 블록 및 시각화 도구

다양한 NLP 태스크를 위해 transformers를 파인튜닝하는 튜토리얼이 포함된 Github 저장소입니다.

🚀 Catalyst는 속도를 위해 구축된 C# 자연어 처리 라이브러리입니다. spaCy의 디자인에서 영감을 받아 사전 학습된 모델, 단어 및 문서 임베딩 학습에 대한 기본 지원, 유연한 개체명 인식 모델을 제공합니다.

PHP용 언어 감지 라이브러리. 감지 대상 텍스트 문자열에서 언어를 판별합니다.

🔥 머신러닝/딥러닝/Python/대형 모델/멀티모달/LLM/알고리즘 면접/NLP 튜토리얼

몇 줄의 코드만으로 ColPali와 같은 지연 상호작용(late-interaction) 멀티모달 모델을 사용해 보세요.

코드 생성 작업을 위해 설계된 새로운 모델. HumanEval 기본 데이터셋 테스트 정확도가 GPT-4 Turbo(2024년 4월) 및 GPT-4o를 상회함

머신러닝, 딥러닝, 생성형 AI, NLP 및 데이터 과학을 아우르는 고품질 AI 도구, API, 데이터셋 및 학습 리소스 모음입니다. 개발자, 연구자 및 크리에이터가 AI를 활용해 더 빠르게 개발할 수 있도록 돕습니다.

인도 언어를 위한 자연어 처리 툴킷으로, 애플리케이션 개발자가 필요로 하는 다양한 NLP 작업에 대해 즉시 사용 가능한 지원을 제공하는 것을 목표로 합니다.

DeepResearch Bench: 심층 연구 에이전트를 위한 종합 벤치마크

API 키 비용 문제로 온라인 버전은 일시적으로 사용할 수 없습니다. 복제하여 로컬에서 실행할 수 있습니다. 참고: 기본 OpenAI 키가 설정되어 있습니다. 키가 한도를 초과하거나 유효하지 않은 경우 알려주시기 바랍니다. 응답 속도는 OpenAI에 따라 다릅니다(가끔 공식 서버가 혼잡하고 느릴 수 있음).

Java 및 JVM을 위한 가장 정확한 자연어 감지 라이브러리로, 긴 텍스트와 짧은 텍스트 모두에 적합합니다.

CSV, PDF, TXT 파일 📄 및 YTB 동영상 🎥과 대화할 수 있는 AI 챗봇 🤖 | Langchain🦜 | OpenAI | Streamlit ⚡ 사용

샤오미(XiaoMi) 자연어 처리 툴킷

OCTIS: 토픽 모델 비교가 간단해집니다! 토픽 모델을 최적화하고 평가하기 위한 파이썬 패키지 (EACL2021 데모 트랙 채택)

GPT 3.5, GPT-4 Turbo, Claude 및 로컬 오픈소스 LLM을 통해 여러 문서(pdf 및 txt)와 연결하고 대화하세요

다국어 자연어 처리를 위한 경량 Transformer 기반 Python 툴킷 Trankit

LexPredict의 LexNLP

Kiwi(지능형 한국어 형태소 분석기)

DNABERT: 게놈 내 DNA 언어를 위한 사전 학습된 Bidirectional Encoder Representations from Transformers 모델

기계 번역(MT) 평가를 위한 신경망 프레임워크입니다.

PatrickStar는 더 크고 빠르며 친환경적인 NLP 사전 학습 모델을 구현하고 AI 대중화를 지원합니다.

파인튜닝을 통해 RAG 작업을 위한 LLM을 강화하는 프레임워크

최근 몇 년간 신경망 모델 해석 가능성에 관한 딥러닝 고인용/Top-tier 학회 논문 모음 (코드 포함)

올인원 텍스트 중복 제거 도구

단어 의미 중의성 해소(WSD) 기술의 Python 구현