transformers

생성형 AI로 앱 개발을 시작하기 위한 21가지 레슨

PyTorch를 사용하여 처음부터 단계별로 ChatGPT와 유사한 LLM 구현하기

100개 이상의 LLM 및 VLM을 위한 통합 효율적 미세 조정(ACL 2024)

🧑‍🏫 노트가 나란히 제공되는 딜 러닝 논문 구현/튜토리얼 60개 이상 📝; 트랜스포머(original, xl, switch, feedback, vit 등), 옵티마이저(adam, adabelief, sophia 등), GAN(cyclegan, stylegan2 등), 🎮 강화학습(ppo, dqn), capsnet, 증류 등 🧠

배우고, 만들고, 다른 사람들을 위해 배포하세요.

단일 transformer 인코더만으로 비전 분류에서 SOTA를 달성하는 간단한 방법인 Vision Transformer의 PyTorch 구현

CVPR 2026 논문 및 오픈소스 프로젝트 모음

🤗 PEFT: 최첨단 매개변수 효율적 미세 조정(Parameter-Efficient Fine-Tuning).

머신러닝 엔지니어링 오픈 북

에이전트, 어시스턴트, 기업 검색을 위한 프라이빗 AI 플랫폼. 내장된 에이전트 빌더, 심층 리서치, 문서 분석, 멀티 모델 지원, 에이전트용 API 연결 기능 제공

대규모 트랜스포머 모델 학습을 위한 진행 중인 연구 프로젝트

웹을 위한 최첨단 머신러닝. 서버 없이 브라우저에서 직접 🤗 Transformers를 실행하세요!

RWKV(RwaKuv로 발음)는 GPT 트랜스포머처럼 직접 학습(병렬화 가능)할 수 있으면서도 뛰어난 LLM 성능을 발휘하는 RNN입니다. 현재 RWKV-7 'Goose' 단계에 있습니다. 뛰어난 성능, 선형 시간, 상수 공간(kv-cache 없음), 빠른 학습, 무한한 ctx_len, 무료 문장 임베딩 등 RNN과 트랜스포머의 장점을 결합했습니다.

멋정한 모델 주를 제공하는 사용하기 쉽고 강력한 LLM 및 SLM 라이브러리입니다.

💡 시맨틱 검색, LLM 오케스트레이션, 언어 모델 워크플로우를 위한 올인원 AI 프레임워크

PyTorch 기반 음성 툴킷

HuggingFace의 Transformers 라이브러리로 제작한 데모를 포함하는 저장소입니다.

500개 이상의 사전 학습된 컨볼루션 및 트랜스포머 기반 백본을 갖춘 시맨틱 세그멘테이션 모델

💥 연구 및 프로덕션에 최적화된 고성능 최신 Tokenizers

OpenVINO™는 AI 추론 최적화 및 배포를 위한 오픈 소스 툴킷입니다

텍스트, 이미지, 구조화된 데이터 전반에서 민감한 데이터(PII)를 감지, 편집, 마스킹, 익명화하기 위한 오픈소스 프레임워크입니다. NLP, 패턴 매칭, 사용자 정의 가능한 파이프라인을 지원합니다.

안드로이드에서 로컬로 실행되는 오픈 소스 실시간 번역 앱

Ray를 기반으로 하는 사용하기 쉽고 확장 가능하며 고성능인 에이전틱 RL 프레임워크 (PPO & DAPO & REINFORCE++ & VLM & TIS & vLLM & Ray & 비동기 RL)

코드 한 줄만 바꾸면 GPT를 어떤 LLM으로든 교체할 수 있습니다. Xinference를 사용하면 클라우드, 온프레미스, 노트북에서 오픈소스, 음성, 멀티모달 모델을 단일 프로덕션용 통합 추론 API로 실행할 수 있습니다.

데이터 다운로드부터 텍스트 생성까지, LLM을 학습시키는 간단하고 직관적인 방법

SANA: Linear Diffusion Transformer를 활용한 효율적인 고해상도 이미지 합성

[NeurIPS 2024 Best Paper Award][GPT beats diffusion🔥] [scaling laws in visual generation📈] 'Visual Autoregressive Modeling: Scalable Image Generation via Next-Scale Prediction' 공식 구현체. 자가 회귀 이미지 생성을 위한 *초간단하고 사용자 친화적이면서도 최첨단인* 코드베이스!

BertViz: Transformer 모델의 어텐션 시각화

PaLM 아키텍처 기반의 RLHF(인간 피드백 기반 강화학습) 구현. 기본적으로 PaLM을 사용한 ChatGPT와 유사함

BERT와 c-TF-IDF를 활용하여 쉽게 해석 가능한 토픽 생성