transformer

🔍 Framework Multi-agen berbasis LLM untuk mesin pencari web (seperti Perplexity.ai Pro dan SearchGPT).

Framework untuk inferensi model yang efisien dengan model omni-modality

Repositori GitHub untuk makalah "Informer" yang diterima oleh AAAI 2021.

Optimasi terkait Transformer, termasuk BERT, GPT

Deret waktu, Deep Learning deret waktu, Machine Learning, Python, Pytorch, fastai | Pustaka Deep Learning mutakhir untuk deret waktu dan urutan dalam Pytorch / fastai.

Kuantisasi, kernel, runtime, dan mesin inferensi untuk perangkat seluler, perangkat yang dapat dikenakan, rumah pintar, dan robot.

Tutorial implementasi beberapa model sequence-to-sequence (seq2seq) menggunakan PyTorch dan TorchText.

SwinIR: Restorasi gambar menggunakan Swin Transformer (repositori resmi)

Router Mixture-of-Models yang dapat diprogram untuk inferensi LLM heterogen.

Toolkit Pengenalan Ucapan End-to-End yang siap pakai dan mengutamakan produksi

Daftar makalah yang sangat komprehensif mengenai Vision Transformer/Attention, mencakup makalah, kode, dan situs web terkait.

Framework sumber terbuka untuk Prompt-Learning.

Kitab suci pengantar AI yang jelas dan mudah dipahami, mudah dikuasai oleh pelajar maupun insinyur. Mencakup dari neural network hingga LLM, desain tingkat atas hingga prinsip mikro, serta implementasi teknik hingga dasar algoritma. Setelah mempelajarinya, semua orang dapat sepenuhnya memahami mengapa kemampuan prediksi token berikutnya yang tampak sepele ini dapat mengubah dunia, dan juga menyadari bahwa AI ternyata tidak seseram atau setinggi itu. Mari kita taklukkan!

Transformer: Implementasi PyTorch dari "Attention Is All You Need"

Platform sumber daya wawancara untuk insinyur algoritma AIGC/LLM/AI Agent. Mencakup materi wawancara dan pengetahuan inti untuk AIGC, LLM, AI Agent, AI fisik, deep learning tradisional, visi komputer, NLP, mengemudi otonom, machine learning, reinforcement learning, big data, world models, metaverse, dan AGI.

Backbone AI efisien termasuk GhostNet, TNT, dan MLP, dikembangkan oleh Huawei Noah's Ark Lab.

Algoritma peramalan neural yang dapat menskalakan dan ramah pengguna.

Kursus pengantar, lanjutan, khusus, studi kasus akademik, praktik industri, ensiklopedia pengetahuan, dan bank soal wawancara Deep Learning dan AI.

Implementasi resmi PyTorch untuk SegFormer

Kumpulan makalah tentang transformer dengan visi. Awesome Transformer with Computer Vision (CV)

Towhee adalah kerangka kerja yang didedikasikan untuk membuat alur kerja pemrosesan data saraf menjadi sederhana dan cepat.

Kami ingin membuat repositori untuk mengilustrasikan penggunaan transformers dalam bahasa Mandarin

Repositori ini berisi daftar bacaan makalah tentang Peramalan/Prediksi Deret Waktu (TSF) dan Peramalan/Prediksi Spasio-Temporal (STF). Makalah-makalah ini terutama dikategorikan berdasarkan jenis model.

Arsitektur fondasi untuk (M)LLM

Pabrik faktor otomatis sumber terbuka berbasis deep reinforcement learning.

Pipeline NLP berbasis Rust yang siap pakai dan model berbasis transformer (BERT, DistilBERT, GPT2,...)

[AutoArk] GPA (General Purpose Audio) dapat melakukan ASR, TTS, dan konversi suara dengan satu model kecil!

Daftar sumber daya pilihan (makalah, kode, data, dll.) mengenai transformer dalam deret waktu.

Penghitung Flops untuk jaringan saraf dalam framework pytorch

Kuantisasi native PyTorch untuk pelatihan dan inferensi