tokenization
Repositorios de código abierto monitorizados etiquetados con tokenization, ordenados por estrellas.
Temas relacionados
Temas que aparecen con frecuencia junto a tokenization en un mismo repositorio.
Emergentes recientes
Repositorios creados en los últimos 90 días, etiquetados con tokenization.
No hay repositorios nuevos con este tema en los últimos 90 días.
- #1★ 33.861+23Variación de estrellas de los últimos 7 días
- #2
🎒 Token-Oriented Object Notation (TOON) – serialización compacta y legible por humanos de datos JSON para prompts de LLM. SDK de TypeScript, CLI y benchmarks.
★ 25.275+55Variación de estrellas de los últimos 7 días - #3★ 4067+18Variación de estrellas de los últimos 7 días
- #4★ 2005+0Variación de estrellas de los últimos 7 días
- #5
Bóveda segura para registros PII/PHI/PCI/KYC de clientes
★ 1484+1Variación de estrellas de los últimos 7 días - #6
LunaSec: escáner de seguridad de dependencias que le notifica automáticamente sobre vulnerabilidades como Log4Shell o node-ipc en sus Pull Requests y compilaciones. Protéjase en 30 segundos con la aplicación GitHub LunaTrace: https://github.com/marketplace/lunatrace-by-lunasec/
★ 1469+0Variación de estrellas de los últimos 7 días - #7★ 1119+2Variación de estrellas de los últimos 7 días
- #8
👑 Bloques de construcción y visualizadores de spaCy para aplicaciones Streamlit
★ 860+0Variación de estrellas de los últimos 7 días - #9
Trankit es un kit de herramientas de Python ligero basado en Transformer para el procesamiento de lenguaje natural multilingüe
★ 798+2Variación de estrellas de los últimos 7 días - #10
Ekphrasis es una herramienta de procesamiento de texto orientada a redes sociales como Twitter o Facebook. Realiza tokenización, normalización de palabras, segmentación (para dividir hashtags) y corrección ortográfica, utilizando estadísticas de palabras de dos grandes corpus (Wikipedia en inglés y 330 millones de tuits en inglés).
★ 673-1Variación de estrellas de los últimos 7 días - #11
Tokenizador de subpalabras no codicioso y entrenador de vocabulario para Python, Go, C++ y Javascript
★ 627+0Variación de estrellas de los últimos 7 días - #12
Canalización de procesamiento de lenguaje natural: división de oraciones, tokenización, lematización, etiquetado gramatical y análisis sintáctico de dependencias
★ 562+0Variación de estrellas de los últimos 7 días - #13
PHP Text Analysis es una biblioteca para realizar tareas de recuperación de información (IR) y procesamiento de lenguaje natural (NLP) utilizando el lenguaje PHP.
★ 534+0Variación de estrellas de los últimos 7 días
