streaming-data

Uma lista curada de frameworks de big data, recursos e outras coisas incríveis.

Interface web de código aberto para gerenciamento do Apache Kafka.

Miller é como awk, sed, cut, join e sort para dados indexados por nome, como CSV, TSV e JSON tabular

Processamento de fluxo sofisticado tornado operacionalmente simples

A camada de dados em tempo real para aplicativos e agentes de IA. Crie visualizações atualizadas do seu negócio usando apenas SQL

Aprendizado de máquina online em Python

Readyset é uma camada de cache compatível com MySQL e Postgres que atua à frente de bancos de dados existentes para acelerar consultas e escalar horizontalmente o throughput de leitura. Internamente, o ReadySet armazena os resultados de instruções select e os atualiza incrementalmente à medida que os dados subjacentes mudam.

🦀 processamento de fluxo de eventos para desenvolvedores coletarem e transformarem dados em movimento para alimentar aplicações responsivas intensivas em dados.

Utilitários para streaming de arquivos grandes (S3, HDFS, gzip, bz2...)

Interface web de código aberto para gerenciar clusters Apache Kafka

Uma biblioteca leve de processamento de fluxo para Go

Processamento de fluxo em Python

Pravega - Streaming como uma nova primitiva de armazenamento definida por software

DataFrames de streaming em Python para Kafka

Processamento de fluxo em tempo real para Python.

Trill é um processador de consultas de nó único para dados temporais ou de streaming.

O Superdiff fornece um diff rico e legível para arrays, objetos, textos e coordenadas. Ele suporta entradas de fluxo e arquivo para lidar com grandes conjuntos de dados de forma eficiente, é testado em batalha, não possui dependências e oferece desempenho de alto nível.

📐 Expandindo os limites da simplicidade

⚡ Algoritmos de passagem única para estatísticas

HStreamDB é um banco de dados de streaming nativo em nuvem e de código aberto para IoT e além. Modernize sua pilha de dados para aplicações em tempo real.

Uma lista sobre o Apache Kafka

Binning ótimo: binning monotônico com restrições. Suporta binning ótimo em lote e streaming. Modelagem de Scorecard e explicações contrafactuais.

🌲 Implementação do algoritmo Robust Random Cut Forest para detecção de anomalias em streams

Shioaji: nova API multiplataforma para negociação ( 跨平台證券交易API )