flink

Apache Flink

Blog de aprendizado de Flink. Contém introdução, conceitos, princípios, prática, otimização de desempenho e análise de código-fonte do Flink. Inclui casos de estudo sobre Flink Connector, Metrics, Library, DataStream API, Table API & SQL, além de projetos de grande escala (PVUV, armazenamento de logs, deduplicação de dados em tempo real, monitoramento e alertas).

Notebook baseado na web que permite análise de dados interativa e orientada a dados, além de documentos colaborativos com SQL, Scala e mais.

Flink CDC é uma ferramenta de integração de dados em streaming

GitHub do programador e especialista em blogs CSDN, Xin Chen, contendo uma classificação detalhada de mais de seiscentos artigos originais e código-fonte relacionado, abrangendo Java, Docker, Kubernetes e DevOps.

:helicopter::rocket: Sistema de recomendação de produtos em tempo real baseado no Flink. O Flink calcula a popularidade dos produtos, armazena no cache do Redis, analisa informações de logs, e salva tags de perfil e registros em tempo real no HBase. Após o usuário fazer uma requisição de recomendação, reordena a lista de popularidade com base no perfil do usuário e combina os módulos de recomendação de filtragem colaborativa e tags para adicionar produtos relacionados a cada item da lista recém-gerada, retornando finalmente a nova lista de usuários.

Um framework de integração de dados

Dinky é uma plataforma de desenvolvimento de dados em tempo real baseada no Apache Flink, que permite o desenvolvimento, implantação e operação ágil de dados.

Alink é a plataforma de algoritmos de Machine Learning baseada em Flink, desenvolvida pela equipe PAI da plataforma de computação do Alibaba.

Apache Paimon é um formato de lake que permite construir uma arquitetura Realtime Lakehouse com Flink e Spark para operações de streaming e batch.

DataSphereStudio é um portal de desenvolvimento e gerenciamento de aplicações de dados completo, cobrindo cenários como troca de dados, dessensibilização/limpeza, análise/mineração, medição de qualidade, visualização e agendamento de tarefas.

LakeSoul é um framework Lakehouse nativo em nuvem, de ponta a ponta e em tempo real, para ingestão rápida de dados, atualizações concorrentes, análises incrementais, processamento de dados multimodais e busca vetorial — impulsionando cargas de trabalho de BI e IA de próxima geração.

Aprendizado de Big Data do zero, incluindo vídeos de treinamento, materiais de entrevista e guias de estudo para cada etapa.

Sistema de análise de big data de fluxo de passageiros do metrô de Shenzhen 🚇🚄🌟

O mecanismo de SQL de streaming unificado mais rápido em um único binário C++. ⚡ Latência de milissegundos. Throughput de 100+ GB/s. Calcule continuamente contexto em tempo real a partir de streams, logs, métricas, eventos e CDC.

Extensão para SQL em tempo real baseada no Flink open source; implementa principalmente join entre streams e tabelas de dimensão, suportando toda a sintaxe nativa do Flink SQL.

Plataforma Cloud Native de DataOps e AIOps

Plataforma web de computação em fluxo contínuo em tempo real baseada em Flink

Repositório de conhecimento de Big Data abrangendo modelagem de data warehouse, computação em tempo real, Big Data, data middle platform, design de sistemas, Java, algoritmos, etc.

Mais de 2000 perguntas de entrevista para engenheiros de dados.

Suporte a DataOps de ontologia ágil baseado em Flink, DataX e Flink-CDC com interface web.

Taier é uma plataforma de desenvolvimento de big data para submissão, agendamento, operação, manutenção e exibição de informações de indicadores.

[Edição 2026] Soluções de construção e código prático para Big Data, análise de dados, sistemas de e-commerce, data warehouses em tempo real e offline, e data lakes, envolvendo componentes como #flink #paimon #doris #seatunnel #dolphinscheduler #datart #dinky #hudi #iceberg.

Apache Amoro (em incubação) é um sistema de gerenciamento de Lakehouse construído sobre formatos de data lake abertos.

Operador Kubernetes para Apache Flink

Mais um analisador de UserAgent.

O Apache Flink SQL Cookbook é uma coleção selecionada de exemplos, padrões e casos de uso do Apache Flink SQL. Muitas das receitas são totalmente autossuficientes e podem ser executadas na Ververica Platform como estão.

O scaffolding Flink-Boot Lazy Squirrel faz com que o Flink abrace totalmente o ecossistema Spring, permitindo que desenvolvedores criem programas de processamento de fluxo distribuído usando o modo de desenvolvimento Java WEB.

Conheça melhor seus dados! Datavines é uma plataforma de observabilidade de dados de nova geração, com suporte para gerenciamento de metadados e qualidade de dados.

Ferramenta low-code para automatizar ações em dados em tempo real | Processamento de fluxo para os usuários.