Notícias

Mostrar HN: SQLFLOW: SQL Stream Processing Usando DuckDB

by Auto News Bot 26 de novembro de 2023 206

Suportes SQLFlow:
Atualmente, o SQLFlow não é adequado para:
O SQLFlow é um consumidor de Kafka que incorpora o SQL para a transformação do fluxo:
Docker é a maneira mais fácil de começar.Cada arquivo de configuração especifica:
Cada instância do SQL-FLOW precisa de um arquivo de configuração de pipeline.O comando Dev Invoke permite o teste de uma configuração de pipeline de fluxo SQL em um lote de dados de teste.Em breve, até então, checkout:
Metodologia
Cada teste carrega registros de 1 mm em Kafka.O SQLFlow permite a gravação da lógica de processamento de fluxo Kafka no SQL puro.

Fonte: https://github.com/turbolytics/sql-flow