Apache DataFusion 54 llega con ingestión nativa de Flight

Apache DataFusion lanzó la versión 54.0.0. La gran noticia: soporte nativo para Apache Arrow Flight. Esto significa que tu pipeline de datos puede hablar con un servidor Flight sin escribir adaptadores custom ni pelearse con capas de serialización. Solo apuntas DataFusion a un endpoint de Flight y empiezas a consultar.

El blog post señala que Flight es el protocolo que Arrow construyó para transferencia de datos de alto rendimiento entre procesos. Elimina al intermediario. No más ida y vuelta de datos por formatos genéricos, no más codificación manual. Empujas los datos, tiras los resultados, y se quedan en memoria como arrays de Arrow todo el camino.

Esto es una actualización silenciosa. No cambia cómo funciona DataFusion por dentro — el motor de consultas sigue siendo el mismo motor rápido, single-threaded que maneja operaciones vectorizadas. Pero cambia cómo conectas DataFusion al resto de tu stack. Si ya usas Flight en producción, esto elimina un punto de fricción. Si no, es otra herramienta en la caja para construir pipelines de datos que no se atragantan con la serialización.

El post es ligero en benchmarks. No hay claims dramáticos de "10x más rápido". Solo un anuncio directo de que la capacidad ya está integrada. Las release notes son la fuente de verdad si quieres la lista completa de cambios.

### Por qué nos importa:

Cuando nuestros side hustles y proyectos comunitarios escalan de una hoja de cálculo a un pipeline de datos real, lo último que necesitamos es otra capa de burocracia entre nuestros datos y nuestras decisiones. Esto es una cosa menos que resolver.