leer pick editorial #olap-query-engine-rust hallazgo 01 · boletín 2026-09-22

apache/datafusion

motor SQL de consultas OLAP embebible, escrito en Rust y compatible con Arrow. Ofrece la misma representación columnar in-memory que pola-rs/polars, pero expuesta como query engine ejecutable dentro de otra aplicación o servidor. Soporta agregaciones, joins, window functions y subqueries; se integra con APIs DataFrame y corre standalone o como librería.

Estrellas

9.346

Forks

2.426

Lenguaje

Rust

Licencia

Apache-2.0

Issues

—

Estado

—

Cómo funciona

Implementa olap-query-engine-rust

Núcleo

apache/datafusion Rust · Apache-2.0 arrowbig-datadataframedatafusionolappythonquery-enginerust +1

Se cruza con habilita rust-lakehouse usa apache-arrow

Diagrama derivado de madurez_senales (lenguaje, licencia, estado y topics) y de las relaciones que este repo tiene en el grafo de conocimiento. No es una arquitectura del proyecto: es su posición funcional tal como la registran los boletines.

Posición en el ecosistema

apache/datafusion

habilita

rust-lakehouse Concepto · y Cloudflare quiche (QUIC/HTTP3)

apache/datafusion

implementa

olap-query-engine-rust Concepto

apache/datafusion

usa

apache-arrow Concepto

Expandir en el grafo 3D →

Relaciones que aportó este boletín

implementsolap-query-engine-rustnuevo complementspola-rs/polarsnuevo usesapache-arrownuevo enablesrust-lakehousenuevorelevant_tocompany:apache-foundationnuevo

Por qué importa

DataFusion es la pieza que faltaba para cerrar el círculo Arrow en el lado servidor: ya cubrimos pola-rs/polars el 2026-09-19 como primitiva DataFrame del lado Python, y DataFusion es su gemelo del lado Rust — el mismo modelo columnar in-memory de Polars, pero expuesto como motor SQL embebible dentro de cualquier servicio backend o como query engine de un lakehouse distribuido. Si vienes de Polars, la traducción mental es directa: lo que Polars hace dentro de un proceso Python, DataFusion lo hace como dependencia Rust sin Python de por medio. La convergencia Arrow + DataFusion Flight SQL se está convirtiendo en arquitectura de referencia: InfluxDB 3.0, Delta Lake (vía deltalake-rs), GreptimeDB y ParadeDB la usan como capa de consulta. Si estás pensando en montar un lakehouse Rust-native, este es el candidato central; si ya operas uno, te interesa saber que el estándar de facto se está consolidando alrededor de aquí. Madurez contrastada: Apache TLP confirmado (no incubator-), 9.346★, último push hace 2h al cierre de este boletín.

Alerta

clonar y leer datafusion-examples/ para entender el modelo mental; si tienes un servicio Rust que ejecuta queries SQL, DataFusion es la pieza que reemplaza el "SQLite embebido + parseo manual"; no adoptes como build-dependency crítica todavía sin revisar la versión compatible con tu Arrow; vale seguir como "el query engine del stack Arrow"

Acción concreta

DataFusion es la pieza Arrow-native embebible que faltaba para cerrar el círculo con Polars; encaja directamente con PGLite/Postgres como capa de consulta SQL sobre el mismo modelo columnar.

Apariciones · 1

2026-09-22 hallazgo principal
primera vez en el boletín

Señales de madurez (texto original)

9.346★ · 2.426 forks · Rust · Apache-2.0 · creado 2021-04-17 · último push 2026-09-22 (pushed hace 2h). · Apache TLP confirmado (no apache/incubator-). · Topics: arrow, big-data, dataframe, datafusion, olap, python, query-engine, rust, sql. · Default branch main. Actividad diaria continua desde 2021. · Ecosistema derivado: datafusion-python (bindings PyO3), datafusion-flight (Arrow Flight SQL server), datafusion-cli, datafusion-substrait.