junio 29, 2022

Voltron apoyará el proyecto de análisis de datos de código abierto de Ibis

Para fortalecer aún más nuestro compromiso de brindar una cobertura de tecnología de datos líder en la industria, VentureBeat se complace en dar la bienvenida a Andrew Brust y Tony Baer como colaboradores regulares. Vea sus artículos en la canalización de datos.

Voltron Data, proveedor de servicios de soporte comercial para Apache Arrow, anunció hoy la incorporación de una oferta de soporte empresarial para Ibis, un marco Python de código abierto para estandarizar análisis y consultas en múltiples backends. La medida es el siguiente paso en la construcción de la cartera de ofertas de soporte comercial de Voltron Data y promueve el objetivo de la compañía de continuar invirtiendo en tecnologías de fuente abierta. Este anuncio llega a The Data Thread, un evento de aprendizaje virtual organizado por Voltron Data para destacar Apache Arrow y sus aplicaciones prácticas, así como para reunir a profesionales, líderes de la industria y miembros de la comunidad Arrow.

Establecer estándares

VentureBeat habló con Josh Patterson, director ejecutivo de Voltron Data, y habló sobre la importancia de crear estándares y comunicaciones entre sistemas para eliminar los puntos débiles y reducir la duplicación de esfuerzos.

Apache Arrow e Ibis están diseñados para proporcionar soluciones estandarizadas a puntos débiles comunes. Apache Arrow es un proyecto de código abierto desarrollado para proporcionar un formato unificado para la representación en memoria de datos vectoriales, lo que elimina la necesidad de serializar y deserializar datos en múltiples formatos. Eliminar la duplicación de trabajo genera eficiencias y, como dijo Patterson, «simplemente permite a los desarrolladores concentrarse en las cosas en las que quieren concentrarse».

Ibis es una API de marco de datos de Python y proporciona un marco estandarizado para acceder a datos y consultar múltiples backends usando Python. Los backends admitidos consisten en bases de datos SQL y bases de datos de análisis de big data, incluidos Google BigQuery, Heavy.ai (anteriormente OmniSci), PostgreSQL, MySQL y otros. Ibis permite a los desarrolladores escribir un tipo de código para apuntar a múltiples sistemas y cambiar entre backends si es necesario, manteniendo el mismo marco. Patterson dijo: «Le da a los usuarios la libertad de no tener que seguir reescribiendo su código si cambia la forma en que calculan».

“Cuantas más personas se basen en estos estándares como Arrow [and] Ibis, cuanto más podamos comenzar a construir sistemas cada vez mejores «, dijo Patterson. Hay mucho desperdicio en el ecosistema serializando datos, también hay mucho desperdicio simplemente reescribiendo el código, una y otra vez a medida que cambian los sistemas, y por lo tanto esto El tipo de front-end estándar es realmente importante para comenzar a reducir estos inhibidores de la innovación”.

Una extensión natural

Voltron Data se lanzó en febrero de 2022 con una oferta de soporte empresarial para Apache Arrow. El cofundador y CTO de Voltron Data, Wes McKinney, también es cocreador de Apache Arrow, Ibis y el proyecto Python Pandas, así como desarrollador y miembro del comité de gestión de proyectos de Apache Parquet. La compañía dice que la decisión de introducir soporte comercial para Ibis fue en parte el resultado de la gran demanda de los clientes. Patterson dijo: «Los propios clientes de Arrow están preguntando… bueno, ¿qué pasa con Ibis? Ven que las mismas personas mantienen estos proyectos» y, como resultado, «sentimos que era una extensión natural».

¿Velocidad de elevación?

Las eficiencias y los beneficios generados por Apache Arrow e Ibis provienen de su capacidad para brindar una solución unificada a los puntos débiles de los usuarios. Cuanto más se adopta un estándar, más valor tiende a aportar, con Pandas y su paradigma de marco de datos como ejemplo. No está claro si Ibis puede lograr una adopción y un valor comparables, pero el movimiento de Voltron tiene sentido y debería ayudar a estandarizar el desarrollo de software basado en datos en lugar de fragmentarlo.

La misión de VentureBeat debe ser una plaza de la ciudad digital para que los tomadores de decisiones técnicas obtengan información sobre la tecnología y las transacciones comerciales transformadoras. Obtenga más información sobre la membresía.

Deja una respuesta

Tu dirección de correo electrónico no será publicada.