Como socio tecnológico oficial, Orchestra continuará desarrollando su mejor integración de flujo de trabajo con Snowflake. Nuestra integración representa una mejora significativa de los plugins actuales en las herramientas de orquestación de flujos de trabajo, y permite a los usuarios obtener una visibilidad completa de los pipelines de datos end-to-end que aprovechan Snowflake.
«Convertirnos en socio tecnológico oficial de Snowflake es una prueba del increíble trabajo del equipo de Orchestra y de las opiniones de nuestros clientes. Los plugins de código abierto no pueden seguir el ritmo de desarrollo de Snowflake, lo que puede dejar atrás a algunos equipos de datos», afirma Hugo Lu, CEO de Orchestra. «Al integrarnos profundamente con Snowflake, hemos permitido a los clientes aprovechar al máximo las nuevas funciones para impulsar más resultados con los datos, mejorar la eficiencia y mantener una visibilidad completa de sus canalizaciones de datos».
Creemos que para proporcionar a los equipos de datos en Snowflake la mejor experiencia posible, es esencial una integración profunda que gestione la orquestación, los metadatos y la supervisión de la calidad de los datos. Por ello, Orchestra es una de las dos únicas empresas del sector de la orquestación de flujos de trabajo que se ha asociado oficialmente con Snowflake. También se une a empresas como Monte Carlo, Acryl Data (datahub) y AccelData como socio oficial en la categoría de observabilidad.
«Estamos muy contentos de seguir ayudando a los equipos de datos que aprovechan Snowflake y otras plataformas de ecosistemas de datos, proporcionando una forma verdaderamente integrada y holística de construir, supervisar y optimizar las canalizaciones de datos«.
Tabla de contenidos
¿Qué es Orchestra?
Orchestra es un plano de control unificado para operaciones de datos, construido específicamente para pilas de datos modulares (y modernas). Orchestra proporciona a los equipos de datos un entorno de desarrollo basado en la interfaz gráfica de usuario para crear canalizaciones de datos. Los equipos de datos también tienen acceso a metadatos completos, capacidad de observación, alertas y una suite de supervisión de la calidad de los datos dentro de la plataforma.
Además de Snowflake, Orchestra se integra profundamente con otras herramientas como Coalesce, dbt, Fivetran, Airbyte, Power BI y Tableau; esto significa que los equipos de datos no tienen que preocuparse de integrar ellos mismos estas plataformas, lo que supone un importante ahorro de horas de desarrollo. De forma exclusiva, Orchestra también se integra profundamente con servicios de infraestructura en la nube como máquinas virtuales, Kubernetes y funciones sin servidor.
Esto convierte a Orchestra en el plano de control unificado ideal para pilas de datos modernas y modulares. Los equipos de datos que utilizan Orchestra no tienen que preocuparse por desarrollar complejos marcos de orquestación, alerta, observabilidad o metadatos, sino que pueden centrarse en generar valor mediante el desarrollo y la mejora de los productos de datos.
¿Cómo se integra Orchestra con Snowflake?
Parte de nuestra misión ha sido siempre mejorar las experiencias de los Data Teams. Hemos querido construir el único plano de control verdaderamente unificado para Data Teams en Snowflake, pero que ofrezca a los ingenieros flexibilidad para utilizar las herramientas del ecosistema que deseen, lo que nos hace bastante únicos.
Enriquecer Coalesce y dbt con costes y e2e lineage
Orchestra aprovecha su integración con Snowflake para los clientes que utilizan Coalesce y dbt. Cuando Orchestra ejecuta un trabajo de despliegue de Coalesce o un comando dbt, Orchestra mostrará el linaje de extremo a extremo una vez completada la ejecución.
Orchestra aprovecha entonces su integración con Snowflake para enriquecer el linaje con información útil, como el coste, las filas modificadas, los bytes procesados, etcétera.
Esto permite a los equipos de datos utilizar Orchestra como un único panel de vidrio para los metadatos de Snowflake, lo que les ayuda a mantener las canalizaciones de datos óptimas y eficientes.
Snowflake Cortex y Calidad de Datos
Orchestra tiene las mejores integraciones con las capacidades de prueba de calidad de datos en Snowflake y Snowflake Cortex. Al proporcionar una envoltura fina alrededor de la funcionalidad existente de Snowflake, los equipos de datos pueden supervisar el cambio de esquema, implementar la detección de anomalías y los monitores de calidad de datos de reglas de negocio a escala en Orchestra.
Orchestra también comprende los monitores de calidad de datos en marcos de transformación como Coalesce y dbt. Esto significa que los equipos de datos pueden supervisar la calidad de los datos de forma holística, en lugar de realizar pruebas varias veces en varios lugares sin ninguna visibilidad (o depender de otra herramienta).
Esto se traduce en pruebas de calidad de datos completamente nativas de Snowflake, que es, con mucho, la forma más eficiente y limpia para que los arquitectos de datos empresariales implementen la calidad de datos a escala.
Soporte personalizado para Snowflake Tasks
Snowflake Tasks es el motor interno de orquestación de Snowflake, y ofrece a los equipos de datos una forma sencilla de activar secuencias o DAG de comandos Snowflake.
Las empresas que utilizan motores de orquestación de flujos de trabajo de código abierto tienen dificultades para comprender lo que ocurre en los diferentes pasos de una tarea Snowflake, ya que no pueden obtener los metadatos subyacentes cuando se completa una tarea.
Orchestra ofrece una visibilidad completa del funcionamiento interno de las tareas de Snowflake. Esto significa que la depuración y el análisis de la causa raíz son rápidos, y que los equipos de datos no se ven penalizados en términos de visibilidad por intentar aprovechar las tareas de los copos de nieve.
Activación y supervisión de consultas
Los usuarios pueden activar y supervisar consultas en Snowflake como parte de canalizaciones de datos de extremo a extremo. Esto es extremadamente útil para los equipos de datos más pequeños que están «empezando», que pueden no requerir un gran marco de transformación como Coalesce o dbt.
Nuestra razón para integrarnos profundamente con Snowflake siempre ha sido mejorar las experiencias de los equipos de datos que no sólo utilizan Snowflake, sino también otras herramientas de pila de datos como Coalesce, dbt, Fivetran y Airbyte.
¿Quién utiliza Orchestra y Snowflake?
Empresas de los sectores de fabricación, logística, sanidad y tecnología utilizan Orchestra. Además de Snowflake, estas empresas utilizan una amplia gama de herramientas (desde dbt hasta Matillion e infraestructuras en Azure, AWS y GCP) junto con Orchestra para obtener una visibilidad completa de toda la pila de datos.
Orchestra es un candidato excelente para cualquier proyecto de transformación digital o migración a la nube. Aprovechar un plano de control unificado para las operaciones de datos desde el principio tiene numerosas ventajas. Entre ellas se incluyen la mejora de la confianza, la resistencia de las canalizaciones de datos, la velocidad y, por supuesto, la garantía de que la calidad de los datos es un «ciudadano de primera clase» desde el primer día.
¿Qué es lo próximo para Orchestra y Snowflake?
Nos complace seguir desarrollando nuestras integraciones con Snowflake para ofrecer a los clientes funcionalidades adicionales. Seguiremos mejorando nuestros monitores de calidad de datos y permitiendo a los usuarios de Orchestra interactuar sin problemas con Snowfake desde el plano de control unificado.
También esperamos explorar casos de uso en torno a Iceberg, Streaming, Dynamic Tables y Generative AI a medida que vayan ganando popularidad. Como Orchestra es el lugar para entender lo que está pasando en toda la pila de datos, será imperativo asegurarse de que estas actividades están cubiertas desde el plano de control unificado.
Para saber más sobre Orchestra, consulte los recursos que figuran a continuación. Para cualquier consulta o pregunta, póngase en contacto con contact@getorchestra.io. Para la prensa, póngase en contacto con Hugo Lu.
Más información sobre Orchestra y sus socios
Nos complace colaborar estrechamente con socios tecnológicos como Snowflake, Google Cloud, Databricks, Coalesce y Airbyte.
También colaboramos con varios consultores y socios de implementación. Consulte nuestra página de socios para obtener más información.
Si deseas obtener más información sobre Orchestra, consulta los siguientes recursos:
- El sitio web de Orchestra
- Suscríbete a nuestro nivel gratuito o comprueba el entorno de demostración
- Documentación
- Demostraciones
- Hable con nosotros – aquí