Dataform

Dataform Core permite a los ingenieros y analistas de datos crear de forma centralizada definiciones de tablas, configurar dependencias, añadir descripciones a las columnas y hacer afirmaciones de calidad de los datos en un único repositorio mediante SQL. 

Las funciones de Dataform Core se pueden adoptar de forma incremental y aditiva sin modificar el código.

Dataform Core es de código abierto y se puede usar de forma local. De este modo, los usuarios no tendrán dependencia de nadie en ningún caso y podrán seguir usándolas de forma más avanzada. 

Dataform gestiona la infraestructura operativa para actualizar tus tablas siguiendo las dependencias entre ellas y usando la última versión de tu código. Puedes hacer un seguimiento de la información sobre el linaje y los datos fácilmente gracias a las integraciones con Dataform. Activa los flujos de trabajo de SQL manualmente o prográmalos a través de Cloud Composer, Workflows, los flujos de procesamiento de datos de BigQuery Studio o servicios de terceros.

Define tablas, corrige problemas con mensajes de error en tiempo real, visualiza dependencias, acepta los cambios en Git y programa flujos de procesamiento en cuestión de minutos desde una única interfaz, sin salir de tu navegador web. 

Conecta tu repositorio con proveedores externos, como GitHub y GitLab. Comprométete con los cambios y envía o abre revisiones de código desde tu navegador web.