Integración - wandent/mutual-wiki GitHub Wiki

#Integración [[TOC]]

Integración/Carga de archivos planos (csv, txt), JSON o otro formato, directamente al datalake store o a un area de landing Permite cargar grandes volúmenes de datos, cargar datos directamente de Azure a Azure, y de on-premises a Azure.

• Para operaciones que ocurran una vez, ejecutar de una maquina local.
• Opción de usar autenticación por Azure Active Directory o usando clave compartida
• Operaciones recurrentes, localmente se puede programar usando el Agendador de Windows.

Persistencia de eventos almacenados en Event Hub, por el uso de el productores de eventos o aplicaciones que apalancan streaming de datos, en el caso el mismo tiene la funcionalidad de almacenar los datos encolados a un storage.

• Operaciones continuadas de carga de datos desde el área de land.
• Persistencia/captura en storage, usando el formato Avro

Azure Data Factory es un servicio de integración de datos escalable, que soporta copiar datos desde diferentes tipos de fuentes de datos a diferentes destinos de datos. Data Factory soporta escalabilidad ya que como PaaS dinámicamente aprovisiona sus motores de integración. Además, permite no solamente copiar datos, como desarrollar procesos complejos de flujos de datos y coordinar tareas con otros productos.

• Para operaciones de carga entre fuentes de datos locales y Azure
• Procesos de carga de datos
• Coordinación de Tareas en Databricks o otro proceso