Importar datos desde Azure Blob Storage es demasiado lento

Estaba intentando importar mis datos almacenados como JSON en Azure Blob Storage. Pero el conector parece ser demasiado lento y tarda alrededor de 2 horas en traer 15 MB de datos. ¿Podemos mejorar esto? Por que tarda tanto ?

Mi configuración de almacenamiento de blobs es

Nivel de rendimiento / acceso

Estándar / Caliente

Replicación

Almacenamiento con redundancia geográfica de acceso de lectura (RA-GRS)

Tipo de cuenta

StorageV2 (propósito general v2)

Déjame saber qué puedo hacer al respecto.

Hola @saurabhabh

Al importar datos de Azure Blob Storage, generalmente es lento.

Algunos consejos que puede probar:

1. Deshabilite «Datos de fondo» y «carga paralela de tablas» en los archivos actuales en las opciones.

2. Si sus archivos tienen muchas columnas de tipo de fecha / hora, puede deshabilitar Carga de datos -> Fecha / hora automática, por lo que detrás de escena no crea una tabla de fecha automáticamente, lo que lleva tiempo.

3. Desactive la consulta de carga.

Deshabilitar la carga no significa que la consulta no se actualizará, solo significa que la consulta no se cargará en la memoria.

4. Puede filtrar su tabla de recursos y simplemente retener los datos necesarios antes de cargar todos los datos en el modelo.

Cambiar los datos de JSON Blob durante la importación

Además, puede seguir esos dos artículos para optimizar el modelo de datos y mejorar el rendimiento:

Prácticas recomendadas para la importación de datos en Power BI
Sugerencias y técnicas de rendimiento de Power BI

Atentamente
Maggie

Equipo de apoyo de la comunidad _ Maggie Li
Si esta publicación ayuda, entonces por favor considere Acéptalo como la solución para ayudar a los demás miembros a encontrarlo más rápidamente.