actualización de la carpeta de sharepoint muy lento

Un usuario Pregunto ✅

Anónimo

¿Por qué la actualización de 1,1 millones de filas de csv en la carpeta de Sharepoint tarda aproximadamente 1 hora?

mientras se actualizan los mismos datos guardados localmente, tarda 1 minuto?

Hola Gordon2,

Si su fuente de datos está en línea, como en onedrive o sharepoint en línea, utilizan actualización automática. Esto significa que no es necesaria ninguna configuración de usuario para que el conjunto de datos se actualice de forma regular. Power BI configura la configuración de actualización de datos. Para los proveedores de servicios en línea, la actualización suele realizarse una vez al día. Para los archivos cargados desde OneDrive, la actualización automática se produce sobre cada hora para datos que no provienen de una fuente de datos externa. Si bien puede configurar diferentes configuraciones de actualización de programación y actualizar manualmente, probablemente no sea necesario.

Saludos,

Jimmy Tao

Anónimo

En respuesta a v-yuta-msft

Gracias Jimmy

Lamentablemente, no se actualiza automáticamente. Incluso no quiero que esto se actualice automáticamente.

Cada mes, mi cliente coloca un archivo csv en su ondrive / sharepoint, que tengo que volver a conectar al panel de control bi.

Este archivo ahora tiene aproximadamente 1,1 millones de filas y pesa más de 1 GB. Se tarda más de una hora en actualizar (si no obtengo el error de tiempo de espera).

Mi suposición es que el conector a la carpeta sharepoint es muy, muy ineficiente. Actualizar el mismo archivo desde mi computadora local no es un problema. Funciona bastante rápido. Por tanto, no se trata de un problema de tamaño del conjunto de datos. No me diga que modifique la arquitectura para almacenar datos en un lugar diferente, como una base de datos o un almacenamiento azul. Lo sé, pero en este momento usamos Onedrive / Sharepoint como almacenamiento de datos.

Es una práctica bastante común pero no entiendo por qué no es tan eficiente. Ambos son de Microsofts, ¿no?

Encuentro bastantes discusiones aquí en el foro, la gente trajo preguntas similares. Muchos de ellos sin solución dada.

En respuesta a Anónimo

@Anónimo,

Intente hacer clic en Opciones-> Carga de datos-> Desmarque todas las opciones en Datos de fondo, Inteligencia de tiempo y Relaciones, haga clic en Carga paralela de tablas como se muestra a continuación:

1.PNG

Saludos,

Jimmy Tao

Anónimo

En respuesta a v-yuta-msft

Gracias Jimmy

Permítanme agregar algunos pensamientos. Repetí mis pruebas después de un mes y obtuve resultados totalmente diferentes:

pruebas realizadas a mediados de diciembre (versión de PBI de noviembre de 2018) -> se necesita + 60min para importar al escritorio pbi

pruebas realizadas en mediados de enero (versión de diciembre de 2018 de PBI) -> 5 minutos para importar al escritorio pbi

Supongo que habrá grandes mejoras en el rendimiento en la versión de escritorio de PBI del 18 de diciembre.

También probé la configuración que sugirió y aquí están los resultados.

Con mi configuración original obtuve la hora exacta de 5 min 24 seg para importar datos:

Capture4.PNG

Con una nueva configuración que tengo 5min 09sek para importar datos:

Capture5.PNG

No es una gran diferencia, pero es algo. 🙂

Anónimo

En respuesta a Anónimo

Estoy experimentando exactamente el mismo problema: está tardando mucho tiempo en cargarse un archivo csv de 1,5 millones de filas. No puedo convertirlo a xls porque es demasiado grande. ¿Cómo es el rendimiento de su archivo con la última actualización de pbi (19 de abril)?

Anónimo

En respuesta a Anónimo

Empecé a comprimir archivos csv a csv.gz

Da una reducción significativa en el tamaño y los tiempos de carga.

Con algunos trucos, Power BI puede conectarse a dicho archivo.

RichieRich

En respuesta a Anónimo

Estoy usando la versión de escritorio de noviembre de 2018 y experimentando tiempos de espera de actualización al intentar cargar un archivo csv desde SharePoint Online. El archivo tiene más de 17.000 registros y un tamaño de 45 Mb. Noté que esto es más grande que los 30Mb que se abrirán en Excel en línea. Abrí el archivo y lo guardé como un archivo xlsx en la misma carpeta de SharePoint. Ahora solo se necesitan unos segundos para actualizar. Sin embargo, el tamaño del archivo ahora es de solo 2,25 Mb. Entonces, parece que puedo esperar a que la organización actualice la versión de escritorio o cambiar los archivos csv a xlsx.

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *