Open Business Intelligence

La red del Business Intelligence

Como aumentar rendimiento de carga en Pentaho ETL?

Buen día gente. Una vez más necesito ayuda de ustedes para resolver un problema que tengo en Pentaho ETL, específicamente a la hora de correr transformaciones de carga de datos en la DB (Microsoft SQL Server 2008 R2). He notado que a medida que las transformaciones se prologan en su tiempo de finalización, la velocidad con que realiza el proceso ETL va disminuyendo considerablemente. Esto repercute directamente en los tiempos de finalización de la transformación, que es lo que quiero mejorar.  

Para que tengan en cuenta la cantidad de registros que proceso pude ser mayor (a veces tengo casos que superan el millón) o menor. Siempre la velocidad de procesamiento va en disminución.

Me gustaría que alguien me ayudara, si es posible, a aumentar este rendimiento, o si es posible mantener la velocidad del procesamiento a niveles cercanos a cuando inicia la trasformación (que es cuando es mayor a 1000), que cuando finaliza (solo entre 3 y 2).   

Estos valores los observo en la parte de “Execution Results”

Cuál es el problema?; Son las transformaciones?; Es la base de datos o algún otro problema?

Espero puedan entender lo plateado y ayudarme. Desde ya muchas gracias!

Saludos.

Visitas: 664

Responde a esto

Distintivo

Cargando…

© 2021   Creado por Emilio.   Tecnología de

Emblemas  |  Reportar un problema  |  Términos de servicio