Preguntas etiquetadas con etl

Estoy usando PostgreSQL 9.1 en Ubuntu. ¿ VACUUM ANALYZETodavía se recomiendan los horarios programados , o es suficiente el vacío automático para satisfacer todas las necesidades? Si la respuesta es "depende", entonces: Tengo una gran base de datos (tamaño de volcado comprimido de 30 GiB, directorio de datos de 200 …

38 postgresql  etl  vacuum 

Como parte de nuestro proceso ETL, comparamos las filas de la preparación con la base de datos de informes para determinar si alguna de las columnas realmente ha cambiado desde la última vez que se cargaron los datos. La comparación se basa en la clave única de la tabla y …

29 sql-server  sql-server-2016  etl  sql-clr  hashing 

Pregunta: Tengo un script con alrededor de 45 mil inserciones de declaraciones selectas. Cuando intento ejecutarlo, aparece un mensaje de error que indica que me he quedado sin memoria. ¿Cómo puedo ejecutar este script? Contexto: Se agregaron algunos campos de datos nuevos para que una aplicación funcione bien con otra …

28 sql-server  sql-server-2005  etl 

Cerrado. Esta pregunta está fuera de tema . Actualmente no está aceptando respuestas. ¿Quieres mejorar esta pregunta? Actualice la pregunta para que sea sobre el tema para el intercambio de pila de administradores de bases de datos. Cerrado hace 4 años . Estaba usando Pentaho Data Integration incluso antes de …

26 etl 

Me di cuenta de que mi empresa utiliza un proceso ELT (extracción-transformación-carga) en lugar de utilizar un proceso ETL (extracción-transformación-carga). ¿Cuáles son las diferencias en los dos enfoques y en qué situaciones sería "mejor" que el otro? Sería genial si pudieras proporcionar algunos ejemplos.

19 data-warehouse  etl  business-intelligence 

Estamos haciendo un proceso ETL. Cuando todo está dicho y hecho, hay un montón de tablas que deberían ser idénticas. ¿Cuál es la forma más rápida de verificar que esas tablas (en dos servidores diferentes) sean de hecho idénticas? Estoy hablando tanto de esquema como de datos. ¿Puedo hacer un …

12 sql-server  sql-server-2008-r2  etl  except 

Según mi análisis, un modelo dimensional completo para nuestro almacén de datos requerirá la extracción de más de 200 tablas de origen. Algunas de estas tablas se extraerán como parte de una carga incremental y otras serán una carga completa. Para tener en cuenta, tenemos alrededor de 225 bases de …

12 sql-server  sql-server-2005  ssis  data-warehouse  etl 

Soy bastante nuevo en PostgreSQL, nunca antes había hecho una gran implementación usándolo. Pero tengo una buena experiencia en soluciones empresariales y quiero intentar aplicar algo de lo que aprendí usando PostgreSQL. Tengo un sitio que está dimensionado para manejar gran cantidad de datos y tráfico. La infraestructura se construirá …

11 postgresql  data-warehouse  etl 

Actualmente estoy en el proceso de crear ETL para nuestro almacén de datos. Estamos usando SSIS 2008, pero nos encontramos con problemas, el mayor de los cuales es la dificultad para reutilizar componentes. Tenemos paquetes separados para cada tabla y cada paquete toma como entrada una serie de variables de …

10 sql-server  etl 

He estado investigando la base de datos Redshift de Amazon como un posible reemplazo futuro para nuestro almacén de datos. Mi experiencia siempre ha sido en el uso del modelado dimensional y los métodos de Ralph Kimball, por lo que fue un poco extraño ver que Redshift no admite características …

9 etl  dimensional-modeling  redshift