Resultados de la búsqueda a petición "etl"

4 la respuesta

Python - CSV: archivo grande con filas de diferentes longitudes

En resumen, tengo un archivo csv de 20,000,000 líneas que tiene diferentes longitudes de fila. Esto se debe a registradores de datos arcaicos y formatos propietarios. Obtenemos el resultado final como un archivo csv en el siguiente formato. MI ...

5 la respuesta

¿Cómo abordar una misión ETL?

Se supone que debo realizar ETL donde source es una base de datos sql 2k grande y mal diseñada y una base de datos sql 2k5 mejor diseñada. Creo que SSIS es el camino a seguir. ¿Alguien puede sugerir una lista de tareas o una lista de verificación ...

2 la respuesta

Cómo agregar una nueva columna Struct a un DataFrame

Actualmente estoy tratando de extraer una base de datos de MongoDB y usar Spark para ingerir ElasticSearch congeo_points. La base de datos de Mongo tiene valores de latitud y longitud, pero ElasticSearch requiere que se incluyan en elgeo_point ...

2 la respuesta

alterar la tabla luego actualizar en una sola declaración

Tengo un requisito donde necesito Modificar (agregar 2 columnas) y luego actualizar la misma tabla.Aquí está la consulta que he intentado:

5 la respuesta

System.ArgumentException: el objeto no es un ADODB.RecordSet o un ADODB.Record

4 la respuesta

¿Cómo ejecutar un script SQL programado en Amazon Redshift?

Tengo una serie de ~ 10 consultas que se ejecutan cada hora automáticamente en Redshift (tal vez informe de éxito / fracaso). La mayoría de las consultas son agregaciones en mis tablas. He intentado usar AWS Lambda conEventos de ...

1 la respuesta

Cómo unir múltiples bases de datos azules sin derechos para configurar tablas externas?

En mi configuración actual, me conecto a un servidor Azure SQL usando Autenticación = Active Directory - Integrado. Este método de acceso solo permite el acceso a una única base de datos a la vez. La arquitectura se migró de un entorno de ...

1 la respuesta

ERROR SSIS: el intento de agregar una fila al búfer de tareas de flujo de datos falló con el código de error 0xC0047020

Tengo problemas con el proceso SSIS (en realidad, el mismo problema ocurre para dos procesos diferentes). Entonces, estamos haciendo un trabajo ETL usando SSIS. Tenemos un proyecto de Business Intelligence que se ejecuta sin errores desde Visual ...

3 la respuesta

Práctica recomendada para completar tablas de hechos y dimensiones de DB plano transaccional

Quiero completar un esquema / cubo de estrella en SSIS / SSAS. Preparé todas mis tablas de dimensiones y mi tabla de hechos, claves primarias, etc. La fuente es una tabla 'plana' (nivel de elemento) y mi problema ahora es cómo dividirla y ...

3 la respuesta

¿Cómo agregar bibliotecas de terceros al proyecto Talend?

¿Cómo agregar bibliotecas de terceros (archivos jar) a un proyecto de Talend?Una pregunta más es, cada Talend