Resultados de la búsqueda a petición "azure-data-lake"

1 la respuesta

Stream Analytics: ruta de salida dinámica basada en la carga útil del mensaje

Estoy trabajando en una solución de análisis de IoT que consume mensajes formateados de Avro disparados en un Azure IoT Hub y (con suerte) usa Stream Analytics para almacenar mensajes en Data Lake y el almacenamiento de blobs. Un requisito clave ...

2 la respuesta

Cómo elegir entre análisis de lago de datos de Azure y Azure Databricks

Azure data lake analytics y azure databricks se pueden usar para el procesamiento por lotes. ¿Podría alguien ayudarme a entender cuándo elegir uno sobre otro?

3 la respuesta

Salida U-SQL en Azure Data Lake

¿Sería posible dividir automáticamente una tabla en varios archivos en función de los valores de columna si no sé cuántos valores clave diferentes contiene la tabla? ¿Es posible poner el valor clave en el nombre del archivo?

1 la respuesta

¿Cuál es el tamaño máximo permitido para String en U-SQL?

mientras proceso un archivo CSV, recibo un error sobre el tamaño máximo de la cadena. "El tamaño de la cadena excede el tamaño máximo permitido".

1 la respuesta

Azure Data Lake Analytics: combine la duración del tiempo de superposición con U-SQL

Quiero eliminar la duración del tiempo superpuesto de los datos CSV colocados en Azure Data Lake Store usando U-SQL y combinar esas filas. El conjunto de datos contiene la hora de inicio y la hora de finalización con varios otros atributos para ...

1 la respuesta

U-SQL - Extrae datos de json-array

Ya probé la opción JSONPath sugerida, pero parece que JSONExtractor solo reconoce el nivel raíz. En mi caso, tengo que lidiar con una estructura json anidada, con una matriz también (ver ejemplo a continuación). ¿Alguna opción para extraer esto ...

1 la respuesta

¿Cómo particiono un archivo grande en archivos / directorios usando solo U-SQL y ciertos campos en el archivo?

Tengo un CSV extremadamente grande, donde cada fila contiene identificadores de clientes y tiendas, junto con información de la transacción. El archivo de prueba actual es de alrededor de 40 GB (aproximadamente 2 días), por lo que la partición es ...

1 la respuesta

¿Instalar Azure U-SQL Extensions para ejecutar scripts de R / Python localmente?

Podemos extender scripts U-SQL con código R / Python en Azure Data Lake Analytics, pero ¿cómo podemos hacerlo localmente?

1 la respuesta

Azure Data Lake Store Archivo leído usando el componente de secuencia de comandos SSIS

Agradece tus sugerencias. Mi requisito es, leer el archivo json de ADLS usando SSIS y cargarlo en la tabla SQL Implementación: he implementado el código para leer el contenido del archivo json en la aplicación .Net Console. Esto funciona bien ...