Результаты поиска по запросу "dataflow"

0 ответов

 но я не могу найти использование с Google Cloud. Любые примеры будут полезны.

я есть куча текстовых файлов (~ 1M), хранящихся в облачном хранилище Google. Когда я читаю эти файлы в конвейер Google Cloud DataFlow для обработки, я всегда получаю следующую ошибку: Total size of the BoundedSource objects returned by ...

10 ответов

Он имеет многомасштабный подход и, кажется, завершается (это расширение сети Петри).

акое язык программирования потока данных? Зачем это использовать? и есть ли какие-то преимущества для этого?

1 ответ

Предположим, что порядок группировки не важен, вы можете просто сгруппировать внутри

аюсь сделать что-то вроде этого:Пакетная сборка ПК в Beam / Dataflow [https://stackoverflow.com/questions/44348085/batch-pcollection-in-beam-dataflow] Ответ в приведенной выше ссылке на Java, а язык, с которым я работаю - Python. Таким образом, ...

ТОП публикаций

1 ответ

Большое спасибо за этот ответ, он подробный и понятный, и вы даже сослались на все варианты, которые я упомянул, включая ForEachAsync! +100 :)

я есть требование сделать масштабируемый процесс. Процесс имеет в основном операции ввода-вывода с некоторыми незначительными операциями с процессором (в основном десериализацией строк). Процесс запрашивает у базы данных список URL-адресов, затем ...

2 ответа

verilog количество единиц в массиве

Я пытаюсь узнать количество единиц в 4-битном двоичном числе в Verilog, но ничего не происходит. Я пробовал несколько подходов, это тот, который я думаю, должен работать, но это не так. module ones(one,in); input [3:0]in; output [1:0]one; assign ...

3 ответа

Ленивые свойства потока данных (как электронная таблица) с зависимостями в Python

Моя проблема заключается в следующем: у меня есть несколько классов Python, свойства которых получены из других свойств; и они должны быть кэшированы после их расчета, и результаты кэширования должны быть признаны недействительными при каждом ...

4 ответа

Получить уровень иерархии

У меня есть массив объектов, где каждый объект имеетid иParentId собственности (чтобы они могли быть расположены в деревьях). Они не в определенном порядке. Обратите внимание, чтоidиparentIdне будут целыми числами, они будут строками (просто ...