Результаты поиска по запросу "partitioning"
Можно ли частично обновить материализованное представление в Oracle?
У меня очень сложное представление Oracle, основанное на других материализованных представлениях, обычных представлениях, а также на некоторых таблицах (я не могу «быстро обновить» его). В большинстве случаев существующие записи в этом ...
Как повысить производительность медленных заданий Spark с использованием соединения DataFrame и JDBC?
ользую спарк в режиме кластера и читаю данные из RDBMS через JDBC.Согласно искредокументыэти параметры разделения описывают, как разделить таблицу при паралл...
issues.apache.org/jira/browse/SPARK-14922
пытаюсь удалить несколько разделов одновременно, но изо всех сил пытаюсь сделать это с помощью Impala или Hive. Я попробовал следующий запрос, с и без': ALTER TABLE cz_prd_corrti_st.s1mme_transstats_info DROP IF EXISTS ...
Все зависит от того, как ваша база данных используется, на самом деле. Статистика.
есть база данных InnoDB, которая составляет около 70 ГБ, и мы ожидаем, что она увеличится до нескольких сотен ГБ в ближайшие 2-3 года. Около 60% данных принадлежат одной таблице. В настоящее время база данных работает достаточно хорошо, так как ...
https://issues.apache.org/jira/browse/SPARK-17817
у проверить, как мы можем получить информацию о каждом разделе, например, общее нет. записей в каждом разделе на стороне водителя, когда задание Spark отправляется в режиме развертывания в виде кластера пряжи для регистрации или печати на консоли.
Секционирование с сохранением даты ... но с n-осевыми секциями трудно иметь дело с симуляцией, и нет реальной поддержки, о чем свидетельствует первоначальное ограничение. (Также через 7 лет ограничение в 15к разделов: D)
ли разделить таблицу, используя 2 столбца вместо 1 для функции разделения? Рассмотрим таблицу с 3 столбцами ID (int, primary key, Date (datetime), Num (int)Я хочу разделить эту таблицу на 2 столбца:Date а такжеNum. Это то, что я делаю, чтобы ...
Если вы не осколите состояние, основываясь на том же ключе, что и входные темы, вы потеряете локальность / совместное разбиение данных, и, таким образом, ваше приложение будет вычислять неверные результаты.
арственные магазины в Kafka Streams создаются внутри страны. Государственные хранилища разделены по ключам, но не позволяют обеспечить разделение, кромепо ключу (насколько мне известно). ВОПРОСОВ Какконтролировать количество разделов в ...
Хорошо. Но у меня есть 22Bill строки в таблице с различными значениями в этом столбце раздела, и я не могу дать предикаты для стольких значений.
аюсь переместить данные из таблицы в таблице PostgreSQL в таблицу Hive в HDFS. Для этого я придумал следующий код: val conf = ...
Если данные не содержат такой столбец, вы можете использовать
аюсь записать большой разделенный набор данных на диск с помощью Spark иpartitionBy Алгоритм борется с обоими подходами, которые я пробовал. Перегородки сильно перекошены - некоторые перегородки массивные, а другие крошечные. Проблема № ...