После исправления эта проблема исчезла.
ыло несколько SO статей оHive/Hadoop Ошибка «Невозможно переместить источник». Многие из них указывают на проблему с разрешениями.
Тем не менее, на моем сайте я увидел ту же ошибку, но я совершенно уверен, что это не связано с проблемой разрешения. Это потому, что проблема с перебоями - она работала один день, но не получилась в другой день.
Таким образом, я более внимательно изучил сообщение об ошибке. Он жаловался на неспособность перейти от
.../.hive-stating_hive.../-ext-10000/part-00000-${long-hash}
исходный путь к пути назначения
.../part-00000-${long-hash}
папка. Будет ли это наблюдение звонить в колокол с кем-то?
Эта ошибка была вызвана очень простым тестовым запросом: просто вставьте строку в тестовую таблицу (см. Ниже)
Сообщение об ошибке
org.apache.hadoop.hive.ql.metadata.HiveException:
Unable to move source
hdfs://namenodeHA/apps/hive/warehouse/some_db.db/testTable1/.hive-staging_hive_2018-02-02_23-02-13_065_2316479064583526151-5/-ext-10000/part-00000-832944cf-7db4-403b-b02e-55b6e61b1af1-c000
to destination
hdfs://namenodeHA/apps/hive/warehouse/some_db.db/testTable1/part-00000-832944cf-7db4-403b-b02e-55b6e61b1af1-c000;
Запрос, который вызвал эту ошибку (но только периодически)
insert into testTable1
values (2);