Мы выполняем запрос на производстве и собираем результаты в плоском файле. Затем этот файл отправляется конечному пользователю по почте. Этот файл содержит миллионы записей.
Наш запрос выполняется примерно за 10 минут, но перенаправление вывода в плоский файл занимает 30-40 минут.
Можно ли как-то ускорить перенаправление?
insert overwrite table or directoryи получите файл на локальном компьютере с помощьюhadoop fs -get /hdfs/source/path /localfs/destination/path- person leftjoin schedule 21.04.2019