hadoop2

0зной

1ответ

Hadoop 2: Пустой результат при использовании пользовательского InputFormat

Я хочу использовать собственный FileInputFormat с пользовательским RecordReader, чтобы читать данные csv в <Long><String> парах. Поэтому я создал класс MyTextInputFormat: import java.io.IOException;

0зной

1ответ

Преобразование формата даты ISO, начиная с строки до даты, дает ошибку?

Я пытаюсь преобразовать формат даты ISO ('2016-06-23T20: 04: 41.914Z'), который находится в формате данных по дате. В Pig Docs есть функция ToDate, которая преобразует строку в Date (this) , Так я про

2зной

1ответ

Hadoop фс сортировка -du-ч по размеру для М, G, T, P, E, Z, Y

Я бег этой команды - sudo -u hdfs hadoop fs -du -h /user | sort -nr и выход не сортируется в терминах концертов , терабайт, д.б. Я нашел эту команду - hdfs dfs -du -s /foo/bar/*tobedeleted | sort -r

2зной

1ответ

Запрос на удержание бесконечного времени на Tez

Ниже приведен запрос, который я пытаюсь запустить в Hive с механизмом выполнения как tez. SELECT A.CITY, A.NAME, B.PRICE ,(ROW_NUMBER() OVER (PARTITION BY A.NAME ORDER BY B.PRICE)) AS RNUM F

1зной

1ответ

Отрицательный размер массива Исключение при вставке в таблицу с кустом Таблица

Я пытаюсь вставить в сортированную таблицу с кукурузой и застрять с исключением отрицательного размера массива, созданного редуктором. Найдите трассировку стека. Error: org.apache.hadoop.mapreduce.tas

3зной

4ответ

Количество переходников в Hadoop

Я узнавал Hadoop, я нашел несколько восстановителей очень запутанным: 1) Количество переходников такое же, как количество разделов. 2) Количество редукторов 0,95 или 1,75, умноженное на (количество уз

1зной

2ответ

Прочтите конфигурацию hadoop Файлы из Unix Path в программе Java

Я разрабатываю приложение Java, и это приложение сохраняет данные результата в HDFS. Приложение Java должно запускаться на моей машине Windows. На данный момент я скопировал конфигурационные файлы Had