hadoop2

0зной

1ответ

Hive Job обрабатывается после обработки когда-то

Я запускаю куст на автономной машине. Hadoop работает в псевдораспределенном режиме. Я запускаю запрос куста, который объединяет две таблицы (одна таблица имеет 7M, а другая имеет записи 51M и каждая

1зной

1ответ

Bash - Поиск по метке времени в миллисекундах

Я ищу все выполненные Hadoop задания (100s of) между интервалом времени. Этот интервал времени равен миллисекундам. Ниже приводится формат: JobId State StartTime UserName Queue Priority UsedCo

0зной

1ответ

На каком узле запущен менеджер Cloudera из N узлов usoop?

У меня есть большой кластер сложения (24 узла). У меня есть CLI доступ к этим узлам. Первые несколько не работают с Cloudera Manager (cloudera-scm-server). Как узнать, на каком узле работает менеджер

0зной

1ответ

Apache Spark Преобразование коллекции RDD в одиночный RDD JAVA

У меня есть следующий RDD в моем Java-коде. (1, List(1596, 1617, 1929, 2399, 2674)) (2, List(1702, 1785, 1933, 2054, 2583, 2913)) (3, List(1982, 2002, 2048, 2341, 2666)) То, что я пытаюсь сделать,

3зной

3ответ

искры терпит неудачу в окнах: <console>: 16: ошибка: не найдено: значение sqlContext

установить искру на окнах, но это не удалось запустить, показывая ошибку ниже: <console>:16: error: not found: value sqlContext import sqlContext.implicits._ ^ <console>:16: error: not f

0зной

2ответ

Инкрементный экспорт Sqoop с использованием hcatalog?

Есть ли способ использовать sqoop для инкрементного экспорта? Я использую интеграцию Hcatalog для sqoop.I пробовал использовать параметры -last-value, --check-column, которые используются для инкремен

4зной

1ответ

MAC ----- Hadoop 2.7 Не удалось выполнить цель org.apache.maven.plugins: maven-antrun-plugin: 1.7

Я пытаюсь установить Hadoop 2.7.2 из источника, я получил следующую ошибку, у меня есть googled вокруг, но не может найти какое-либо решение. Пожалуйста, помогите. Привет Mac: 10.11.2 (64-битный); Jav