hadoop2

3зной

1ответ

Прочитайте несколько файлов, используя обжиг и выведите SINGLE-файл

У меня возникла проблема в эти дни, я пытаюсь читать из нескольких файлов с помощью обжига и создавать вывод с одним файлом. Мой код заключается в следующем: def getFilesSource (paths: Seq[String]) =

-1зной

2ответ

Ошибка в примере на карте уменьшить работу с помощью java.lang.NoSuchFieldError: HADOOP_CLASSPATH

Я установил oozie 4.3.0 в hadoop 2.7.3. Службы oozie и hadoop запущены и запущены. Я попытался выполнить примерную работу по уменьшению количества карт, которая поставляется с дистрибутивом oozie, ког

0зной

1ответ

Загрузка данных с использованием Flume - тег конечной группы протокола не соответствует ожидаемому тегу

Нужна помощь в разрешении проблемы в Flume при загрузке данных Twitter в HDFS. Я использую Hadoop 2,6 & Flume 1.7 версии. Я настроил все в соответствии с инструкциями. (https://www.eduonix.com/blog/bi

1зной

1ответ

ПРЯЖА Архитектура Hadoop 2,0

Снизу ссылки сайта Apache Hadoop, я узнал, что ApplicationMaster несет ответственность за ведение переговоров соответствующих ресурсов контейнеров из планировщика (ResourceManager) , а также узнать чт

0зной

1ответ

Как использовать всю базу данных улья в искровом режиме и читать sql-запросы из внешних файлов?

Я использую песочницу hortonworks в Azure с искрой 1.6. У меня есть база данных Hive, заполненная данными выборок TCP-DS. Я хочу прочитать некоторые SQL-запросы из внешних файлов и запустить их в набо

0зной

1ответ

должен обладать свойствами для основного сайта hdfs-сайта mapred-site и yarn-site.xml

Может кто-нибудь, пожалуйста, дайте мне знать, что у вас должны быть свойства для Core-site.xml, hdfs-site.xml, mapred-site.xml и нить-site.xml, без которой хаос не может начаться?

-2зной

1ответ

объект SparkSession не входит в пакет org.apache.spark.sql

Я пытаюсь использовать последнюю Spark api с SparkSession. Пока я импортирую пакет, мое затмение показывает сообщение об ошибке в приложении. Я использую 2.10.6 компилятор scala. Пожалуйста, помогите