У меня есть таблица улей, который имеет несколько вложенных каталогов в HDFS, что-то вроде: /hdfs_dir/my_table_dir/my_table_sub_dir1
/hdfs_dir/my_table_dir/my_table_sub_dir2
...
Обычно я установит
Предположим, что я запускаю Spark 1.6.0 на Oracle JDK 1.8 (сборка 1.8.0_65-b17) в сеансе ноутбука ipython, начиная со следующей строки : PYSPARK_DRIVER_PYTHON=ipython PYSPARK_DRIVER_PYTHON_OPTS=notebo
Я пытаюсь выполнить простую задачу в искровом информационном кадре (python), который создает новый dataframe, выбирая конкретные столбцы и вложенные столбцы из другого фрейма данных , например : df.pr
Я хочу сохранить мой обрабатываются РДДОМ в тузде таблицу для этого я использую SparkDataFrame, но я получаю follwing ошибки py4j.protocol.Py4JJavaError: An error occurred while calling o216.jdbc.
: