RemoteException при создании файла с API-интерфейсом WebHDFS REST

Question

Мне не удалось создать файл с помощью API Http-Hadoop REST.

Следуя документам, я делаю это.

curl -i -X PUT "http://hadoop-primarynamenode:50070/webhdfs/v1/tmp/test1234?op=CREATE&overwrite=false" 

Ответ:

HTTP/1.1 307 TEMPORARY_REDIRECT 
Cache-Control: no-cache 
Expires: Fri, 15 Jul 2016 04:10:13 GMT 
Date: Fri, 15 Jul 2016 04:10:13 GMT 
Pragma: no-cache 
Expires: Fri, 15 Jul 2016 04:10:13 GMT 
Date: Fri, 15 Jul 2016 04:10:13 GMT 
Pragma: no-cache 
Content-Type: application/octet-stream 
Location: http://hadoop-datanode1:50075/webhdfs/v1/tmp/test1234?op=CREATE&namenoderpcaddress=hadoop-primarynamenode:8020&overwrite=false 
Content-Length: 0 
Server: Jetty(6.1.26) 

После редиректа:

curl -i -X PUT -T MYFILE "http://hadoop-datanode1:50075/webhdfs/v1/tmp/test1234?op=CREATE&namenoderpcaddress=hadoop-primarynamenode:8020" 

Ответ:

HTTP/1.1 100 Continue 

HTTP/1.1 400 Bad Request 
Content-Type: application/json; charset=utf-8 
Content-Length: 162 
Connection: close 

{"RemoteException":{"exception":"IllegalArgumentException","javaClassName":"java.lang.IllegalArgumentException","message":"Failed to parse \"null\" to Boolean."}} 

я не мог найти зацепки для этого сообщения об ошибке. Кто-нибудь испытал это раньше?

Я запускаю кластер Hadoop, установленный с использованием Ambari.

Answer 1

Кажется, что вторая команда PUT требует параметра «createparent». Фактически, требуются как «перезапись», так и «createparent». WebHDFS не использует значения по умолчанию. Определенно ошибка ...

curl -i -X PUT -T MYFILE "http://hadoop-datanode1:50075/webhdfs/v1/tmp/test1234?op=CREATE&namenoderpcaddress=hadoop-primarynamenode:8020&overwrite=false&createparent=false"