Действительно ли Hive использует HCкаталог?

Question

Я видел некоторые противоречивые сообщения в Интернете о том, использует ли Hive HCкататор для доступа к метасторе, и я надеялся, что кто-то может помочь мне здесь?

Использует ли Hive фактический доступ HCAP api для доступа к метасторе или имеет свой собственный механизм извлечения метаданных и является ли доступным для использования метаданных инструментами, используемыми без использования улей?

Answer 1

Нет, улей не использует Hcatalog Api для доступа к метасторе.

HCкаталог раскрывает метаданные улей другим инструментам преобразования карт. В каждом инструменте mapreduce есть собственное представление о данных HDFS (например, Pig рассматривает данные HDFS как набор файлов, Hive видит их как таблицы). Имея табличную абстракцию, поддерживаемые HCatalog инструменты для преобразования карт не должны заботиться о том, где хранятся данные, в каком формате и в месте хранения (HBase или HDFS).