azure-data-lake

4зной

1ответ

Самый эффективный способ доступа к двоичным файлам в ADLS с рабочего узла в PySpark?

Я развернул кластер Azure HDInsight с разрешениями rwx для всех каталогов в Azure Data Lake Store, который также служит в качестве учетной записи хранилища. На головном узле я могу загрузить, например

0зной

2ответ

Как подключить учетную запись ADLS с Azure VM

Я следил за этим сайтом https://blogs.msdn.microsoft.com/arsen/2016/08/05/accessing-azure-data-lake-store-using-webhdfs-with-oauth2-from-spark-2-0-that-is-running-locally/ для подключения хранилища AD

3зной

1ответ

Что означает значение приоритета и параллелизма в Azure Data Lakes (Hadoop)?

Другими словами, что означает значение параллелизма 5 и значение приоритета 1000?

0зной

1ответ

Есть ли способ передать U-SQL-скрипту параметр из программы C#?

Я использую U-SQL со столом в Azure Data Lake Analytics. Есть ли способ передать список ключей разделов, сгенерированных в программе C#, в сценарий U-SQL, а затем вернуть сценарий всем элементам этих

1зной

2ответ

Пользовательские сборки, на которые не ссылаются в представлениях

Если пользовательская сборка C# используется в View, компилятор не может найти ссылку на пространство имен. Он работает, если сборка ссылается и вызывается внутри запроса, но не из представления. Напр

1зной

1ответ

Более быстрый способ предоставления прав доступа к ADLS для обеспечения кластеризации HDInsight?

У меня есть Azure Data Lake Store (ADLS), содержащий файлы ~ 100k, которые мне нужны для доступа из кластера HDInsight для анализа. Когда я предоставляю кластер через Azure Portal, я использую эти ADL