bigdata

2зной

1ответ

AWS S3 Синхронизация очень медленная при копировании в большие каталоги

При синхронизации данных с пустым каталогом в S3 с использованием AWS-CLI это почти мгновенно. Однако при синхронизации с большим каталогом (несколько миллионов папок) требуется очень много времени, п

0зной

2ответ

сосчитать, сколько записей было в каждой группе в улье

My DB выглядит, как это и представляет собой покупку, сделанное заказчиком на определенном магазине: Customer ID | Store ID | Date & Time 1 | 1884 | 2016-10-30 13:00:00 5 | 2001 | 2016-10-30 13:00:0

0зной

2ответ

Слияние файлов деталей в PIG

Как мы можем объединить эти n файлов частей (выходной файл из операции свиньи). Мне нужно объединить эти файлы в один, а затем использовать это как вход в куст. Я пробовал использовать -cat и -getmerg

0зной

1ответ

Повреждение наружного стола улья после создания

У меня есть исходные файлы со сломанным разделителем трубок. Мой внешний стол для улья также я создал со сломанным разделителем труб. Но после создания таблицы я вижу разделитель как «j». Я также не м

1зной

1ответ

Эффективно выводить матрицу совпадений сроков из Google Nграмм

Мне нужно использовать лексические данные от Google Books N-grams для построения (разреженной!) Матрицы временных совпадений (где строки - слова и столбцы - это одни и те же слова, а ячейки отражают,

0зной

1ответ

Нужно ли иметь файлы конфигурации во всех мастерах мезоса?

Я запускаю кластер мезос с 3 мезос мастерами. Я включил проверку подлинности и сохранил файл credentials.json в одном из главных. Я хотел бы знать, должен ли мы помещать этот файл во все 3 мезосмейсте