lambda-architecture

1зной

1ответ

В чем разница между kappa-архитектурой и лямбда-архитектурой

Если Kappa-Architecture делает анализ в потоке напрямую, а не разбивает данные на два потока, где тогда хранится datastored, в системе messagin, такой как Kafka? или он может быть в базе данных для пе

2зной

2ответ

Как использовать datatorrent в архитектуре kappa?

Я много читал о архитектурах лямбда и kappa, где нам нужно использовать Apache Spark или Apache Storm. Я только что открыл новый инструмент под названием DataTorrent, который может выполнять пакетный

1зной

1ответ

Пакетный слой: как Spark считывает и обрабатывает новые данные из основных данных?

Я строю лямбда-архитектуру, я закодировал потоковый слой, и теперь я делаю пакетный слой. Для этой цели я использую Spark 2 в качестве пакетного процессора и HDFS в качестве основных данных. Для чтени

1зной

2ответ

HDFS или Кассандра?

В моей лямбда-архитектуре я обсуждаю, следует ли использовать HDFS или Cassandra для хранения моих неизменных данных. Мне нужна Cassandra для обслуживания онлайн-запросов и т. Д., Поэтому это обязател

1зной

1ответ

Реализация лямбда-архитектуры с использованием Hadoop, Apache Spark, HBase

Я хочу реализовать лямбда-архитектуру с помощью простого примера. Я не могу поместить свой стек технологий в каждый слой лямбда-архитектуры. Я хочу найти топ-10 популярных хэштегов в твиттер-твитах в

5зной

3ответ

Лямбда-архитектура с Apache Spark

Я пытаюсь реализовать Лямбда-архитектуру, используя следующие инструменты: Apache Kafka для получения всех данных, Spark для пакетной обработки (Big Data), Spark Streaming для реального времени (Fast

1зной

1ответ

Jcascalog запрашивает данные бережливости на HDFS

Я прочитал книгу Натана Марца о лямбда-архитектуре. Я действительно делаю доказательство концепции этого решения. У меня возникли трудности с построением моего запроса Jcascalog. Это часть моей бережл

0зной

1ответ

Невозможно создать файл, используя ведро DFS

Новичок здесь. Пытается запустить код из книги Натана Марза Big Data DFS Datastore с помощью Pail. Что я делаю не так? Попытка подключиться к виртуальной машине HDFS. Попробовал заменить hdfs файлом.