2

В недавней дискуссии о распределенной обработке и потоковой передаче я сталкиваюсь с тем, что там отображается код, перемещающийся к данным. Может кто-то, пожалуйста, помогите объяснить то же самое. Ссылка на эти фразы MapReduceWayЧто такое принцип «переход кода к данным», а не данные в код?

С точки зрения hadoop, its stated in a question, но до сих пор не удалось выяснить объяснение принципа в технике. агностический путь.

ответ

2

Основная идея проста: если код и данные находятся на разных машинах, один из них должен быть перенесен на другую машину, прежде чем код может быть выполнен на данных. Если код меньше данных, лучше отправить код на машину, хранящую данные, чем наоборот, если все машины будут одинаково быстрыми.

В мире больших данных код почти всегда меньше данных.