https://github.com/vladthelittleone/mapreduce

Библиотека модели распределенных вычислений - MapReduce.
https://github.com/vladthelittleone/mapreduce

Last synced: 27 days ago
JSON representation

Библиотека модели распределенных вычислений - MapReduce.

• Host: GitHub
• URL: https://github.com/vladthelittleone/mapreduce
• Owner: vladthelittleone
• License: apache-2.0
• Created: 2014-03-10T18:32:34.000Z (almost 11 years ago)
• Default Branch: master
• Last Pushed: 2016-01-05T20:24:09.000Z (almost 9 years ago)
• Last Synced: 2023-08-16T11:59:04.042Z (over 1 year ago)
• Language: Java
• Homepage:
• Size: 61.5 KB
• Stars: 0
• Watchers: 3
• Forks: 0
• Open Issues: 0
• Metadata Files:
  • Readme: README.md
  • License: LICENSE

Awesome Lists containing this project

README

        
mapreduce

=========

Реализация модели распределенных вычислений. Формально это мини-библиотека для вычисления некоторого набора задач с использованием большого количества компьютеров ("ноды"). Работа MapReduce состоит из двух шагов: Map и Reduce. Map - разделяет задачи на подзадачи. Reduce - сливает результаты обработки вычислений подзадач.

Для использования библиотеки достаточно реализовать класс Task, который выполняет вычисления и разбивает задачу на подзадачи и отправить объект данного класса в  MapReducer, который обработает его и отправит на "ноды", у которых должен быть запущен соответствующий ExecutionPool.  

Данная реализация поддерживает ForkJointPool фреймворк.