Движок для BSP-вычислений Apache Hama теперь поддерживает YARN

Apache Software Foundation и разработчики Samsung Electronics в прошедший четверг объявили, что движок для высокопроизводительных BSP-вычислений Apache Hama теперь поддерживает не только Apache Mesos, но и YARN.

Логотип Apache Hama / Иллюстрация с сайта Hama.Apache.Org

Модель параллельных вычислений BSP (Bulk Synchronous Parallel), применяемая в Apache Hama, была разработана в конце 1980х гг. в Гарвардском университете известным математиком Лесли Вэлиантом (Leslie Valiant). Apache Hama может использоваться как основа для ресурсоемких научных BSP-приложений, приложений для построения графиков (наподобие Google Pregel), а также ПО для машинного обучения.

YARN — технология управления ресурсами, позволяющая сразу нескольким фреймворкам для работы с большими данными (например, MapReduce, Spark и Apache Hama) одновременно работать с одним набором данных на одном и том же кластере под управлением Hadoop. В новом релизе Hama поддержка YARN позволяет запускать научные BSP-приложения на кластерах Hadoop без какого-либо процесса установки.

Aлександр по материалам Blogs.Apache.org.