A. Aleksiyants, O. Borisenko, D. Turdakov, A. Sher, S. Kuznetsov, “Implementing Apache Spark jobs execution and Apache Spark cluster creation for OpenStack Sahara”, Труды ИСП РАН, 2015, том 27, выпуск 5,страницы 35

Эта публикация цитируется в 3 статьях

Implementing Apache Spark jobs execution and Apache Spark cluster creation for OpenStack Sahara

[Реализация сервиса для выполнения Apache Spark задач и создания Apache Spark кластеров на основе Openstack Sahara]

A. Aleksiyants^a, O. Borisenko^a, D. Turdakov^abc, A. Sher^a, S. Kuznetsov^adb

^a Institute for System Programming of the RAS
^b Lomonosov Moscow State University
^c National Research University "Higher School of Economics" (HSE)
^d Moscow Institute of Physics and Technology (State University)

Аннотация: В работе рассматривается задача создания виртуальных Apache Spark и Apache Hadoop кластеров для обработки больших данных в облачных средах. Проведен обзор существующих методов создания Apache Spark кластеров. Также описывается реализованный способ создания Apache Spark кластеров и сервиса для выполнения Apache Spark задач в среде OpenStack. Предложенное решение включено в проект OpenStack Sahara и доступно начиная с релиза OpenStack Liberty.

Ключевые слова: Apache Spark, Openstack, Openstack Sahara, IaaS, PaaS.

Язык публикации: английский

DOI: 10.15514/ISPRAS-2015-27(5)-3