Что такое механизм выполнения Amazon Snowflake

Когда вы используете Hadoop, вы можете настроить YARN для управления заданиями, ресурсами и т. Д. Hadoop.

Какая эквивалентная форма для Снежинки Амазонки?

Hadoop (HDFS) должен ПРЯТЬ, как Snowflake - __________


person Micah Pearce    schedule 30.01.2019    source источник


Ответы (2)


Интересный вопрос здесь. Чтобы установить уровень, Snowflake - это SaaS-предложение хранилища данных, которое развернуто как на AWS, так и на Azure, я бы не стал классифицировать его как «Снежинка Amazon».

В Snowflake нет отдельного инструмента для управления ресурсами кластеров хранилища данных. Он встроен в трехуровневую архитектуру. Эта ссылка предоставит некоторые сведения об этом: https://www.snowflake.com/product/architecture/

Поскольку Snowflake является облачным хранилищем данных, присущая облаку эластичность дает администраторам возможность динамически масштабировать вычислительные ресурсы как по вертикали, так и по горизонтали для решения таких задач, как организация очередей и параллелизм.

Надеюсь это поможет.

person dbaOnTap    schedule 31.01.2019

Вам следует прочитать технический доклад команды Snowflake, опубликованный в SIGMOD 2016.

Он довольно подробно описывает архитектуру.

person Marcin Zukowski    schedule 01.02.2019