Вопросы по теме 'mesos'
Hadoop на Mesos завершается с ошибкой Не удалось найти или загрузить основной класс org.apache.hadoop.mapred.MesosExecutor
У меня есть настройка кластера Mesos — я проверил, что мастер может видеть подчиненные — но когда я пытаюсь запустить задание Hadoop, все задачи заканчиваются со статусом LOST. Одна и та же ошибка присутствует во всех журналах ведомого stderr:...
887 просмотров
schedule
06.10.2022
Использование Mesos для управления кластером веб-приложений и баз данных
Я только изучаю Apache Mesos. Я хотел бы запустить кластер веб-приложений (Scala Play), интегрированный с кластером базы данных (Cassandra), управляемый Mesos.
Насколько я понимаю, когда веб-приложение или база данных выходит из строя, Mesos...
1422 просмотров
schedule
24.04.2023
Невозможно запустить Spark с помощью Mesos
Я настроил Spark-0.9.1 для работы на mesos-0.13.0, используя шаги, упомянутые здесь . Пользовательский интерфейс Mesos показывает двух зарегистрированных рабочих. Я хочу запустить эти команды в Spark-shell
> scala> val data = 1 to 10000...
866 просмотров
schedule
29.03.2023
Можно подключиться к Mesos только из Spark на том же компьютере.
Я пытаюсь запустить Spark в кластере Mesos.
Когда я запускаю ./bin/spark-shell --master mesos://host:5050 с машины, на которой я запускаю мастер Mesos, все работает. Однако, если я запускаю ту же команду с другого компьютера, процесс...
3220 просмотров
schedule
27.07.2022
Как Marathon ограничивает ресурсы для напрямую вызываемых приложений?
Я экспериментирую с Mesos + Marathon и начинаю с простого, создавая небольшое «приложение», состоящее из сценария оболочки, бесконечно зацикливающего сообщение каждые 5 секунд. Когда я предоставляю это приложение, я могу выделять различные ресурсы...
2040 просмотров
schedule
01.08.2022
Связывание контейнеров с файлом Mesos JSON
Я пытаюсь связать свой контейнер приложения с контейнером БД при отправке описания задачи JSON в структуру Marathon.
Я прочитал этот вопрос в прошлом году: Связанные контейнеры Docker с Mesos/Marathon
Вопрос в следующем: я знаю, что Fig сможет...
813 просмотров
schedule
27.10.2023
docker mesosphere marathon - невозможно увидеть запущенный процесс внутри контейнера докеров
Я новичок в мезо и марафонском пространстве. У меня есть мезо-рабы, работающие с моими докер-контейнерами. Я использую марафон для создания мезо-задачи. Вот мой простой файл json:
{
"container": {
"type": "DOCKER",
"docker": {...
834 просмотров
schedule
24.03.2022
Мезо Фреймворк
Я хочу распространять контейнеры Docker в кластере с помощью java и определять зависимости, чтобы, когда один контейнер будет готов, я мог проанализировать полученный результат в своем java-коде. Есть много фреймворков mesos, которые могут достичь...
1007 просмотров
schedule
25.08.2022
HaProxy для обнаружения сервисов в связанных контейнерах марафона mesos docker
Пожалуйста, нигде я не спрашивал об этом. Вот что я сделал. Я могу развернуть единичные экземпляры mesos, marathon и docker. Переходя на следующий шаг вперед, я хочу иметь 2 подчиненных устройства mesos (контейнеров докеров), связанных друг с...
4305 просмотров
schedule
28.03.2023
Контрольно-пропускной пункт Mesos/Marathon и HA
Mesos и Marathon время от времени упоминают контрольные точки, но я нигде не смог найти хорошего объяснения того, как это работает. Кроме того, что это означает на практике?
1) Is the Task current state continuously being stored, or is only the...
327 просмотров
schedule
25.09.2023
Вопросы о контейнере Mesos Linux и Docker
На странице Apache Mesos описывается, что Mesos обеспечивает изоляцию задач через «контейнеры Linux». Что это за контейнерная технология, LxC?
Означает ли «встроенная поддержка Docker», что вышеуказанную контейнерную технологию можно заменить...
1406 просмотров
schedule
21.06.2023
совместное использование docker.sock или docker в докере (dind)
Мы используем кластер mesos и jenkins для непрерывного рабочего процесса интеграции. Дженкинс настроен с помощью плагина mesos.
Ранее мы создавали образы докеров в контейнерах mesos. Теперь мы переключаемся на контейнеры докеров для создания...
891 просмотров
schedule
03.10.2023
mesos-dns, лучшие практики по работе с портами
Я новичок в Service Discovery и кластерных системах. Я начал экспериментировать с Mesos и Marathon для развертывания контейнеров Docker, REST API и пользовательский интерфейс Marathon, похоже, неплохо справляются со своей задачей.
Моя проблема -...
1218 просмотров
schedule
20.03.2022
Запуск простого скрипта Spark на Mesos с помощью Zookeeper
Я хочу запустить простую искровую программу, но у меня есть некоторые ошибки. Моя среда: CentOS: 6.6 Java: 1.7.0_51 Scala: 2.10.4 Spark: spark-1.4.0-bin -hadoop2.6 Mesos: 0.22.1
Все установлено, и узлы запущены. Теперь у меня есть один...
933 просмотров
schedule
03.03.2024
Где запустить искру — Standalone, Hadoop или Mesos
Я изучаю Spark, но не понимаю, нужно ли мне запускать Spark на Hadoop/Yarn или Mesos.
Есть ли прирост производительности, если я работаю на Hadoop/Mesos?
Прямо сейчас я работаю только в автономном режиме на кластере из 4 узлов.
Любой опытный...
574 просмотров
schedule
04.01.2024
Mesos убивает mpiexec без возможности запустить какую-либо полезную работу
коллеги! Я писал собственный фреймворк для Apache Mesos 0.22.1 на чистом Python (используя их API), потому что у нас очень специфические требования, которые не обрабатываются другими фреймворками (такими как Marathon, например).
Мы собираемся...
164 просмотров
schedule
24.01.2024
Марафон плагинов Docker Volume
Плагины Docker Volume выпускаются с Docker 1.8. Я пытаюсь запустить контейнер Docker с помощью Mesos/Marathon, и я могу запустить контейнер Docker с томами. Чего я не могу сделать, так это подключить внешний плагин громкости.
Согласно...
759 просмотров
schedule
30.10.2023
NodeProvisioner для Jenkins в кластере mesos
Мы используем Jenkins для CI.
Мы использовали
https://github.com/rji/jenkins-standalone
согласно
https://github.com/jenkinsci/mesos-plugin
Мы попытались запустить Дженкинса с
"-Dhudson.slaves.NodeProvisioner.MARGIN=50...
596 просмотров
schedule
13.03.2024
Почему мой мастер Mesos не проходит аутентификацию с ведомым?
Я создал мастер на своем компьютере с файлом учетных данных, который имеет общедоступный IP-адрес в сети, а не локальный хост, следующим образом:
./bin/mesos-master.sh --ip=192.168.0.3 --work_dir=/var/lib/mesos...
809 просмотров
schedule
14.05.2024
Есть ли ограничение на количество задач, которые может запускать Mesos на слейве?
В настоящее время я использую Mesos + Marathon для теста.
Когда я запускаю много задач с помощью команды ping 8.8.8.8 , в какой-то момент слейвы больше не могут запускать задачу. Итак, я проверил out stderr песочницы, затем он показывает...
312 просмотров
schedule
10.07.2022
