Итак, я пытаюсь создать локальный экземпляр сервера заданий spark для тестирования заданий, и я даже не могу запустить его. Итак, первое, что я делаю, когда попадаю в свой бродячий инстанс, — запускаю spark. Я знаю, что это работает, потому что я...

Мы создаем систему, состоящую из нескольких приложений Spark Streaming, каждое из которых имеет несколько приемников. Насколько я понял, для каждого ресивера нужно свое ядро ​​в кластере. Нам нужно несколько приемников для обработки пиков, но они не...

Существует ли какая-либо конкретная версия сервера заданий Spark, соответствующая Spark 1.6.0? Согласно информации о версии в https://github.com/spark-jobserver/spark-jobserver , я вижу, SJS доступен только для 1.6.1, а не для 1.6.0. Наш Spark,...

неразрешенная зависимость: com.ning # async-http-client; 1.8.10: org.sonatype.oss # oss-parent; 9! oss-parent.pom (pom.original) местоположение источника должно быть абсолютным: файл: at...

Я настроил сервер заданий spark (см. https://github.com/spark-jobserver/spark-jobserver/tree/jobserver-0.6.2-spark-1.6.1 ) в автономном режиме. Я настроил несколько заданий с помощью Scala, каждое задание использует один и тот же общий контекст,...

Я разрабатываю SparkJob на сервере заданий (v0.6.2 spark 1.6.1) с использованием spark graphx и сталкиваюсь со следующим исключением при попытке запустить задание на Spark JobServer: { "status": "JOB LOADING FAILED", "result": {...

Мы пытаемся найти способ загрузить обученную модель Spark (2.x) ML, чтобы по запросу (через интерфейс REST) ​​мы могли запросить ее и получить прогнозы, например. http://predictor.com:8080/give/me/predictions?a=1,b=2,c=3 Существуют готовые...

Я пытаюсь запустить spark-jobserver с помощью spark-2.0. Я клонировал ветку spark-2.0-preview из репозитория github. Я следую руководству по развертыванию, но когда пытаюсь развернуть сервер с помощью bin/server_deploy.sh . Я получил ошибку...

Я настроил небольшую среду Spark на двух машинах. Один запускает мастер и рабочий, а другой - только рабочий. Я могу использовать этот кластер с помощью Spark Shell, например: spark-shell --master spark://mymaster.example.internal:7077 Я...