Как подключить Superset к AWS athena?

На случай, если сюда придет кто-то другой:

awsathena+jdbc://username:[email protected]:port/dbname

Это из документации по расширенному набору.

Мы пробовали установить суперсет с PyAthena JDBC & REST. Наш опыт работы с PyAthena (REST) ​​намного лучше, чем PyAthenaJDBC, мы бы рекомендовали использовать его в продакшене.

Установите PyAthena (чистая библиотека python, java не требуется)

pip install "PyAthena>1.2.0"

Доступ к базе данных, создав URL-адрес подключения

awsathena+rest://{aws_access_key_id}:{aws_secret_access_key}@athena.{region_name}.amazonaws.com/{schema_name}?s3_staging_dir={s3_staging_dir}&...

Я нашел это статья, хорошее руководство по развертыванию расширенного набора.

Взгляните на этот PR на github. Вы захотите установить PyAthenaJDBC пакет в пипс. Драйвер, о котором вы говорите, - это драйвер Java, и это здорово, но Superset в значительной степени является приложением Python, поэтому для подключения / взаимодействия с Athena потребуется драйвер Python.

Приведенный выше ответ правильный, но вы захотите установить этот пакет, чтобы убедиться, что вы действительно можете подключиться к athena.

Вы должны определить свойство s3_staging_dir при подключении к Athena's Driver.

Пример: s3_staging_dir = s3: // your_bucket

Я заставил его работать, используя: PyAthenaJDBC (python 3.6.7), выполнив следующие действия:

1) Убедитесь, что у вас есть пакет PyAthenaJDBC pkg. установлены:

pip install "PyAthenaJDBC>1.0.9"

2) перезапустить суперсет

3) Загрузите драйвер JDBC: из загрузки драйвера aws я использовал AthenaJDBC41-2.0.6.jar версия

• Пример URL для загрузки драйвера, Примечание: я сохранил свой драйвер в / drivers /

  wget https://s3.amazonaws.com/athena-downloads/drivers/JDBC/SimbaAthenaJDBC_2.0.6/AthenaJDBC41_2.0.6.jar

4) Добавьте источник данных в надмножество:

awsathena+jdbc://AWS_KEY:[email protected]/mydb?s3_staging_dir=s3://path/to/my/data/&driver_path=/drivers/AthenaJDBC41_2.0.6.jar

Note: If superset is running on ECS / EC2 you can assign an IAM role, and remove the AWS KEY/SECRET from the URI, Example raw connection URI below:

awsathena+jdbc://{aws_key}:{aws_secret}@athena.{region_name}.amazonaws.com/{schema_name}?s3_staging_dir={s3_staging_dir}&driver_path={driver_path}

Much more info here: