Я использую pyspark 2.4.4, когда я получаю данные с SQL Server, я получаю com.microsoft.sqlserver.jdbc.SQLServerException: The "variant" data type is not supported.
Что нужно сделать? чтобы решить эту проблему. Я прочитал это. Но я не понимаю.
РЕДАКТИРОВАТЬ: Ниже приведен код, который я использую для создания сообщения об ошибке:
for i in df['name']: mssql_df = spark.read.format("jdbc") \
.option("url", "jdbc:sqlserver://SERVERNAME:1433;databaseName=DB;integratedSecurity=true") \
.option("dbtable", "[" + i + "]") \
.option("driver", 'com.microsoft.sqlserver.jdbc.SQLServerDriver').load()