Я хочу добавить библиотеки в Azure Databricks для подключения к концентраторам событий. Я буду писать блокноты на питоне. Итак, какую библиотеку следует добавить для подключения к концентраторам событий?
В соответствии с моими поисками до сих пор у меня есть искра, соединяющая библиотеку в координатах Maven. Но я не думаю, что смогу импортировать его в python.
Интеграция структурированной потоковой передачи для концентраторов событий Azure в конечном итоге выполняется на JVM, поэтому вам потребуется импортировать библиотеки из приведенной ниже координаты Maven:
groupId = com.microsoft.azure
artifactId = azure-eventhubs-spark_2.11
version = 2.3.10
Примечание. Для приложений Python вам необходимо добавить указанную выше библиотеку и ее зависимости при развертывании вашего приложения.
Дополнительные сведения см. в разделе "Структурированная потоковая передача + Руководство по интеграции концентраторов событий для PySpark" и "Подключить библиотеки к кластеру Spark".
А также вы можете обратиться к SO поток, который решает аналогичную проблему.
Надеюсь это поможет.
