Пул соединений в приложении потокового pyspark
Как правильно использовать пулы соединений в приложении потокового pyspark?
Я прочиталhttps://forums.databricks.com/questions/3057/how-to-reuse-database-session-object-created-in-fo.html и понять, как правильно использовать singleton для scala / java. Возможно ли это в Python? Небольшой пример кода будет принята с благодарностью. Я считаю, что создание соединения perPartition будет очень неэффективным для потокового приложения.