Ограничить размер пакетов Kafka при использовании Spark Streaming
Можно ли ограничить размер пакетов, возвращаемых потребителем Kafka для Spark Streaming?
Я спрашиваю, потому что у первой партии, которую я получаю, есть сотни миллионов записей, и для их обработки и проверки требуется много времени.