Проблема с балансировкой нагрузки драйвера JDBC Crate

Q1. У меня есть кластер crate версии 1.0.2, и я использую более старую версию драйвера JDBC crate для подключения к нему из программы Java. Я указал все узлы ящика в URL-адресе драйвера JDBC, разделив их запятой. Когда я запускаю запросы из моей java-программы для ящика, я вижу, что использование памяти и ЦП увеличивается только для 1 узла ящика, и этот узел является 1-м в списке, разделенном запятыми, указанном в URL-адресе соединения. Через некоторое время этому узлу не хватает памяти. Может кто-нибудь объяснить, почему это происходит? Я помню, как читал документацию по драйверу корзины, в которой указывалось, что нагрузка драйвера корзины балансирует запросы по всем указанным клиентским узлам. Все мои узлы поддерживают клиент.

Вопрос 2. Я провел тот же эксперимент с Crate 2.1.6 и драйвером JDBC 2.1.7 и вижу такое же поведение. Я убедился, что все запросы обрабатываются данными, распределенными по нескольким узлам. В последней документации я вижу добавленное новое свойство, а именно loadBalanceHosts https://crate.io/docs/clients/jdbc/en/latest/connecting.html#jdbc-url-format

Сейчас у меня нет этого свойства. Присутствовало ли это свойство и требовалось ли оно в драйвере JDBC версии 2.1.7? Почему разработчик должен беспокоиться о балансировке нагрузки, когда кластер ящиков и драйверы JDBC должны обеспечивать это?

К вашему сведению, большинство моих запросов содержат предложение group by, и у меня есть несколько миллиардов записей для экспериментов. Настроенная память составляет 30 ГБ на узел.


person vinayakshukre    schedule 23.04.2018    source источник


Ответы (1)


Это было исправлено в последнем драйвере: https://github.com/crate/crate-jdbc/blob/master/docs/connecting.txt#L62

person Jodok Batlogg    schedule 23.04.2018
comment
Спасибо за ответ Йодок. Ссылка, кажется, битая. Не могли бы вы указать точную версию драйвера JDBC, где это исправлено? попробую с этим. - person vinayakshukre; 24.04.2018
comment
Протестировано с драйвером JDBC версии 2.3.0 и Crate 1.0.2. Я все еще вижу, что только первый узел получает всю нагрузку. :( - person vinayakshukre; 24.04.2018
comment
Ссылка не работает, а также проверьте с последней версией, что она берет только первый узел - person Bhargav Patel; 05.11.2018