Ламина против Шторма

Storm включает в себя управление кластером и обработку отказавших узлов в потоке, потому что он был разработан, чтобы быть чем-то вроде «Hadoop, но для потоковой передачи», что, насколько я понимаю, ваших требований, кажется, ближе к вашему варианту использования.

Storm, вероятно, неплохой выбор, но «более 30 ГБ в день» числовых данных — это не большие данные, а крошечные данные. Любой полусовременный компьютер может легко обрабатывать такой объем данных на одном узле с пластиной. Возможно, вы все равно захотите использовать Storm, чтобы, когда вы попадете в область, где вам нужно больше серверов, вы могли легко масштабироваться, но я полагаю, что есть некоторые начальные трудности с настройкой Storm (и некоторые постоянные трения в обслуживании кластера). , которые будут потрачены впустую, если вам никогда не придется увеличивать масштаб.

Lamina кажется хорошим выбором, но, похоже, ему полностью не хватает убийственной функции Storm — управления кластерными вычислениями. Кластер Storm возьмет на себя большую часть грязной работы по распределению ваших вычислений по кластеру узлов, предоставив вам возможность сосредоточиться только на своей бизнес-логике, пока вы вписываете ее в структуру Storm. Насколько я вижу, Lamina обеспечивает хороший способ организации ваших вычислений, но тогда вам придется позаботиться обо всех деталях масштабирования, если это то, что вам нужно.