Я работаю над этой проблемой в течение двух дней и до сих пор не нашел пути. Проблема : наш Spark, установленный через новейшую CDH 5, всегда жалуется на потерю класса LzoCodec, даже после того, как я установил HADOOP_LZO через Parcels в менеджере...

Я пытаюсь заставить искру читать несжатые файлы бережливости с s3. Пока это не работает. данные загружаются в s3 как несжатые файлы бережливости. Источник — AWS Kinesis Firehose. У меня есть инструмент, который без проблем десериализует...