При использовании spark-submit мне нужно отправить зависимости с --packages. Какой пакет мне следует использовать?
Я попытался создать банку uber, содержащую зависимости, но получаю следующую ошибку:
java.lang.IllegalArgumentException: Please specify an existing file
Ошибка является результатом следующего кода:
String path = "hdfs:///user/data.txt";
SentenceIterator iter = new LineSentenceIterator(new File(path));