Вопросы по теме 'presto'

при запуске Presto CLI отображается ошибка отказа в разрешении
При запуске Presto CLI выдает ошибку разрешения. Я запускал PrestoCLI с помощью следующей команды, Presto $ / home / reddy / presto / presto --server localhost: 8080 --catalog hive --schema default Перед запуском PrestoCLI я устанавливаю Presto...
1166 просмотров
schedule 13.10.2023

Факторы, ограничивающие скорость Presto?
Я только что установил Presto сегодня на нашем рабочем сервере (версия 0.57) и при выполнении select count (*) из журнала; для таблицы, содержащей всего 640 миллионов записей (~ 64 ГБ), требуется более 17 минут. У меня сложилось впечатление, что...
521 просмотров
schedule 23.12.2023

Могу ли я создать хранилище метаданных Hive с помощью Presto?
Основной вопрос: могу ли я использовать Presto в качестве основы для своего хранилища метаданных Hive? Я пытаюсь установить presto и hive на amazon aws, и у меня возникают проблемы с созданием хранилища метаданных Hive. Presto, похоже, установлен...
2169 просмотров
schedule 17.07.2023

Как использовать io.airlift.configuration?
В продолжение: Какие шаблоны проектирования можно применить к проблеме с настройками конфигурации? Кто-нибудь пользовался пакетом io.airlift.configuration? Он использует DI и в основном используется в Presto? Я охотился в Интернете, но,...
518 просмотров

PrestoDB v0.125 SELECT возвращает только подмножество записей Cassandra
Операторы SELECT в PrestoDB v0.125 с соединителем Cassandra с кластером Datastax Cassandra возвращают только 200 строк, даже если таблица содержит намного больше строк. Агрегированные запросы, такие как SELECT COUNT () по той же таблице, также...
209 просмотров
schedule 03.04.2023

Соединитель Prestodb CLI mysql не может найти базы данных с символом подчеркивания в имени
Например: show tables from mysql.records_1; возвращает: Table ------- (0 rows) Query 20151119_162735_00058_hja7s, FINISHED, 1 node Splits: 2 total, 2 done (100.00%) 0:00 [0 rows, 0B] [0 rows/s, 0B/s] Хотя есть записи_1 и в ней...
55 просмотров
schedule 22.09.2022

Presto unnest json
после этого вопроса: как перекрестно объединить массив json готово Я попытался запустить приведенный пример, но при этом получаю сообщение об ошибке команда SQL: select x.n from...
17158 просмотров
schedule 25.04.2022

Presto в EMR — установка переменной среды
Я играю со встроенным Presto в AWS EMR. Я хочу избавиться от пейджера по умолчанию... в документах Presto говорится: это поведение можно переопределить, установив для переменной среды PRESTO_PAGER имя другой программы, например more, или...
1310 просмотров
schedule 08.04.2023

Кэширует ли Presto промежуточные результаты из коробки?
Presto имеет несколько коннекторов . Хотя соединители реализуют операции чтения и записи, из всех читаемых мной руководств кажется, что они обычно используются в качестве источников данных только для чтения. Например, netflix . имеет «10...
3766 просмотров
schedule 27.04.2022

Presto / Athena - запрос для обнаружения частот атрибутов JSON?
Я определил таблицу Hive, в которой один столбец содержит текст JSON: CREATE EXTERNAL TABLE IF NOT EXISTS my.rawdata ( json string ) PARTITIONED BY (dt string) ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde' WITH SERDEPROPERTIES (...
2440 просмотров
schedule 09.03.2022

AWS Athena - Как параметризовать SQL-запрос
Я хочу предоставить значения времени выполнения для запроса в операторах Select & Create table. Каковы способы параметризации запросов Athena SQL? Я пробовал использовать выражения PREPARE и EXECUTE из Presto, но он не работает в консоли Athena....
3956 просмотров

Проблема с синхронизацией Cassandra Presto
Мы используем Cassandra в нашем текущем живом проекте почти год. Мы используем Cassandra 2.1.14 и иногда видим, что между Cassandra и Presto возникают проблемы с синхронизацией. Когда в базе данных есть какое-то обновление с использованием...
138 просмотров
schedule 07.03.2023

Ошибка установки Presto
Я пытаюсь установить presto в кластере, но когда я пытаюсь развернуть / установить сервер presto через несколько узлов, он выдает ошибку на каждом узле: Неустранимая ошибка: [host1] Требуется запросить пароль для соединения или sudo (host:...
220 просмотров
schedule 14.03.2022

Как написать собственный коннектор для Facebook Presto?
Я установил Presto с включенным соединителем mysql. Теперь я хочу написать собственный коннектор для особого типа источника данных. Пользовательский соединитель для SQLAlchemy сделано. Но на этот раз я столкнулся с десятками классов Java....
2122 просмотров
schedule 19.12.2022

как добавить presto SQLalchemy URI для подключения в надмножестве инструментов визуализации данных airbnb
У меня есть как presto, так и superset. presto работает хорошо, доступ к нему можно получить с помощью команды: . /app/hadoop/setjdk8.sh;bin/presto-cli --server http://myserver:8070 - каталог куст - схема по умолчанию И протестировал...
2847 просмотров

Как преобразовать метку времени Java, хранящуюся как bigint, в метку времени в Presto?
Мне не повезло с поиском этого в течение пары дней. Если моя схема avro для данных в таблице улья: { "type" : "record", "name" : "messages", "namespace" : "com.company.messages", "fields" : [ { "name" : "timeStamp", "type" :...
3161 просмотров
schedule 22.12.2022

Выберите определенные значения из столбца JSON в Presto
У меня есть столбец JSON points типа VARCHAR в таблице, которую я хочу проанализировать в Presto. Например: points = {"0": 0.2, "1": 1.2, "2": 0.5, "15": 1.2, "20": 0.7} Я хочу выбрать только значения для ключей "0", "2" and "20" . Как...
3787 просмотров
schedule 14.09.2023

Поддержка Presto для proc_distinct
Я оцениваю механизмы распределенных запросов для аналитических запросов (как интерактивных, так и пакетных) для крупномасштабных данных (~ 100 ГБ). Одним из требований является низкая задержка (‹= 1 с) для запросов с числом различных, где допустимы...
783 просмотров
schedule 31.05.2023

Структура каталогов на основе времени Apache Drill
У меня есть файлы CSV, организованные по дате и времени следующим образом logs/YYYY/MM/DD/CSV files... Я настроил Apache Drill для выполнения SQL-запросов поверх этих CSV-файлов. Поскольку файлов CSV много; организация файлов может быть...
166 просмотров

Как исправить не работающий плагин presto в AWS EMR
О Я пытаюсь использовать плагин presto, такой как wyukawa/presto-fluentd, он работает на локальном хосте (mac os x), но не работает на Amazon EMR. Деталь на локальном хосте Сначала я пробовал работать на локальном хосте (mac os x) и просто...
619 просмотров
schedule 07.03.2023