Вопросы по теме 'amazon-redshift'
в redshift postgresql могу ли я пропустить столбцы с функцией копирования
У меня есть таблица .csv (t1) со столбцами: c1, c2, c3 в хранилище Amazon S3
Я хочу скопировать это в красное смещение амазонки
Я создаю таблицу со столбцами: c1, c2, c3, где все столбцы допускают значение NULL
Копирую командой:...
7611 просмотров
schedule
07.02.2023
Как преобразовать код пользователя в целое число в AMAZON REDSHIFT
только начинаю экспериментировать и тестировать красное смещение Amazon. Одна вещь, которую мне нужно сделать, что я могу легко сделать в sql, - это изменить userip на целое число. Это делается в mssql с помощью скалярной функции, которая использует...
2338 просмотров
schedule
09.08.2023
Импорт данных Alexa в Amazon RedShift
Я взял файл ежедневного дампа и разархивировал его, а затем снова поместил на s3.
Когда я пытаюсь выполнить оператор копирования в postgresql, я получаю следующую ошибку
Missing newline: Unexpected character 0x14 found at location 4...
1333 просмотров
schedule
03.08.2023
Производительность фильтра Amazon Redshift Equality и ключи сортировки
Эффективно ли Redshift (то есть двоичный поиск) находит блок таблицы, который отсортирован по столбцу A для запроса с условием A =?
В качестве примера, пусть имеется таблица T с ~ 500 млн строк, ~ 50 полей, распределенных и отсортированных по полю...
3186 просмотров
schedule
12.05.2022
Получить вставленное значение идентификатора из AWS Redshift через JDBC
Во время работы с AWS Redshift я обратил внимание на то, что получение последнего вставленного идентификатора из таблицы со столбцом идентификаторов через драйвер JDBC не может быть выполнено ни одним из следующих методов:
RETURNING key word...
3784 просмотров
schedule
17.03.2022
временно отключить красное смещение, чтобы уменьшить счет
Amazon сообщает о биллинге Redshift следующее: «Часы использования узла оплачиваются за каждый час, в течение которого кластер хранилища данных работает в состоянии« Доступен ». Если вы больше не хотите взимать плату за кластер хранилища данных, вы...
10620 просмотров
schedule
03.05.2022
Как сохранить журналы запросов более чем за 5 дней?
В Redshift есть таблица STL_QUERY , в которой хранятся запросы, выполненные за последние 5 дней. Я пытаюсь найти способ сохранить записи более чем за 5 дней. Вот некоторые вещи, которые я рассмотрел:
Есть ли для этого настройка Redshift?...
2618 просмотров
schedule
27.05.2024
Как заставить Microstrategy работать с пользовательской схемой в таблицах Redshift/psql?
Я использую Amazon Redshift с MIcrostrategy. В Microstrategy я правильно вижу все таблицы из схемы public . Однако, когда я создал свою собственную схему, Microstrategy «видит» таблицы, но не видит поля внутри них (т. е. когда я нажимаю на таблицу,...
1285 просмотров
schedule
21.06.2022
Альтернатива ссылкам в столбце GROUP BY на результаты коррелированного подзапроса
Этот вопрос возникает из-за ограничения в Amazon Redshift, базе данных столбцовой аналитики, основанной на Paraccel. Одна из неподдерживаемых функций - это ссылки в столбце GROUP BY на результаты связанный подзапрос .
Например, следующий...
646 просмотров
schedule
17.11.2022
Как рассчитать медиану в AWS Redshift?
В большинстве баз данных есть встроенная функция для вычисления медианы, но я не вижу ничего для медианы в Amazon Redshift.
Вы можете рассчитать медиану, используя комбинацию аналитических функций nth_value () и count (), но это кажется странным....
17055 просмотров
schedule
22.04.2022
Скрыть базы данных в кластере Amazon Redshift от определенных пользователей
Можно ли скрыть существование баз данных и доступ к ним (включая их схемы, таблицы и т. Д.) От определенных пользователей в Amazon Redshift . По умолчанию кажется, что каждый пользователь может видеть другие БД, даже если у него нет разрешения на...
3751 просмотров
schedule
22.02.2022
S3ServiceException при использовании AWS RedshiftBasicEmitter
Я использую образец кода AWS kinesis / redshift с GitHub. Я запустил код в экземпляре EC2 и обнаружил следующее исключение. Обратите внимание, что передача из Kinesis в S3 действительно прошла успешно. Но выполнить передачу с S3 на Redshift не...
2547 просмотров
schedule
17.10.2022
Скорость импорта данных из Amazon S3 в решение Redshift / Redshift
Кто-нибудь знает, насколько велика скорость копирования с Amazon S3 на Redshift?
Я хочу использовать RedShift только около часа в день, чтобы обновлять отчеты Табелау. Выполняемые запросы всегда находятся в одной и той же базе данных, но мне нужно...
1514 просмотров
schedule
04.04.2023
Нормализация данных в Redshift
Недавно я начал использовать Redshift для размещения миллионов точек данных со схемой, которая выглядит следующим образом:
create table metrics (
name varchar(100),
value decimal(18,4),
time timestamp
) sortkey (name, timestamp);...
2380 просмотров
schedule
12.10.2022
Как проверить сохранение TCP в Linux
Я хочу настроить поддержку tcp на моей машине с Linux. Итак, что я делаю, это запускаю скрипт
if [ `/sbin/sysctl -n net.ipv4.tcp_keepalive_time` != 200 ] ; then
/sbin/sysctl -w net.ipv4.tcp_keepalive_time=200;
Но у меня все еще есть...
3673 просмотров
schedule
04.03.2023
Redshift: COPY возвращает успешно, но нет данных в таблице
У меня есть таблица с примерно 20 столбцами, которые я хочу скопировать в красное смещение из ведра S3 в виде csv. Я запускаю команду копирования, которая выполняется успешно, но возвращает «загружено 0 строк».
Я был в тупике на этом некоторое...
1988 просмотров
schedule
15.02.2023
Экспорт данных JSON и загрузка в реляционную базу данных
Существует ли стандартный способ преобразования данных JSON в реляционную базу данных с несколькими таблицами? Нам нужно экспортировать наши данные из экземпляра MongoDB и импортировать их в кластер Redshift. Единственная проблема заключается в том,...
1784 просмотров
schedule
01.06.2023
Импорт csv в базу данных Postgres с неправильным значением даты
У меня есть запрос, в котором есть поле даты со значениями, которые выглядят так в окне результатов запроса:
2013-10-01 00:00:00
Однако, когда я сохраняю результаты в csv, они сохраняются следующим образом:
2013-10-01T00:00:00
Это...
699 просмотров
schedule
02.08.2022
Хранение данных временных рядов в красном смещении
Я обдумываю схему красного смещения, чтобы хранить данные временных рядов каждую минуту. Размышляя о проблеме в других базах данных, ориентированных на столбцы (например, cassandra), я собирался сохранить свою запись для отслеживания в виде строки, и...
849 просмотров
schedule
05.04.2022
Ошибка подключения группы AWS EC2 и Redshift Security
Я пытаюсь подключить экземпляр AWS Redshift через SQL Workbench, установленный на том же экземпляре EC2, но он неоднократно выдает ошибку «соединение отказано, проверьте правильность имени хоста и порта и что почтмейстер принимает TCP / IP» Я с...
703 просмотров
schedule
03.04.2022
