Вопросы по теме 'amazon-redshift-spectrum'
Пропуск строк заголовков во внешних таблицах AWS Redshift
У меня есть файл в S3 со следующими данными:
name,age,gender
jill,30,f
jack,32,m
И красное смещение внешняя таблица для запроса этих данных с помощью спектр :
create external table spectrum.customers (
"name" varchar(50),
"age"...
4488 просмотров
schedule
13.06.2023
Redshift Spectrum разбивает таблицу с помощью двух полей даты
Я искал лучшие практики для создания разделов по дате, используя amazon-redshift-spectrum , но примеры показывают, что проблема решается путем разделения таблицы только по одной дате. Что делать, если у меня более одного поля даты?
Например:...
922 просмотров
schedule
12.05.2024
Мне нужно скопировать базу данных из одного кластера Redshift в другой кластер
Мне нужна помощь в перемещении базы данных из одного кластера Redshift в другой кластер Redshift. Здесь я не копирую таблицу. Я хочу скопировать базу данных. Может ли кто-нибудь помочь мне в этом.
1699 просмотров
schedule
16.04.2023
Как создать внешнюю таблицу для вложенного типа паркета в спектре красного смещения
Я знаю, что красное смещение и спектр красного смещения не поддерживают вложенный тип, но я хочу знать, есть ли какой-нибудь трюк, с помощью которого мы можем обойти это ограничение и запросить наши вложенные данные в S3 с помощью Redshift Spectrum?...
2799 просмотров
schedule
23.02.2023
Выгрузка файлов данных из Amazon Redshift в Amazon S3 в формате Parquet
Я хотел бы выгрузить файлы данных из Amazon Redshift в Amazon S3 в формате Apache Parquet, чтобы запросить файлы на S3 с помощью Redshift Spectrum. Я исследовал все, но не смог найти ничего о том, как выгрузить файлы из Amazon Redshift в S3 с помощью...
8126 просмотров
schedule
18.04.2023
AWS Redshift - не удалось включить внешнюю таблицу в локальный каталог.
Возникла проблема с одной из наших внешних таблиц в красном смещении.
У нас есть более 300 таблиц в AWS Glue, которые были добавлены в наш кластер красного смещения в виде внешней схемы с именем events . Большинство таблиц в events могут быть...
2128 просмотров
schedule
09.06.2022
Как называется функция PostgreSQL, которая позволяет ссылаться на столбцы с псевдонимами в операторе SELECT?
Моя компания переходит с Netezza на AWS / Redshift. При использовании Netezza удобно присвоить столбцу имя в операторе select, а затем иметь возможность ссылаться на него снова, например:
Select Column1 + Column2 as Alias1, Alias1 + Column3 as...
56 просмотров
schedule
07.05.2024
Ошибка разбора типа столбца Redshift Spectrum
У меня есть вариант использования спектра с использованием файлов большого количества файлов json из s3. Я начал с сканирования данных с помощью поискового робота Glue для создания каталога данных. Затем с этим каталогом я создал внешнюю схему для...
774 просмотров
schedule
26.03.2022
Redshift Spectrum и Hive Metastore - неоднозначная ошибка
Из Redshift я создал внешнюю схему с помощью Hive Metastore. Я могу видеть метаданные Redshift о таблицах (например, используя: select * from SVV_EXTERNAL_TABLES), однако при запросе одной из этих таблиц я получаю неоднозначную ошибку «error: Assert»...
603 просмотров
schedule
10.12.2022
Как смоделировать хранилище S3 для запроса с помощью AWS RedShift Spectrum
В базе данных MySQL есть users таблица.
Мы хотим перенести данные в AMazon S3 для дальнейшего анализа с помощью Amazon Redshift.
День 1 - экспорт 10 строк данных из таблицы пользователей (всего строк: 10)
День 2 - Экспорт 2 дополнительных...
169 просмотров
schedule
13.04.2022
to_char(to_date(string,‹format›),‹format›) не работает должным образом
У меня есть таблица, в которой даты хранятся в строковом формате, и я хочу изменить ее формат с ггггММдд на гггг-ММ-дд и сохранить ее обратно только в строковом формате. Я использую верстак Aginity.
Ссылочная ссылка - преобразовать MM/DD/YYYY в...
189 просмотров
schedule
20.03.2023
Минимальное разрешение, необходимое для доступа к внешней таблице Redshift
Согласно документации AWS,
Чтобы выполнить запрос Redshift Spectrum, вам потребуются следующие разрешения:
Разрешение на использование схемы
Разрешение на создание временных таблиц в текущей базе данных
У меня есть внешняя база...
1060 просмотров
schedule
14.09.2022
Как определить ключ сортировки для таблиц спектра
У меня есть пример использования, когда я присоединяюсь к таблице красных смещений с большой таблицей спектра. Я вижу, что в лучших практиках упоминается, что выбор ключа сортировки в условии соединения поможет операции соединения. Как указать ключ...
229 просмотров
schedule
16.04.2023
Создание таблицы спектра в matillion для файла csv с запятой внутри кавычек
У меня есть сценарий создания таблицы спектра в красном смещении с использованием матиллиона. мои данные файла CSV выглядят так: -
column1,column2,column3
abc,"qwety,pqr",xyz
но в таблице спектра я вижу данные как
column1 column2...
250 просмотров
schedule
14.02.2024
Файл Redshift JSONPaths для динамического файла json
Учитывая приведенный ниже объект json
{
"player": {
"francesco totti": {
"position": "forward"
},
"andrea pirlo": {
"position": "midfielder"
}
}...
80 просмотров
schedule
01.07.2022
Спектр красного смещения — обновление типа столбца таблицы внешнего спектра
Я создал внешнюю таблицу с 4 столбцами. Один из столбцов имеет пользовательский тип данных.
create EXTERNAL table public.test_table_1(
uuid varchar(36),
event_id varchar(36),
last_updated_timestamp bigint,
user_app struct<starttime : int,...
487 просмотров
schedule
24.07.2022
