0
ответов
Redshift добавляет 4/5 часов к столбцам меток времени при копировании с помощью команды & ldquo; COPY & rdquo; из S3
Я пытаюсь скопировать данные (Parquet File) из S3 в Redshift, используя команду COPY команды redshift. Данные успешно скопированы, но я вижу дополнительные 5 часов, добавленные в поле метки времени. Когда я попробую ...
вопрос задан: 18 January 2019 12:40
0
ответов
Лучший способ обработки сериализуемой изоляции - Redshift
Я знаю, что ошибка вызвана тем, что параллельные процессы пытаются получить доступ к одним и тем же таблицам для обновления или удаления. Так что у меня также есть скрипт на python. Я запускаю 4 экземпляра одного и того же питона ...
вопрос задан: 18 January 2019 10:52
0
ответов
Pandas to_sql возвращает ошибку 'отношение уже существует' при использовании if_exists = 'append'
Я пытаюсь ежедневно вставлять фрейм данных в таблицу в Redshift. Команда to_sql работает для создания таблицы, но возвращает ошибку, когда я пытаюсь добавить существующую таблицу даже при использовании ...
вопрос задан: 17 January 2019 16:51
0
ответов
Задание AWS Glue выполняется, но не извлекает все записи из таблицы
Задание склеивания не снимает все записи в таблице под триггером, даже если оно запускается, но когда я запускаю по требованию, оно снимает все записи в таблице. У меня есть работа с клеем, которая делает снимки ...
вопрос задан: 17 January 2019 16:13
0
ответов
Объект запроса был закрыт при запросе из Amazon Redshift
При попытке выполнить простой запрос к таблице (размеры: 1 131 714 069 строк на 22 столбца) я сталкиваюсь с ошибкой: [Amazon] [JDBC] (12080) Объект оператора закрыт. Исследование ...
вопрос задан: 16 January 2019 19:19
0
ответов
Точка с запятой и одинарная кавычка в Amazon Redshift
Следующая UNLOAD: UNLOAD ('ВЫБЕРИТЕ "Field1" из "XX". "XX", где "Field1" = \' String \ ';') В 'XXX' IAM_ROLE 'XXX' DELIMITER AS ',' ADDQUOTES ESCAPE NULL AS ' 'Манифест вызывает ошибку: Java ....
вопрос задан: 15 January 2019 20:31
0
ответов
Как получить последний день месяца в postgres?
Как найти последний день месяца в postgres? У меня есть столбцы даты, хранящиеся как числовые (18) в формате (ГГГГММДД), я пытаюсь сделать его датой, используя to_date ("act_dt", "ГГГГММДД)) AS" дата акта "...
вопрос задан: 26 August 2018 07:11
0
ответов
Amazon Redshift при 100% использовании диска из-за DEEP COPY
Я пытался глубоко скопировать одну из наших таблиц, которая составляет 12,5% от общего объема дискового пространства (25% от фактических данных на диске). При вставке в новую таблицу (с рекомендуемым сжатием) запрос не удался ...
вопрос задан: 13 July 2018 11:07
0
ответов
Передача значения из одного запущенного приложения в другое
У меня есть два приложения: производитель и потребитель. Я генерирую временные учетные данные (ключ доступа / секретный ключ), используя GetSessionToken / AssumeRole для красного смещения от производителя. Теперь я запустил ...
вопрос задан: 13 July 2018 04:44
0
ответов
AWS Kinesis Firehose не вставляет данные в Redshift
Я стараюсь, чтобы Kinesis Firehose помещал данные в таблицу Redshift. Поток firehose работает и помещает данные в S3. Но ничего не прибывает в таблицу назначения в Redshift. В метрике ...
вопрос задан: 21 May 2018 05:42
0
ответов
Amazon Redshift: удалить таблицу, если существует
Поддерживает ли Redshift какое-либо утверждение, эквивалентное следующему? DROP TABLE ЕСЛИ СУЩЕСТВУЕТ tablename
вопрос задан: 2 March 2018 13:52
0
ответов
Как получить информацию о таблицах и столбцах из Redshift?
pg_tables предоставляет список таблиц. Существует ли pg_columns или его эквивалент для предоставления списка столбцов? В DB2 я бы запросил sysibm.systables / columns для получения такой информации. Что ...
вопрос задан: 30 May 2017 15:06
0
ответов
Спарк-красное смещение занимает много времени, чтобы написать в красное смещение
Я работаю над настройкой искрового стримера с помощью кинезиса и красного смещения. Я считываю данные из kinesis через каждые 10 секунд, обрабатываю их и записываю в красное смещение, используя lib-spark-redshift lib. Проблема в том, что это ...
вопрос задан: 2 March 2016 06:09
0
ответов
Столбец имеет тип timestamp без часового пояса, но выражение имеет тип символа
Я пытаюсь вставить записи, пытаясь реализовать SCD2 в Redshift, но получаю ошибку. DDL целевой таблицы: CREATE TABLE ditemp.ts_scd2_test (id INT, md5 CHAR (32), record_id ...
вопрос задан: 1 September 2015 17:25
0
ответов
Монгодб к красному смещению
У нас есть несколько коллекций в mongodb, которые мы хотим перенести в красное смещение (автоматически, ежедневно). Как мы можем это сделать? Должны ли мы экспортировать монго в CSV?
вопрос задан: 28 January 2014 13:07
0
ответов
Копирование данных из S3 в красное смещение AWS с использованием python и psycopg2
У меня проблемы с выполнением команды копирования для загрузки данных из S3 в Amazon Redshift из Python. У меня есть следующая команда копирования: копия перемещается из 's3: // / move_data / 2013 -...
вопрос задан: 24 March 2013 17:32