1
ответ

AWS Athena SQL для группировки и поиска минимума в разных строках

У меня есть запрос к AWS Athena, и ядро ​​его прекрасно работает. Код моей компании - AA (поле ACD), а коды наших конкурентов - BB, CC и DD (поле OCD). Так что для каждой отдельной поездки моя компания ...
вопрос задан: 19 March 2019 22:58
1
ответ

AWS Glue - Как настроить Crawler для создания таблицы с именами файлов S3 внутри

Что мне нужно сделать: Полнотекстовый поиск по ключам S3 (не по содержимому файлов) Итак, моя корзина S3 имеет следующую структуру: bucket_name / user1@gmail.com/ folder1 / notthatimportantfile ** любой ...
вопрос задан: 5 March 2019 21:01
1
ответ

Почему pyspark sql запрос против S3 возвращает нули

Я получаю разные результаты при выполнении одного и того же запроса в Афине к источнику S3 по сравнению с выполнением его из скрипта pyspark в кластере EMR (1 x 10). Я получаю данные от Афины, но все, что я ...
вопрос задан: 21 January 2019 16:37
1
ответ

Какой формат отметки времени для записи файла паркета в го

Я пытаюсь написать структуру Go в файле Parquet и загрузить ее на S3. Какой формат и тип указать в параметре timestamp в структуре, чтобы athena отображала правильную метку времени при чтении из ...
вопрос задан: 16 January 2019 19:02
1
ответ

Раздел S3 (размер файла) для эффективного запроса Афины

У меня есть конвейер, который загружает ежедневные записи в S3. Затем я использую AWS Glue Crawler для создания раздела для облегчения запроса AWS Athena. Тем не менее, есть большие разделенные данные, по сравнению с ...
вопрос задан: 16 January 2019 09:03
1
ответ

AWS Athena округляет числа при импорте файла CSV

Я пытаюсь импортировать некоторые данные из CSV в AWS Athena, которые выглядят следующим образом. Когда я затем просматриваю данные в таблице test_job_id округляет данные до 1550000000000. Кто-нибудь знает, как я могу получить ...
вопрос задан: 15 January 2019 22:02
1
ответ

Название столбца с пробелом - Афина

Я пытаюсь создать таблицу с именем столбца с пробелом с помощью консоли Athena. Пример: строковая ошибка "Mag Creative": это поле обязательно для заполнения. Пробелы не допускаются!
вопрос задан: 15 January 2019 16:30
1
ответ

как добавить две таблицы с разными столбцами в aws athena

Мне нужна помощь в написании запроса, который добавляет две таблицы с похожими столбцами и другими столбцами. Например, если у меня есть 2 таблицы, таблица 1: имя возрастное место n1 a1 p1 ...
вопрос задан: 13 July 2018 12:09
0
ответов

Разделы для журналов потока vpc

Этот запрос работает как ожидалось. СОЗДАЙТЕ ВНЕШНЮЮ ТАБЛИЦУ, ЕСЛИ НЕ СУЩЕСТВУЕТ vpc_flow_logs3 (версия int, строка аккаунта, строка интерфейса, строка адреса источника, строка адреса назначения, ...
вопрос задан: 14 April 2019 05:20
0
ответов

Как выбрать ключ, соответствующий наибольшему значению на карте гистограммы?

Я использую функцию гистограммы () https://prestodb.github.io/docs/current/functions/aggregate.html. «Возвращает карту, содержащую количество раз, когда каждое входное значение встречается». Результат ...
вопрос задан: 25 February 2019 15:56
0
ответов

Есть ли эффективный способ предоставления инструкции создания внешней таблицы в команде aws athena cli?

Я работаю над проектом методологии Agile с EMR в качестве механизма обработки, AWS Athena с Tableu в качестве уровня представления и S3 в качестве уровня хранения. Есть ли способ обеспечить создание таблицы имен файлов ...
вопрос задан: 15 January 2019 18:32