1
ответ

Почему BigQuery имеет собственное хранилище?

BigQuery (BQ) имеет собственную систему хранения, которая полностью отделена от Google Cloud Store (GCS). Мой вопрос: почему BQ не обрабатывает напрямую данные, хранящиеся в GCS, такие как Hadoop Hive? ...
вопрос задан: 17 January 2019 12:05
1
ответ

Выполнение SELECT * из TABLE дает & ldquo; Невозможно прочитать поле 'records' типа INT64 как UINT64 & rdquo;

Я сталкиваюсь с тем, что кажется глобальной проблемой BigQuery, которая началась, может быть, всего несколько дней назад. Это определенно работало 7 января 2019 года. Я сузил проблему до простого SELECT * ...
вопрос задан: 17 January 2019 11:36
1
ответ

Как получить комбинацию значений из одного столбца?

Я пытаюсь получить четкое возможное значение комбинации из одного столбца в BigQuery. Предположим, у меня есть эта таблица: + ------------------------------------------- - + | дата | тип | оплата | ...
вопрос задан: 17 January 2019 05:22
1
ответ

Как раскрутить вложенные записи в схеме Firebase?

Я пытаюсь сгладить данные уровня событий из аналитики Firebase, но не могу развернуть вложенные записи. Кто-нибудь может помочь мне с этим? вот моя схема http://take.ms/mjyxw вот такая ...
вопрос задан: 17 January 2019 05:10
1
ответ

Слияние записей на основе условий в BigQuery

У меня есть несколько строк для членов, и я хочу объединить их на основе значений двух столбцов, отдав приоритет значению «Да». Имя | Status1 | Status2 Джон | Да | Нет Джон | Нет | ...
вопрос задан: 16 January 2019 14:21
1
ответ

Как выполнить запрос BigQuery в R с фильтром даты в запросе

У меня есть проблема при попытке загрузить данные BigQuery в R и с использованием фильтра даты (дата фильтра является переменной). projectid = "projectid" sql < - sprintf ("SELECT * from [table], где num_start < 21 и ...
вопрос задан: 16 January 2019 14:18
1
ответ

BigQuery, преобразуйте переменную INTEGER в DATE

У меня есть набор данных с переменной даты, закодированной как NUMERIC. например «01/03/2005» отображается как «1032005». Я хочу преобразовать переменную в STRING, дополнить ее начальными нулями, а затем преобразовать в DATE ...
вопрос задан: 16 January 2019 11:50
1
ответ

Загрузка Bigquery CSV не удается с Python API, но успешно с использованием графического интерфейса

Я использую Python для создания файла CSV и загрузки его в BigQuery. Тем не менее, он не может загрузить со следующей ошибкой: Ошибка при чтении данных, сообщение об ошибке: Столбец ссылки таблицы CSV ...
вопрос задан: 16 January 2019 07:11
1
ответ

BigQuery - считать условно

Я рассчитываю подсчитать количество вхождений, которые существуют перед строкой. Таблица: | день | время | тип | 1 | 2 | 3 | 4 | | Пн | 9 | A | a1 | a2 | a3 | a4 | | Пн | 10 | B | b1 | b2 | b3 | b4 | | Пн | ...
вопрос задан: 15 January 2019 20:30
1
ответ

Анализ журналов Gmail в BigQuery

Я пытаюсь определить общее количество сообщений, отправленных с моей учетной записи G Suite. Я передаю свои журналы в BigQuery. Сообщения могут появляться в журналах несколько раз, поэтому я могу сосчитать различные ...
вопрос задан: 15 January 2019 16:46
1
ответ

Большой запрос Regexp_Extract с использованием URL-адреса Google Analytics

Как извлечь параметр id ниже, используя Big Query Regexp_Extract некоторые строки с URL-адресами страниц в них, которые выглядят примерно так: url.com/id=userIDmadeUPofletterandnumbers&em=MemberType eg url.com / ...
вопрос задан: 14 July 2018 00:08
1
ответ

Как обеспечить установку google-cloud-bigquery == 0.28.0 для работников потока данных

Мне очень сложно получить последнюю версию bigquery, работающую над рабочими Dataflow. Может кто-нибудь посоветует, каким будет более простой способ сделать эту работу. Имея setup.py с google-cloud -...
вопрос задан: 13 July 2018 18:07
1
ответ

Проблема при создании или обновлении схемы в BigQuery

Я пытаюсь создать / обновить Schema в BigQuery, передав ниже JSON-файл в bq в качестве обновления и создав инструкции как: bq mk -table [PROJECT_ID]: [DATASET]. [TABLE] [PATH_TO_SCHEMA_FILE] bq ...
вопрос задан: 13 July 2018 13:52
1
ответ

Подключение к BigQuery в Power BI

Я хочу сделать отчет с данными из набора данных, совместно используемого мной в BigQuery. Проблема в том, что когда я подключаюсь к базе данных, я могу видеть только «Мой проект» и «Публичные наборы данных». Экран Power BI ...
вопрос задан: 13 July 2018 13:49
1
ответ

Создайте представление в BigQuery, которое выравнивает таблицу

У меня есть таблица в BigQuery, которая показывает данные в следующей структуре: + ------------ + --------- + ----------- + ----------- + | Дата | Продукт | CostPrice | ПродажаЦена | + ------------ + --------- + -------...
вопрос задан: 13 July 2018 13:04
1
ответ

как создать таблицу, если она не существует в большом запросе с использованием командной строки или sql

внимательный ввод или синтаксис, как создать таблицу, если она не существует в большом запросе, пыталась использовать команду Mk для создания пустой таблицы, но не могла найти, чтобы создать, если таблица не существует
вопрос задан: 13 July 2018 12:25
1
ответ

Какой должен быть самый быстрый способ загрузки данных в Google Cloud BigQuery?

Я хочу загрузить данные большого размера в google cloud bigQuery. Каковы все варианты в моей руке (с использованием пользовательского интерфейса и API), и каков был бы самый быстрый способ? ТИА!
вопрос задан: 13 July 2018 10:28
1
ответ

BigQuery query_parameters null

Как установить параметр запроса равным null? query = "" "SELECT word, word_count FROM` bigquery-public-data.samples.shakespeare` WHERE corpus = @corpus AND word_count & gt; = @min_word_count ORDER BY ...
вопрос задан: 13 July 2018 08:06
1
ответ

Сохраните ответ на запрос в Google+ с помощью Python [duplicate]

Я использую python api «google-cloud-bigquery» для запроса Big Query. Я хотел бы сохранить свой набор данных непосредственно на листе Google. Является ли это возможным ? Из пользовательского интерфейса ответ да (см. «Сохранить в ...
вопрос задан: 3 May 2018 09:19
1
ответ

Как изменить тип столбца с TIMESTAMP на DATE таблицы BigQuery [duplicate]

У меня есть столбец типа TIMESTAMP, который я хочу изменить на тип DATE в уже существующей таблице bigquery. Я пробовал это решение. Как изменить тип столбца таблицы BigQuery, запросив и ...
вопрос задан: 17 March 2016 22:15
1
ответ

Возможно ли восстановить DATASET в BigQuery? [Дубликат]

Можно ли восстановить набор данных в BigQuery со всеми таблицами?
вопрос задан: 23 July 2015 01:16
1
ответ

Установка переменных Big Query, таких как mysql

Что такое BigQuery эквивалентно MySQL переменным? SET @fromdate = '2014-01-01 00:00:00', - даты после 2013 года @ todate = '2015-01-01 00:00:00', @bfromdate = '2005-01-01 00: 00:00 ', - даты ...
вопрос задан: 20 April 2015 22:34
0
ответов

Запрос Bigquery для поиска имен столбцов таблицы

Мне нужен запрос, чтобы найти имена столбцов таблицы (метаданных таблицы )в Bigquery, например следующий запрос в SQL :SELECT столбец _имя, данные _тип, данные _длина, данные _точность,обнуляемый ОТ всех _вкладка _столбцы, где...
вопрос задан: 25 September 2019 10:14
0
ответов

Google BigQuery Delete Rows?

Кто-нибудь знает о каких-либо планах по добавлению поддержки удаления частей данных из таблицы в Google Bigquery? Проблема, с которой мы сейчас сталкиваемся, заключается в том, что мы используем ее для аналитики точки данных, которые мы собираем с течение
вопрос задан: 31 May 2019 10:46
0
ответов

Скачать данные Google BigQuery в CSV

У меня есть требование для загрузки данных из Google BigQuery. На данный момент я подключаюсь к сервису Google BigQuery и помещаю эти данные в dataframe и преобразую в файл CSV.
вопрос задан: 24 March 2019 04:44
0
ответов

Сопоставить значение строки в столбце с именем другого столбца в BIGQUERY

В bigquery, есть ли способ сделать операцию L? Скажите где: + ---------------- + --------------- + ------------- --- + | COL1 | COL2 | FOO | + ---------------- + ----------...
вопрос задан: 22 March 2019 22:54
0
ответов

Почему BigQuery внезапно выдает ошибку формата данных

Следующий запрос неожиданно перестал работать: SELECT CAST ((SELECT up.value.string_value FROM UNNEST (user_properties) up WHERE key = "user_id") AS INT64) AS user_id, (TIMESTAMP_MILLIS (CAST (...
вопрос задан: 18 March 2019 17:58
0
ответов

Ошибка API хранилища BigQuery: bqstorage_client

Я использую BigQuery Storage API (бета) для загрузки большого набора данных в фрейм данных. Вот мой код: из google.cloud импортировать bigquery из google.cloud import bigquery_storage_v1beta1 bqclient = ...
вопрос задан: 6 March 2019 18:07
0
ответов

Google BigQuery Pub / Sub уведомление

Предположим, я запускаю API BigQuery (Java / Python / Go), чтобы вставить в него некоторые данные. Есть ли возможность указать тему Pub / Sub и заставить BigQuery отправлять результат операции вставки в эту тему без ...
вопрос задан: 5 March 2019 15:45
0
ответов

Предел пользовательских параметров Firebase для BigQuery

Я нашел эту ссылку Отчет о пользовательских параметрах из firebase, где говорится, что вы также можете определить до 50 пользовательских параметров событий на проект (40 числовых и 10 текстовых) для включения в отчеты. ...
вопрос задан: 5 March 2019 03:28