Публикации по теме 'google-bigquery'


Системы рекомендаций, использующие BigQuery ML
Дайте мне свои лучшие рекомендации! Из этой статьи вы узнаете, как: Преобразование данных образца в формат, подходящий для обучения модели матричной факторизации Создайте, обучите и разверните матричную модель факторизации. Получайте прогнозы на основе развернутой модели о том, какие продукты наиболее вероятно заинтересуют ваших клиентов. Большинство потребителей сегодня ожидают персонализации, но как создать систему рекомендаций и использовать предсказанные рекомендации..

Вопросы по теме 'google-bigquery'

Встроенная поддержка JSON для BigQuery?
Планируется ли Google BigQuery внедрить нативную поддержку JSON? Я рассматриваю возможность переноса данных куста (~ 20T) в Google BigQuery, но определения таблиц в Hive содержат тип карты, который не поддерживается в BigQuery. например, HiveQL...
1049 просмотров
schedule 09.02.2024

Синтаксис SQL НЕ ВХОДИТ для Google BigQuery
Руководство по синтаксису Google SQL можно найти здесь https://developers.google.com/bigquery/docs/query-reference , похоже, не касается использования терминологии НЕ В. Я получаю ошибку Query Failed Error: Encountered "" at line 0, column 0....
17290 просмотров
schedule 26.03.2023

Предоставленная схема не соответствует таблице при добавлении
У меня есть большой выбор с соединениями, где обе таблицы имеют одинаковый размер, поэтому для его обработки я ограничиваю выбор в правой таблице фрагментами (используя %), а затем запускаю один и тот же выбор несколько раз, по одному для каждого...
1983 просмотров
schedule 12.10.2023

Можете ли вы создавать и запускать модели и статистические функции в Google BigQuery?
Как вы можете разработать или использовать статистические функции в Google BigQuery? Можете ли вы запускать Java, PHP, R и т. д. на платформе Google, или она в основном поддерживает только функции типа SQL?
381 просмотров
schedule 16.01.2024

разница в производительности bigquery между разделом и полной таблицей
У меня есть ~ 1 миллиард строк в объединении 25 разделов (по 40 м каждый) и в 1 полной таблице. Я запускаю запрос, который вычисляет отдельные числа, обычно он находит данные в 1-4 разделах. (запрос является динамическим) на основе предложения...
1453 просмотров
schedule 02.06.2023

Цены на данные таблиц BigQuery
Я хочу развеять сомнения относительно сборов или цен. Оплачивается ли BigQuery в одном из следующих сценариев: - 1) Если моя таблица содержит 100 ГБ данных, и если я запрашиваю эту таблицу для поиска записи, а BigQuery просматривает 100 ГБ, чтобы...
199 просмотров
schedule 18.10.2022

Максимальное количество разрешенных наборов данных в одном проекте
Есть ли ограничение на количество наборов данных, которое я могу создать в одном проекте BigQuery? Я нигде в документации не нашел этого ограничения. Я спрашиваю об этом, потому что хочу создавать набор данных за день. В ежедневном наборе данных...
904 просмотров
schedule 21.09.2023

Как программно запрашивать BigQuery из Python без взаимодействия с конечным пользователем?
Кажется, что на этот вопрос должно быть так просто ответить, но после нескольких дней исследований и нескольких тупиков я не могу получить результаты запроса из BigQuery , не настаивая на пользовательском OAuth. Кому-нибудь повезло с этим? Я не...
14470 просмотров
schedule 06.12.2023

Импорт данных json с нулевыми значениями
Из импорта документации BigQuery, Примечание. Нулевые значения не допускаются. Поэтому я предполагаю, что null не разрешено в данных в формате json для импорта BigQuery. Однако значение null на самом деле очень часто встречается в...
3299 просмотров
schedule 01.10.2023

Запрос диапазона для строковых полей со значениями DateTime в BigQuery
Я загружаю данные из файла csv в таблицу bigquery. Каждая запись из csv содержит значения поля datetime, и я сохраняю эти значения в полях таблицы BigQuery в виде строки. Когда я запрашиваю эти поля даты и времени для желаемого диапазона (например,...
1054 просмотров
schedule 12.10.2023

Могу ли я безопасно запросить таблицу BigQuery, которая заменяется на WRITE_TRUNCATE
Если для параметра configuration.load.writeDisposition установлено значение WRITE_TRUNCATE во время загрузите задание, есть ли период времени, когда запрос к таблице вызовет ошибку? Весь период, когда задание помечено как ОЖИДАЕТ и/или...
748 просмотров
schedule 13.06.2023

Использование List для получения queryResult из BigQuery получило только 512 записей.
Результат запроса показал, что он имеет 13224 строки, затем я использовал List<TableRow> rows = queryResult.getRows(); Затем он показывает, что список «строки» имеет только 512 строк. Любая помощь?
652 просмотров

BigQuery — Доступность сервиса
Google BigQuery обеспечивает минимальную доступность своего сервиса? Учитывая возможный сбой любого компонента в инфраструктуре Google, может случиться так, что я потеряю часть или всю информацию, которую я загрузил? Как Google может обеспечить...
552 просмотров
schedule 01.05.2023

Загрузите таблицу из Google Storage в BigQuery с помощью Google App Scripts
Я считаю, что это правильная настройка конфигурации задания, но мне трудно понять, как запустить задание. Кто-нибудь успешно использовал Apps Script для загрузки таблицы в BigQuery? function testLoad(){ var fields = [ {'name': 'FirstName',...
632 просмотров
schedule 06.08.2023

Ошибка бэкэнда большого запроса Google
Я добавляю несколько файлов журналов в Google Big Query, и у меня есть процесс, который делает это около 7 месяцев. Мы перестроили сайт, поэтому я сделал новую таблицу и почти идентичный процесс. Я могу массово загружать старые файлы из Google...
419 просмотров
schedule 19.12.2023

Ошибка HTTP 500 при запросе API большого запроса Google с использованием учетной записи службы
Я использую Big query для создания отчетов через веб-службу в течение года, однако в прошлом месяце или около того я заметил ошибки HTTP 500 в ответ на большинство моих запросов, даже если в веб-службу не было внесено никаких изменений. . В моей...
1163 просмотров
schedule 16.05.2022

Цены на Google BigQuery
Я аспирант Сингапурского университета менеджмента. В настоящее время я работаю в Университете Карнеги-Меллона над исследовательским проектом, который требует исторических событий из архива Github ( http://www.githubarchive.org/ ). Я заметил, что в...
3268 просмотров
schedule 09.06.2023

форматирование метки времени из BigQuery в Google Spreadsheet
Я создаю электронную таблицу, которая попадает в BigQuery с помощью Apps Script. Вот часть моего запроса: SELECT id, USEC_TO_TIMESTAMP(created) AS created, USEC_TO_TIMESTAMP(modified) AS modified, USEC_TO_TIMESTAMP(resolved) AS resolved,...
1139 просмотров

частичная схема JSON в BigQuery
У меня есть файл JSON с большим количеством полей. Я не хочу импортировать их все в свою таблицу. Допустим, есть файл JSON с сотнями полей, но я хочу сделать его небольшое представление в BigQuery. Может ли кто-нибудь дать мне пример, как это...
461 просмотров
schedule 04.03.2023

SQL для расчета кривой удержания
У нас есть таблица событий с пользователями, которые регистрируются и играют в наши игры. Итак, предположим, что у нас есть три поля timestamp ts int userId int eventId (I.e. 1 = Register, 2 = Login) То, что мы хотим...
1071 просмотров
schedule 08.07.2022