Публикации по теме 'bigquery'


Модель TensorFlow в BigQuery ML
Google быстро расширяет возможности BigQuery ML , добавляя все больше и больше типов моделей машинного обучения, которые можно использовать в BigQuery с очень небольшим количеством строк кода SQL и не более чем базовым пониманием лежащих в основе моделей. Совсем недавно стало возможным импортировать модели, которые были обучены с помощью TensorFlow , в BigQuery и использовать их для прогнозирования невидимых данных, не выходя из пользовательского интерфейса BigQuery. Таким образом,..

Большой запрос Google: «Ресурсы превышены во время выполнения запроса» 🤦‍♂️
«Ресурсы превышены во время выполнения запроса» - это статья, в которой обсуждаются проблемы с ограничением памяти, с которыми сталкивается программное обеспечение Google BigQuery, а также способы предотвращения и решения таких проблем. Эта статья изначально опубликована в моем блоге list.to 5 августа 2019 г. Предложение Google BigQuery - действительно мощный инструмент для анализа огромных объемов данных в диапазоне менее нескольких секунд, и он разработан для анализа данных в..

Глубокая нейронная сеть, реализованная на чистом SQL через BigQuery
Модель имеет следующие параметры: От ввода к скрытому W : матрица весов 2x2 (элементы: w_00, w_01, w_10, w_11 ) B : вектор смещения 2x1 (элементы: b_0, b_1 ) Скрыто для вывода W2 : матрица весов 2x2 (элементы: w2_00, w2_01, w2_10, w2_11 ) B2 : вектор смещения 2x1 (элементы: b2_0, b2_1 ) Данные обучения хранятся в таблице BigQuery, где столбцы x1 и x2 имеют входные данные, а y - выходные данные, как показано ниже (имя таблицы:..

Начало работы с машинным обучением Google BigQuery - Titanic Dataset
BigQuery ML все еще находится в стадии бета-тестирования и доступен с середины прошлого года; однако до недавнего времени мне не удавалось работать с этим предложением Google для облачного машинного обучения. Мое первое впечатление как не специалиста по данным - что не нравится? В конце концов, возможность запускать модели машинного обучения из удобного веб-редактора SQL - это мечта любого аналитика. Не только эта платформа избавляет от необходимости изучать язык программирования,..

Простое и мощное машинное обучение в больших масштабах
Это очень хорошо украсит это резюме. Одна из замечательных особенностей подключения вашей среды R и/или Python к BigQuery заключается в том, что вы больше не просто имеете доступ к огромному количеству общедоступных данных и возможность обрабатывать их в массовом масштабе за копейки за ГБ, но вы также унаследовали возможность выполнять машинное обучение прямо из того же интерфейса. Какие? Вы имеете в виду, что можете использовать платформу хранилища данных петабайтного масштаба и..

Анализ набора данных New York Taxi
Прогнозирование стоимости такси с использованием регрессионных моделей Недавно у меня была возможность поиграть с общедоступным набором данных о такси Нью-Йорка, размещенным на платформе Big Query в облаке Google. Я решил применить методы машинного обучения к набору данных, чтобы попытаться построить некоторые прогностические модели с использованием Python. В этом посте я попытаюсь предсказать стоимость проезда на такси. Давайте прямо в это дело! Весь код для этой статьи можно найти..

ML Study Jam - модель прогнозирования в BQML
Прогнозирование стоимости такси с помощью модели прогнозирования BigQuery ML Что такое ML Study Jam? Бесплатная программа машинного обучения с использованием Qwiklabs . Что такое BigQuery? BigQuery - это полностью управляемая, недорогая аналитическая база данных Google без использования операций. С помощью BigQuery вы можете запрашивать терабайты и терабайты данных, не имея какой-либо инфраструктуры для управления или администратора базы данных. Машинное обучение BigQuery..