Публикации по теме 'redshift'


Основы хранилища данных: загрузка данных из Amazon S3 с помощью Amazon Redshift
Пронай Гош и Хирен Рупчандани В предыдущей статье мы узнали, как настроить Amazon Redshift . В этой статье мы узнаем, как загружать данные из Amazon S3 в Amazon Redshift. Сначала мы загрузим файлы данных CSV . Затем мы создадим корзину Amazon S3 , а затем загрузим файлы данных в корзину S3. Запустите Создание таблиц базы данных в кластере Amazon Redshift. Чтобы загрузить таблицы из файлов данных на Amazon S3 , используйте команды COPY . Устраните проблемы с..
Как подключить базу данных AWS Redshift с помощью Python
Contents · Introduction ∘ Install the Libraries ∘ Import the Libraries ∘ Credentials ∘ Define and execute a Cursor · Conclusion Введение Существует слишком много отличных интерпретаторов SQL, чтобы манипулировать базой данных с помощью написания сценариев, совсем недавно я обнаружил один, Dbeaver. Dbeaver — очень полезный инструмент для доступа к различным базам данных, таким как AWS, IBM и многим другим. Также он имеет довольно удобную структуру для..
Amazon выпускает кубы и другие новые функции SQL для Redshift
Как Amazon упрощает миграцию устаревших хранилищ данных Amazon выпускает кубы и другие новые функции SQL для Redshift Как теперь вы можете использовать ROLLUP, CUBE и GROUPING SETS в предложении GROUP BY Современные хранилища данных, такие как Snowflake, Google BigQuery и AWS Redshift, характеризуются тем, что они сочетают в себе SQL и NoSQL и основаны на столбцах. С новым обновлением AWS, которое теперь также возможно с кубами, эти современные хранилища данных берут на себя..
Несколько шагов к быстрому красному смещению
Как вы думаете, может ли хорошо работать веб-панель, которая напрямую взаимодействует с Amazon Redshift и показывает таблицы, диаграммы, числа - статистику? Мы считаем, что это возможно, если панелью управления пользуется несколько пользователей. Поскольку это был наш случай, мы решили попробовать. По мере того, как мы разрабатывали приборную панель, добавляя больше статистики, деталей и функций, она становилась все медленнее и медленнее. И вот настал день, и появилась задача «улучшить..
Создайте пакет Java для запроса кластера Redshift
В этом посте мы создадим пакет Java с помощью Eclipse IDE и создадим исполняемый файл jar для запроса вашего кластера Redshift. 1. Загрузите Eclipse SDK. Eclipse - одна из самых популярных IDE для программирования на Java. Вы можете бесплатно скачать его отсюда → https://www.eclipse.org/downloads/ 2. Загрузите и установите Java SDK 11. Java можно скачать с сайта Oracle . Я предпочитаю использовать Oracle java, так как он более широко совместим с существующей экосистемой. 3...
Материализованные представления Redshift
Часто бывает удобно создать представление для вашей нормализованной схемы для объединения и агрегирования данных, особенно когда это требует сложного запроса. В PostgreSQL вы можете создать представление на основе запроса. CREATE VIEW my_view AS SELECT list_id, event_id, sum(price_paid) AS revenue, count(qty_sold) AS qty FROM sales..
Загрузка больших данных при запуске
Помимо часто цитируемого «программное обеспечение пожирает мир», возможно, нет более популярного трюизма в технологической индустрии, чем «данные - это новая нефть». Чтобы принимать оптимальные бизнес-решения, компании должны иметь доступ к метрикам и аналитическим данным, которые полностью используют имеющиеся у них данные. Бизнес, который не понимает важности данных, останется позади. Проблема, конечно же, в исполнении. В любом современном бизнесе потоки данных поступают из разных..