Публикации по теме 'big-data'


Крупномасштабная аналитика эмоций с современным подходом к машинному обучению
Мне это нравится! Когда дело доходит до видео на Youtube, профилей в Instagram или постов в Facebook, «мне это нравится» или «большой палец вверх» кажется единственной реакцией, которую мы показываем. На макроскопическом уровне это может указывать на качество и привлекательность видео, фотографий и статей, но «мне нравится» определенно не отражает сложные эмоции, которые возникают в нашем мозгу. Точно так же, как нам нравятся вещи, которые мы видим в Интернете, нам также могут..
Введение в конвейер больших данных и машинного обучения в AWS.
Эта история представляет собой простой путь для перечисленных ниже элементов в AWS: Создайте конвейер больших данных как для статических, так и для потоковых данных. Обработка данных в Apache Hadoop с помощью Hive. Загружайте обработанные данные в решения Data Warehouse, такие как Redshift и RDS, например MySQL. Собирайте потоковые данные с помощью таких сервисов AWS, как Kinesis Streaming и Kinesis Firehose. Анализируйте данные потоковой передачи в реальном времени с помощью..
Почему для глобальных прогнозов погоды требуются центры обработки данных
Прогнозирование погоды сегодня во многом связано с большими данными: потребность в высокопроизводительном вычислительном кластере очевидна. За каждой платформой прогнозирования погоды большую часть тяжелой работы выполняет центр обработки данных, и Meteum не является исключением. Центры обработки данных различаются по размеру: от небольших серверных комнат до групп географически распределенных зданий. Тем не менее, все они имеют одну общую черту: они являются незаменимыми..
Насколько велики BIGDATA?
Никакой суеты, прямой разговор. Одной из самых популярных фраз, подчеркивающих важность данных, является: данные - новое масло. Во время пандемии COVID-19 за последние два года важность качественных данных резко возросла. В результате потребность в актуальных и точных данных, а также в методах организации данных резко возросла. Насколько велики большие данные? Очень большой. А теперь пора заканчивать… Шучу, шучу. Расчет реального объема данных является сложной задачей,..
Elastic Container Service - когда документации AWS недостаточно
Elastic Container Service - когда документации AWS недостаточно Как запустить приложение Hadoop в кластере ECS Недавно, чтобы создать инфраструктуру для нашего нового продукта Shunting Yard , мы, команда разработчиков платформы больших данных Hotels.com, имели возможность поработать над Terraform, Docker и AWS Elastic Container Service. Задача заключалась в объединении этих трех инструментов для автоматизации создания инфраструктуры. Это оказался отличный опыт обучения, и я решил..
Управление ИИ против сингулярности ИИ: подготовка к худшему, надежда на лучшее
Какое время быть живым Искусственный интеллект (ИИ) прошел долгий путь за последние годы, и его потенциал изменить нашу жизнь неоспорим. Системы искусственного интеллекта, от беспилотных автомобилей до виртуальных помощников, с каждым днем ​​становятся все более распространенными. Особенно с появлением таких приложений, как ChatGPT, ИИ завершил свое восхождение в поп-культуру и показал лишь проблеск того, насколько сумасшедшими могут быть вещи. Мы находимся в эпицентре самой мощной..
Основные тенденции больших данных в 2020 году
К концу 2020 года индустрия больших данных достигнет 247 миллиардов долларов. Тенденция больших данных начала расти с 2018 года, и она быстро растет во многих приложениях. Традиционный процесс обработки данных доставлял компаниям много трудностей, отнимал много времени и средств, а также требовал большей ремонтопригодности. Процесс больших данных начал стремительно развиваться после того, как процесс автоматизации внедрил и ускорил операции обычного рабочего процесса. Здесь, в этом..