Сегодня мы рады объявить о немедленной доступности ведущего дистрибутива Kubeflow MiniKF на AWS Marketplace!

С ноября 2019 года пользователи могут легко и быстро развернуть MiniKF в Google Cloud и своих ноутбуках через Vagrant.

Это оказалось очень успешным для специалистов по данным и инженеров по машинному обучению: более 100 компаний развернули MiniKF в Google Cloud и более 18 000 загрузок через Vagrant.

Продолжая наше стремление упростить процесс создания, тестирования, обучения и развертывания моделей машинного обучения для специалистов по данным, мы публично выпустили MiniKF на AWS для поддержки GitOps для машинного обучения.

Наши учебники MiniKF — это самый быстрый и простой способ изучить новые рабочие процессы машинного обучения в Kubeflow 1.1, и теперь вы можете экспериментировать как с AWS, так и с GCP.

Пользователи могут легко развертывать универсальную платформу для машинного обучения в Kubernetes. Это включает в себя автономный экземпляр на базе Minikube, Kubeflow и платформу управления данными Arrikto Rok.

Специалисты по обработке и анализу данных могут по-прежнему пользоваться теми же великолепными автоматизированными рабочими процессами в AWS, что и в настоящее время в GCP и на своем ноутбуке.

  • Ускорьте разработку моделей и обучение с помощью интегрированной комплексной платформы для анализа данных «все в одном», которая работает в облаке и локально.
  • Разрабатывайте модели в знакомых инструментах без необходимости управлять библиотеками и создавать образы докеров.
  • Автоматизируйте сложный код модели для конвейерных рабочих процессов
  • Повысьте точность модели и ускорьте обучение с помощью автоматической настройки гиперпараметров
  • Визуализация многошаговых графиков конвейера
  • Выполняйте отладку быстрее, воспроизводя состояние каждого шага конвейера одним нажатием кнопки
  • Обеспечьте глобальную мобильность данных с помощью расширенной автоматизации управления данными Kubernetes.

Мы рады продолжать продвигать усилия по машинному обучению для организаций любого размера и облегчать жизнь специалистам по данным, позволяя им сосредоточиться на построении моделей, а не на управлении инфраструктурой.

Инструкции по началу работы

Чтобы установить MiniKF на AWS, выполните следующие действия:

Шаг 1. Перейдите на MiniKF page на AWS Marketplace.

Шаг 2. Нажмите кнопку Продолжить подписку.

Шаг 3. Нажмите кнопку Принять условия.

Шаг 4. Подождите несколько минут и нажмите Продолжить настройку.

Шаг 5. Выберите Регион. Мы рекомендуем оставить значения по умолчанию для Способ доставки и Версия программного обеспечения. Затем нажмите Продолжить запуск.

Шаг 6. Здесь вы можете просмотреть сведения о конфигурации. Не забудьте просмотреть Инструкции по использованию и держите их под рукой, так как они понадобятся вам позже.

Шаг 7. Вы также можете выбрать способ запуска MiniKF или изменить тип экземпляра EC2. Мы рекомендуем оставить значение по умолчанию для Выбрать действие. Мы рекомендуем оставить тип инстанса EC2 по умолчанию (m5.2xlarge) или выбрать еще более мощный инстанс. Выбор виртуальной машины с ограниченными характеристиками может сделать невозможным обучение моделей машинного обучения.

Шаг 8. Выберите существующее VPC или создайте новое. Если вы создаете новый, убедитесь, что вы нажали значок обновить, чтобы обновить содержимое списка, чтобы в нем появился ваш новый VPC.

Шаг 9. Выберите существующую подсеть или создайте новую. Если вы создаете новый, не забудьте щелкнуть значок обновить, чтобы обновить содержимое списка, чтобы в нем появилась ваша новая подсеть.

Шаг 10. Мы настоятельно рекомендуем создать новую группу безопасности. В противном случае вы не сможете получить доступ к вашему MiniKF. Для этого нажмите Создать новый на основе настроек продавца.

Примечание. Если вам нужно использовать существующую группу безопасности, убедитесь, что она охватывает порты, указанные в инструкциях по использованию (см. вверху этой страницы).

Шаг 11. Выберите существующую ключевую пару или создайте новую. Если вы создаете новый, не забудьте щелкнуть значок обновить, чтобы обновить содержимое списка, чтобы в нем появилась ваша новая пара ключей.

Шаг 12. Нажмите Запустить. После этого вы увидите сообщение об успешной установке. Сообщение содержит ссылку для просмотра экземпляра в консоли EC2. Нажмите здесь.

Шаг 13. Теперь вы должны увидеть такой экран. Нажмите на ID экземпляра созданного экземпляра.

Шаг 14. Вы увидите эту страницу. Нажмите Подключить, чтобы подключиться к экземпляру с помощью EC2 Instance Connect.

Примечание. Это будет работать только в том случае, если вы создали группу безопасности на основе настроек продавца, как в шаге 10, или настроили группу безопасности на основе инструкций по использованию. В противном случае вам необходимо вручную подключиться к экземпляру по SSH, см.: https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/AccessingInstancesLinux.html

Шаг 15. Поле Имя пользователя будет заполнено заранее. Нажмите Подключить.

Шаг 16. Следуйте инструкциям на экране и введите minikf, чтобы просмотреть ход развертывания.

Шаг 17. Подождите несколько минут.

Шаг 18. После завершения установки вы увидите этот экран.

Шаг 19: Перейдите по URL-адресу и войдите в MiniKF, используя предоставленное имя пользователя и пароль.

Обратите внимание, что MiniKF использует самозаверяющий сертификат, поэтому вам придется следовать этому руководству, чтобы перейти к панели управления MiniKF.

Шаг 20. После входа в систему вы увидите панель управления MiniKF.

Поздравляем! Вы успешно развернули MiniKF на AWS. Теперь вы можете создавать блокноты, писать код машинного обучения и запускать конвейеры Kubeflow.

Первоначально опубликовано на https://www.arrikto.com 17 ноября 2020 г.