Xtreme1 – это первая в мире платформа с открытым исходным кодом для мультисенсорных тренировочных данных. После перехода на открытый исходный код многие инженеры похвалили нас и вдохновили поделиться знаниями о том, как внести свой вклад в наш проект. Пожалуйста, поддержите нас, пометив наш репозиторий на GitHub:
https://github.com/basicai/xtreme1
Это руководство является четвертой частью нашей серии руководств по Xtreme1. Если вы еще этого не сделали, смотрите нашу первую часть здесь:
В этом руководстве мы шаг за шагом узнаем, как загружать мультимодальные данные в Xtreme1. Вы можете найти наш 3-минутный видеогид здесь:
Следите за нашими будущими выпусками, посвященными новейшим функциям.
Введение
Наше восприятие мира мультимодально — мы видим объекты, слышим звуки, ощущаем текстуры, ощущаем запахи и ощущаем вкусы. Модальность — это то, как что-то переживается или выражается, и когда тема содержит более одной такой модальности, она описывается как мультимодальная.
Платформа Xtreme1 поддерживает аннотирование, управление и улучшение мультимодальных данных для обучения соответствующей модели. Это руководство научит вас, как загружать свои данные.
Загрузить данные изображения
Перейдите на страницу набора данных, нажмите «Создать новый» и выберите «Категория изображения».
Для загрузки доступны распространенные форматы изображений, такие как PNG и JPG.
Также поддерживается загрузка ZIP-архива.
Загрузить 3D-данные облака точек
Поддерживаются файлы облаков точек в формате PCD, которые содержат ASCII и двоичные данные.
Процесс загрузки аналогичен загрузке изображения.
Загрузите в Xtreme1, перетащив zip-архив, содержащий файл PCD.
В случае успеха вы можете просмотреть данные облака точек.
Загрузить данные слияния 2D и 3D
Данные 2D и 3D fusion должны быть помещены в соответствующие папки:
Данные облака точек должны быть помещены в папку «point_cloud».
Изображения помещаются в img0, img1 и т. д.
Вот два изображения, которые объясняют наш формат файла данных Fusion:
Если вы хотите использовать данные слияния 2D и 3D, вам также необходимо загрузить файл параметров камеры в папку camera_config.
Наконец, загрузите сжатый zip-файл в Xtreme1.
Предварительно просмотрите данные и убедитесь, что функции данных слияния работают должным образом.
Загрузка через URL
Все данные также могут быть загружены напрямую через внешние ссылки.
В окне загрузки вставьте адрес ссылки, убедившись, что ссылка заканчивается на .zip. Это загрузит данные непосредственно в Xtreme1.
Планы на будущее
В будущих версиях мы будем поддерживать операции загрузки данных в интерфейсе командной строки.
Мы также сделаем общедоступными общие наборы данных, доступ к которым можно будет получить одним щелчком мыши.
Примеры набора данных:
Свяжитесь с Xtreme1 в Slack, чтобы ответить на любые вопросы:
Пожалуйста, поддержите нас, пометив наш репозиторий на GitHub: