Xtreme1 – это первая в мире платформа с открытым исходным кодом для мультисенсорных тренировочных данных. После перехода на открытый исходный код многие инженеры похвалили нас и вдохновили поделиться знаниями о том, как внести свой вклад в наш проект. Пожалуйста, поддержите нас, пометив наш репозиторий на GitHub:

https://github.com/basicai/xtreme1

Это руководство является четвертой частью нашей серии руководств по Xtreme1. Если вы еще этого не сделали, смотрите нашу первую часть здесь:



В этом руководстве мы шаг за шагом узнаем, как загружать мультимодальные данные в Xtreme1. Вы можете найти наш 3-минутный видеогид здесь:

Следите за нашими будущими выпусками, посвященными новейшим функциям.

Введение

Наше восприятие мира мультимодально — мы видим объекты, слышим звуки, ощущаем текстуры, ощущаем запахи и ощущаем вкусы. Модальность — это то, как что-то переживается или выражается, и когда тема содержит более одной такой модальности, она описывается как мультимодальная.

Платформа Xtreme1 поддерживает аннотирование, управление и улучшение мультимодальных данных для обучения соответствующей модели. Это руководство научит вас, как загружать свои данные.

Загрузить данные изображения

Перейдите на страницу набора данных, нажмите «Создать новый» и выберите «Категория изображения».

Для загрузки доступны распространенные форматы изображений, такие как PNG и JPG.

Также поддерживается загрузка ZIP-архива.

Загрузить 3D-данные облака точек

Поддерживаются файлы облаков точек в формате PCD, которые содержат ASCII и двоичные данные.

Процесс загрузки аналогичен загрузке изображения.

Загрузите в Xtreme1, перетащив zip-архив, содержащий файл PCD.

В случае успеха вы можете просмотреть данные облака точек.

Загрузить данные слияния 2D и 3D

Данные 2D и 3D fusion должны быть помещены в соответствующие папки:

Данные облака точек должны быть помещены в папку «point_cloud».

Изображения помещаются в img0, img1 и т. д.

Вот два изображения, которые объясняют наш формат файла данных Fusion:

Если вы хотите использовать данные слияния 2D и 3D, вам также необходимо загрузить файл параметров камеры в папку camera_config.

Наконец, загрузите сжатый zip-файл в Xtreme1.

Предварительно просмотрите данные и убедитесь, что функции данных слияния работают должным образом.

Загрузка через URL

Все данные также могут быть загружены напрямую через внешние ссылки.

В окне загрузки вставьте адрес ссылки, убедившись, что ссылка заканчивается на .zip. Это загрузит данные непосредственно в Xtreme1.

Планы на будущее

В будущих версиях мы будем поддерживать операции загрузки данных в интерфейсе командной строки.

Мы также сделаем общедоступными общие наборы данных, доступ к которым можно будет получить одним щелчком мыши.

Примеры набора данных:

Свяжитесь с Xtreme1 в Slack, чтобы ответить на любые вопросы:



Пожалуйста, поддержите нас, пометив наш репозиторий на GitHub:

https://github.com/basicai/xtreme1