Исследователи из Калифорнийского университета в Беркли, Стэнфорда и Bytedance недавно представили HoliCity, набор данных городского масштаба и универсальную платформу данных для исследований в области изучения абстрагированных целостных трехмерных структур высокого уровня, полученных из городских моделей САПР (автоматизированного проектирования). Строгий конвейер аннотаций и связанные инструменты позволяют постоянно увеличивать масштаб и богатство набора данных, поддерживая изучение и оценку широкого спектра методов 3D-зрения, от низкоуровневых до высокоуровневых.
Технологии 3D-видения в последние годы пользуются все большим спросом. Хотя разработка надежных точечных функций, таких как SIFT, ORB, SfM и SLAM, значительно улучшила производительность 3D-зрения; полученные облака точек по-прежнему зашумлены, неполны и их трудно использовать напрямую во многих реальных приложениях.
Вдохновленные огромным успехом глубоких сверточных нейронных сетей (CNN) в классификации изображений, исследователи трехмерного зрения предложили различные подходы на основе нейронных сетей для извлечения целостных структур высокого уровня из изображений, таких как каркасы, плоскости, кубоиды, точки схода. , планировки помещений и планировки зданий.
HoliCity включает в себя 6300 панорам реального мира в высоком разрешении, точно совмещенных с 3D-моделью CAD центра Лондона площадью более 20 км², и был разработан с учетом высокой стоимости подготовки данных. Вместо того, чтобы полагаться на дорогие сканеры LiDAR, установленные на транспортных средствах, HoliCity использует существующие высококачественные 3D-модели городов CAD и изображения улиц из коллекции географической информационной системы (ГИС).
Исследователи провели несколько экспериментов со своей платформой данных на основе CAD-моделей для исследования трехмерного зрения, тестирования потенциальных приложений и возможности обобщения платформы для других наборов данных. Результаты подтверждают полезность HoliCity в качестве платформы данных о городской среде для ряда областей исследований трехмерного зрения.
В настоящее время HoliCity занимается моделированием архитектуры зданий. В будущем исследователи планируют расширить наборы данных, чтобы можно было моделировать движущиеся объекты, такие как пешеходы и автомобили, в городской среде.
Статья HoliCity: городская платформа данных для изучения целостных трехмерных структур размещена на arXiv.
Аналитик: Грейс Дуан | Редактор: Майкл Саразен; Фанюй Кай
Синхронизированный отчет | Обзор китайских решений искусственного интеллекта в ответ на пандемию COVID-19 — 87 тематических исследований от более чем 700 поставщиков ИИ
В этом отчете предлагается взглянуть на то, как Китай использует технологии искусственного интеллекта в борьбе с COVID-19. Он также доступен на Amazon Kindle. Вместе с этим отчетом мы также представили базу данных, охватывающую дополнительные 1428 решений искусственного интеллекта для 12 сценариев пандемии.
Нажмите здесь, чтобы найти больше отчетов от нас.
Мы знаем, что вы не хотите пропустить ни одной истории. Подпишитесь на нашу популярную рассылку Synced Global AI Weekly», чтобы получать еженедельные обновления AI.
