Недавно Google анонсировал новый проект, в котором машинное обучение используется для создания микроскопов с функцией дополненной реальности. По словам разработчиков, это поможет лучше диагностировать онкологические заболевания (не все, а большую часть и с высокой точностью).

Согласно официальному сообщению, такие микроскопы помогут врачам быстрее и точнее диагностировать онкологические заболевания. Еще одна важная миссия этого проекта - стимулировать принятие новых технологий научным сообществом.

Эта система состоит из модифицированного микроскопа, который дает возможность анализировать картинку в реальном времени. Нет необходимости создавать новый микроскоп - существующие можно модернизировать. Общая стоимость такого микроскопа невысока, так как его компоненты дешевы и долговечны.

Модифицированный микроскоп не только увеличивает изображение, но и помогает понять, что именно находится в окуляре. Система, анализирующая изображение, основана на технологии TensorFlow.

Подробнее: https://research.googleblog.com/2018/04/an-augmented-reality-microscope.html

Еще хорошие новости от Google.

Google и Verily создали новый способ узнать, есть ли риск ишемической болезни сердца и инсульта, путем анализа изображения глазного дна.

В левом верхнем углу фотографии мы видим фотографию глазного дна из базы данных UK Biobank. Остальные изображения являются его вариациями в черно-белом цвете. У каждого из них есть тепловая карта, которая соответствует каждому из следующих признаков: возраст, пол, курение (да или нет), HbA1c, ИМТ, САД, ДАД.

Зная эти параметры, можно с высокой точностью рассчитать риск сердечно-сосудистых заболеваний (около 31% смертей происходит по этой причине).

Для обучения нейронной сети, которая анализирует эти изображения, специалисты Google и Verily использовали ~ 300 000 снимков глазного дна разных пациентов. Большинство изображений были взяты из базы EyePACS (236 243 пациента, 1 682 938 изображений), а остальные были взяты из UK Biobank.

Подробнее: https://www.nature.com/articles/s41551-018-0195-0