Новый алгоритм глубокого обучения под названием Zebra позволяет расшифровывать визуальные ощущения мышей путем анализа нейронных данных из их мозга. Это усовершенствование позволяет исследователям реконструировать то, что смотрят животные, впервые переходя от простых форм к реальным кадрам фильма. Используя электрофизиологические данные с открытым исходным кодом и инновационные методы визуализации, которые заставляют нейроны светиться при активации, ученые могут регистрировать активность мозга во время просмотра мышами фильмов. Модель обучается с использованием модифицированной функции потерь от контрастивного обучения, которая помогает создать точное пространство представления, объединяющее как нейронные, так и поведенческие данные. В конечном счете, у этой технологии есть потенциальные возможности применения, выходящие за рамки простого понимания поведения при просмотре фильмов.