Цифровую нервную систему мухи научили играть в Deadlock
Полный цифровой нервную систему самца плодовой мушки использовали в эксперименте с Deadlock . Разработчик сообщил, что задействовал модель MaleCNS v1.0 , содержащую около 166 700 нейронов, а для обработки изображения и обучения применил YOLOv5 и данные предварительного обучения на видео.
Речь не о настоящей мухе, подключённой к компьютеру, а о компьютерной симуляции её нервной системы. MaleCNS v1.0 представляет собой карту связей всего центрального отдела нервной системы самца мухи — мозга, зрительных долей и брюшного нервного канатика.
До Deadlock энтузиасты уже использовали тот же коннектом для экспериментов с видеоиграми. В частности, цифровую нервную систему подключали к Doom , где изображение с экрана преобразовывалось в сигналы для нейронной модели, а её активность — в команды управления. При получении урона модели передавался искусственный сигнал отрицательного подкрепления через дофаминовые нейроны.
В случае с Deadlock разработчик утверждает, что добавил систему прицеливания на основе внимания. Наибольших успехов виртуальная «муха» пока добилась за Грейвс . Подробных результатов эксперимента — например, статистики матчей, количества побед или эффективности модели против реальных игроков — автор пока не опубликовал.