Група міжнародних науковців представили новий обчислювальний алгоритм NEvo (Neural-Guided Evolutionary Video Synthesis), здатний цілеспрямовано генерувати відеоролики для максимальної стимуляції конкретних ділянок людського мозку.
Як пояснюється на сайті проєкту в основі системи лежить так званий «цифровий двійник мозку» — базова модель, яка прогнозує, як кожна візуальна зона реагуватиме на будь-яке відео. Алгоритм працює за принципом еволюції промптів: кожне відео описується набором базових параметрів (об’єкт, освітлення, рух, настрій). NEvo генерує партію роликів, оцінює їх за допомогою цифрового двійника, а потім відбирає, змішує та мутує найкращі варіанти, доки не досягне максимальної активації обраної нейронної цілі.
Для економії обчислювальних ресурсів процес розділено на два етапи: спочатку ШІ шукає ідеальне статичне зображення, а потім додає до нього рух, створюючи двосекундний кліп. Тестування показало, що такі згенеровані ролики стимулюють мозок сильніше, ніж найкращі природні відео або спеціально підібрані кадри. Дослідники підкреслюють, що наявність динаміки є критично важливою — рухоме відео завжди викликає сильнішу реакцію, ніж його зупинений кадр.
Згенерований контент точно відповідає відомим функціям мозку: для зони розпізнавання облич ШІ створює портрети, для зони розпізнавання місць — пейзажі, а для ділянок обробки руху — відповідні динамічні патерни.
Дослідники також виявили, що при переміщенні фокуса алгоритму від базових зорових зон до вищих відділів мозку, згенеровані зображення еволюціонують від простих геометричних фігур до складних соціальних сцен та взаємодій. Навіть при спробі згенерувати стимул із набору абстрактних фігур, система поступово перетворює їх на обличчя чи людей, якщо цього вимагає цільова ділянка мозку.
/
Технологія дозволяє досліджувати реакції нейронів за допомогою синтезованого візуального контенту, виявляючи, на що саме реагує та чи інша зона.