Сегодня мы поговорим о том, как мысли человека можно декодировать в изображение и даже в ролики. Подобные исследования ведутся во всем мире, в том числе в нашей стране. Но кажется, что у Марка Цукерберга уже есть готовый продукт. Фундаментальная наука ищет ответы на то, как человек видит и "преобразует" данные. Возможно, мы на пороге потрясающих открытий!
СОДЕРЖАНИЕ: 00:00 Вступление 01:10 Исследования Цукерберга 02:07 Чтение мыслей с помощью МЭГ 04:54 Технология чтения мыслей с помощью фМРТ 06:48 Другие исследования чтения мыслей 09:48 Применение технологии
С вами на связи Борис Веденский, Валерий Истишев и Митя Иванов! Обзоры смартфонов, репортажи с выставок, новости из мира технологий и многое другое на самом популярном в Рунете канале о гаджетах Droider.Ru!
А есть ли что-то более интимное и личное, чем наши с вами собственные мысли?
Визуальные образы, обрывки фраз в голове — это ведь лично наше, и никто не сможет узнать, о чем мы думаем.
Иначе жить стало бы гораздо сложнее.
Представьте, вы только подумали о том, что проголодались, а корпорации тут же узнали об этом,
и контекстная реклама уже подсовывает вам промо-кодик на доставку шашлыка.
Жуть. Никакого личного пространства.
Хорошо, что такое невозможно. Наши мысли никто не читает, а миелофон существует только у Алисы из будущего.
Ведь так? А что, если мы скажем, что сами ваши мысли уже сейчас могут быть прочитаны?
Сотни ученых по всему миру прямо сейчас заняты тем, чтобы эта технология стала доступна уже сегодня.
А лидирующую позицию в этой гонке за вашими мыслями занимает великая и ужасная метамарка Цукерберга.
Так возможно ли читать мысли? Подготовьте свои шапочки из фольги и давайте разбираться.
С вами Митя Иванов, это Дроидр. Погнали!
Итак, о чем вообще речь? Действительно ли уже сейчас возможно чтение мыслей?
Вы, возможно, удивитесь, но исследования в направлении чтения человеческих мыслей ведутся давно и серьезными учеными.
Это не только возможно, но и вполне реализуемо уже сейчас.
Компания МЕТА, среди прочего, активно финансирует научные исследования в различных отраслях.
В том числе корпорации инвестируют в проекты по изучению принципов работы мозга.
18 октября 2023 года одно из научных подразделений компании опубликовало статью о декодировании изображений из мозговой активности в режиме реального времени.
Компания разрабатывает технологию сканирования мозга, позволяющую за доли секунды преобразовывать мозговую активность в изображение.
До этого в МЕТе рассказывали о чтении мыслей и преобразовании их в речь, а теперь дошла очередь до считывания визуальных образов.
Суть и принцип работы этих двух технологий довольно схожи.
Отличие заключается лишь в формате выходных данных.
Давайте подробнее рассмотрим алгоритм чтения визуальных образов.
В модуле изображений генерируется какое-то рандомное изображение.
Медведь, арбуз или, например, самолет.
Это изображение показывают человеку.
Модуль мозга, специальный прибор с непроизносимым названием магнитоэнцефалограф считывает активность нейронов мозга.
Важно отметить, что благодаря использованию магнитоэнцефалографии не нужно вживлять в голову испытуемого какой-то чип.
Привет, Илон Маск!
Все работает благодаря измерению магнитных полей, возникающих в результате активности нейронов мозга.
То есть прибор фиксирует, какие участки мозга были задействованы.
Причем определять расположение источника активности устройство может с точностью до миллиметра и миллисекунды.
На этом этапе можно сказать, что мысль прочитана, преобразована в сигнал.
Осталось только декодировать этот сигнал.
И это происходит на следующих этапах.
Далее происходит некая магия выравнивания сигналов мозга.
Мозговая активность математически нормализуется и классифицируется.
На основе обработанных данных о мозговой активности система генерирует изображение.
Совсем так же, как Миджорни сделала бы это по тексту.
То есть сначала мы зафиксировали, какие участки мозга активизировались в ответ на показанное изображение.
А теперь хотим провести как бы обратную операцию.
По данным о мозговой активности понять, какое же изображение было показано.
И, наконец, пятый шаг.
Все удивляются, а некоторые, такие как я, немного пугаются и начинают немного паниковать.
Звучит не так уж и сложно.
Человеку показывают картинку и просят максимально сконцентрироваться и думать только о ней.
Мысли человека фиксируются датчиками, а на основании данных с датчиков генерируется картинка.
Давайте посмотрим, какие результаты можно получить, используя этот метод.
Слева у нас изображение, которое показывали человеку.
Справа картинка, сгенерированная на основе активности его мозга.
Картинку показывали человеку всего полторы секунды.
Интересно проследить, как за полторы секунды менялись визуальные образы.
Вот, например, панда сначала была просто каким-то круглым предметом.
Потом стала приобретать вид неизвестного науке животного.
А потом уже подтянулись данные о цвете.
Да, на панду мало похоже, но суть передана верно.
Пушистое, черно-белое животное.
И кто бы это мог быть?
Интересно, насколько удивительные выводы исследователи сумели сделать на основании этих результатов.
Ученые таким образом убедились в том, что искусственные нейроны в алгоритме, как правило,
активируются аналогично физическим нейронам мозга в ответ на тот же образ.
Нейроны в нашей главе ИЧАДЖПТ, как оказалось, имеют чуть больше общего, чем многие думают.
Вы можете сказать, что это не так впечатляет, ведь панда оказалась не слишком похожей на панду.
Тогда подождите, смотрите это видео дальше.
Ведь использование магнита энцефалографии не единственный и не самый точный способ декодирования мыслей,
над которым работают ученые.
Есть кое-что покруче.
Какая технология позволяет читать мысли еще лучше и эффективнее?
Результаты исследования показывают, что изображение лучше декодировать с помощью функциональной магнитно-резонансной томографии.
Вы наверняка слышали про процедуру МРТ.
Но вряд ли вы беспокоились, что во время этой процедуры у вас могут украсть мысли.
Да?
Данный подход для регистрации и распознавания образов широко изучается еще с конца нулевых.
Как работает ФМРТ?
Прибор измеряет активность мозга по усилению притока крови.
Способ чтения мыслей с помощью этой технологии основан на том факте,
что мозговой кровоток и активация нейронов связаны между собой.
Когда какая-то область мозга задействована, приток крови к этой области также увеличивается.
Применение этого метода исследуют также в Ельском университете для считывания данных о восприятии лица человека.
И ученые из университета Осаки в Японии для восстановления визуальных образов.
Но результаты мета наиболее удивительны.
Подход к эксперименту такой же.
Слева картинки, которые показывали людям.
Справа сгенерированные на основе активности мозга.
Посмотрите, здесь уже и котик остался котиком, и зебра не потеряла узнаваемости,
и даже расположение объектов повторяет расположение на исходной картинке.
Точность ФМРТ выше, благодаря более высокому пространственному разрешению.
То есть зоны активности мозга определяются гораздо точнее.
Вау, вот это действительно пугает.
Этот алгоритм сильно точнее, но, к сожалению, не позволяет получать результаты в режиме лайф.
На его работу, в отличие от предыдущего, требуется гораздо больше времени.
Ну ладно, пугаться на самом деле еще рано.
Чтение мыслей хоть и стало ближе, однако не все так просто.
Эти системы искусственного интеллекта требуют предварительного обучения на основе мозговых волн человека.
Вместо того, чтобы обучать ИИ читать мысли,
разработчики обучают его интерпретировать определенные мозговые волны как конкретные образы.
И пока что нет никаких данных о том, что эта система может создавать образы.
Вы спросите, зачем все это нужно? Кому могут потребоваться мои мысли?
А это может помочь научному сообществу понять, как изображения воспринимаются мозгом,
а затем используются интеллектом.
В будущем такие системы могли бы помочь людям с поражениями мозга,
которые потеряли способность говорить.
Вероятно, подобные разработки могли бы также сильно упростить жизнь слабовидящих людей,
людей с особенностями речевого аппарата, парализованных и еще миллионов других.
Например, уже почти 10 лет назад японские ученые, применяя схожий подход,
смогли добиться вот такого качества распознавания букв и символов по активности мозга.
Декодируются буквы, то есть это буквально чтение мыслей.
Нынешний уровень развития технологий может позволить получить результаты намного лучшего качества.
Пока мы с вами говорили о распознавании конкретного визуального образа, картинки.
А что насчет динамических объектов?
Как обстоят дела с восстановлением полноценных воспоминаний?
Можно ли получить из мозга не картинку, а видео?
И вот таких впечатляющих результатов недавно удалось добиться ученым из Сингапура, Китая и Стэнфорда,
работающих над совместным проектом.
Они пошли дальше и сделали своей целью восстановить не отдельное изображение неподвижных объектов,
а целое видео.
Проект MindVideo один из наиболее успешных в этом плане.
Подход такой же.
Показываем испытуемому видео,
считываем активность мозга через FMRT,
и получаем результат.
Да, качество далеко от идеала,
и иногда полученное изображение не слишком похоже на исходное.
Например, иногда кошки путаются с собаками, или наоборот.
Но ученые не стесняются неудач.
На главной их странице сайта есть отдельный раздел с фейлами.
Скорее всего, это обусловлено недостатком обучающей выборки
или несовершенством модели генерации видео.
А значит, учитывая сегодняшние темпы развития ИИ,
результаты скоро станут на порядок лучше.
Кстати, подобные исследования проводятся и в России.
Например, несколько лет назад российские ученые из компании Neurobotics и МФТИ
также обучили нейросети воссоздавать изображения по электрической активности мозга.
Причем эксперименты они проводили на материале электроэнцефалографии,
или ЭЭГ, а не на FMRT,
что сильно отличает эту работу от тех,
которую мы рассматривали раньше.
ЭЭГ измеряет электрическую активность мозги с помощью электродов,
то есть путем измерения нейронных колебаний,
которые обычно называют мозговыми волнами.
Безусловно, есть и другие способы регистрации и распознавания активности мозга,
в том числе и связанные с живлением специальных имплантов,
например, нейролинг Илона Маска.
Способ заключается в подключении специального чипа к нервным окончаниям.
Чип считывает сигналы, а затем передает их на внешнее устройство,
например, тот же компьютер.
Сложность подхода в необходимости интеграции чипа в мозг животного или человека,
что потенциально ведет к целому ряду осложнений,
включая смерть испытуемого.
Для чего могут понадобиться эти достижения и технология чтения мыслей?
Прежде всего, это фундаментальные исследования,
и они приближают нас к пониманию основ работы человеческого интеллекта.
Во-вторых, технология может уже в ближайшее время найти практическое применение.
Например, российские ученые из нейроботикса уверяют,
что их разработка позволит использовать новые реабилитационные устройства после инсульта.
В другом исследовании пишут, что использование приборов для чтения мыслей
позволяет управлять внешними устройствами, минуя нервно-мышечные системы.
Например, для генерации на основе мыслей парализованного человека голоса или текста.
Недавно компания Neuralink показала видео,
на котором пациент перемещает курсор на ноутбуке с силой мысли
и таким образом играет в шахматы.
При этом тело мужчины парализовано ниже плеч после нечастного случая.
Парень также рассказал, что благодаря использованию чипа
он смог восемь часов подряд играть шестую циву.
Да, обладание такой технологией не сделала ни одного ученого
профессором-совьером из Людей Икс,
не наградила суперсилой по чтению мыслей.
Однако кто знает, чему приведет развитие технологий и исследования этой области в будущем?
В любом случае, достижения ученых впечатляют уже сегодня.
А для тех, кто хочет сам изучить исследования и углубиться в тему,
ссылка на статьи будет в описании к этому ролику.
А на сегодня это все.
С вами был Митя Иванов.
Это Дройдер.
До встречи в будущем!