Колосс Человеческий Часть №1 Колосс Человеческий Часть №2 Есть много разных вариантов возможных нейрокомпьютерных интерфейсов (которые иногда называют интерфейсом «мозг - компьютер» или «мозг - машина»), которые пригодятся для разных вещей. Но все, кто работает над НКИ, пытаются решить один, второй или оба этих вопроса:
- Как я буду извлекать нужную информацию из мозга?
- Как я буду посылать нужную информацию в мозг?
Первое касается вывода мозга - то есть записи того, что говорят нейроны.
Второе касается внедрения информации в естественный поток мозга или изменение этого естественного потока каким-то образом - то есть стимулирование нейронов.
Два этих процесса постоянно протекают в вашей голове. Прямо сейчас ваши глаза выполняют определенный набор горизонтальных движений, которые позволяют вам прочитать это предложение. Это нейроны мозга выводят информацию в машину (ваши глаза), а машина получает команду и реагирует. И когда ваши глаза движутся определенным образом, фотоны с экрана проникают в вашу сетчатку и стимулируют нейроны в затылочной доли вашей коры, позволяя картинке мира попасть вам в сознание. Затем эта картинка стимулирует нейроны в другой части вашего мозга, которая позволяет вам обрабатывать информацию, заключенную в картинке, и извлекать смысл из предложения.
Ввод и вывод информации - вот что делают нейроны мозга. Вся индустрия НКИ хочет присоединиться к этому процессу.
Поначалу кажется, что это не такая сложная задача. Ведь мозг - это просто шарик холодца. И кора - часть мозга, которую мы хотим присовокупить к нашей записи и стимулированию - это просто салфетка, удобно расположенная на внешней части мозга, где к ней легко можно получить доступ. Внутри коры работают 20 миллиардов нейронов - 20 миллиардов маленьких транзисторов, которые могут дать нам совершенно новый способ контроля нашей жизни, здоровья и мира, если мы научимся с ними работать.
Неужели их так сложно понять?
Нейроны маленькие, но ведь мы знаем, как расщепить атом. Диаметр нейрона в 100 000 раз больше атома. Если бы атом был леденцом, нейрон был бы километровым в поперечнике - так что мы точно должны уметь работать с такими величинами.
Так в чем же проблема?
С одной стороны, это правильные мысли, потому что они приводят к прогрессу в области. Мы действительно можем это сделать. Но как только вы начинаете понимать, что на самом деле происходит в мозге, сразу становится очевидно: это самая сложная задача для человека.
Поэтому прежде чем мы поговорим о самих НКИ, нам нужно внимательно изучать, что делают люди, которые создают НКИ. Лучше всего - увеличить мозг в 1000 раз и посмотреть, что происходит.
Помните наше сравнение коры мозга с салфеткой?
Если мы увеличим салфетку коры в 1000 раз - а она была примерно 48 сантиметров с каждой стороны - теперь она будет длиной в два квартала на Манхэттене. Потребуется около 25 минут, чтобы обойти периметр. И мозг в целом будет размером с Мэдисон Сквер Гарден.
Я выбрал 1000-кратное увеличение по нескольким причинам. Одна из них заключается в том, что мы все мгновенно можем преобразовать размеры в своей голове. Каждый миллиметр фактического мозга стал метром. В мире нейронов, который намного меньше, каждый микрон стал миллиметром, который легко вообразить. Во-вторых, кора становится «человеческих» размеров: 2-миллиметровая толщина теперь 2 метра - как высокий человек.
Таким образом, мы можем подойти к 29-й улице, к краю нашей гигантской салфетки, и легко посмотреть, что происходит в ее двухметровой толщине. Для демонстрации давайте вытащим кубометр нашей гигантской коры, чтобы исследовать его, посмотреть, что происходит в обычном кубическом миллиметре настоящей коры.
Что мы видим в этом кубометре?
Сомы варьируются в размерах, чаще всего 10-15 мкм в диаметре (один мкм = микрон, 1/1000 миллиметра). То есть, если вы выложите 7-10 таких в линию, эта линия будет диаметром с волос человека. В наших масштабах сома будет 1-1,5 сантиметра в диаметре. Леденец.
Объем всей коры умещается в 500 000 кубических миллиметров, и в этом пространстве будет около 20 миллиардов сом. То есть средний кубический миллиметр коры содержит около 40 000 нейронов. То есть в нашем кубометре около 40 000 леденцов. Если разделить нашу коробку на 40 000 кубиков, каждый с гранью в 3 сантиметра, каждый из наших сома-леденцов будет в центре своего собственного 3-сантиметрового кубика, а все другие сомы - в 3 сантиметрах во всех направлениях.
Можете представить наш метровый кубик с 40 000 плавающих леденцов?
Вот микроскопическое изображение сомы в реальной коре; все остальное вокруг нее было убрано:
Сома - это лишь крошечная часть каждого нейрона. Из каждого нашего леденца простираются скрученные, ветвистые дендриты, которые в наших масштабах могут растягиваться на три-четыре метра в самых разных направлениях, и на том конце может быть аксон длиной в 100 метров (если переходит в другую часть коры) или километр (если спускается в спинной мозг и тело). Каждый из них толщиной в миллиметр, и эти провода превращают кору в плотно переплетенную электрическую вермишель.
Каждый нейрон имеет синаптические связи с 1000 - иногда до 10 000 - других нейронов. Поскольку в коре около 20 миллиардов нейронов, это значит, что в ней будет больше 20 триллионов отдельных нейронных связей (и квадриллион связей во всем мозге). В нашем кубометре будет более 20 миллионов синапсов.
При всем этом, не только из каждого леденца из 40 000 в нашем кубе исходят заросли вермишели, но и тысячи других спагетти проходят через наш куб из других частей коры. И значит, если бы мы попытались записать сигналы или простимулировать нейроны конкретно в этой кубической области, нам пришлось бы очень тяжело, потому что в мешанине спагетти будет трудно определить, какие нити спагетти принадлежат нашим сома-леденцам.
Напряжение каждого нейрона постоянно меняется, сотни раз в секунду. И десятки миллионов синаптических соединений в нашем кубе будут постоянно менять размеры, исчезать и появляться вновь.
Оказывается, в мозге также существуют глиальные клетки - клетки, которые бывают разных видов и выполняют множество различных функций, таких как вымывание химических веществ, высвобождаемых в синапсах, обертывание аксонов миелином и обслуживание иммунной системы мозга.
Вот несколько самых распространенных типов глиальных клеток:
И сколько глиальных клеток находится в коре?
Примерно столько же, сколько и нейронов. Поэтому добавьте в наш куб еще 40 000 этих штучек.
Наконец, есть кровеносные сосуды. В каждом кубическом миллиметре коры содержится около метра крошечных кровеносных сосудов. В наших масштабах это означает, что в нашем кубометре есть километр кровеносных сосудов.
Вот так они выглядят:
Давайте теперь вспомним, что на самом деле наша коробка - кубический миллиметр в размерах.
Инженерам нейрокомпьютерных интерфейсов нужно либо выяснить, что говорят микроскопические сомы, погребенные в этом миллиметре, либо простимулировать определенные сомы, чтобы те выполнили нужные вещи.
Нам было бы сложно проделать это с нашим увеличенным в 1000 раз мозгом. С мозгом, который прекрасно превращается в салфетку. Но ведь на самом деле он не такой - эта салфетка лежит поверх мозга, полного складок (которые, в наших масштабах, глубиной от 5 до 30 метров). По сути, меньше трети салфетки-коры находится на поверхности мозга - большая часть лежит в складках.
Мозг покрыт множеством слоев, включая череп - который при 1000-кратном увеличении будет 7-метровой толщины.
И все это при том, что вы работаете с корой - но очень много интересных идей на тему НКИ имеют дело со структурами, которые много ниже, и если вы будете стоять на вершине нашего городского мозга, они будут пролегать на глубине 50-100 метров.
Только представьте, сколько всего происходит в нашем кубике - а ведь это всего лишь одна 500 000-я часть коры головного мозга. Если бы мы разбили всю нашу гигантскую кору на одинаковые метровые кубики и выстроили их в ряд, они бы растянулись на 500 километров. И если вы решите совершить обход, который займет более 100 часов при быстрой ходьбе, в любой момент вы можете остановиться и посмотреть на кубик, и вся эта сложность будет у него внутри.
Все это сейчас в вашем мозге.
Как же ученые и инженеры будут справляться с этой ситуацией?
Они стараются выжать максимум из инструментов, которые у них сейчас есть - инструментов, используемых для записи или стимулирования нейронов.
Давайте изучим варианты.
Инструменты НКИ
С тем, что уже было проделано, можно выделить три широких критерия, по которым оцениваются плюсы и минусы записывающего инструмента:
1) Масштаб - сколько нейронов может записываться.
2) Разрешение - насколько подробна информация, которую получает инструмент - пространственное (насколько близко ваши записи сообщают, какие из отдельных нейронов активируются) и временное (насколько хорошо можно определить, когда происходит записываемая вами активность).
3) Инвазивность - необходимо ли хирургическое вмешательство, и если да, то насколько дорогое.
Давайте посмотрим, какие инструменты используются в настоящее время:
фМРТ
- Масштаб: большой (показывает информацию со всего мозга);
- Разрешение: от низкого к среднему - пространственное, очень низкое - временное;
- Инвазивность: неинвазивный.
фМРТ использует МРТ - технологию магнитно-резонансной томографии. Изобретенная в 1970-х годах, МРТ стала эволюцией рентгеновского КТ-сканирования. Вместо рентгеновских лучей, МРТ использует магнитные поля (наряду с радиоволнами и другими сигналами) для создания изображений тела и мозга.
Вроде такого:
Полный набор поперечных сечений, позволяющий вам видеть голову целиком.
Весьма необычная технология.
фМРТ («функциональная» МРТ) использует технологию МРТ для отслеживания изменений кровотока.
Зачем?
Потому что, когда области мозга становятся более активными, они потребляют больше энергии, а значит им нужно больше кислорода - поэтому поток крови увеличивается в этой области, чтобы доставить этот кислород.
Конечно, в мозгу всегда есть кровь - это изображение показывает, где увеличился кровоток (красный, оранжевый, желтый) и где он уменьшился (синий). И поскольку фМРТ может сканировать весь мозг, результаты будут трехмерными:
Большим недостатком является разрешение. фМРТ сканирование имеет буквальное разрешение, как компьютерный экран пиксели, только вместо двухмерных, его разрешение представлено трехмерными кубическими объемными пикселями - вокселями (voxel, воксел).
Воксели фМРТ становились меньше по мере улучшения технологии, что привело к увеличению пространственного разрешения. Воксели современных фМРТ могут быть размером с кубический миллиметр. Объем мозга составляет порядка 1 200 000 мм3, поэтому сканирование фМРТ высокого разрешения делит мозг на один миллион маленьких кубиков. Проблема в том, что в нейронных масштабах это по-прежнему довольно много - каждый воксель содержи десятки тысяч нейронов. Так что, в лучшем случае, фМРТ показывает средний кровоток, втягиваемый каждой группой из 40 000 нейронов или около того.
Еще большая проблема - временное разрешение. фМРТ отслеживает кровоток, который является неточным и происходит с задержкой около секунды - вечность в мире нейронов.
ЭЭГ
- Масштаб: высокий;
- Разрешение: очень низкое пространственно, средне-высокое временное;
- Инвазивность: неинвазивный.
ЭЭГ - это определенно технология, которая будет выглядеть забавно примитивной для людей 2050 года, но на данный момент это один из немногих инструментов, которые можно использовать с абсолютно неинвазивными НКИ. ЭЭГ регистрирует электрическую активность в различных областях головного мозга.
В отличие от фМРТ, ЭЭГ имеет довольно хорошее временное разрешение, получая электрические сигналы от головного мозга по мере их появления - хоть череп значительно размывает временную точность (кость - плохой проводник).
Главный недостаток - пространственное разрешение. У ЭЭГ его нет. Каждый электрод регистрирует только среднее значение - векторную сумму зарядов от миллионов или миллиардов нейронов (размытое из-за черепа).
ЭКоГ
- Масштабы: высокие;
- Разрешение: низкое пространственное, высокое временное;
- Инвазивность: присутствует.
ЭКоГ (электрокортикография) похожа на ЭЭГ, поскольку тоже использует электроды на поверхности - только помещает их под череп на поверхность мозга.
Стремно.
Но эффективно - намного эффективнее ЭЭГ. Без интерференции, которую дает череп, ЭКоГ охватывает более высокое пространственное (около 1 см) и временное разрешения (5 миллисекунд). Электроды ЭКоГ можно разместить выше или ниже твердой мозговой оболочки:
Потенциал локального поля (LFP)
- Масштабы: малые;
- Разрешение: средне-низкое пространственное, высокое временное;
- Инвазивность: высокая.
Способ работы локальных полевых потенциалов прост - вы берете одну сверхтонкую иглу с электродным кончиком и вставляете ее на один-два миллиметра в кору. Там она собирает среднее значение электрических зарядов со всех нейронов в определенном радиусе электрода.
LFP обеспечивает вам не такое уж и плохое пространственное разрешение фМРТ в сочетании с мгновенным временным разрешением ЭКоГ. По меркам разрешения это, наверное, лучший вариант из всего вышеперечисленного.
К сожалению, он ужасен по другим критериям.
В отличие от фМРТ, ЭЭГ и ЭКоГ, микроэлектрод LFP не имеет масштаба - он лишь сообщает вам, что делает небольшая сфера, окружающая его. И он намного более инвазивный, поскольку фактически входит в мозг.
И совсем новая разработка это многоэлектродный массив, который представляет в своей основе идею LFP, только состоит из 100 LFP одновременно. Многоэлектродный массив выглядит вот так:
Регистрация отдельных единиц
- Масштабы: крошечные;
- Разрешение: сверхвысокое;
- Инвазивность: очень высокая.
Для записи более широкого LFP кончик электрода немного скругляется, чтобы дать электроду большую площадь поверхности, и снижается сопротивление (некорректный технический термин), чтобы улавливались очень слабые сигналы из широкого диапазона мест. В итоге электрод собирает хор активности с локального поля.
Регистрация отдельных единиц также задействует игольчатый электрод, но их кончики делают очень острыми и сопротивление тоже повышают. За счет этого вытесняется большая часть шума и электрод практически ничего не улавливает, пока не окажется очень близко к нейрону (где-то в 50 мкм), и сигнал этого нейрона будет достаточно силен, чтобы преодолеть стенку электрода с высоким сопротивлением. Получая отдельные сигналы от одного нейрона и не имея фонового шума, этот электрод может наблюдать за личной жизнью этого нейрона. Наименьший возможный масштаб, максимально возможное разрешение.
Некоторые электроды хотят вывести отношения на следующий уровень и применяют метод локальной фиксации потенциала (patch clamp), который позволяет убрать кончик электрода и оставить лишь крохотную трубку, стеклянную пипетку, которая будет непосредственно засасывать клеточную мембрану нейрона и проводить более тонкие измерения.
Patch clamp имеет и такое преимущество: в отличие от всех других методов, он физически прикасается к нейрону и может не только записывать, но и стимулировать нейрон, вводя ток или поддерживая напряжение на определенном уровне для выполнения конкретных тестов (другие методы могут стимулировать лишь целые группы нейронов целиком).
Наконец, электроды могут полностью покорить нейрон и фактически проникнуть через мембрану, чтобы осуществить запись. Если кончик достаточно острый, он не разрушит клетку - мембрана как бы запечатается вокруг электрода, и будет очень легко стимулировать нейрон или записать разность напряжений между внешней и внутренней средой нейрона. Но это краткосрочная методика - проколотый нейрон долго не проживет.
Это все, что у нас есть.
Но при всей их ограниченности, эти инструменты научили нас многому о мозге и привели к созданию первых любопытных нейрокомпьютерных интерфейсов.
НКИ тип №1 | Использование моторной коры в качестве дистанционного управления.
Что важно, это одна из крупных участков мозга, которая отвечает за нашу работу. Когда человек что-то делает, моторная кора почти наверняка тянет за ниточки (во всяком случае физической стороны действия). Поэтому человеческому мозгу не нужно учиться использовать моторную кору в качестве дистанционного управления, потому что мозг уже использует ее в таком качестве.
Цель НКИ на основе моторной коры состоит в том, чтобы подключиться к ней, а затем, когда пульт дистанционного управления вызовет команду, услышать эту команду и отправить ее на какой-нибудь аппарат, который сможет на нее ответить. Например, на руку. Пучок нервов - посредник между вашей корой и вашей рукой. НКИ - посредник между вашей моторной корой и компьютером.
Все просто.
Все начинается с 100-контактной многоэлектродной матрицы, которая имплантируется в моторную кору человека. Моторная кора у парализованного человека работает прекрасно - просто спинной мозг, который служил посредником между корой и телом, прекратил работать. Таким образом, с имплантированной электродной матрицей исследователи дали возможность человеку двигать рукой в разных направлениях. Даже если он не может этого сделать, моторная кора функционирует нормально, как если бы он мог.
Затем, когда они выводят эти данные на экран компьютера, человек может силой мысли, «пытаясь» двигать курсор, действительно контролировать курсор. И это работает. При помощи НКИ, сопряженных с моторной корой, компания BrainGate позволила мальчику играть в видеоигру при помощи одной только силы мысли.
Click to view
В этих разработках есть семена других будущих революционных технологий - вроде интерфейсов «мозг - мозг».
Николелис провел эксперимент, в котором моторная кора одной крысы в Бразилии, нажимавшей один из двух рычагов в клетке - один из которых, о чем знала крыса, доставит ей удовольствие - была связана через Интернет с моторной корой другой крысы в США. Крыса в США была в подобной клетке, за исключением того, что, в отличие от крысы в Бразилии, у нее не было информации о том, какой из ее двух рычагов доставит ей удовольствие - помимо сигналов, которые она получает от бразильской крысы. В ходе эксперимента, если американская крыса правильно выбирала рычаг, тот же, который тянула крыса в Бразилии, обе крысы получали награду. Если тянули неверный, не получали. Интересно то, что с течением времени крысы становились все лучше и лучше, работали сообща, словно одна нервная система - хотя и понятия не имели о существовании друг друга. Успех американской крысы без информации составлял 50%. С сигналами, поступающими от мозга бразильской крысы, успех вырос до 64%.
Отчасти это сработало и на людях. Два человека в разных зданиях работали сообща, играя в видеоигру. Один видел игру, другой держал контроллер. Используя простые гарнитуры ЭЭГ, игрок, который видел игру, мог, не двигая руками, подумать о движении своей рукой, чтобы «выстрелить» на контроллере - и поскольку их мозги сообщались между собой, игрок с контроллером чувствовал сигнал в пальце и нажимал кнопку.
НКИ тип №2 | Искусственные уши и глаза.
Есть несколько причин, по которым давать зрение слепым и звук глухим - среди самых доступных категорий нейрокомпьютерных интерфейсов.
- Во-первых, подобно моторной коре, сенсорные части коры - это части мозга, которые мы понимаем достаточно хорошо, отчасти потому, что они имеют тенденцию хорошо картироваться.
- Во-вторых, среди многих первых подходов нам не нужно было иметь дела с мозгом - можно было взаимодействовать с теми местами, где уши и глаза соединяются с мозгом, потому что именно там чаще всего встречались нарушения.
И в то время как деятельность моторной коры головного мозга заключалась главным образом в считывании нейронов для извлечения информации из мозга, искусственные органы чувств работают по-другому - стимулируя нейроны для отправки информации внутрь.
За последние десятилетия мы наблюдали невероятное развитие кохлеарных имплантатов.
Когда вы думаете, что «слышите» звук, происходит следующее:
То, что мы представляем как звук, это модели колебаний молекул воздуха вокруг головы. Когда гитарная струна, голосовые связки или ветер производят звук, он рождается вследствие вибраций, которые толкают ближайшие молекулы воздуха, и они расширяются как шар, подобно тому как поверхность воды расширяется наружу в месте, где падает камень.
Ваше ухо - это машина, которая преобразует эти вибрации в электрические импульсы. Всякий раз, когда воздух (или вода, или любая другая среда, молекулы которой могут вибрировать) входит в ухо, ваше ухо переводит точную картину вибрации в электрический код, который затем посылается в нервные окончания. Нервы запускают потенциалы действия, которые посылают код в слуховую кору для обработки. Ваш мозг получает информацию, и мы называем процесс получения этого конкретного типа информации «слухом».
Большинство глухих или слабослышащих людей не имеют проблем с нервами или слуховой корой - у них обычно возникают проблемы с ухом. Их мозг так же готов, как и любой другой, превращать электрические импульсы в слух - просто их слуховая кора не получает никаких электрических импульсов, потому что машина, которая преобразует вибрации воздуха в эти импульсы, не выполняет свою работу.
Ухо имеет много частей, но именно улитка, в частности, осуществляет важное преобразование. Когда вибрации попадают в жидкость в улитке, тысячи тонких волосков, устилающих ее, вибрируют, а клетки, которые прикреплены к этим волоскам, преобразуют механическую энергию вибраций в электрические сигналы, которые затем возбуждают слуховой нерв.
Вот как это выглядит:
Улитка также сортирует входящий звук по частоте. Вот крутая диаграмма, показывающая, почему низкие звуки обрабатываются в конце улитки, а высокие - в начале (а также почему ухо может слышать звук на определенной максимальной и минимальной частотах):
Кохлеарный имплантат - это маленький компьютер, у которого на одном конце микрофон (который сидит на ухе), а на другом провод, который соединяется с массивом электродов, выстилающих улитку.
Звук поступает в микрофон (маленький крючок в верхней части уха) и входит в коричневую штуку, которая обрабатывает звук, чтобы отфильтровать менее полезные частоты. Затем коричневая штука передает информацию через кожу, через электрическую индукцию, в другой компонент компьютера, который преобразует информацию в электрические импульсы и посылает ее в улитку. Электроды фильтруют импульсы по частоте, как улитка, и стимулируют слуховой нерв, как волоски в улитке.
Другими словами, искусственное ухо выполняет такую же функцию превращения звука в импульсы и передачи в слуховой нерв, как и обычное ухо.
Но это не идеально.
Почему?
Потому что для того, чтобы послать звук в мозг с таким же качеством, как и обычное ухо, нужно 3500 электродов. Большинство кохлеарных имплантатов содержит всего 16.
Грубовато.
Слепота часто является результатом заболевания сетчатки. В этом случае имплантат может выполнять подобную функцию для зрения, как кохлеарный имплантат для слуха (хоть и не так прямо). Он делает то же, что и обычный глаз, передавая информацию нервам в форме электрических импульсов, как это делают глаза.
Более сложный интерфейс, чем кохлеарный имплантат, первый имплантат сетчатки был одобрен FDA в 2011 году - им стал имплантат Argus II, изготовленный Second Sight.
Click to view
Имплантат сетчатки имеет 60 сенсоров.
В сетчатке около миллиона нейронов.
Грубовато.
Но видеть размытые кромки, формы, игры света и тьмы значительно лучше, чем не видеть вообще ничего. Что особенно интересно, для достижения хорошего зрения совсем не нужен миллион сенсоров - моделирование позволило предположить, что 600-1000 электродов будет достаточно для распознавания лиц и чтения.
НКИ тип №3 | Глубокая стимуляция головного мозга.
Данная категория НКИ не связана с внешним миром - это использование нейрокомпьютерных интерфейсов для лечения или улучшения самого себя, изменяя что-то внутри.
То, что происходит здесь, - это один или два электродных провода, обычно с четырьмя отдельными электродными участками, которые вводятся в мозг и часто оказываются где-то в лимбической системе. Затем в верхнюю часть грудной клетки имплантируют небольшой электрокардиостимулятор и подключают к электродам.
Затем электроды могут выдавать небольшой заряд по необходимости, что полезно для многих важных штук:
- уменьшение тремора у людей с болезнью Паркинсона;
- уменьшение тяжести приступов;
- уменьшение обсессивно-компульсивного расстройства.
В рамках экспериментов (то есть пока без одобрения FDA) ученым удалось смягчить определенные виды хронической боли, вроде мигреней или фантомной боли в конечностях, вылечить беспокойство или депрессию при ПТСР, либо в сочетании с мышечной стимуляцией восстановить определенные нарушенные схемы работы мозга, которые сломались после инсульта или неврологического заболевания.
Вот в таком состоянии находится пока еще слабо развитая область НКИ.
Современная НКИ-индустрия - это точка А.
Пока мы изучали прошлое на протяжении всех этих статей, чтобы подобраться к настоящему моменту.
Теперь пришло время заглянуть в будущее - чтобы выяснить, что такое точка Б и как нам до нее добраться.
Продолжение следует...
/Источник/
Картинки кликабельны