Идея создания интерфейса между мозгом человека и компьютером не является для стартапа Neuralink Илона Маска (Elon Musk) единственным направлением разработок в сфере мозговых имплантов. Устройство Blindsight призвано вернуть способность видеть незрячим пациентам, и недавно в ходе испытаний на обезьяне представителям компании удалось добиться определённого успеха.

Источник изображения: Neuralink

Выступая на конференции в пятницу, инженер Neuralink Джозеф О’Доэрти (Joseph O’Doherty) рассказал о том, что ему и его коллегам удалось оказать стимулирующее воздействие на мозг обезьяны с вживлённым имплантом Blindsight, вызвав у неё своего рода зрительную галлюцинацию. Как считают авторы эксперимента, по меньшей мере две трети времени животное могло видеть некий предмет, которого в реальности не существовало. Об этом они могли судить по движению глаз подопытной обезьяны.

Neuralink впервые открыто говорит о своих тестах импланта Blindsight. О клинических испытаниях с привлечением людей пока говорить преждевременно, поскольку в США это устройство не получило соответствующих одобрений со стороны регулирующих органов. Илон Маск ранее заявлял, что возвращение людям зрения является лишь базовой задачей проекта Blindsight, в идеале стартап хотел бы развить этот канал восприятия человеком действительности до пределов, не предусмотренных природой. Например, такие импланты могут наделить человека способность видеть в инфракрасном спектре. В марте он признался, что испытания Blindsight на обезьянах проводятся уже несколько лет, но вживить имплант первому человеку компания надеется до конца текущего года.

Попутно инженер Neuralink поведал о прогрессе в испытаниях первой модели импланта, который позволяет транслировать нервные импульсы в компьютерные команды. На данный момент имплантом пользуются пять пациентов с той или иной формой паралича конечностей или мышц. Отдельные участники клинических испытаний пользуются возможностями импланта по 60 часов в неделю.

Представитель Neuralink на конференции рассказал об экспериментах компании, в ходе которых имплант использовался для стимуляции мышечных сокращений обезьяны через головной мозг. В перспективе, подобная технология позволит вернуть подвижность парализованным пациентам без необходимости использования протезов или экзоскелета. В отношении дальнейших перспектив развития Blindsight было сказано, что стартап планирует использовать в сочетании с мозговым имплантом пару специальных очков, которые позволят вернуть зрение лишившимся его людям. Отвечающая за зрение часть головного мозга обезьяны расположена ближе к его поверхности, чем у человека, и это упрощает тестирование чипа на данном этапе. В случае с человеческим мозгом электроды импланта будут размещаться в более глубоких областях при помощи хирургического робота, разработанного Neuralink.

В одном из майских номеров журнала Science учёные из Университета Фудань (Fudan University) в Шанхае сообщили о прорыве в лечении врождённой слепоты. Исследования проводились на животных — мышах и приматах (но не на людях). Довольно простая имплантация нанопроволоки из теллура в область сетчатки глаза позволила животным реагировать на свет и различать объекты. Более того, мыши смогли видеть инфракрасный свет — способность, отсутствующую в природе.

Источник изображения: ИИ-генерация Grok 3/3DNews

Учёные из Китая давно работают над благородной задачей — возвращением зрения людям, страдающим слепотой. Новые технологии приближают этот момент. Не исключено, что ключевую роль в этом сыграет теллур — редкий металл, в основном добываемый как побочный продукт очистки меди. Теллур давно используется в фотоэлектрических и термоэлектрических технологиях — он способен преобразовывать фотоны видимого и инфракрасного спектра в электрический ток. Примерно так же он функционирует и в сетчатке глаза: электроны, выбиваемые фотонами из теллура, возбуждают нервные окончания, что стимулирует передачу сигнала в зрительный центр мозга.

Нанопроволоку из теллура учёные создавали методом химического осаждения. Её диаметр составил около 150 нм. В процессе была выращена сеть из нанопроволоки, которую затем имплантировали в глазное яблоко мышам и макакам. Сеть не вызвала биологического отторжения. На начальном этапе экспериментов имплантат продемонстрировал восстановление зрачкового рефлекса (реакции на свет) и способность передавать сигналы в головной мозг.

Источник изображения: Science 2025

Последующие эксперименты показали, что слепые мыши с имплантатом научились не только реагировать на световое раздражение, но и различать отдельные предметы. Самым удивительным стало то, что животные смогли видеть в ближнем инфракрасном диапазоне. Будет ли когда-нибудь такое зрение доступно человеку — вопрос открытый. Однако военные и спецслужбы наверняка заинтересуются этим направлением. И даже если подобные технологии не выйдут за пределы лабораторий, сам факт появления надежды вернуть зрение миллионам людей по всему миру стоит всех затраченных усилий.

Три месяца назад робототехнический стартап Figure «устроил на работу» в почтовое отделение своего передового гуманоидного робота Helix. Сегодня представители компании подробно рассказали о накопленном за это время опыте и успехах робота в сортировке посылок. Однако при просмотре опубликованного компанией почти часового видеоролика мы заметили множество ошибок, совершаемых Helix. Пожалуй, свои посылки мы ему пока доверить не готовы.

Источник изображений: Figure

«Теперь Helix может обрабатывать более широкий спектр упаковок и приближается к ловкости и скорости человеческого уровня, приближая нас к полностью автономной сортировке посылок. Этот быстрый прогресс подчёркивает масштабируемость основанного на обучении подхода Helix к робототехнике, который быстро переносится в реальное применение», — так оценил успехи робота представитель Figure. По его словам, за счёт масштабирования данных и усовершенствования архитектуры возможности Helix существенно повысились:

• Освоены новые типы упаковок, такие как полиэтиленовые пакеты и плоские конверты.
• Пропускная способность возросла на 20 % до 4,05 секунд на упаковку при сохранении точности.
• Улучшилось распознавание штрих-кодов с 70 до 95 процентов.
• Робот демонстрирует адаптивное поведение, разглаживая складки для улучшения считывания штрих-кодов.
• Модуль памяти зрения обеспечивает Helix доступ к истории прошлых состояний.
• Обратная связь по усилию обеспечивает более точный захват и манипулирование посылками.

Помимо стандартных жёстких коробок система теперь обрабатывает полиэтиленовые пакеты, мягкие конверты и другие деформируемые или тонкие посылки. Эти предметы могут складываться, мяться или изгибаться, что затрудняет захват и распознавание этикеток. Helix решает эту задачу, корректируя стратегию захвата на лету — например, отбрасывая мягкий пакет для его динамического переворота или используя специальные захваты для плоских почтовых отправлений.

Робот должен поворачивать упаковку штрих-кодом вниз для сканирования. Helix старается расправить пластиковую упаковку, чтобы сканер смог успешно считать штрих-код. Такое адаптивное поведение подчёркивает преимущества сквозного обучения — робот выполняет действия, которые не были жёстко запрограммированы, чтобы компенсировать несовершенства упаковки.

Многие достижения стали возможны благодаря целенаправленным улучшениям визуально-моторной политики робота. Он получил новые модули памяти и машинного зрения, что позволило ему лучше воспринимать состояние окружающей среды и быстро адаптироваться к изменениям ситуации.

Helix оснащён модулем неявной визуальной памяти, который обеспечивает поведение с учётом текущего состояния — робот запоминает, какие стороны упаковки он уже осмотрел, либо какие зоны конвейера свободны. Модуль памяти помогает устранять избыточные движения, давая Helix ощущение временного контекста и позволяя ему действовать более стратегически при выполнении многошаговых манипуляций.

Отслеживание истории недавних состояний позволяет роботу осуществлять более быстрое и реактивное управление. В результате ускоряется реакция на неожиданности и помехи: если пакет смещается или попытка захвата оказывается неудачной, Helix корректирует движение «на лету». Это значительно сократило время обработки каждого пакета.

Helix использует аналог человеческого осязания благодаря интегрированной обратной связи по усилию. Робот способен определить момент соприкосновения с объектом и использовать это для модуляции движения, например, приостанавливая опускание при контакте с конвейерной лентой.

Хотя основной задачей Helix в логистическом сценарии является автономная сортировка, он легко адаптируется к новым взаимодействиям. Например, протянутая к нему рука человека интерпретируется как сигнал к передаче предмета: робот отдаёт посылку, а не размещает её на конвейере — подобное поведение заранее явно не программировалось, система самостоятельно обучилась ему.

«Helix неуклонно масштабируется в плане ловкости и надёжности, сокращая разрыв между освоенными роботизированными манипуляциями и требованиями реальных задач. Мы продолжим расширять набор навыков и обеспечивать стабильность на ещё больших скоростях и рабочих нагрузках», — заявил представитель Figure.

В реальности всё далеко не так радужно, как описывают маркетологи Figure — по следующим ссылкам можно увидеть, что робот совершает много ошибок, путается, роняет посылки и порой откровенно зависает. Так что какое-то время «кожаные мешки» на этой работе ещё будут востребованы. Но, учитывая нынешние темпы развития робототехники и бум искусственного интеллекта, почтовым служащим пора подумать о смене профессии.

Сегодня компьютерное зрение строится на датчиках изображения и сложных алгоритмах для обработки собираемой ими информации. Зрение человека устроено иначе — оно ориентировано на энергетическую эффективность, что полезно перенести в сферу электроники. Это не прихоть, а насущная необходимость экономии ресурсов. Учёные из Австралии создали прототип электронного глаза, который работает подобно человеческому, и даже может сам обрабатывать увиденное.

Источник изображения: RMIT

Разработка относится к разряду нейроморфных вычислений. Она является аналоговой, а не цифровой. Обычное цифровое компьютерное зрение делает снимки кадр за кадром и затем обрабатывает их с помощью алгоритмов распознавания, затрачивая на процесс большое количество вычислительных ресурсов и энергии.

Глаз и нервная система человека (мозг) отслеживают движение в поле зрения, прежде всего оценивая контуры и траекторию перемещения объектов. Это позволяет практически мгновенно оценивать ситуацию и действовать по обстоятельствам. Такое умение стало бы ценным подспорьем для роботов и автопилотов транспортных средств. Работа учёных из Университета RMIT (Royal Melbourne Institute of Technology) позволила сделать шаг в этом направлении.

Исследователи воспользовались свойствами атомарно тонкого материала — дисульфида молибдена (MoS₂), способного образовывать дефекты в атомной структуре. Эти дефекты откликались на свет электрическим сигналом — подобно реакции нейронов в сетчатке глаза. Более того, заряд некоторое время сохранялся и мог участвовать в первичной обработке изображения прямо на месте — в самом чипе, имитирующем одновременно и глаз, и мозг. Проведённые исследования доказали, что материал вёл себя подобно базовым узлам LIF-нейронной спайковой сети (leaky integrate-and-fire, или, по-русски, «с утечкой, интеграцией и возбуждением»).

На взмахи руки перед ним экспериментальный чип реагировал подобно человеческой системе глаз—мозг. Для восприятия происходящего аналоговому кристаллу не требовались процессор и интерпретация сцены. В дальнейшем учёные намерены создать чип с увеличенным разрешением, однако они считают, что разработка станет дополнением к обычному цифровому зрению, а не его заменой — по крайней мере, в краткосрочной и среднесрочной перспективе.

Многие участники рынка компонентов для смартфонов не против добавить своему бизнесу динамики за счёт переключения на более активно растущие направления. LG Innotek в этом смысле рассчитывает на контракты с производителем человекоподобных роботов Boston Dynamics, которые обретут систему зрения на основе компонентов этого поставщика.

Источник изображения: Boston Dynamics

О достигнутой между компаниями договорённости сообщает издание Business Korea. Речь идёт о следующем поколении человекоподобных роботов Atlas американской компании Boston Dynamics, которая принадлежит корейскому холдингу Hyundai Motor Group. С последним у LG Innotek уже сложились взаимовыгодные отношения, поскольку последняя из компаний снабжает автопроизводителя светотехникой для транспортных средств и прочими электронными системами.

LG Innotek и Boston Dynamics будут совместно разрабатывать систему машинного зрения для человекоподобных роботов Atlas следующего поколения. Первая будет отвечать за поставку датчиков камер, позволяющих чётко определять взаимное расположение снимаемых объектов даже в условиях ограниченной видимости, а вторая займётся разработкой сопутствующего программного обеспечения. Если учесть, что Hyundai намеревается десятками тысяч использовать роботов Boston Dynamics на своих автосборочных предприятиях, то соответствующий контракт с LG Innotek обещает быть выгодным.

Медицина глаза готова выйти на новый уровень. Ряд дегенеративных заболеваний сетчатки, включая возрастные изменения, предложено лечить с минимальным хирургическим вмешательством. Это достигается сравнительно простой инъекцией в глаз золотой пыли, которая затем возбуждается инфракрасным лазером и стимулирует нейроны под сетчаткой. Опыты на мышах показали обнадёживающие результаты — животные начинали видеть после слепоты.

Источник изображения: ИИ-генерация Grok 3/3DNews

Исследование провела группа учёных из Университета Брауна (Brown University) в Род-Айленде, США. Они искали возможность относительно простого восстановления зрения после возрастного или травматического поражения сетчатки. Альтернативой остаются серьёзные, но не гарантирующие успех методы лечения, а также различные имплантаты и интенсивная подсветка, которые могут окончательно уничтожить остатки зрения.

Предложенное учёными решение отчасти уже используется и представляет собой термостимуляцию нейронов непосредственно под сетчаткой. Визуальный сигнал минует повреждённые фоторецепторы и воздействует напрямую на нейроны, которые, в свою очередь, передают информацию в головной мозг.

Источник изображения: ACS Nano 2025

Для этого в стекловидное тело глаз между хрусталиком и сетчаткой — фактически в гель — методом инъекции вводится золотая пыль нанометрового размера. Каждая пылинка покрыта антителами к белку Thy1. Это необходимо для взаимодействия золотых частиц с клеточными мембранами нейронов. Затем в глаз направляется луч лазера в ближнем инфракрасном диапазоне, который формирует изображение, непосредственно возбуждая нейроны под сетчаткой за счёт нагрева золотых частиц. Передавать изображение может встроенная в умные очки камера.

Эксперимент с полуслепыми мышами с искусственно повреждённой сетчаткой показал, что предложенный метод позволил восстановить зрение. Насколько хорошо оно восстановилось — мыши не расскажут, но результаты внушают оптимизм. Для проверки методики на людях предстоит пройти долгий путь, чтобы избежать возможного вреда. В случае успеха технология сможет вернуть зрение миллионам пожилых людей — просто и безболезненно.

В первой половине 2025 года Intel выделит инновационного производителя систем машинного зрения RealSense в независимую компанию, после чего она войдёт в инвестиционный портфель Intel Capital. Новая компания продолжит разрабатывать решения для компьютерного зрения на базе ИИ и представлять текущее портфолио Intel RealSense, включая камеры глубины RealSense, решения для аутентификации лиц, автономные мобильные роботизированные решения и приборы физиотерапии.

Источник изображений: Intel RealSense

Intel утверждает, что выделение RealSense не является результатом недавних финансовых трудностей компании: «Мы верим в ценность RealSense и уверены в её успехе как самостоятельной компании. Это решение соответствует нашей текущей трансформации и поможет нам в дальнейшем соответствовать нашей стратегической цели — сосредоточиться на наших основных видах деятельности».

Новая компания продолжит разрабатывать решения для компьютерного зрения на базе ИИ и представлять текущее портфолио Intel RealSense, включая камеры глубины RealSense, решения для аутентификации лиц, автономные мобильные роботизированные решения и приборы для физиотерапии. Также RealSense планирует расширить свою дорожную карту, добавив инновации в области стереозрения, робототехники, биометрического программного обеспечения и оборудования ИИ.

RealSense всегда была небольшой частью бизнеса Intel. Безусловно, благодаря работе в экосистеме технологического гиганта, компания гарантировала себе финансовую стабильность, возможность серьёзной научной деятельности и доступ к обширным ресурсам Intel, в том числе к масштабной сети отраслевых партнёров.

Intel начала производить решения для компьютерного зрения в рамках своего подразделения Perceptual Computing в 2013 году. В 2014 году это подразделение было переименовано в Intel RealSense. Камеры машинного зрения Intel RealSense являются популярным выбором для разработчиков мобильных и промышленных роботов. К примеру, четвероногий робот ANYmal от ANYbotics оснащён шестью модулями Intel RealSense D435, которые работают вместе, создавая карту высот, помогающую роботу перемещаться по участку и преодолевать препятствия, включая подъем по лестнице.

Это далеко не первый случай резкого изменения политики Intel. Ранее, в августе 2021 года, Intel уже объявляла о закрытии RealSense, однако затем сменила курс, решив сохранить RealSense, но с сокращённым составом. В 2022 году Intel избавилась от компании-разработчика автономных транспортных средств Mobileye, которую приобрела в 2017 году за $15,3 млрд.

«Intel инкубирует передовые, прорывные технологии и бизнесы для проверки потребностей клиентов и принятия рынком. На определённом уровне масштаба для этих бизнесов имеет смысл работать за пределами Intel, с гибкостью, чтобы работать так, как требует рынок, и возможностью инвестировать в ключевые области роста. Это позволяет отделению быстрее принимать решения, иметь большую гибкость решений для клиентов и оставаться гибким на конкурентных рынках» , — заявил представитель Intel.

С выделением RealSense в отдельную компанию история этого подразделения принимает ещё один неожиданный поворот. Конечно, RealSense освобождается от приоритетов реструктуризации Intel, но независимость, безусловно, принесёт новые проблемы.

Учёные из Университета штата Мичиган стряхнули пыль с ламп накаливания, увидев в них основу для мультиспектрального машинного зрения. В природе свет несёт гораздо больше информации об окружающих объектах и процессах, чем видит глаз человека. Поэтому машинное зрение не должно уподобляться зрению людей. Оно должно быть шире и глубже воспринимать мир, делая среду обитания для человека безопаснее и комфортнее.

Источник изображения: Brenda Ahearn/Michigan Engineering

Солнечный свет не имеет поляризации, он может приобретать её, например, при отражении. Отражение от поверхности воды, например, приобретает линейную поляризацию, что делает поляризованный свет ярче и опаснее для зрения. Солнечные очки с поляризационными стёклами легко компенсируют такие явления.

Полезное свойство поляризации заключается в возможности уплотнить канал передачи в оптоволокне. Для этого используют круговую поляризацию. В природе насекомые и некоторые ракообразные видят поляризованный свет, что делает их лучшими собирателями или охотниками. Очевидно, что робототехника и ряд направлений в науке выиграют, если устройства смогут распознавать свет в расширенном спектре, включая разные виды поляризации.

Исследователи из Университета Мичигана создали наномасштабный прибор из вольфрамовой нити накаливания, который способен испускать свет с эллиптической поляризацией. Такое явление стало возможным после того, как нить накала изготовили такой длины, которая сравнима с длиной волны света.

Эллиптическая поляризация — это предельный случай как круговой, так и линейной поляризации, но он может использоваться как самостоятельный для тех же целей уплотнения трафика в одном и том же оптическом кабеле. В случае машинного зрения использование эллиптической поляризации позволяет повысить контраст изображения, что необходимо для распознавания в тёмное время суток или при плохом освещении.

Наконец, благодаря эллиптической поляризации может появиться множество медицинских приборов, которые помогут с визуализацией образцов тканей человека, а также при проведении анализов.

Российская компания VisionLabs и «Лаборатория Новых Продуктов» представила робота-собаку с системой машинного зрения и интеллектуальной видеоаналитики — он способен наблюдать за производственным процессом и следить за соблюдением работниками требований техники безопасности, сообщает «Хабр».

Источник изображения: habr.com

Четвероногого робота система компьютерного зрения VisionLabs LUNA, которая в реальном времени фиксирует нарушения техники безопасности, в том числе наличие или отсутствие средств индивидуальной защиты, а также присутствие посторонних на промышленном объекте. Система также идентифицирует заданные сценарии: драки, падение человека, утерянные вещи, а также присутствие человека в опасной зоне.

Спутниковая навигация, лидар и автономная система управления позволяют робособаке патрулировать объекты любой сложности, передвигаясь по определённому маршруту — при необходимости оператор может перехватывать управление. Защищённый водо- и пылеустойчивый корпус позволяет машине работать в условиях агрессивной среды.

Поддержка автономной навигации означает, что робособака может эксплуатироваться на объектах, где невозможна установка традиционных камер наблюдения. Система компьютерного зрения VisionLabs отличается высокой точностью: отсутствие защитного шлема на человеке она определяет с точностью 99,2 %, жилета — 97,0 %, перчаток — 92,1 %. Обнаружив нарушение, робот докладывает о нём в диспетчерскую, а дежурный может оперативно связаться с сотрудником и попросить это нарушение устранить.

На практике система способна снизить число несчастных случаев на объекте, повысить уровень дисциплины и уменьшить нагрузку на службу безопасности. К роботу можно подключить и дополнительные датчики, которые помогут инспектировать состояние оборудования: определять его целостность, измерять температуру и уровень вибрации, снимать показания приборов, а также обнаруживать тепло- и газоутечки.

Учёные лаборатории исследований искусственного интеллекта T-Bank AI Research представили на Международной конференции по обработке изображений (IEEE ICIP) в Абу-Даби новый метод под названием SDDE (Saliency-Diversified Deep Ensembles), который позволяет значительно повысить точность распознавания объектов на изображениях с помощью ИИ.

Источник изображения: BrianPenny/Pixabay

Новое решение, в разработке которого также участвовали студенты МИСИС и МФТИ, позволяет примерно на 20 % снизить риск ошибки при обработке и анализе изображений, пишет Forbes.

При распознавании объектов используются методы машинного обучения, повышающие его эффективность. В частности, применяются глубокие ансамбли, когда в процессе распознавания используется несколько нейронных сетей. При методе SDDE используются карты внимания, фокусирующиеся на разных аспектах данных, что позволяет моделям анализировать изображение под разными ракурсами, помогая получить более полную информацию и повысить общую точность анализа. Благодаря этому идентификация объектов становится более надёжной и диверсифицированной, отметили в T-Bank AI Research. По мнению исследователей, новый метод будет востребован в сфере беспилотных транспортных средств и медицинской диагностики.

Также ИИ-модель научили учитывать при анализе изображение не только наборы данных, которые использовались при её обучении, но и незнакомую ей информацию. Это расширило возможности модели при идентификации неизвестных ей объектов. Как отметил младший научный сотрудник группы «ИИ в промышленности» Института AIRI Максим Голядкин, нейросети зачастую не распознают, когда сталкиваются с незнакомыми входными данными, поэтому это решение очень важно. «Вместо того, чтобы признать неопределённость, они могут уверенно выдавать неправильные прогнозы подобно тому, как некоторые языковые модели могут предоставлять вводящую в заблуждение информацию, известную как “галлюцинации”, — говорит эксперт. — Разнообразив фокус каждой модели, ансамбль становится лучше в распознавании тех входных данных, с которыми он ранее не сталкивался».

Мировой рынок компьютерного зрения стремительно растёт с прогнозируемым увеличением с $25,8 млрд в 2024 до $47 млрд к 2030 году, подсчитали в Statista. В частности, в сфере здравоохранении объём рынка вырастет с $986 млн в 2022 году до $31 млрд в 2031 году с прогнозируемым ростом на 47 % в год, утверждают в Straits Research.

В России рынок в этом году вырастет до более чем $600 млн и далее по 10,5 % в среднем в год до 2030-го, когда он превысит $1,1 млрд, прогнозируют в Statista.

В Европе завершены первые клинические испытания имплантата сетчатки глаза в сочетании с комплексом носимых приборов для восстановления остроты зрения у людей. Все участвующие в проекте пациенты восстановили потерянную ранее остроту зрения, вернув себе способность читать, разгадывать кроссворды и играть в настольные игры. Пройдёт ещё несколько лет и возможность вернуть ясность зрения станет обычной врачебной практикой.

Источник изображения: ИИ-генерация Кандинский 3.1/3DNews

Развивает исследование американская компания Science Corp. Оригинальная разработка создана на основе исследований учёных Стэнфордского университета и продолжена учреждённой для этого компанией Pixium Vision. Позже она была приобретена компанией Science Corp. Платформа PRIMA представляет собой беспроводной и полностью автономный фотоэлектрический имплантат, хирургическим путём внедряемый под сетчатку больного глаза, очки с камерой и проекционной системой, а также карманный вычислительный блок для обработки и увеличения изображения с камеры.

Источник изображения: Science Corp

Комплекс решений PRIMA нацелен на лечение возрастной макулярной дегенерации (ВМД), которой страдают 8 млн человек по всему миру. В процессе необратимого заболевания, которое называется географическая атрофия (она считается запущенной формой ВМД), пациент теряет остроту зрения — способность различать мелкие детали, что резко снижает качество жизни. Имплантат возвращает потерянную остроту зрения, что доказали клинические испытания PRIMAvera с участием 38 пациентов.

Динамика улучшения остроты зрения по таблице LogMAR. Источник изображения: Science Corp

«Полученные результаты демонстрируют важную веху в лечении тяжёлой потери зрения, вызванной географической атрофией вследствие возрастной макулярной дегенерации. Впервые удалось восстановить центральное зрение сетчатки, ухудшившееся из-за возрастной макулярной дегенерации, — сказал профессор Фрэнк Хольц (Frank Holz), доктор медицинских наук, научный координатор исследования PRIMAvera. — До этого не существовало реальных вариантов лечения для улучшения зрения у таких пациентов».

Острота зрения всех участников была измерена через 6 и 12 месяцев после имплантации с помощью офтальмологической шкалы LogMAR, и результаты продемонстрировали клинически значимое улучшение. Успех определялся способностью распознавать 10 букв (2 строки) таблицы. Некоторые пациенты стали видеть 23 буквы (4,6 строки), а наибольшим улучшением стало распознавание 59 букв (11,8 строки). При этом установка имплантата не ухудшила остроту зрения, если система была отключена, что свидетельствует о хорошем профиле безопасности.

Клинические испытания PRIMAvera (по-итальянски — «весна») были проведены для сертификации комплекса на европейском рынке. Учёные уверены, что через несколько лет возможность вернуть остроту зрения появится у многих людей.

Учёные из США приблизились к созданию уникальных очков ночного видения, которые были бы не только компактными и лёгкими, но также обладали бы эффектом памяти на образы. Это позволило бы обеспечить предварительную обработку изображений нейронными сетями прямо на стёклах очков, без их загрузки в процессор. Но даже без ИИ новая разработка демонстрирует, насколько OLED-очки ночного видения могут оказаться легче современных аналогов.

Источник изображения: Marcin Szczepanski, Michigan Engineering

Проект частично финансируется DARPA (Управление перспективных исследовательских проектов Министерства обороны США) и в данный момент ведётся учёными из Университета Мичигана. Как известно, современные приборы ночного видения (очками их можно назвать с очень большой натяжкой) представляют собой устройства с вакуумными приборами и люминофором, которые со значительными затратами энергии преобразуют ближний инфракрасный свет в электроны и, после усиления, создают монохромную картинку на светящемся покрытии.

Учёные из США создали новый тип OLED (органических светодиодов), который реагирует на электроны и возбуждает фотоны видимого света. Представленный ими датчик и преобразователь ближнего инфракрасного излучения в видимое тоньше человеческого волоса — его толщин составляет менее 1 мкм. Он состоит из пяти слоёв и, в идеале, каждый попавший на него электрон превращает в пять фотонов.

Первый слой датчика возбуждает электроны от попадания фотонов ближнего инфракрасного света. Затем электрон пролетает пять слоёв OLED-плёнки. Глаза человека может достичь только один образовавшийся фотон видимого света, тогда как другие фотоны снова возбуждают электроны в первом слое и, таким образом, создают эффект усиления с положительной обратной связью без обычных громоздких и высоковольтных устройство по усилению электронного потока.

Экспериментальное устройство обладает скромным усилением всего в 100 раз. Современные приборы ночного видения способны усиливать сигнал до 10 тыс. раз. Учёные говорят, что конструкцию OLED-датчика можно дальше оптимизировать, добиваясь большего усиления и, соответственно, более высокой чувствительности к инфракрасному свету. Но даже сейчас лёгкость и компактность новой конструкции очков с точки зрения эффективности и экономности питания позволяет многократно превзойти коммерческие приборы ночного видения.

Что касается сопутствующего эффекта памяти OLED-очков, то он в определённом смысле будет помехой ночному зрению. Тем не менее, учёные уже нашли ему применение в виде нейросетей для распознавания образов на уровне стёкол без загрузки в процессор. Это определённо может пригодиться для систем машинного зрения, но впереди ещё много работы, хотя исследователи говорят, что запустить разработку в производство труда не составит — они взяли готовые технологии и просто нашли их удачное сочетание.

Американский миллиардер Илон Маск (Elon Musk) сообщил, что его стартап Neuralink разработал экспериментальный зрительный имплант Blindsight, который позволит видеть даже незрячим с рождения людям. При этом в перспективе устройство сможет улавливать и другие спектры, кроме привычного человеку оптического — сверхчеловеческое зрение из фантастики станет реальностью.

Источник изображения: Paramount Domestic Television

«Устройство Blindsight от Neuralink позволит видеть даже тем, кто потерял оба глаза и их оптический нерв. При условии, что зрительная кора головного мозга не повреждена, оно позволит видеть даже тем, кто был незрячим от рождения», — написал Маск на своей странице в соцсети Х.

Команда Neuralink, в свою очередь, на своей странице в соцсети X сообщила, что имплант Blindsight получил одобрение как прорывная разработка от Управления по санитарному надзору за качеством пищевых продуктов и медикаментов США (FDA). Это открывает путь к испытаниям устройства на людях. Компания уже принимает заявки от потенциальных пациентов.

Маск добавил, что качество изображения у импланта сперва будет низким, как графика игровых платформ Atari, однако в будущем устройство позволит видеть в инфракрасном и ультрафиолетовом спектре, а также сможет улавливать длину волны радара.

Миллиардер сравнил разработку Neuralink с футуристическим устройством, которое носил слепой от рождения персонаж телесериала «Звездный путь» Джорди Ла Форж, показанный на изображении выше.

Амнон Шашуа (Amnon Shashua) известен как основатель стартапа машинного зрения Mobileye и компании по изучению искусственного интеллекта AI21 Labs. В 2022 году, опираясь на полученный в этих сферах опыт, он создал Mentee Robotics —стартап в области робототехники. Сегодня компания представила гуманоидного робота Menteebot, главными преимуществами которого создатель называет продвинутое машинное зрение и обучающийся генеративный ИИ.

Источник изображений: Mentee Robotics

«Мы находимся на пороге сближения компьютерного зрения, понимания естественного языка, мощных и детальных симуляторов, а также методологий перехода от моделирования к реальному миру, — заявил Шашуа. — В Mentee Robotics мы рассматриваем эту конвергенцию как отправную точку для разработки будущего универсального двуногого робота, который сможет передвигаться повсюду (как человек) с помощью мозга, выполняя работу по дому и осваивая новые навыки, которым он ранее не был обучен».

Представленный робот во многом является прототипом, хотя его создатели считают, что добились достаточного прогресса, чтобы оправдать публичный дебют после двух лет напряжённой работы. Творческий и инженерный состав Mentee Robotics впечатляет. Помимо Шашуа, в команду основателей входят бывший директор Facebook✴ по исследованиям ИИ Лиор Вольф (Lior Wolf) и профессор Еврейского университета в Иерусалиме Шай Шалев-Шварц (Shai Shalev-Shwartz). Эта команда при содействии венчурной фирмы Ahren Innovation Capital помогла привлечь инвестиции в размере $17 млн.

«Большие языковые модели используются для интерпретации команд и “продумывания” необходимых шагов для выполнения задачи. Особое внимание уделяется способности сочетать передвижение и ловкость, то есть динамическое балансирование робота при переносе тяжестей или движении манипуляторов», — говорится в пресс-релизе компании.

Mentee Robotics утверждает, что новый робот адаптирован как для промышленного, так и для потребительского рынков, в отличие от конкурирующих моделей. Компания рассчитывает выпустить готовый к производству прототип к началу 2025 года.

Основатель и владелец компании Neuralink Илон Маск (Elon Musk) анонсировал следующий продукт Neuralink — Blindsight (дословно — «Слепое зрение»). Это устройство предназначено для восстановления зрения. Ещё несколько лет назад Илон Маск заявил, что Neuralink сможет вернуть зрение слепым людям. Теперь, после успешной демонстрации игры в шахматы при помощи мозгового импланта, исполнение обещаний Маска кажется делом недалёкого будущего.

Источник изображения: Computerra

«Первое применение, к которому мы собираемся стремиться у людей, — это восстановление зрения, и даже если у кого-то никогда не было зрения, как если бы он родился слепым, мы верим, что все равно можем восстановить зрение. Зрительная часть коры все ещё существует. Даже если они никогда раньше не видели, мы уверены, что они смогут увидеть», — заявил Маск на Neuralink Show & Tell в 2022 году.

«Вы хотите иметь возможность читать сигналы мозга. Вы хотите иметь возможность записывать сигналы. В конечном итоге вы хотите иметь возможность сделать это для всего мозга, а затем распространить это на остальную часть вашей нервной системы, если у вас повреждён спинной мозг или шея», — добавил он.

В ноябре 2023 года Илон Маск сообщил, что Neuralink работает над чипом машинного зрения, но на его подготовку уйдёт несколько лет. В то время компания была сосредоточена на получении одобрения регулирующих органов на свои первые испытания на людях. 20 марта 2024 года Маск в своём аккаунте социальной сети X опубликовал короткое сообщение о следующем продукте компании.

Источник изображения: Twitter

Позже Маск добавил, что имплант Blindsight уже тестируется на обезьянах. «Поначалу разрешение [искусственного зрения] будет низким, как в ранней графике Nintendo, но в конечном итоге может превысить нормальное человеческое зрение», — написал Маск в X и добавил, что ни одна обезьяна не погибла и не получила серьезных травм от устройства Neuralink.

В январе этого года первый парализованный доброволец перенёс операцию по установке в черепную коробку импланта Neuralink, который позволил ему научиться управлять курсором на ноутбуке буквально при помощи мысли. Компания на этой неделе опубликовала видео, демонстрирующие обретённые после этой операции добровольцем новые физические возможности.