На Гавайях представили первый в своём роде аудиочип с искусственным интеллектом (ИИ) для носимых устройств. По словам разработчиков, он позволит пользователям общаться с ИИ-ассистентами без постоянного подключения к смартфону. Устройства с таким чипом также будут собирать аудио- и даже видеоданные из окружающего мира, чтобы лучше обслуживать виртуальных помощников.
Новый чип получил название Snapdragon Sound Elite Gen 2. Он откроет путь для функций, которые сейчас недоступны напрямую в портативных устройствах — наушниках, умных очках и колонках. Представители Qualcomm анонсировали чип на ежегодном саммите Snapdragon Summit, который прошёл с 21 по 24 сентября.
В отличие от нынешних наушников, устройства с новым чипом смогут хранить приложения прямо в собственной памяти, не полагаясь на постоянное подключение к смартфону, а также синхронизироваться с облачными сервисами вроде ChatGPT при подключении к Wi-Fi. На практике чип позволит пользователям отдавать голосовые запросы, а ИИ-модель будет выполнять действия — например, вносить записи в онлайн-календарь или совершать покупки в интернете. В отличие от существующих устройств с похожими функциями, это станет возможным без связи со смартфоном.
Помимо наушников, компания хочет интегрировать чип в другие «слуховые» устройства: полноразмерные наушники, открытые аудиоустройства, аудиоочки, наушники с камерами (с крошечными встроенными камерами) и слуховые аппараты, а также в «будущие персональные ИИ-гаджеты» — кулоны или клипсы.
Для тех, кто захочет подключить такие устройства к смартфону или компьютеру (например, для работы с визуальным интерфейсом), новый чип использует специальный компонент платформы для соединения по микромощным Wi-Fi-каналам наряду с Bluetooth. Эта технология задействует улучшения на уровне чипа, чтобы потреблять значительно меньше энергии, чем стандартный Wi-Fi, — но за счёт более высокой задержки и меньшей пиковой скорости. Для аудиоустройств использование Wi-Fi вместо Bluetooth обычно улучшает качество воспроизведения, поскольку Bluetooth сжимает данные при передаче, отметили представители Qualcomm.
Адаптивное и избирательное активное шумоподавление также позволит пользователям фильтровать звук по команде. Например, оно даст возможность слышать важные звуки — такие как сирены экстренных служб — при прогулке по городу или выделять голоса людей в разговоре, блокируя всё остальное. Это шумоподавление достигается стандартными алгоритмами машинного обучения, а не трансформерными большими языковыми моделями, на которых работают ИИ-системы вроде ChatGPT.
Устройства также смогут обеспечивать потоковую передачу без потерь — стандарт высокого качества, обычно доступный только по платной подписке на сервисы вроде Spotify или Tidal, — благодаря ещё одной встроенной подсистеме.
Представители Qualcomm также отметили «постоянно включённый интеллект» чипа: встроенный ИИ-ускоритель eNPU питает виртуальных ассистентов, транскрипцию и перевод, а также формирует «контекстную осведомлённость». При такой осведомлённости система будет постоянно следить за окружением пользователя, собирая данные для личного профиля, что, по словам представителей, помогает ей отвечать на будущие запросы.
Хотя система ориентирована на аудио, она также рассчитана на взаимодействие с оборудованием, включающим датчики и камеры, — например, наушниками со встроенными линзами, которые пассивно снимают происходящее вокруг владельца в течение дня. Это часть сбора данных для построения контекстной осведомлённости агентных ИИ-систем, к которым получают доступ люди. Представители Qualcomm попытались снять опасения по поводу приватности, заявив, что линзы камер в будущих наушниках будут иметь низкое разрешение и не смогут идентифицировать конкретных людей благодаря ИИ-маске, которая автоматически их скрывает.
Пока нет информации о том, как эти функции повлияют на время работы от батареи по сравнению с обычными устройствами без ИИ. Но представители Qualcomm отметили, что производителям устройств больше не придётся выбирать между качеством звука, ИИ-функциями и временем работы. Вместе с тем Эндрю Лейстер, штатный продакт-менеджер Qualcomm, добавил в ходе сессии вопросов и ответов для СМИ, что влияние на то, как пользователь ощущает разряд батареи, вероятно, будет. Это связано с тем, что, в отличие от обычных наушников, используемых время от времени для звонков и прослушивания музыки, новые устройства рассчитаны на непрерывное использование.
ИИ-наушники уже существуют в некотором виде. Например, производитель Viaim в этом году выпустил устройства Rise и RecDot. Они предназначены для записи, транскрипции, перевода и обобщения разговоров, хотя подробности о чипах, которые в них используются, публично не раскрыты. Наушники Apple AirPods, к примеру, позволяют пользователям обращаться к ИИ-системе Siri, но для выполнения сложных задач им требуется постоянное подключение к iPhone.
Разработка умных аудиофункций и их внедрение в реальные устройства также были в центре нескольких недавних исследовательских проектов. Например, в 2024 году учёные Вашингтонского университета встроили вычислительную систему в обычные наушники, чтобы фокусироваться на говорящих людях в шумной обстановке и блокировать весь фоновый шум. Годом ранее исследовательская группа поместила систему глубокого обучения в наушники, чтобы владельцы могли голосовыми командами управлять избирательным активным шумоподавлением, выбирая, какие звуки слышать, а какие блокировать.
Другие компании тоже изучали создание новых видов цифровых аудиоплатформ для наушников. Три года назад xMEMS представила Cypress — аудиочип, генерирующий ультразвук с помощью «пьезоэлектрического эффекта», при котором материал движется под действием тока. Хотя чип достиг «готовности к массовому производству» в сентябре 2025 года, потребительские устройства с этой платформой пока не анонсированы. Apple также может работать над похожей технологией. Это может проявиться в AirPods со встроенными камерами, которые будут собирать данные схожим образом в течение дня, по данным управляющего редактора Bloomberg Марка Гурмана.
Новый чип Qualcomm — идейный преемник трёхлетней системы Snapdragon S7 Gen 1, которая использовалась в таких устройствах, как серия Xiaomi Buds 5 Pro. Предыдущий чип тоже применял ИИ для обычного активного шумоподавления, настройки звука и потоковой передачи без потерь при подключении к устройствам по микромощному Wi-Fi. Однако новый чип обладает вдвое большей ИИ-мощностью, выполняя 128 миллиардов операций в секунду против 64 миллиардов у предыдущего. Он также потребляет на 40% меньше энергии и на 30% меньше по размеру.
Ключевой аспект новой системы — способность хранить приложения на самом устройстве во встроенной памяти чипа. Поскольку у устройства будет собственный IP-адрес, оно сможет связываться с серверами по протоколу https, не нуждаясь в другом телефоне или компьютере.
Лейстер рассказал журналистам в ходе сессии вопросов и ответов, что компания сейчас изучает, сможет ли устройство запускать два приложения в оперативной памяти (кратковременной памяти) одновременно — например, ИИ-агента и платформу потокового аудио, — держа остальное во флеш-памяти (долговременном хранилище). Он добавил, что при запуске предыдущего чипа им пришлось преодолеть коммуникационное препятствие с микромощным Wi-Fi (в частности, его энергопотребление сопоставимо с Bluetooth). Теперь, по его словам, коммуникационное препятствие — это собственно возможность запускать приложения на устройстве.
«Это как первый момент смартфона с Play Store, но в этом смысле магазин приложений для ваших наушников сейчас принадлежит производителю устройства, — добавил он. — Именно они будут выбирать, какие приложения предустановить, а дальше мы пойдём оттуда».
Деталей о том, когда систему можно будет найти в устройствах, не было, но представители сказали, что Qualcomm работает с другими компаниями, включая HP и Bose, чтобы изучить наушники и колонки с этим чипсетом.