Преданные фанаты эмодзи знают, как непросто выбрать нужный: либо не находится самое точное изображение, либо оно теряется в куче других. Облегчить задачу страдальцам решили ученые из Корнеллского университета — они создали наушники C-Face, которые умеют преобразовывать выражение лица в эмодзи. Причем звучит это как бред: даже людям, не связанным с технологиями, примерно понятно, как работает Face ID, и как iPhone создает Animoji, но как изменения на лице могут фиксировать небольшие наушники — загадка. И что самое удивительное, C-Face могут определить эмоцию пользователя, даже если тот находится в маске. А вот это уже точно что-то из области фантастики.
Как работает новый гаджет, рассказали в издании Engadget. Естественно, в C-Face встроено куда больше технологических приблуд, чем кажется. В наушниках используются две камеры RGB — они расположены под ушами, чтобы записывать изменения контуров щек при движении лицевых мышц владельца. Получившиеся изображения реконструируются при помощи компьютерного зрения. Нейронная сеть анализирует 2D-изображения и преобразует их в своеобразный рисунок: лицо человека превращается в 42 точки. А уже эти точки на месте рта, глаз и бровей C-Face преобразовывает в эмодзи. И, судя по видео, это происходит очень быстро и естественно.
Единственный нюанс: наушники пока могут «рисовать» только восемь эмодзи. Зато их можно использовать иначе: например, управлять музыкальным приложением. Или создавать аватар для игры, показывающий эмоции персонажа. Или внедрять в систему школьного образования: учителя при помощи C-Face могут отслеживать степень вовлеченности своих учеников в процесс во время удаленных уроков.
Вот только кажется, что в продажу C-Face поступят еще не скоро. Из-за пандемии протестировать наушники смогли только девять добровольцев. Но даже их эксперименты дали очень хорошие результаты: C-Face подбирали эмодзи с точностью 88%, а мимику определяли с точностью 85%. Кроме того, ученые обнаружили, что аккумулятор не выдерживает усердно работающие камеры, поэтому теперь они будут разрабатывать менее энергоемкие технологии.
Более «способных» наушников, наверное, не найти, зато камеры к 2020-му научились уже очень многому. Не последнюю роль в этом играет искусственный интеллект. Так, Sony разработала датчик для камеры, который может следить за состоянием водителя в дороге и изучать поведение покупателей в магазине. А разработчики из Fujifilm придумали, как еще можно использовать их беззеркальные фотоаппараты — в качестве веб-камеры сверхвысокого качества. В свете последних событий очень это полезная функция.