Для создания впечатляющих изображений смартфонам Android уже не требуется фотокамера. Qualcomm продемонстрировала решение, автоматически генерирующее изображение по словесному описанию. Хотя это очень сложная вычислительная задача, мощности мобильных процессоров хватает и на создание снимка нужно всего 15 секунд. Вычисления производятся непосредственно на устройстве, интернет не используется.
Qualcomm говорит, что использовал свой набор технологий искусственного интеллекта для запуска нейросети Stable Diffusion 1.5 на телефоне, не подключенном к интернету. По сути телефон выполнял все операции для работы искусственного интеллекта, необходимые для создания изображения на устройстве. В видео, опубликованном компанией, образ кота создается менее чем за 15 секунд.
Stable Diffusion создал изображение с помощью подсказки: «Супер милый пушистый кот-воин в броне, фотореалистичный, 4K, ультрадетализованный, рендеринг vray, Unreal Engine».
Аппаратной частью телефона был процессор Qualcomm Snapdragon 8 Gen 2, который находится в таких флагманах, как Galaxy S23. Используемая модель Stable Diffusion была оптимизирована для квантования, компиляции и аппаратного ускорения перед тестированием.
Это не первый случай, когда Stable Diffusion создает изображение на телефоне Android. Как отмечает The Verge, разработчик по имени Айвон Хуанг ранее использовал Stable Diffusion на Sony Xperia 5 II с процессором Qualcomm Snapdragon 865 и 8 ГБ оперативной памяти. Однако Хуангу понадобилось время, чтобы создать изображение 512 x 512.Так что техника Qualcomm, безусловно, намного быстрее.
Использование подобных моделей искусственного интеллекта на телефонах Android может сэкономить средства для разработчиков, устранить потребность в мобильном интернете, а также защитить конфиденциальность пользователей, поскольку данные остаются на телефоне и не передаются на удаленные серверы.
В Qualcomm ничего не сообщают о том, когда клиенты могут ожидать, что эти модели будут широко использоваться на флагманских телефонах Android. Компания продемонстрирует технологию на выставке MWC 2023 года.
