Смартфоны Google Pixel продолжают ломать популярный лозунг производителей, что много камер лучше одной. Эти телефоны оснащены одинарным основным фотомодулем, но делают снимки на самом высоком уровне. Они без проблем также делают размытие фона на портретах, что якобы невозможно без двойной камеры. Google рассказала, как программно ей удалось сделать то, что другие вендоры могут только аппаратно.
Чтобы получить качественное размытие заднего фона на портретах – так называемое «боке», – программисты Google привлекли нейронные сети. Они способны на разнообразные вещи, но предварительно их нужно научить. Поэтому инженеры создали чехол, в который можно поместить одновременно пять смартфонов.
Необычный аксессуар помог получать набор почти одинаковых снимков с пяти различных камер. Для человека сделанные фотографии могут казаться одинаковыми, но алгоритмы способны выделить небольшие расхождения. На основе этих данных нейронные сети способны правильно распознать объект в кадре, подобрать глубину резкости сцены и точку в фокусе.
Обученная нейронная сеть затем оказалась в приложении камеры смартфона Google Pixel 3. В приложении Google Camera 6.1 и более поздних хранятся карты глубины сцены, что позволяет изменять степень размытия и изменять точку фокусировки уже после того, как кадр был сделан.
Нейронная сеть приложения камеры также позволяет получить цифровой зум высокого качества. Он называется Super-Res Zoom и использует технологию Google Rapid and Accurate Image Super Resolution (RAISR). Она базируется на возможностях специального процессора обработки изображений Pixel Visual Core, которым оснащались прошлогодние смартфоны Pixel 2. RAISR может повысить четкость объектов, но не способна восстановить детали в высоком разрешении.
Опция Super-Res Zoom восстанавливает недостающие на снимке детали, используя естественную дрожь рук пользователя. Смартфон делает много кадров, которые из-за этого дрожания получаются немного разными. Программный алгоритм анализирует их и «сшивает» в один снимок хорошего качества. Функция работает, даже если смартфон зафиксировать на штативе, поскольку для ее работы достаточно даже небольших микроперемещений.
