Инженеры компании Google рассказали, как программные алгоритмы улучшают качество фото на смартфонах Pixel. Самое интересное из их доклада — камера использует естественное дрожание рук, чтобы собрать больше информации о кадре.

Для этого производится серия фото, снятых с немного различающихся ракурсов. Специально обученный алгоритм распознаёт части изображения со статичными объектами и совмещает по ним несколько снимков. Тем самым удается повысить детализацию и экспозицию.

Метод использует дрожание рук, превращая его из проблемы в преимущество. Это напоминает традиционный брекетинг экспозиции — камера делает множество снимков с разными настройками выдержки и ISO, после чего совмещает их для расширения динамического диапазона и снижения уровня шума.

Тем не менее в Google добились более впечатляющих результатов. Так, смартфоны серии Pixel обучены цифровому зуму без значительных потерь качества, а также ночной съемке в условиях сверхнизкой освещенности.

Схема работы алгоритма

После совмещения снимков по статичным областям алгоритм начинает обработку. Сначала он создает карту, отражающую согласованность областей на кадрах между собой. Если значение согласованности удовлетворительное, кадры объединяются в итоговый снимок. Тем самым алгоритм улучшает качество статичных областей, не создавая артефактов вокруг движущихся объектов.

• Телеграм
• Дзен
• Подписывайтесь на наши каналы и первыми узнавайте о главных новостях и важнейших событиях дня.