Компания Adobe анонсировала новую функцию для конвертера цифровых изображений Lightroom и плагина Camera Raw, которая называется Enhance Details (усиление деталей). Она использует силу искусственного интеллекта для получения большего количества деталей и меньшего количества артефактов на фотографиях в формате RAW. В частности, эта функция использует машинное обучение, чтобы переосмыслить демозаик RAW-фотографий (процесс, при котором полученные с помощью массива красных, зеленых и синих пикселей данные с матрицы цифровой фотокамеры преобразуются в полноцветную фотографию).
Adobe утверждает, что функция усиление деталей повышает разрешение матриц с байровской решёткой и X-Trans сенсоров на 30%, улучшая передачу мелких деталей и воспроизведение цветовых оттенков.
Повышенную детализацию можно увидеть в уличном освещении и окнах небоскреба на фотографии, увеличенной на 200%, снятой датчиком Fuji X-Trans. При съемке фотографии через фильтр Байера или X-Trans камеры записывают одно значение интенсивности красного, зеленого или синего света в каждом пикселе. При расчете того, какие цветные пиксели должны быть на самом деле на фотографии, RAW процессорам необходимо угадать наиболее вероятное значение на основе соседних значений (что называется интерполяцией).
Хотя в одних ситуациях стандартные алгоритмы интерполяции работают хорошо, например, плавные градиенты и постоянные цветовые области, а в других – могут срабатывать хуже и давать менее оптимальные результаты (например, текстуры, мелкие детали, узоры, острые края).
Существуют усовершенствованные алгоритмы демозаики (цветовой интерполяции), которые могут хорошо обрабатывать проблемные области фотографий, но их запуск займет значительное время даже на мощных и дорогих компьютерах. Таким образом, RAW процессоры обычно настроены на менее оптимальный результат, при котором конвертация фотографий завершается в более разумные сроки.
Но, благодаря искусственному интеллекту, сейчас меняется подход к обработке данных с цифровых фотокамер. Adobe запускает свой движок Sensei AI, позволяя «глубоко изучить» проблему цветовой интерполяции сложных областей в RAW фотографиях.
Компания обучила свой искусственного интеллекта на основе более миллиарда примеров проблемных областей – мелкие детали, ложные цвета и размытие по краям фотографий. Результатом машинного обучения является новая функция усиление деталей Enhance Details, которая производит заметно больше деталей, чем раньше, с меньшим количеством артефактов. Чтобы приступить к применению функции Enhance Details к фотографиям RAW, обновите рав-конвертеры Lightroom CC, Lightroom Classic CC и плагин Camera RAW до последних версий.