Adobe внедряет искусственный интеллект в обработку фотографий

Компания Adobe анонсировала новую функцию для конвертера цифровых изображений Lightroom и плагина Camera Raw, которая называется Enhance Details (усиление деталей). Она использует силу искусственного интеллекта для получения большего количества деталей и меньшего количества артефактов на фотографиях в формате RAW. В частности, эта функция использует машинное обучение, чтобы переосмыслить демозаик RAW-фотографий (процесс, при котором полученные с помощью массива красных, зеленых и синих пикселей данные с матрицы цифровой фотокамеры преобразуются в полноцветную фотографию).

Результат работы искусственного интеллекта и функции Enhance Details (усиление деталей) при конвертации фотографии

Стандартные результаты интерполяции в Lightroom (вверху) и результаты с функцией Enhance Details (внизу)

Adobe утверждает, что функция усиление деталей повышает разрешение матриц с байровской решёткой и X-Trans сенсоров на 30%, улучшая передачу мелких деталей и воспроизведение цветовых оттенков.
Повышенную детализацию можно увидеть в уличном освещении и окнах небоскреба на фотографии, увеличенной на 200%, снятой датчиком Fuji X-Trans. При съемке фотографии через фильтр Байера или X-Trans камеры записывают одно значение интенсивности красного, зеленого или синего света в каждом пикселе. При расчете того, какие цветные пиксели должны быть на самом деле на фотографии, RAW процессорам необходимо угадать наиболее вероятное значение на основе соседних значений (что называется интерполяцией).
Хотя в одних ситуациях стандартные алгоритмы интерполяции работают хорошо, например, плавные градиенты и постоянные цветовые области, а в других — могут срабатывать хуже и давать менее оптимальные результаты (например, текстуры, мелкие детали, узоры, острые края).

Обычная конвертация raw фотографии в Lightroom без усиления деталей

Результат обычный демозаики без использования функции Enhance Details

Существуют усовершенствованные алгоритмы демозаики (цветовой интерполяции), которые могут хорошо обрабатывать проблемные области фотографий, но их запуск займет значительное время даже на мощных и дорогих компьютерах. Таким образом, RAW процессоры обычно настроены на менее оптимальный результат, при котором конвертация фотографий завершается в более разумные сроки.

Конвертация raw фотографии в Adobe Lightroom с усилением деталей на основе искусственного интеллекта и машинного обучения

Результат конвертации с использованием функции Enhance Details в конвертере Lightroom

Но, благодаря искусственному интеллекту, сейчас меняется подход к обработке данных с цифровых фотокамер. Adobe запускает свой движок Sensei AI, позволяя «глубоко изучить» проблему цветовой интерполяции сложных областей в RAW фотографиях.
Компания обучила свой искусственного интеллекта на основе более миллиарда примеров проблемных областей — мелкие детали, ложные цвета и размытие по краям фотографий. Результатом машинного обучения является новая функция усиление деталей Enhance Details, которая производит заметно больше деталей, чем раньше, с меньшим количеством артефактов.
Чтобы приступить к применению функции Enhance Details к фотографиям RAW, обновите рав-конвертеры Lightroom CC, Lightroom Classic CC и плагин Camera RAW до последних версий.

3 thoughts on “Adobe внедряет искусственный интеллект в обработку фотографий”

  1. Забавно, пару лет назад, когда я попробовал разные raw-конвертеры, подобные артефакты были одной из проблем у Lightroom, которые меня в самом деле сильно беспокоили. Приведенные здесь примеры довольно мягки. На некоторых ночных снимках артефакты были гораздо больше, чем с конвертером DxO. Нисколько не жалею о покупке DxO :)

  2. Все творческие личности только выигрывают от подписки на продукты Adobe. Кажется, вы забываете, какая была жизнь до того, как существовала подписка Adobe. Помните, когда копия Photoshop стоила около 600$, а обновления стоили не менее 300$ или больше и при этом программы обновлялись всего раз в год? Одно обновление стоило более 120$, теперь люди жалуются на стоимость годовой подписки.
    Сегодня я использую несколько программ Adobe и плачу 49$/месяц за полный комплект… Раньше я платил как минимум в четыре раза больше за те же инструменты. Модель подписки экономит мои деньги.

  3. Я никогда не понимал этот аргумент. Я плачу ежемесячно (120$ в год) и получаю постоянные обновления для Lr и Photoshop. Или я мог бы купить требуемые мне raw-конвертеры (Capture One 299$ или DxO PhotoLab 129$), а затем, когда выйдет обновление, купить его снова? Для меня это просто отложенная подписка.

Leave a Comment