Как обрабатывать фото и видео при помощи нейросети

29 дек. 2021

14309

1

0

0

Машинное обучение и нейронные сети могут быть крутым инструментом для фотографов и художников, но интегрировать их в рабочий процесс — непростая задача для тех, кто не умеет писать код. Мы собрали подборку приложений, работающих на основе нейронных сетей, в которых легко разобраться и начать работать всего в пару кликов.

Waifu2x

Бесплатный онлайн-сервис, в котором нейросеть повышает качество фото. Она убирает шумы и увеличивает разрешение изображений в желаемое число раз, а также наводит резкость. Максимально простой в использовании интерфейс.

Пример подавления шума с помощью Waifu2x. Источник: overclockers.ru

Let’s Enhance

Let’s Enhance — коммерческий аналог Waifu2x. Цель сервиса та же — это нейросеть для улучшения фото онлайн. Повысить разрешение картинки можно в 16 раз, а также скорректировать её цвет и тон и убрать шумы. На сайт можно загрузить сразу несколько изображений и запустить их одновременную обработку.

Бесплатная версия позволяет увеличить разрешения в 4 раза только для пяти фотографий. Подписка даёт возможность увеличить разрешение в 16 раз для 100 изображений и стоит $9 в месяц. За обработку 300 фотографий придётся заплатить $24, а за 500 — $34.

Пример работы алгоритмов Let’s Enhance. Источник: letsenhance.io

Artbreeder

Сервис для генерации изображений, обладающий следующими функциями:

1. «Общие» (General) — позволяет скрещивать между собой любые изображения. Ничто не мешает скрестить пиццу и попугая, но результат будет абстрактным и далёким от фотореализма.

2. «Портреты» (Portraits) — позволяет собрать нужный вам портрет из нескольких изображений лиц. У лиц есть настраиваемые параметры. Можно задать телосложение, возраст, гендер, настроение, реалистичные/нарисованные очертания лица и так далее.

3. «Обложки альбомов» (Albums) — это генерация абстрактных изображений на манер обложек музыкальных альбомов.

Также есть функции генерации пейзажей, картин, зданий и анимационных персонажей.

Для того чтобы воспользоваться Artbreeder, придётся простоять в очереди или оплатить тариф, самый дешёвый из которых стоит около 700 рублей. Платный тариф позволит сохранять результаты генерации на свой компьютер в разрешении 2048х2048 (в бесплатном тарифе разрешение ниже в 4 раза, а сохранить можно только первые 4 сгенерированных изображения), а также генерировать изображения на основе тех, что вы загрузите на платформу.

  Вот такие пейзажи можно генерировать при помощи Artbreeder. Источник: deityrox

Nvidia InPainting

Помогает отретушировать снимок с помощью «умной» кисти. С помощью Nvidia InPainting можно автоматизировать дизайнерскую рутину удаления лишних объектов с фотографии. Так, если в кадр попал визуальный мусор или нужно убрать торчащий из кармана объект или скорректировать дефекты кожи, приложение справится со всем. Алгоритм анализирует расположенные вокруг выделенного объекта пиксели, и старается заменить их наиболее подходящим образом.

Слева — оригинальное фото, справа — результат работы алгоритмов Nvidia, с помощью которых вырезали одного из персонажей на фото. Источник: esearchgate.net

Remove.bg

Если в предыдущем сервисе мы удаляли объекты с фотографии, то теперь удаляем фон вокруг определённого объекта. Похожая функция есть в Adobe Photoshop, отвечает за неё нейросеть Adobe Sensei — подробнее об этом мы писали в отдельной статье.

Есть версии для Windows / MacOS / Linux, плагины для Adobe Photoshop, Figma и других программ. Бесплатная версия приложения сильно ограничивает разрешение для скачиваемого результата, делая его непригодным для использования в профессиональных целях (если, конечно, вы не собираетесь следующим шагом увеличивать разрешение одной из бесплатных нейросетей, о которых говорилось выше). Стоимость самой дешёвой подписки составляет 579 рублей. За эту цену сервис позволяет отредактировать и скачать результаты в высоком разрешении для 40 фотографий.

GFP-GAN

Алгоритм, который детализирует размытые лица на фото. Актуально для случаев, когда съёмка проходила при плохом освещении или «на ходу». Алгоритм хорошо восстанавливает даже очень пережатые изображения. Хотя бывает, что дорисовывает лишние детали или делает изображение слишком мультяшным. Ознакомиться с работой алгоритма можно по ссылке.

После того, как вы перешли по ссылке, поместите нужное вам изображение в рабочую область GFP-GAN. Затем нажмите Submit и подождите около 5 секунд, пока алгоритм не закончит работу. Результат и оригинал появятся в одном окне.

Слева — оригинальное фото, справа — результат работы GFP-GAN. 

Prisma

Приложение для Android и iOS (есть также web-версия), позволяющее переносить стиль известных художников на фотографии. Причём это происходит не при помощи наложения фильтров. Изображение анализируется нейронной сетью, после чего полностью перерисовывается. 

Слева — оригинальное фото, справа — результат работы Prisma. Источник: periscope.com.ua

Colorize

Сервис раскрашивает чёрно-белые фотографии в реалистичные цвета.

Это условно бесплатный сервис. На каждой иллюстрации будет видна надпись «Created by colorize.cc», а всего можно загрузить до 50 картинок. Чтобы убрать надпись и увеличить лимит загрузок до 10000, нужно заплатить 10$.

Пример работы Colorize.

RunwayML

Приложение, объединяющее многие нейросети, о которых мы уже рассказали, и добавляющее другие. Здесь можно генерировать изображения, удалять объекты с фотографии и видео, создавать текстовые подписи к объектам на снимках, создавать трёхмерную модель из фото и многое другое. Все вычисления происходят на облаке. У приложения есть веб-версия, а также версии для Windows и Mac.

Runway ML можно пользоваться и бесплатно, но будут ограничения на загрузку ваших работ в высоком разрешении и использовании некоторых инструментов. Самый дешёвый тариф без этих ограничений стоит $35.

Заключение

Время осваивать инструменты, ускоряющие обработку и предлагающие новые творческие приёмы. Главное помнить об особенностях алгоритмов на основе ИИ: результат не всегда полностью подконтролен пользователю. Поэтому классические графические редакторы не уходят в прошлое, а работают в синергии с новыми инструментами.

1

29 дек. 2021

14309

1

0

0

Самые новые

Самые читаемые