Процесс реставрации фото нейросетью:
10 лучших для ваших старых фото
Еще недавно только специалист мог убрать повреждения фотобумаги, настроить резкость и устранить другие дефекты старых фотографий. Раскрашивание снимков (процесс называется колоризацией) и вовсе считалось отдельным искусством. Благодаря технологиям машинного обучения с этими задачами справится любой желающий. Мы расскажем, как проходит реставрация фото нейросетью на примере популярных приложений и онлайн-сервисов.
Сайт выполняет реставрацию старых фото онлайн, а его нейросеть работает по шаблонам или текстовым описаниям. Искусственный интеллект настроен на колоризацию. Разработчики предоставили более 20 фильтров. Они задумывались как различные варианты цветовой стилизации, но на деле могут давать странный эффект. Например на фотографии, которую мы использовали, появлялись цветные пятна. «Ручные» параметры ограничены текстовыми запросами для искусственного интеллекта.
ИИ подобрал правильную палитру. Все элементы раскрашены достоверно, нет явных ошибок. Качественный результат, который можно использовать без доработки.
Веб-сервис, в котором можно составить генеалогическое древо. Оно будет неполным без семейного альбома, поэтому здесь же доступно восстановление старых фото онлайн силами нейросети. Функция реализована на основе алгоритмов Remini — другого сервиса для реставрации снимков. Результаты обработки будут похожими. Однако благодаря MyHeritage можно обойти ограничения оригинального сервиса. В бесплатной версии Remini нельзя раскрашивать черно-белые изображения и скачивать результат обработки.
Также MyHeritage генерирует лицевую анимацию и аватары. Нейросеть оживляет фото, создавая дополнительные кадры, и тем самым правдоподобно воссоздает движения человека. На аватарах изначальная внешность стилизуется под определенный регион или историческую эпоху — добавляются соответствующие головные уборы и одежда.
Система увеличила исходное разрешение в 2 раза и подобрала правильные сочетания цветов. Верно раскрашены мелкие детали. Результат можно использовать без правок.
Приложение для восстановления старых снимков. Представляет собой полноценный фоторедактор, инструменты которого специально подобраны, чтобы решать эту задачу. Здесь можно в автоматическом режиме раскрасить черно-белое изображение, обработать негативы и выполнить цветокоррекцию. Есть десятки фильтров. Если автоматические алгоритмы по какой-то причине вам не подходят, параметры можно настраивать самостоятельно: убрать шум, отрегулировать насыщенность, добавить виньетирование и прочее.
Редактор раскрасил изображение и выполнил цветокоррекцию. Приложение правильно определило палитру и не снизило качество изображения.
Здесь можно делать реставрацию фото онлайн: нейросеть автоматически исправит резкость, уберет механические дефекты и раскрасит черно-белые кадры. Перечисленные варианты доступны и для видеозаписей. Также ИИ умеет дорисовывать фрагменты лиц и окружающей обстановки. Функция пригодится, если фотография сильно повреждена. Перед обработкой нужно загрузить исходный материал и активировать нужные режимы. Полученный результат можно использовать для генерации картинок, например, чтобы нейросеть нарисовала аниме по фото.
ИИ раскрасил фотографию без серьезных ошибок. Появилось несколько небольших пятен (например, на рукаве футболки мальчика и на руке женщины).
Сервис для реставрации фото нейросетью онлайн с бесплатным доступом. Система меняет разрешение изначального снимка и попутно убирает различные дефекты. Ее можно использовать двумя способами. Первый и самый простой — через сайт. Нужно только загрузить изображение, выбрать версию модели ИИ и ввести значение, на которое поменяется разрешение. Второй — через исходный код. Можно скачать соответствующие библиотеки, а затем настроить и запустить их на собственном компьютере. Управлять системой в этом случае придется через командную строку.
После обработки мелкие детали смазались. Изображение смотрится неестественно.
Сервис для реставрации фото и видео через нейросеть. Умеет обрабатывать лицо, фон и делать цветокоррекцию. Из графических форматов доступны JPEG, TIFF и PNG. Число настроек минимально. Можно выбрать версию ИИ и его режим работы. Например, вариант цветовой стилизации: мягкие теплые или приглушенные тона, сбалансированный режим и прочие. По отдельному запросу предоставляется доступ к программной платформе. Эта возможность будет интересна организациям или индивидуальным разработчикам. Они могут использовать наработки Remini в собственных приложениях.
Доступный функционал зависит от лицензии. В бесплатной версии нельзя делать цветокоррекцию, обрабатывать лица и скачивать результат. Чтобы убрать ограничения, можно оформить пробную версию на 7 дней. Придется ввести данные банковской карты, при этом автоматически оформляется подписка (деньги начнут списываться после пробного периода).
Обработка увеличила разрешение снимка: с 1200х800 до 2400х1600 пикселей. Немного исправлены яркость и контрастность.
зрение
Сервис запущен в поддержку акции «Бессмертный полк». Обработанный снимок можно сразу загрузить в галерею движения. Впрочем, эта нейросеть подходит для реставрации любых фото и работает бесплатно. Она производит колоризацию и убирает механические повреждения (царапины, оторванные фрагменты и прочее). Достаточно загрузить файл и дождаться результата. Сеть генерирует 3 варианта. На первом выполняется только реставрация, на втором — только колоризация. Третий предусматривает реставрацию и раскрашивание. Из этих вариантов можно выбрать более удачный. Ручные настройки не предусмотрены. Готовый снимок можно скачать на компьютер, сохранить на облачном диске VK или отправить по email.
ИИ верно определил палитру, но добавил на снимок хорошо заметные пятна.
Нейросеть для восстановления старых фото, написания текстов и генерации идей (для собственных рисунков, песен, записей в блоге и прочего). Умеет повышать разрешение, обрабатывать портреты, восполнять утраченные фрагменты снимков, подбирать баланс цветов, делать колоризацию и удалять некоторые объекты. Настроек немного, например при раскрашивании можно выбрать количество факторов для определения цвета и разрешение. Также эта нейросеть рисует по фото, например она может создать на основе исходного снимка аватарку для профиля в социальных сетях.
Выполнена колоризация. Уровень яркости и контрастности приемлемый, но мелкие детали смазаны. ИИ использовал синие оттенки там, где их использование не предполагалось (например, на лавке и плетеном стуле).
Сервис для восстановления фото с помощью нейросети, работает онлайн. В браузере можно автоматически раскрасить снимок и удалить царапины. Десктопная версия умеет убирать фон и цветовой шум, настраивать резкость и увеличивать разрешение. Предусмотрена обработка портретов. Без специальных алгоритмов ИИ может неправильно определять контуры лиц и подбирать палитры для них. Доступно несколько шаблонов AI, для некоторых из них можно настраивать интенсивность эффекта. Например можно выбрать тип размытия: мягкое, размытие в движении, размытие линзы с параметрами резкости и шумоподавления.
ИИ раскрасил не весь кадр — некоторые фрагменты черно-белые. Появились пятна.
Сайт для реставрации фото с помощью нейросети онлайн. Дополнительно можно восстанавливать поврежденные файлы и видеозаписи. Разработчики предлагают приложение для Windows и macOS с тем же функционалом. Оно распознает более 50 различных форматов. Чтобы обработать снимок через веб-сервис, нужно загрузить файл на сервер и активировать подходящие режимы. Их всего 2: колоризация и удаление мелких дефектов. Затем система выдает 4 готовых варианта. Дополнительных и более детальных настроек здесь нет.
ИИ сформировал хорошую палитру, но допустил много ошибок при раскрашивании, например брюки мужчины стали частично красными, волосы мальчика — зелеными, часть подола приобрела телесный цвет.
Итоги
Мы рассмотрели, как нейросети реставрируют старые фотографии. Многие алгоритмы демонстрируют интересные результаты. Полученные изображения можно использовать без дополнительной обработки. В некоторых случаях нейронные сети допускают ошибки в палитре, балансе цветов и контрастности. Эти дефекты несложно убрать в стороннем редакторе.
В большинстве случаев предлагается минимальное число параметров. Вся настройка ограничивается выбором основных режимов работы. Это удобно для новичков — не придется долго разбираться в функционале. Однако опытным пользователям нужно больше контроля над результатом. Если ИИ допустит ошибки, их придется игнорировать или убирать в другом софте.
Создатели Replicate.ai и Remini разрешают использовать свои программные наработки другим разработчикам. Этим воспользовались авторы MyHeritage: функции по реставрации снимков позволяют дополнить генеалогическое древо. Сервис Компьютерное зрение также создавался для сохранения исторического наследия, но полагается на собственные алгоритмы.
Neural.love умеет работать с видео и реставрировать утраченные фрагменты снимков. Также алгоритм хорошо справляется с раскрашиванием старых фотографий.
ФотоВИНТАЖ, по сравнению с конкурентами, предоставляет наибольшее число настроек и дополнительных инструментов. При этом в программе легко разберутся даже новички. Автоматические режимы сэкономят время и компенсируют недостаток опыта.
VanceAI можно использовать как в браузере, так и в виде самостоятельного приложения. Последнее предлагает несколько дополнительных функций.
Hotpot умеет восстанавливать снимки и генерировать тексты. Palette.fm, наоборот, узко специализирован и предназначен только для колоризации.
Repairit запускается в браузере или в виде отдельной программы. Он восстанавливает изображения, видеозаписи и другие файлы — всего свыше 50 форматов.