Можно ли использовать нейронные сети для масштабирования скриншотов Minecraft и насколько хорошо это работает? В этой статье я хочу попытаться ответить на эти вопросы и провести некоторые тесты с фотографиями “до” и “после” с помощью программы повышения качества фотографий AI, которая не была обучена на Minecraft. Для этого я буду использовать Gigapixel AI, так как он предлагает простой процесс увеличения и легкий интерфейс для работы, который может использовать каждый.

Что такое искусственное масштабирование?

Как происходит масштабирование изображений с помощью искусственного интеллекта?

Традиционное масштабирование начинается с изображения низкого разрешения и пытается улучшить его визуальное качество при более высоком разрешении. Увеличение с помощью искусственного интеллекта - это другой подход. Получив изображение с низким разрешением, модель глубокого обучения предсказывает, что будет создана версия с высоким разрешением. В результате изображение будет выглядеть идентично исходному с низким разрешением. Нейросетевая модель должна быть обучена на тысячах изображений, чтобы предсказать, как будут выглядеть увеличенные изображения. Затем модель искусственного интеллекта можно использовать для получения изображений низкого разрешения или видео и создания невероятной детализации и резкости, с которыми не может сравниться ни один другой масштабатор. Края выглядят более четкими, волосы - менее растрепанными, а пейзажи - более яркими с потрясающей четкостью.

ИИ масштабирование лучше всего объясняется людям тем, что программное обеспечение может распознавать такие объекты, как трава, листья или волосы, и восполнять недостающие детали исходного изображения. Точнее было бы сказать, что повышение четкости отчасти обеспечивается алгоритмами, которые распознают контраст, встречающийся в реальных сценах. Механизм повышения качества использует сигналы из исходного материала, чтобы определить, как будут выглядеть кадры в исходном формате 4K и 8K. Сцена с травой в формате 720p потеряет часть своей четкости. Однако “шаблоны”, которые пытаются восстановить часть информации, могут помочь сохранить некоторые плавные края травинок и контрасты зеленых тонов.

Как происходит масштабирование изображений без искусственного интеллекта?

Базовое масштабирование позволяет растянуть изображение с низким разрешением на большие дисплеи. Чтобы заполнить все пиксели на дисплее с большим разрешением, пиксели изображения с меньшим разрешением можно скопировать и использовать снова. Фильтрация используется для сглаживания изображения и удаления неровных краев, оставшихся после растягивания. В результате получается изображение, которое может поместиться на экране 4K или 8K, но может выглядеть размытым или приглушенным.

Результаты увеличенных скриншотов Minecraft

Примечание!: Чтобы лучше увидеть результаты, следует увеличить изображение. Вы можете легко увеличить масштаб на телефоне, а на компьютере нажмите CTRL и +.

Вход: 600x300 Выход: 3600x1800

При входном значении 600x300 программе не с чем работать, но ее задача - понять, как увеличить изображение с такого маленького разрешения, а нейронные сети в целом, похоже, хорошо справляются с этой задачей.

Я буду использовать рекомендованную программой настройку масштабирования 600% (6x), что позволит увеличить разрешение изображения до 3600x1800.

До / После ИИ увеличения

Заключение

При сравнении оригинального изображения 600x300 с увеличенным AI (3600x1800), уменьшенным до того же размера, что и оригинал, результаты можно увидеть, и есть некоторые улучшения, но наиболее впечатляющим результатом является сравнение оригинального изображения, увеличенного до 3600x1800, с увеличенным изображением 3600x1800 - объекты начинают выделяться на фоне и становятся более четкими. В целом, на скриншотах меньше размытости и больше деталей.

Если ваша цель - изменить размер скриншотов Minecraft до большего размера, вы гарантированно получите лучшие результаты, используя программное обеспечение для увеличения фотографий с помощью искусственного интеллекта, например Topaz Labs Gigapixel AI.

Как масштабировать собственные скриншоты и видео?

Существуют автономные инструменты масштабирования ИИ, доступные для Mac и PC. Эти пакеты программ не предназначены для масштабирования в реальном времени, но они отлично подходят для улучшения размытых изображений, видео или игровых скриншотов. Video Enhance AI - один из лучших инструментов для видео. Перетащите файлы в интерфейс и выберите профиль масштабирования. Разные профили имеют разные стили AI. Это приводит к разным интенсивностям и характеристикам изображения.

С другой стороны, Gigapixel AI идеально подходит для масштабирования фотографий, внутриигровых скриншотов и даже текстур из игр. Как видно из приведенных выше результатов, лучше увеличивать изображения с помощью нейронных сетей, чем идти обычным путем, хотя результаты наиболее заметны при более высоком разрешении, чем исходное изображение.

Topaz Labs утверждает, что масштабирование HD до 8K занимает всего две-три секунды на кадр при использовании видеокарты NVIDIA GTX 1080. Даже при использовании самого мощного компьютера мы не приблизимся к обработке в реальном времени. Это позволяет программному обеспечению использовать более сложную обработку искусственного интеллекта, что позволяет немного расширить возможности видео и фотографий с ограниченным разрешением.