
Samsung разработал чип Quantum Processor 8K с технологией 8K AI Upscaling. Компания не раскрывает подробностей, но предположительно в основе метода могут быть свёрточные (СNN) и генеративные нейросети (GAN). Алгоритм проводит сравнения низкокачественных и высококачественных версий определенного контента, оценивает различия и находит корреляции. Затем выбирает оптимальные найстройки и фильтры и преобразовывает контент с низким разрешением в разрешение 8K.
Технология масштабирования совместима с любыми типами контента, включая SD, HD, FHD и UHD, и не зависит от источника сигнала. Входной контент редактируется в режиме реального времени, и повышает качество изображения и звука как для потокового видео, так и для OTT (On The Top) видеопотока.
Алгоритм работает в трех направлениях:
улучшает резкость и текстуру деталей изображения, которые после сжатия файла превратились в нечеткие;
определяет края объектов и текста на видео, реконфигурируя положение пикселей на границах, чтобы уменьшить их и повысить чёткость;
удаляет статические шумы, возникающие при сильном сжатии или рекомпрессии файлов (сжатие важно для правильной передачи изображения).
Также улучшается звук, благодаря добавлению низких частот для увеличения насыщенности.
https://youtu.be/dbx2bIweieg