Новый 6-нм графический процессор MariSilicon X с 20-битным конвейером HDR

Производитель смартфонов Oppo объявил, что разработал собственный нейронный процессор (NPU), который будет встроен в свои будущие мобильные устройства. Этот новый 6-нм чипсет, который Oppo называет MariSilicon X, включает в себя NPU, процессор сигналов изображения (ISP) и настраиваемую архитектуру памяти, которые работают вместе, чтобы улучшить возможности обработки изображений в мобильной фотографии.

Oppo заявляет, что MariSilicon X NPU, который составляет лишь небольшую часть всего набора микросхем, необходимого для питания смартфона, может обрабатывать до 18 триллионов операций int8 в секунду (TOPS) со скоростью 11,6 TOPS на ватт. Для сравнения, Neural Engine в A15 Bionic, который используется в устройствах Apple iPhone 13 Pro и 13 Pro Max, имеет максимальную скорость 15,8 TOPS.

Чтобы сопоставить эти цифры с реальным сценарием, Oppo заявляет, что его MariSilicon X смог обработать свой алгоритм шумоподавления AI в 20 раз быстрее, используя менее половины мощности смартфона на Snapdragon 888. Хотя один тщательно подобранный тест не показывает общую производительность, он показывает, как вертикальная интеграция алгоритмов Oppo и нестандартных микросхем может работать вместе, чтобы быстро обрабатывать информацию, сохраняя при этом время автономной работы.

MariSilicon X может обрабатывать до 8,5 ГБ в секунду с общей памятью DDR и использует 20-битный конвейер обработки изображений HDR, который может запускать алгоритмы непосредственно на данных RAW, а не использовать сжатые данные, как это делают некоторые другие наборы микросхем. Oppo заявляет, что применение своих алгоритмов к исходным данным изображения дает отношение сигнал / шум (SNR) 8 дБ. NPU также использует то, что Oppo называет конвейером двойных изображений с двойной сырой суперсэмплингом. Это означает, что MariSilicon X работает с датчиками RGBW для отдельного захвата сигналов RGB и W, а затем объединяет данные вместе, чтобы получить улучшение на 8,6 дБ. в соотношении сигнал / шум и улучшении качества текстур в 1,7 раза »,

Это особенно примечательно, учитывая, что OPPO объявила, что работает над разработкой датчика RGBW «следующего поколения» еще в августе на мероприятии «Запуск технологии будущего изображения». На 60% больше света, чем у датчиков предыдущего поколения, при этом снижается уровень шума на 35% »и заявляет, что« разработал новый «алгоритм объединения пикселей Quadra», предназначенный для уменьшения муара, который был проблемой для ранних поколений его датчиков RGBW ».

Вместе MariSilicon X и датчик «Next Generation RGBW» могут составить мощную комбинацию в будущих смартфонах Oppo с его 20-битными возможностями Raw, видео 4K Ultra HDR, 4K Night Video и многим другим. Вы можете посмотреть полную 51-минутную презентацию Oppo Inno Day ниже: