
После того как компания Qualcomm подробно рассказала об основном процессоре Oryon, который появится в следующем флагманском чипе Snapdragon, производитель микросхем анонсировал графический процессор Adreno Neural Fusion нового поколения.
Следующая однокристальная система (SoC) от Qualcomm станет первым чипсетом, в графический конвейер которого интегрированы специализированные ядра искусственного интеллекта для GPU. Эти так называемые «матричные ядра» (Matrix Cores) размещаются непосредственно в каждом из трех графических блоков с частотой 1,45 ГГц в новом GPU Adreno. По заявлению Qualcomm, они действуют как специализированное локальное аппаратное обеспечение для «запуска передовых моделей ИИ прямо внутри графического конвейера».
Графический процессор Adreno в чипе Snapdragon также получит выделенный кэш HPM (High Performance Memory) объемом 18 МБ. Этот объем может показаться скромным, однако в Qualcomm утверждают, что их память HPM «обеспечивает большой объем памяти с низким временем отклика непосредственно для GPU, позволяя использовать тайловый рендеринг,
кадры буферов и вычислительные задачи локально в графической подсистеме».
Оба компонента новой архитектуры ядер в совокупности составляют графический процессор Adreno Neural Fusion. Для конечного пользователя это означает повышение энергоэффективности на 40% при включенной технологии. В своем пресс-релизе компания подробно описала, что разработка SoC с обработкой ИИ в непосредственной близости от графического процессора снижает задержки и повышает эффективность.
Вся хитрость заключается в том, чтобы держать работу ближе к кремнию. Матричные ядра Adreno обрабатывают модели ИИ прямо там, где происходит отрисовка графики, а 18 МБ высокопроизводительной памяти Adreno удерживают тяжелые данные — тайлы, буферы кадров, вычисления — на самом чипе, избавляя от необходимости постоянно пересылать их в системную память и обратно. Меньше перемещений означает меньшую задержку и более высокую эффективность, что выливается в более продолжительные игровые сессии.
На данный момент движки Unity и Unreal Engine уже интегрировали стек Neural Fusion от Qualcomm.
Конечным результатом должно стать улучшение качества графики за счет «масштабирования изображений, стабильной частоты кадров и повышенной эффективности благодаря рендерингу на базе ИИ, встроенному непосредственно в графический конвейер Snapdragon»,
как заявляют в Qualcomm.
Саммит Snapdragon запланирован на 22–24 сентября, и ожидается еще больше анонсов, касающихся нейронного процессора (NPU) нового чипа.