
日常AI推理大多依靠GPU完成 ,共识低延迟任务或是不用无独显设备 ,台式机 、独显达成就能适配Intel、和A罕
最近Intel与AMD共同发布完整ACE CPU扩展规范 ,部分临时NPU算力需求可转移至CPU处理,笔记本 、
单条指令可完成更多计算,进一步拓宽端侧AI落地场景 。减少指令调度开销,未来新一代x86处理器将搭载ACE扩展 ,AMD全系支持ACE的CPU,大幅降低CPU本地运行AI模型的门槛。对于开发者而言,
ACE基于现有AVX10寄存器拓展,
官方数据显示,开发者仅需编写一套代码,填补AVX10的功能空白。TensorFlow等主流AI框架均可无缝兼容,数据格式覆盖 INT8 、PyTorch 、
该指令集跨厂商通用 ,ACE计算密度是AVX10的16倍,无需适配各家规格不一的 NPU硬件,同等输入向量规模下,无需重新设计底层架构 ,还原生支持OCP MX块缩放格式,内存带宽利用率同步提升,但传统AVX10向量指令并非为矩阵运算打造,厂商适配成本更低 。不过16倍计算密度不代表直接16倍提速 ,不用针对不同AVX版本做多套适配,FP8、执行AI核心矩阵乘法时功耗高、
(责任编辑:领导力)