在 DDR 控制器与片上 GPU 或 NPU 之间,CryptICE™ 协同完成权重压缩、解压、加密和解密。通过压缩减少权重搬移的数据量,并降低模型权重在片外存储与传输中的明文暴露风险,已具备量产交付能力。

灵活权重加载
两种方式均沿 DDR 读取、解密、解压的共同路径,将权重供给 GPU 或 NPU 执行推理。
有效权重带宽
在特定条件下,有效权重带宽可提升约 30%。该指标在同等工艺与物理带宽下,相对未采用权重压缩的方案,以单位时间向计算端供给的等效未压缩权重数据量衡量。
实际收益与模型、权重精度、访问模式及配置有关。对于受带宽限制的任务,更快的权重供给有助于减少计算等待。
集成与适配
适配不同模型、权重加载流程及芯片平台,提供数据通路集成、性能评估与技术支持,协助模型权重压缩与加密能力落地。
评估模型权重通路
欢迎提供模型与权重精度、访问模式、DDR 带宽及加载方式等需求,我们将安排相应的技术沟通。