OpenAI 发布面向块稀疏权重网络的 GPU kernel
OpenAI 发布了针对块稀疏权重网络的高度优化 GPU kernel，根据所选稀疏度，速度可比 cuBLAS 或 cuSPARSE 快多个数量级。这些 kernel 已用于文本情感分析以及文本和图像生成建模，并取得 SOTA 结果。
#部署/工程
#部署/工程
今日 0 条OpenAI NewsAI 评分3838
OpenAI NewsAI 评分1414 深度学习的基础设施
OpenAI 指出，深度学习是一门实证科学，基础设施的质量是研究进展的乘数。如今的开源生态系统已经让任何人都能构建出色的深度学习基础设施。