本發明公開了一種敏感度分析和強化學習的神經網絡剪枝方法、系統及裝置,包括:設定稀疏度閾值步驟,選擇低敏感度的權重進行剪枝;獲取裁剪辦法和精度步驟,根據上述的敏感度權重確定需要進行隨機剪枝的權重;對被選定的每一個權重進行隨機裁剪,將多次隨機裁剪的剪枝辦法和精度放入緩沖區;訓練強化學習步驟,利用緩沖區中的數據訓練強化學習代理,訓練后生成的裁剪辦法和精度放入緩沖區;重復進行,直到網絡精度達到預設值。本發明選擇低敏感度的權重進行剪枝,設定各權重的稀疏度閾值保證被裁剪的權重采用當前稀疏度進程裁剪后,網絡下降的精度保持在預設范圍以內。在保證網絡精度的情況下,最大化的提升了神經網絡的壓縮率。
聲明:
“敏感度分析和強化學習的神經網絡剪枝方法、系統及裝置” 該技術專利(論文)所有權利歸屬于技術(論文)所有人。僅供學習研究,如用于商業用途,請聯系該技術所有人。
我是此專利(論文)的發明人(作者)