国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

pytorch梯度剪裁方式

2020-02-15 21:25:06
字體:
來源:轉載
供稿:網友

我就廢話不多說,看例子吧!

import torch.nn as nnoutputs = model(data)loss= loss_fn(outputs, target)optimizer.zero_grad()loss.backward()nn.utils.clip_grad_norm_(model.parameters(), max_norm=20, norm_type=2)optimizer.step()

nn.utils.clip_grad_norm_ 的參數:

parameters – 一個基于變量的迭代器,會進行梯度歸一化

max_norm – 梯度的最大范數

norm_type – 規定范數的類型,默認為L2

以上這篇pytorch梯度剪裁方式就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持武林站長站。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: 闸北区| 寻乌县| 简阳市| 永安市| 博乐市| 合山市| 乌恰县| 随州市| 都安| 胶南市| 黑龙江省| 潞西市| 乌拉特后旗| 慈溪市| 修文县| 达孜县| 湘潭市| 安宁市| 呈贡县| 搜索| 马关县| 贺州市| 新邵县| 合作市| 内黄县| 永年县| 叙永县| 绥中县| 庆云县| 浦县| 德格县| 金秀| 黔江区| 防城港市| 噶尔县| 上杭县| 东乡族自治县| 福海县| 华安县| 合阳县| 理塘县|