位置: IT常识 - 正文

【Pytorch基础知识】数据的归一化和反归一化(pytorch基本操作)

编辑:rootadmin
【Pytorch基础知识】数据的归一化和反归一化

推荐整理分享【Pytorch基础知识】数据的归一化和反归一化(pytorch基本操作),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:学pytorch的基础,pytorch基本操作,pytorch入门到进阶,pytorch入门,pytorch基础教程,pytorch零基础,pytorch基础教程,pytorch详解,内容如对您有帮助,希望把文章链接给更多的朋友!

一张正常的图,或者说是人眼习惯的图是这样的:

但是,为了神经网络更快收敛,我们在深度学习网络过程中通常需要将读取的图片转为tensor并归一化(此处的归一化指transforms.Normalize()操作)输入到网络中进行系列操作。

如果将转成的tensor再直接转为图片,就会变成下图,和我们眼睛看到是不一样感觉。

这是因为,将图片转为tensor并归一化,tensor之中会有负值,和我们正常看到的是不一样的,如果不进行反归一化到 [0,1],就会变成下图,会觉得变扭。

我们正常看到的图片tensor是[0,255]或者[0,1]

解释:transforms.Normalize()归一化后的图像,满足均值为0方差为1,被限定在一定的数值内,一般的数值为[-1,1]。

这个过程中,我们需要进行如下操作,才能把图片转为tensor操作再转为图片(人眼习惯的)。这里的tensor操作是transforms系列操作。

【Pytorch基础知识】数据的归一化和反归一化(pytorch基本操作)

归一化的目的:使得预处理的数据被限定在一定的范围内,从而消除奇异样本数据导致的不良影响。数据归一化处理后,可以加快梯度下降求最优解的速度,且有可能提高精度(如KNN)。

反归一化的目的:为了还原原来人眼可以识别的图。

归一化

一幅图片的格式为【批数据的数量× 通道数× 高× 宽】:

接下来开始计算mean 和 std: 

nb_samples = 0#创建3维的空列表channel_mean = torch.zeros(3)channel_std = torch.zeros(3)print(image.shape)N, C, H, W = image.shape[:4]image = image.view(N, C, -1) #将w,h维度的数据展平,为batch,channel,data,然后对三个维度上的数分别求和和标准差print(image.shape)#展平后,w,h属于第二维度,对他们求平均,sum(0)为将同一纬度的数据累加channel_mean += image.mean(2).sum(0) #展平后,w,h属于第二维度,对他们求标准差,sum(0)为将同一纬度的数据累加channel_std += image.std(2).sum(0)#获取所有batch的数据,这里为1nb_samples += N#获取同一batch的均值和标准差channel_mean /= nb_sampleschannel_std /= nb_samplesprint(channel_mean, channel_std)

然后利用transforms.Normalize 进行转换:

normalizer = transforms.Normalize(mean=channel_mean, std=channel_std)# 归一化后得到可处理的值data = normalizer(image)反归一化

根据归一化计算得到的mean和std,我们可以反推出反归一化的 mean 和 std,从而利用 transforms.Normalize 进行转换,计算方法如下:

MEAN是指归一化时计算出来的均值,de_MEAN是计算出来反归一化的均值,后面需要用。

综合上面的讲解及代码,整合最后的代码为下:

# 定义一个image图像,torch.Size([1, 3, 319, 256])image = torch.rand([1,3,319,256])# 计算原图的 mean 和stdnb_samples = 0#创建3维的空列表channel_mean = torch.zeros(3)channel_std = torch.zeros(3)print(image.shape)N, C, H, W = image.shape[:4]#将w,h维度的数据展平,为batch,channel,data,然后对三个维度上的数分别求和和标准差image = image.view(N, C, -1) print(image.shape)#展平后,w,h属于第二维度,对他们求平均,sum(0)为将同一纬度的数据累加channel_mean += image.mean(2).sum(0) #展平后,w,h属于第二维度,对他们求标准差,sum(0)为将同一纬度的数据累加channel_std += image.std(2).sum(0)#获取所有batch的数据,这里为1nb_samples += N#获取同一batch的均值和标准差channel_mean /= nb_sampleschannel_std /= nb_samplesprint(channel_mean, channel_std)# 这是归一化的 mean 和std channel_mean = torch.tensor([-0.5321, -0.8102, -0.5532])channel_std = torch.tensor([1.2582, 1.0009, 0.9211])# 这是反归一化的 mean 和std MEAN = [-mean/std for mean, std in zip(channel_mean, channel_std)]STD = [1/std for std in channel_std]# 归一化和反归一化生成器normalizer = transforms.Normalize(mean=channel_mean, std=channel_std)denormalizer = transforms.Normalize(mean=MEAN, std=STD)# 归一化得到可处理的值data = normalizer(image)# 反归一化得到原图image2 = denormalizer(data)

image ≈ image2

因为浮点数计算有误差,所以不会完全一样,但是问题不大~

 这样就可以得到tensor转换后的原图了。

好了,大功告成,完结撒花!

欢迎关注、点赞、收藏、评论、分享给好友,一起学习有趣的新知识!!! 

本文链接地址:https://www.jiuchutong.com/zhishi/297335.html 转载请保留说明!

上一篇:原生js获取元素的各种位置(大全)(原生js获取元素高度)

下一篇:vue中Number方法将字符串转换为数字(vue的number)

  • 增值税结转和个体工商户的增值税缴纳分录如何做?
  • 转出未交增值税在借方是什么意思
  • 公司购买员工意外保险费会计分录未收到发票
  • 冲红凭证更正时摘要怎么写
  • 让渡资产使用权是指资产的所有者将
  • 计提资本公积的处理
  • 固定资产加速折旧法
  • 土地摊销计入在建工程吗
  • 企业开出的普票和专票对税额有影响吗
  • 一般纳税人外地预缴增值税税率
  • 房产过户需要缴纳土地出让金吗
  • 注销税务登记申请书
  • 销售货物尚未收到会计分录
  • 独立核算分公司注销需要清算吗
  • 成本类与费用类科目哪些区别
  • 劳务发票税率营改增后是多少?
  • 购入技术服务怎么结转成本的
  • 银行账户销户时需要收回开户许可证吗
  • 不计提税费可以吗
  • 增值税计提金额
  • 关于现代服务业的书籍
  • 控股合并吸收合并新设合并图示
  • 发票已认证未抵扣怎么办
  • 事业单位固定资产盘盈账务处理
  • 发票专用章正规位置盖在哪里
  • php怎么自学
  • 对公账户自己扣钱
  • PHP:pg_field_table()的用法_PostgreSQL函数
  • 出口退税如何办退税手续
  • 职工福利费会计账务处理
  • 商品流通企业会计科目表
  • 大沼泽地国家公园位于哪个城市
  • 货物运输业增值税专用发票
  • 会计记账的内容
  • 二级资本债向谁发行
  • 巨人堤道上的玄关图片
  • 公司缴纳残保金怎么做账
  • uniapp中使用amap-vue,设置安全密钥
  • 如何在windows server2016中禁用域用户账户
  • php实现多语言切换
  • 社保费用如何做账,社保费会计分录如何写
  • mybatis调用存储过程详解
  • mongodb常用语句
  • 年报中的利润表本月数需要填吗
  • 企业的净资产都有哪些
  • 个税全员全额扣除怎么算
  • 专利代理服务费如何记账
  • acca考试安排及时间
  • 融资租入固定资产的租赁费属于什么费用
  • 长期借款计提的利息可能借记
  • 暂估入库需要入什么科目
  • 纳税申报表多缴了怎么办
  • 应付账款明细账怎么登记
  • 货币资金里的其他货币资金
  • 国家法定滞纳金规定
  • 以前年度损益调整结转到哪里
  • 长期待摊费用是当月摊销还是次月摊销
  • 年末坏账准备计提余额减少说明什么
  • 待处理财产损益借贷方向
  • 销项负数发票如何作废
  • 会计中原始凭证是什么意思
  • mysql连接是什么协议
  • sql必学必会
  • windows server 2008 u盘安装
  • ubuntu怎么把软件放到桌面
  • windows打开或关闭功能
  • 本地安全策略主要功能
  • 超级按钮条上的设置
  • mysqld是什么进程
  • cocos2dx schedule
  • js实现日历效果
  • python中scatter函数
  • portainer集群管理
  • 自动清除数据
  • 编写高质量代码改善JAVA程序的151个建议
  • linux如何查看当前shell
  • node的理解
  • javascript入门基础
  • 低丰度油气田开采的原油
  • 南宁税务局进面分数线
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设