百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

Keras 常用的图像增强方式 keras数据增强

ztj100 2024-12-28 16:50 11 浏览 0 评论

在使用神经网络和深度学习模型时,需要进行数据准备。对于更复杂的物体识别任务,也越来越需要增加数据量。


数据增加意味着增加数据量。换句话说,拥有更大的数据集意味着更健壮的模型。但是获取更多的数据并不总是那么容易,而且可能存在存储数据并将其提供给模型的问题。


为了缓解这个问题,我们可以通过做一些修改手动增加数据,或者我们可以使用一个 Keras 图像预处理类,只需几行代码就可以做到这一点。


在这篇文章中,我们将看到在使用 Keras 开发和评估 Python 中的深度学习模型时,如何使用图像数据集进行数据准备和数据增强。


读完这篇文章,你就会知道:


1. 关于Keras提供的图像增强API以及如何在模型中使用它。如何执行特征标准化;


2. 如何对图像执行 ZCA 白化;


3. 如何对图像数据随机旋转,移位和翻转增强;


4. 如何将增强图像数据保存到磁盘。


图像增强 API:ImageDataGenerator


它从原始批处理中生成批处理的增强数据。该算法首先对图像进行随机变换,然后生成一批新的图像进行训练。


注意: 这里需要注意的一点是 ImageDataGenerator 不返回原始图像,而只返回一批增强数据,这是对原始数据进行某些转换的结果。


加载数据集


我们将使用 MNIST 手写数字识别进行数据增强。执行下面的代码将从 keras.datasets 加载 MNIST 数据集:


将数据分解成训练街和测试集

像素标准化


像素标准化在两个级别上得到支持:每个图像(称为样本级)或每个数据集(称为特征级)。具体来说,标准化像素值所需的平均值和/或平均值和标准差统计量可以仅从每张图像中的像素值计算(按样本计算) ,也可以从整个训练数据集中计算(按特征计算)。


您可以通过在 ImageDataGenerator 类上设置 featurewise_center 和 featurewise_std_normalization 参数来执行标准化过程。




运行这个例子,您可以看到效果是不同的,似乎暗淡和亮化不同的数字。


ZCA 白化


图像的白化变换是一个线性代数运算,它减少了像素图像矩阵中的冗余。通常,图像增白是使用主成分分析分析技术进行的。最近,一种叫做 ZCA 的方法显示了更好的结果,在变换后的图像中保留了所有的原始维度,不像 PCA,结果变换后的图像仍然看起来像原始图像。




随机旋转


您可以训练您的模型,以更好地在训练期间人为处理数据集中图像旋转和随机旋转。下面的示例通过设置 rotation _ range 参数创建 MNIST 数字最高90度的随机旋转。



你可以看到图像被左右旋转到90度的极限。这对这个问题没有帮助,因为 MNIST 的数字有一个规范化的方向,但是这种转换可能有助于从物体可能有不同方向的照片中学习。


随机平移


图像中的对象可能不在框架中心。它们可能在各种不同的方面偏离中心。您可以通过人工创建训练数据的平移版本来训练深度学习网络。Keras 支持通过 width_shift_range 和 height_shift_range 参数对训练数据进行水平和垂直随机平移。

同样,由于手写数字已经居中,这对于 MNIST 来说是不必要的,但是您可以看到这在更复杂的问题域中是多么有用。




随机翻转


另一个增强图像数据的方法是在训练数据中创建随机的图像翻转,这样可以提高处理大型复杂问题的性能。Keras 支持使用 vertical_flip 和 horizontal_flip 参数沿垂直轴和水平轴进行随机翻转。




翻转数字不是很有用,因为它们总是有正确的左右方向,但是对于场景中可能有不同方向的物体的照片来说,这可能是有用的。

相关推荐

SpringBoot如何实现优雅的参数校验
SpringBoot如何实现优雅的参数校验

平常业务中肯定少不了校验,如果我们把大量的校验代码夹杂到业务中,肯定是不优雅的,对于一些简单的校验,我们可以使用java为我们提供的api进行处理,同时对于一些...

2025-05-11 19:46 ztj100

Java中的空指针怎么处理?

#暑期创作大赛#Java程序员工作中遇到最多的错误就是空指针异常,无论你多么细心,一不留神就从代码的某个地方冒出NullPointerException,令人头疼。...

一坨一坨 if/else 参数校验,被 SpringBoot 参数校验组件整干净了

来源:https://mp.weixin.qq.com/s/ZVOiT-_C3f-g7aj3760Q-g...

用了这两款插件,同事再也不说我代码写的烂了

同事:你的代码写的不行啊,不够规范啊。我:我写的代码怎么可能不规范,不要胡说。于是同事打开我的IDEA,安装了一个插件,然后执行了一下,规范不规范,看报告吧。这可怎么是好,这玩意竟然给我挑出来这么...

SpringBoot中6种拦截器使用场景

SpringBoot中6种拦截器使用场景,下面是思维导图详细总结一、拦截器基础...

用注解进行参数校验,spring validation介绍、使用、实现原理分析

springvalidation是什么在平时的需求开发中,经常会有参数校验的需求,比如一个接收用户注册请求的接口,要校验用户传入的用户名不能为空、用户名长度不超过20个字符、传入的手机号是合法的手机...

快速上手:SpringBoot自定义请求参数校验

作者:UncleChen来源:http://unclechen.github.io/最近在工作中遇到写一些API,这些API的请求参数非常多,嵌套也非常复杂,如果参数的校验代码全部都手动去实现,写起来...

分布式微服务架构组件

1、服务发现-Nacos服务发现、配置管理、服务治理及管理,同类产品还有ZooKeeper、Eureka、Consulhttps://nacos.io/zh-cn/docs/what-is-nacos...

优雅的参数校验,告别冗余if-else

一、参数校验简介...

Spring Boot断言深度指南:用断言机制为代码构筑健壮防线

在SpringBoot开发中,断言(Assert)如同代码的"体检医生",能在上线前精准捕捉业务逻辑漏洞。本文将结合企业级实践,解析如何通过断言机制实现代码自检、异常预警与性能优化三...

如何在项目中优雅的校验参数

本文看点前言验证数据是贯穿所有应用程序层(从表示层到持久层)的常见任务。通常在每一层实现相同的验证逻辑,这既费时又容易出错。为了避免重复这些验证,开发人员经常将验证逻辑直接捆绑到域模型中,将域类与验证...

SpingBoot项目使用@Validated和@Valid参数校验

一、什么是参数校验?我们在后端开发中,经常遇到的一个问题就是入参校验。简单来说就是对一个方法入参的参数进行校验,看是否符合我们的要求。比如入参要求是一个金额,你前端没做限制,用户随便过来一个负数,或者...

28个验证注解,通过业务案例让你精通Java数据校验(收藏篇)

在现代软件开发中,数据验证是确保应用程序健壮性和可靠性的关键环节。JavaBeanValidation(JSR380)作为一个功能强大的规范,为我们提供了一套全面的注解工具集,这些注解能够帮...

Springboot @NotBlank参数校验失效汇总

有时候明明一个微服务里的@Validated和@NotBlank用的好好的,但就是另一个里不能用,这时候问题是最不好排查的,下面列举了各种失效情况的汇总,供各位参考:1、版本问题springbo...

这可能是最全面的Spring面试八股文了

Spring是什么?Spring是一个轻量级的控制反转(IoC)和面向切面(AOP)的容器框架。...

取消回复欢迎 发表评论: