当前位置: 首页 > news >正文

【Keras图像处理入门:图像加载与预处理全解析】

在这里插入图片描述

本文将全面讲解如何使用Keras进行图像加载、预处理和数据增强,为深度学习模型准备高质量的图像数据。

一、单张图像处理基础

1. 图像加载与尺寸调整

from keras.preprocessing import image# 加载图像并调整尺寸
img = image.load_img('example.jpg', target_size=(150, 150))
img.show()  # 显示原始图像

关键参数说明:

target_size: 统一图像尺寸 (高度, 宽度)

color_mode: 支持"grayscale", “rgb”, “rgba”

2. 图像转数组与维度扩展

# 转换为NumPy数组
img_array = image.img_to_array(img)
print("原始数组形状:", img_array.shape)  # (150, 150, 3)# 扩展批次维度
img_batch = np.expand_dims(img_array, axis=0)
print("批次数组形状:", img_batch.shape)  # (1, 150, 150, 3)

原始数组形状: (150, 150, 3)
批次数组形状: (1, 150, 150, 3)

3. 图像归一化处理

# 像素值归一化到[0,1]
normalized_img = img_array / 255.0# 标准化(零均值单位方差)
mean = img_array.mean()
std = img_array.std()
standardized_img = (img_array - mean) / std
print(standardized_img[0][0:10])

[[-0.1323349 -0.30142814 -0.51663774]
[-0.02473011 -0.31680027 -0.4551493 ]
[ 0.02138623 -0.20919548 -0.43977717]
[ 0.03675834 -0.17845124 -0.3475445 ]
[ 0.05213045 -0.1323349 -0.31680027]
[ 0.08287468 -0.08621857 -0.30142814]
[ 0.12899102 -0.04010222 -0.30142814]
[ 0.15973525 -0.02473011 -0.20919548]
[ 0.19047947 0.02138623 -0.16307913]
[ 0.23659581 0.02138623 -0.14770702]]

二、批量图像处理与增强

1. ImageDataGenerator核心功能

from keras.preprocessing.image import ImageDataGeneratortrain_datagen = ImageDataGenerator(rescale=1./255,rotation_range=40,width_shift_range=0.2,height_shift_range=0.2,shear_range=0.2,zoom_range=0.2,horizontal_flip=True,fill_mode='nearest'
)

数据增强参数解析:

参数功能典型值
rotation_range随机旋转角度0-180
width_shift_range水平平移比例0.0-1.0
zoom_range随机缩放范围0.0-1.0
horizontal_flip水平翻转布尔值

2. 目录批量加载实战

使用flow_from_directory方法,可以通过指定目录中的子目录来加载图像数据。每个子目录代表一个类别,子目录中的文件(图像)会自动被分配到该类别。这种方式适用于具有结构化文件夹格式的数据集,其中每个类别都存放在不同的文件夹中。

适用场景:

适用于图像数据已经按类别分好文件夹的情况。
适用于类别清晰、文件夹中每个类别文件数目较为均衡的情况。

目录结构示例:
data/train/cats/cat1.jpgcat2.jpg...dogs/dog1.jpgdog2.jpg...
代码
train_generator = train_datagen.flow_from_directory('data/train',target_size=(150, 150),batch_size=32,class_mode='categorical'
)# 获取批次数据样例
x_batch, y_batch = next(train_generator)
print("图像批次形状:", x_batch.shape)  # (32, 150, 150, 3)
print("标签批次形状:", y_batch.shape)  # (32, n_classes)
加载过程:
  • train_generator 从 data/train 目录加载图像数据。
  • target_size=(150, 150) 表示将每张图像调整为 150x150 的大小。
  • batch_size=32 每次加载 32 张图像。
  • class_mode=‘categorical’ 选择多类分类模式,生成 one-hot 编码标签。(这个很重要,如果不是采用这种方式加载图片,一定要自己手动对标签进行独热编码

3. DataFrame数据加载

flow_from_dataframe 方法用于从 pandas DataFrame 中加载图像数据。它适用于图像文件路径和标签信息存储在一个 CSV 文件中的情况。DataFrame 中包含了图像的文件名和对应的标签,图像数据的路径可以通过文件夹路径与文件名结合得到。

适用场景:

适用于图像路径和标签信息存储在 CSV 文件中的情况。
适用于较为灵活的场景,如图像路径和标签可能并非按文件夹结构组织。

示例 CSV 文件内容:
filename,class
cat1.jpg,cats
cat2.jpg,cats
dog1.jpg,dogs
dog2.jpg,dogs
代码
import pandas as pddf = pd.read_csv('image_labels.csv')
generator = train_datagen.flow_from_dataframe(dataframe=df,directory='images/',x_col='filename',y_col='class',target_size=(150, 150),class_mode='categorical'
)
加载过程:
  • df 是通过 pandas.read_csv() 加载的 CSV 文件,包含图像文件的路径和标签。
  • train_datagen.flow_from_dataframe() 方法通过x_col='filename'y_col='class' 指定了从 CSV 文件中读取文件名和标签。
  • directory='images/' 表示图像文件存放的根目录。
  • target_size=(150, 150) 表示图像尺寸为 150x150。
  • class_mode='categorical' 表示多类分类。
两种打开方式对比
特性flow_from_directoryflow_from_dataframe
数据格式按文件夹组织,每个文件夹为一个类别通过 CSV 文件指定图像路径和标签
适用场景图像按类别存放在不同文件夹中图像文件和标签信息存储在 CSV 文件中
灵活性结构化较强,适合标准化数据集灵活,适合自定义数据集,文件路径和标签可自由配置
CSV 文件不需要需要一个包含图像路径和标签的 CSV 文件

三、高级应用技巧

1. 迁移学习预处理

from keras.applications.vgg16 import preprocess_input# 加载预训练模型专用预处理
img = image.load_img('example.jpg', target_size=(224, 224))
img_array = image.img_to_array(img)
img_array = preprocess_input(img_array)  # VGG16专用预处理

2. 实时数据增强可视化

import matplotlib.pyplot as pltaugmented_images = [train_datagen.random_transform(img_array) for _ in range(9)]plt.figure(figsize=(10, 10))
for i, aug_img in enumerate(augmented_images):plt.subplot(3, 3, i+1)plt.imshow(aug_img.astype('uint8'))plt.axis('off')
plt.show()

在这里插入图片描述

四、最佳实践建议

内存优化策略:

使用flow_from_directory流式处理大数据集

设置合适的batch_size(通常32-256)

启用多进程加速(workers=4)

格式兼容指南:

统一转换为RGB格式

处理透明通道:image.load_img(…, color_mode=‘rgb’)

灰度图处理:添加通道维度np.expand_dims(img, axis=-1)

性能优化技巧:

# 启用多线程预处理
generator = train_datagen.flow_from_directory(...,workers=4,use_multiprocessing=True
)

五、完整处理流程示例

# 完整训练流程
from keras.models import Sequential
from keras.layers import Dense, Flatten# 构建模型
model = Sequential([Flatten(input_shape=(150, 150, 3)),Dense(128, activation='relu'),Dense(10, activation='softmax')
])# 编译模型
model.compile(optimizer='adam',loss='categorical_crossentropy',metrics=['accuracy'])# 训练模型
history = model.fit(train_generator,steps_per_epoch=2000 // 32,epochs=50
)
http://www.lryc.cn/news/543693.html

相关文章:

  • 企业级AI办公落地实践:基于钉钉/飞书的标准产品解决方案
  • 对于邮箱地址而言,短中划线(Hyphen, -)和长中划线(Em dash, —)有区别吗
  • C++ STL(三)list
  • Vue3+TypeScript 封装一个好用的防抖节流自定义指令
  • HarmonyOS+Django实现图片上传
  • vscode 版本
  • Python 爬虫实战案例 - 获取拉勾网招聘职位信息
  • 结构型模式---外观模式
  • Docker数据卷操作实战
  • 技术速递|Copilot Usage Advanced Dashboard 教程
  • 【Python爬虫(90)】以Python爬虫为眼,洞察金融科技监管风云
  • Shell学习(1/6) 教程-变量
  • 《Qt窗口动画实战:Qt实现呼吸灯效果》
  • RabbitMQ系列(六)基本概念之Routing Key
  • Spring Boot 集成 Kafka
  • CentOS中shell脚本对多台机器执行下载安装
  • 浅析eBPF
  • HTML 基础 (快速入门)详细步骤和示例
  • 力扣-动态规划-139 单词拆分
  • 建筑能耗监测系统数据采集装置 物联网网关功能参数介绍
  • vue深拷贝:1、使用JSON.parse()和JSON.stringify();2、使用Lodash库;3、使用深拷贝函数(采用递归的方式)
  • ES 删除index 的curl
  • 游戏引擎学习第124天
  • 第十四届蓝桥杯Scratch11月stema选拔赛真题——小猫照镜子
  • 使用vscode导出Markdown的PDF无法显示数学公式的问题
  • 前端系列之:Blob
  • 【项目管理】基于 C 语言的 QQ 聊天室实现(TCP + 多线程 + SQLite3)
  • Apache Flink:实时数据流处理的终极武器
  • 点云处理入门--PointNetPointNet++论文与代码详解
  • 通过Nginx负载均衡+Keepalived实现业务高可用