如何正确使用keras的History对象进行模型训练监控?

2026-05-21 23:433阅读0评论SEO资源
  • 内容介绍
  • 文章标签
  • 相关推荐

本文共计992个文字,预计阅读时间需要4分钟。

如何正确使用keras的History对象进行模型训练监控?

在Keras中,`fit_generator` 和 `fit` 函数都返回一个 `History` 对象。`History` 对象记录了模型在训练过程中的关键信息,如训练损失、验证损失、准确率等。那么,`History` 对象如何使用呢?

实际上,`History` 对象记录了模型在训练过程中每一步的输出,包括训练和验证的损失以及准确率。在使用`fit_generator`或`fit`函数时,我们通常会调用`History`对象的以下方法来获取训练信息:

1. `history.history`:返回一个字典,包含每一步的损失和准确率。

2.`history.losses`:返回一个列表,包含所有训练损失。

3.`history.val_losses`(如果有验证集):返回一个列表,包含所有验证损失。

4.`history accuracies`:返回一个列表,包含所有训练准确率。

5.`history.val_accuracies`(如果有验证集):返回一个列表,包含所有验证准确率。

在了解这些信息之前,我们可能需要自定义回调函数来记录损失和准确率。以下是一个简单的例子:

python

from keras.callbacks import Callback

class LossHistory(Callback): def on_train_begin(self, logs={}): self.losses=[] self.val_losses=[]

def on_epoch_end(self, batch, logs={}): self.losses.append(logs.get('loss')) if 'val_loss' in logs: self.val_losses.append(logs.get('val_loss'))

在fit_generator或fit中传入该回调函数model.fit_generator(data, steps_per_epoch=100, epochs=10, callbacks=[LossHistory()])

这样,我们就可以在训练过程中记录损失和准确率,并在训练结束后进行分析。这有助于我们更好地理解模型的表现,并根据需要进行调整。

keras中的fit_generator和fit函数均返回History对象,那么History怎么用呢?事实上History对象已经记录了运行输出。在了解之前,我们甚至自己定义回调函数记录损失和准确率等。

相关keras源码位于网址:

class History(Callback): """Callback that records events into a `History` object. This callback is automatically applied to every Keras model. The `History` object gets returned by the `fit` method of models. """ def on_train_begin(self, logs=None): self.epoch = [] self.history = {} def on_epoch_end(self, epoch, logs=None): logs = logs or {} self.epoch.append(epoch) for k, v in logs.items(): self.history.setdefault(k, []).append(v)

可以看出History类对象包含两个属性,分别为epoch和history,epoch为训练轮数。

根据compile参数metrics,history包含不同的内容。比如,当某一次metrics=['accuracy']时,运行如下部分代码我们可以看出,history字典类型,包含val_loss,val_acc,loss,acc四个key值。

####省略若干 history = model.fit_generator( mp.train_flow, steps_per_epoch=32, epochs=3, validation_data=mp.test_flow, validation_steps=32) print(history.history) print(history.epoch) print(history.history['val_loss'])

{‘val_loss': [0.4231100323200226, 0.3713115310668945, 0.3836631367206573], ‘val_acc': [0.815, 0.84, 0.83], ‘loss': [0.8348453622311354, 0.5010451343324449, 0.4296100065112114], ‘acc': [0.630859375, 0.7509920634920635, 0.783203125]}
[0, 1, 2]
[0.4231100323200226, 0.3713115310668945, 0.3836631367206573]

如何正确使用keras的History对象进行模型训练监控?

补充知识:在ipython中使用%history快速查找历史命令

1、输出所有历史记录,且带有序号

%history -n 150: %cpaste 151: %cpaste 152: print(r">>>>>>>>>") 153: print(r'>>>>>>>>>') 154: print(r'>>>>>>>>><') 155: print(r'>') 156: print(r'>>') 157: print(r'>>>') ...

2、按序号,查找某些序号区间的历史纪录

%history -n 168-170 178 185-190 168: planets 169: for method, group in planets.groupby('method'): print(f'{method:30s} method={group}') 170: for method, group in planets.groupby('method'): print(f'{method:30s} method={group.shape}') 178: %history? 185: %history -u 186: %history -n -u 187: ?%history 188: %history -g method 189: %history -g method print 190: %history -g for method,

3、模糊查找

%history -g print*metho* 120: for method, group in planets.groupby('method'): print(f"{method:30s} shape={groupe.shape}") 121: for method, group in planets.groupby('method'): print(f"{method:30s} shape={group.shape}") 169: for method, group in planets.groupby('method'): print(f'{method:30s} method={group}') 170: for method, group in planets.groupby('method'): print(f'{method:30s} method={group.shape}') 182: for method, group in planets.groupby('method'): print(f"{method:30s shape=group.shape}") 198: %history -g print*metho*

以上这篇keras中的History对象用法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持易盾网络。

本文共计992个文字,预计阅读时间需要4分钟。

如何正确使用keras的History对象进行模型训练监控?

在Keras中,`fit_generator` 和 `fit` 函数都返回一个 `History` 对象。`History` 对象记录了模型在训练过程中的关键信息,如训练损失、验证损失、准确率等。那么,`History` 对象如何使用呢?

实际上,`History` 对象记录了模型在训练过程中每一步的输出,包括训练和验证的损失以及准确率。在使用`fit_generator`或`fit`函数时,我们通常会调用`History`对象的以下方法来获取训练信息:

1. `history.history`:返回一个字典,包含每一步的损失和准确率。

2.`history.losses`:返回一个列表,包含所有训练损失。

3.`history.val_losses`(如果有验证集):返回一个列表,包含所有验证损失。

4.`history accuracies`:返回一个列表,包含所有训练准确率。

5.`history.val_accuracies`(如果有验证集):返回一个列表,包含所有验证准确率。

在了解这些信息之前,我们可能需要自定义回调函数来记录损失和准确率。以下是一个简单的例子:

python

from keras.callbacks import Callback

class LossHistory(Callback): def on_train_begin(self, logs={}): self.losses=[] self.val_losses=[]

def on_epoch_end(self, batch, logs={}): self.losses.append(logs.get('loss')) if 'val_loss' in logs: self.val_losses.append(logs.get('val_loss'))

在fit_generator或fit中传入该回调函数model.fit_generator(data, steps_per_epoch=100, epochs=10, callbacks=[LossHistory()])

这样,我们就可以在训练过程中记录损失和准确率,并在训练结束后进行分析。这有助于我们更好地理解模型的表现,并根据需要进行调整。

keras中的fit_generator和fit函数均返回History对象,那么History怎么用呢?事实上History对象已经记录了运行输出。在了解之前,我们甚至自己定义回调函数记录损失和准确率等。

相关keras源码位于网址:

class History(Callback): """Callback that records events into a `History` object. This callback is automatically applied to every Keras model. The `History` object gets returned by the `fit` method of models. """ def on_train_begin(self, logs=None): self.epoch = [] self.history = {} def on_epoch_end(self, epoch, logs=None): logs = logs or {} self.epoch.append(epoch) for k, v in logs.items(): self.history.setdefault(k, []).append(v)

可以看出History类对象包含两个属性,分别为epoch和history,epoch为训练轮数。

根据compile参数metrics,history包含不同的内容。比如,当某一次metrics=['accuracy']时,运行如下部分代码我们可以看出,history字典类型,包含val_loss,val_acc,loss,acc四个key值。

####省略若干 history = model.fit_generator( mp.train_flow, steps_per_epoch=32, epochs=3, validation_data=mp.test_flow, validation_steps=32) print(history.history) print(history.epoch) print(history.history['val_loss'])

{‘val_loss': [0.4231100323200226, 0.3713115310668945, 0.3836631367206573], ‘val_acc': [0.815, 0.84, 0.83], ‘loss': [0.8348453622311354, 0.5010451343324449, 0.4296100065112114], ‘acc': [0.630859375, 0.7509920634920635, 0.783203125]}
[0, 1, 2]
[0.4231100323200226, 0.3713115310668945, 0.3836631367206573]

如何正确使用keras的History对象进行模型训练监控?

补充知识:在ipython中使用%history快速查找历史命令

1、输出所有历史记录,且带有序号

%history -n 150: %cpaste 151: %cpaste 152: print(r">>>>>>>>>") 153: print(r'>>>>>>>>>') 154: print(r'>>>>>>>>><') 155: print(r'>') 156: print(r'>>') 157: print(r'>>>') ...

2、按序号,查找某些序号区间的历史纪录

%history -n 168-170 178 185-190 168: planets 169: for method, group in planets.groupby('method'): print(f'{method:30s} method={group}') 170: for method, group in planets.groupby('method'): print(f'{method:30s} method={group.shape}') 178: %history? 185: %history -u 186: %history -n -u 187: ?%history 188: %history -g method 189: %history -g method print 190: %history -g for method,

3、模糊查找

%history -g print*metho* 120: for method, group in planets.groupby('method'): print(f"{method:30s} shape={groupe.shape}") 121: for method, group in planets.groupby('method'): print(f"{method:30s} shape={group.shape}") 169: for method, group in planets.groupby('method'): print(f'{method:30s} method={group}') 170: for method, group in planets.groupby('method'): print(f'{method:30s} method={group.shape}') 182: for method, group in planets.groupby('method'): print(f"{method:30s shape=group.shape}") 198: %history -g print*metho*

以上这篇keras中的History对象用法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持易盾网络。