我发现fit_generator()
会比它应该运行的更多一些步骤。
我设置了steps_per_epoch=100
。我和k都从0开始。但在训练过程结束时,它会打印出k = 109
。只有在添加验证数据时才会出现这种情况。
def data_generate(xfd, yfd, x_line_offset, y_line_offset):
while True:
k = 0
x_line_offset, y_line_offset = shuffle_list(x_line_offset, y_line_offset)
for i in range(100):
print('i = {}'.format(i))
print('k = {}'.format(k))
k += 1
x_train = get_line_by_offset(xfd, x_line_offset[i])
x_train = rescaling(x_train, 0, 65535, 0, 1)
y_train = get_line_by_offset(yfd, y_line_offset[i])
yield x_train, y_train
train_generator = data_generate(xfd_train, yfd_train, x_train_line_offset, y_train_line_offset)
validation_generator = data_generate(xfd_valid, yfd_valid, x_valid_line_offset, y_valid_line_offset)
model.fit_generator(train_generator, steps_per_epoch=100,
validation_data=validation_generator,
validation_steps=len(fix_y_valid_line_offset), epochs=1)
因为它将打印出
k = 109
,所以我认为它将再运行几个步骤。我不知道是不是虫子。但是,keras日志消息不会在k = 99
之后显示。最佳答案
这里没有bug,只是一些实现细节。函数fit_generator()
有一个默认参数max_queue_size=10
。train_generator
和validation_generator
中的批次将在用于拟合/评估模型之前插入队列。
当第一个epoch结束时,将生成100个批(k = 99
)。但是,生成器将继续生成10个批次来填充队列。这就是你看到k = 100
到k = 109
的原因。同时,验证过程开始,因此您还将看到k = 0, ...
来自validation_generator
。