tf.data(二) —— 并行化 tf.data.Dataset 生成器

在处理大规模数据时,数据无法全部载入内存,我们通常用两个选项 使用tfrecords 使用 tf.data.Dataset.from_generator() tfrecords的并行化使用前文已经有过介绍,这里不再赘述。如果我们不想生成tfrecord中间文件,那么生成器就是你所需要的。 本文主要记

你可能感兴趣的:(tf.data(二) —— 并行化 tf.data.Dataset 生成器)