tensorflow中Dataset讀數性能測試

首先我們隨機生成一批數據文件; 可以看到我們總共生成了500萬條數，均勻分到20個文件中，全部數據大約220M。 現在，我們用python中標準的文件讀取方式讀入數據，測試結果如下： 讀入僅僅只需3秒。 我們接着重複讀10次： 耗時31.6秒，大約是單遍讀取時間的10倍。 接着我們用tensorflow的dataset試試看，測試結果如下： 可以看到耗時8秒。 下面讓epoch爲10再看看data

>>阅读原文<<