本文首發於微信公眾號「對白的算法屋」 大家好，我是對白。 目前，越來越多的互聯網公司內部都有自己的一套框架去訓練模型，而模型訓練時需要的數據則都保存在分布式文件系統（HDFS）上。Hive作 ...

注意事項： 1.關於輸入圖像格式的問題 使用io.imread()的時，根據輸入圖像確定as_grey的參數值。 轉化為字符串之后(image.tostring) ，最后輸出看下image_raw的長度。因為不同的圖像編碼格式，存儲方式不同。 我讀入的灰度圖jpeg格式，類型 ...

本博客默認讀者對神經網絡與Tensorflow有一定了解，對其中的一些術語不再做具體解釋。並且本博客主要以圖片數據為例進行介紹，如有錯誤，敬請斧正。 使用Tensorflow訓練神經網絡時，我們可以用多種方式來讀取自己的數據。如果數據集比較小，而且內存足夠大，可以選擇直接將所有數據讀進內存 ...

一、TFRecord數據格式 對於深度學習的物體檢測等任務，比較常用的數據集是PASCAL VOC數據集。對於PASCAL VOC數據集，主要有兩個文件夾，分別為：Annotations和JPEGImages。其中，Annotations文件夾存儲了圖片物體的label，格式為XML格式 ...

關說不練假把式。手上正好有車牌字符的數據集，想把他們寫成TFRecord格式，然后讀進來，構建一個簡單的cnn訓練看看。然后發現准確率只有0.0x。隨機猜也比這要好點吧。只能一步步檢查整個過程。暫時想到問題可能出現的地方： 數據編碼解碼錯誤 網絡構建問題 學習步長問題 數據量 ...

前言在跑通了官網的mnist和cifar10數據之后，筆者嘗試着制作自己的數據集，並保存，讀入，顯示。 TensorFlow可以支持cifar10的數據格式， 也提供了標准的TFRecord 格式，而關於 tensorflow 讀取數據， 官網提供了3中方法 1 Feeding ...

...

1. Tensorflow高效流水線Pipeline 2. Tensorflow的數據處理中的Dataset和Iterator 3. Tensorflow生成TFRecord 4. Tensorflow的Estimator實踐原理 1. 前言 TFRecord是TensorFlow官方 ...