適合大量資料I/O的儲存格式: TFRecord簡介與操作教學
適合大量資料I/O的儲存格式: TFRecord簡介與操作教學 在訓練模型的時候,資料輸入的流程直接影響了模型訓練或推理的效率。其中,資料格式 (data format) 相當地影響了I/O的速度,除了更換更高階的固態硬碟外,選擇binary形式的資料格式也是提升I/O效率的方法之一。 在許 …
Continue Reading適合大量資料I/O的儲存格式: TFRecord簡介與操作教學 在訓練模型的時候,資料輸入的流程直接影響了模型訓練或推理的效率。其中,資料格式 (data format) 相當地影響了I/O的速度,除了更換更高階的固態硬碟外,選擇binary形式的資料格式也是提升I/O效率的方法之一。 在許 …
Continue ReadingTensorflow 2的Quantization Aware Training指南 在低運算資源的平台上,神經網路的計算資源通常會有明顯的限制。為了追求低運算量的神經網路,有兩個常見大方向,一個大方向是透過各種魔改技巧,將最有效率的架構保留下來,包含架構設計 (如MobileNet) 、 …
Continue Reading實務解析tf.function(2):透過Side Effect檢查並避免Retrace 為了穩定的連接Python邏輯與Tensorflow 2.0,tf.function透過retrace機制連接了Python’s dynamic typing與Tensorflow靜態圖。這使 …
Continue Reading包裝再升級?Tensorflow 2.0的重大改變 綜觀Tensorflow發行的歷史:從2015年的0.x版本、2017年1.x版本到2019年的超級改版的Tensorflow 2.0,一步一步地推展著這套廣為人知的deep learning框架,卻也形成了不同大板號之間概念的變化。這次從1.x …
Continue ReadingTensorflow的條件判斷式 tf.cond 這篇文章會介紹tf.cond 這個operator,這個語法是tensorflow的if / else條件判斷式。我會再用tf.cond將上篇文章中的counter加上auto-reset的功能。 Screenshot from Tensorflow …
Continue Reading