AI Blog TW | by Jia-Yau Shiau

ViT (Vision Transformer) 概述與優勢: 對比CNN與Swin等hierarchical方法

Jia-Yau Shiau
Date : August 20, 2023
Categories : Ml studies
Tags : Computer vision , Network architecture , Transformer

概述Model Reparameterization: RepVGG 與後續作 (RepOptimizer, QARepVGG, MobileOne)

Jia-Yau Shiau
Date : May 18, 2023
Categories : Ml studies
Tags : Computer vision , Network architecture , Edge computing

Stable Diffusion背後的技術：高效、高解析又易控制的Latent Diffusion Model

Jia-Yau Shiau
Date : April 16, 2023
Categories : Ml studies
Tags : Computer vision , Generative model

管理模組化Python程式: 從獨立Project到Package或Submodule

Jia-Yau Shiau
Date : July 12, 2022
Categories : Coding essentials
Tags : Python

實作理解Diffusion Model: 來自DDPM的簡化概念

Jia-Yau Shiau
Date : May 31, 2022
Categories : Ml studies
Tags : Computer vision , Generative model

深入淺出 Normalizing Flow: Generative Model不只有 GAN跟 VAE

Jia-Yau Shiau
Date : September 14, 2021
Categories : Ml studies
Tags : Computer vision , Generative model

敏捷 (Agile) 開發與Scrum：個人與互動重於工具與流程，站著開會才不是重點！

Jia-Yau Shiau
Date : September 4, 2021
Categories : Tech culture
Tags : Software skill

給ML Engineer的MLOps簡述: 持續開發機器學習Service的高效理念

Jia-Yau Shiau
Date : January 21, 2021
Categories : Ml practical ,Tech culture
Tags : Mlops , Software skill

解密Oculus Quest手勢追蹤系統：MEgATrack Hand Tracking

Jia-Yau Shiau
Date : August 27, 2020
Categories : Ml studies
Tags : Computer vision ,Hand pose estimation

解密Oculus Quest手勢追蹤系統：MEgATrack Hand Tracking 2019年年底，Facebook Oculus 在自己的VR產品Quest 上發布了hand tracking的支援。這是一個消費者端的完整手勢追蹤系統，不只是判斷手勢，而是幾近精準地抓到了使用者的每個指節位 …

Self-training當道：對比Pre-training的優缺點

Jia-Yau Shiau
Date : August 13, 2020
Categories : Ml studies
Tags : Computer vision ,Self supervised learning

Self-training當道：對比Pre-training的優缺點通常在做大部分deep learning任務時，使用pre-training模型是很常見的做法。隨著近年self-training再次引起研究目光，開始有人思考與其用不同domain的資料做pre-training，或許直接拿來 …

SpineNet : 重新思考特徵抽取時的降解析度操作

Jia-Yau Shiau
Date : July 21, 2020
Categories : Ml studies
Tags : Computer vision ,Network architecture

SpineNet : 重新思考特徵抽取時的降解析度操作從convolution neural network (CNN) 的發展來看，抽取特徵時隨著網路的深度降低特徵層解析度是一個很標準的作法。不過近年不少研究指出， …

認識手勢追蹤系統：MediaPipe Hand與Oculus Hand Tracking

Jia-Yau Shiau
Date : July 12, 2020
Categories : Ml studies
Tags : Computer vision ,Hand pose estimation

認識手勢追蹤系統：MediaPipe Hand與Oculus Hand Tracking 用雙手在空中操作電腦、操作虛擬物件好像是存在於科幻小說與電影中的劇情，但近年這些科學幻想已經不再只是幻想。2019年年底，Facebook Oculus 在自己的的VR產品Quest 上發布了Hand …

Noisy Student: Knowledge Distillation強化Semi-supervise Learning

Jia-Yau Shiau
Date : June 18, 2020
Categories : Ml studies
Tags : Computer vision ,Semi supervised learning

Noisy Student: Knowledge Distillation強化Semi-supervise Learning Self-supervised leaning與semi-supervised learning都是近年相當熱門的研究題目 (畢竟supervised learning早已發 …

Residual Leaning：認識ResNet與他的冠名後繼者ResNeXt、ResNeSt

Jia-Yau Shiau
Date : June 11, 2020
Categories : Ml studies
Tags : Computer vision ,Network architecture

Residual Leaning: 認識ResNet與他的冠名後繼者ResNeXt、ResNeSt 打從ResNet出現後，以residual block / residual learning為主架構的網路接連地在各個論文中出現，也正式撬開了深層數網路的時代。事實上，目前在computer …