卷積
重複的乘積
1
3
4
3
2
2
1
2
1
-1
2
重複的乘積
1
3
4
3
2
2
1
4
2
1
-1
2
重複的乘積
1
3
4
3
2
2
1
4
8
2
1
-1
2
重複的乘積
1
3
4
3
2
2
1
4
8 \,
8
2
1
-1
2
重複的乘積
1
3
4
3
2
2
1
4
8
8
2
6
1
-1
2
圖片卷積
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
-.25
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
-.25
-.15
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.05
\circledast
=
卷積核Kernel
卷積
卷積能幹嘛
在歪掉的圖看出特徵
找複雜特徵
0.0
0.0
0.0
1.0
0.0
0.0
1.0
1.0
0.0
0.0
0.0
0.0
0.0
0.5
0.5
0.0
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
-0.1
-0.1
-0.1
0.2
0.2
0.2
-0.1
-0.1
-0.1
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.05
0.0
0.0
0.1
0.0
0.1
0.0
0.1
0.0
0.0
0.1
0.1
0.1
0.1
0.1
0.1
0.0
0.15
0.0
0.1
0.1
0.1
-0.1
-0.1
0.1
-0.1
0.1
-0.1
0.0
-.05
-.15
0.2
0.4
0.1
0.1
-.05
0.05
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.05
0.1
0.1
0.1
0.1
0.1
0.1
0.0
0.15
0.0
0.0
-.05
-.15
0.2
0.4
0.1
0.1
-.05
0.05
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.05
0.1
0.1
0.1
0.1
0.1
0.1
0.0
0.15
0.0
0.0
-.05
-.15
0.2
0.4
0.1
0.1
-.05
0.05
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.05
0.1
0.1
0.1
0.1
0.1
0.1
0.0
0.15
0.0
0.0
-.05
-.15
0.2
0.4
0.1
0.1
-.05
0.05
0.4
0.55
0.35
-.25
-.25
-.15
0.05
0.0
0.05
0.1
0.1
0.1
0.1
0.1
0.1
0.0
0.15
0.0
0.0
-.05
-.15
0.2
0.4
0.1
0.1
-.05
0.05
\circledast
=
\circledast
=
\circledast
=
池化
池化
0.1
87
0.1
-0.1
-0.1
0.1
-0.1
0.3
-0.1
-0.1
0.1
-0.1
0.1
0.1
-0.1
-0.1
87
0.3
0.1
-0.1
-0.1
0.1
0.1
-0.1
0.1
-0.1
-0.1
-0.1
0.1
-10
0.1
-0.1
0.1
-0.1
0.1
-0.1
-0.1
0.1
-0.1
0.1
0.1
0.1
0.1
0.1
0.1
\rightarrow
為何要池化?
栗子
1張圖\(\longrightarrow\)6張圖\(\longrightarrow\)6張圖\(\longrightarrow\)16張圖\(\longrightarrow\)16張圖\(\longrightarrow\)全連接
池化
卷積
卷積
池化
LeNet-5
轉置卷積
栗子
\rightarrow
1.0
1.0
1.0
0.0
0.0
0.0
0.5
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
栗子
1.0
1.0
1.0
0.0
0.0
0.0
0.5
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
1.0
1.0
0.0
0.5
0.5
0.0
0.0
0.0
0.0
1.0
1.0
0.0
0.5
0.5
0.0
0.0
0.0
0.0
栗子
1.0
1.0
1.0
0.0
0.0
0.0
0.5
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
1.0
2.0
0.0
0.5
0.5
0.5
1.0
0.5
0.0
1.0
1.0
0.0
0.0
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
栗子
1.0
1.0
1.0
0.0
0.0
0.0
0.5
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
1.0
2.0
0.0
0.5
0.5
0.5
2.0
0.5
0.5
1.0
1.0
0.0
0.0
0.5
0.0
0.5
0.0
0.0
1.0
0.5
0.0
0.0
0.0
0.0
栗子
1.0
1.0
1.0
0.0
0.0
0.0
0.5
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
1.0
2.0
0.0
0.5
0.5
0.5
2.0
0.5
0.5
1.0
1.0
0.0
0.0
0.5
0.0
0.5
0.0
0.0
1.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.0
反著看
1.0
1.0
1.0
0.0
0.0
0.0
0.5
0.5
0.0
0.5
0.0
0.0
0.0
0.0
0.0
0.0
0.5
1.0
1.0
0.0
0.0
0.5
0.0
0.5
0.0
0.0
反著看
轉置卷積核
卷積核
=
多張輸入呢
試著推倒他/她吧