📕 深度学习入门教室
照着《深度学习入门教室》([日] 谷岡広樹、康鑫 著,莊永裕 译,脸谱文化 · 科普漫游 FQ1054,2019-01,248 页,日文原名「いちばんやさしい ディープラーニング入門教室」——6 堂基础课程+Python 实作练习)做的自学笔记 —— 它是 图解深度学习 的下游练习本:41 课竖着钻——从神经元一路钻到卷积核,讲的是「为什么」;这一本是动手的入门教室——六堂课,先弄清深度学习在哪儿、再把 Python 和 TensorFlow 装上、然后从单个神经元一路做到卷积网络和 RNN。两本对照着看:41 课想不通的地方,来这里找一遍能跑的最小例子。全书一条主线四块 6 章 40 节:先弄清位置、再把工具装上(第 1~2 章,深度学习在 AI 和机器学习里占哪一格、三次热潮两次寒冬各因为什么起落、做这一行的最小数学与 Python 基本语法);跑起来先看见效果(第 3 章,TensorFlow/Keras/Jupyter/NumPy/Matplotlib,最后用 Keras 跑通一个图像辨识);拆开类神经网络(第 4 章,神经元与感知器、激励函数、赫布理论与差量规则、XOR 为什么逼出多层、损失函数、梯度法、反向传播、MNIST);卷积与序列(第 5~6 章,感受野与卷积运算、补零与步幅、ReLU、池化、全连结、过适与丢弃,再到 RNN/LSTM/GRU/语言模型/Seq2Seq/Attention)。正文保留台版用词(类神经网络/激励函数/补零/步幅/丢弃),索引页附了术语对齐表随时回来查。本课是 入门实作课,Demo 全部 numpy 真算或真跑:感知器自己写、反向传播自己推链式法则、卷积自己算感受野、LSTM 的门自己开合——Keras 只在第 3 章当「看见效果」的道具。教材配的图一张没抄、代码一行没抄。大白话、不跳步骤、必带生活比喻、常见误区、可折叠自测题。
内容来自我的 Obsidian 自学笔记 · 全书 6 章 40 篇已全部写完 · 全书完结 🎉
第1章 深度学习与机器学习
深度学习的基础
同心圆数据三种做法:线性 0.5125…
深度学习的历史
感知器跑 AND 与 XOR:AND 第…
机器学习的基础知识
多项式 1/3/9/15 阶:训练误差…
机器学习所需的数学
内积 -5.0、L1 6.0、L2 3.…
第2章 Python 的准备与基本语法
Python 的安装~Windows 篇~
环境体检十二项:3.13.14/CPyt…
Python 的安装~Mac 篇~
同一串 C:/work/data/par…
函式库的安装~Windows 篇~
90 个已装包;numpy 2.5.2…
函式库的安装~Mac 篇~
环境导成 90 行清单 1642 字节…
Python 的基本语法
list 追加后长度 6;tuple 赋…
第3章 深度学习的体验
TensorFlow 与 Keras 的安装
这台机器上 tensorflow/ker…
使用 Jupyter Notebook
生成的 notebook 是 588 字…
数值运算函式库 NumPy 的使用方法
五种表达式形状 (2,3)/(3,2)/…
资料绘制函式库 Matplotlib 的使用方法
figsize=(8,3) 配 dpi=…
以 Keras 体验深度学习
200 张 32×32 合成图切 150…
第4章 类神经网络的基础
神经元与感知器
一个感知器 z = w·x + b 加三…
激励函数
z=5 时 sigmoid 值 0.99…
赫布理论与差量规则
Hebb 规则跑 8 轮权重始终停在 (…
类神经网络的学习
单层感知器学 XOR 跑 200 轮末轮…
学习方法的差异与损失函数
正确答案是 1 而网络只给 0.01 时…
梯度法
f(w)=(w-3)²+2w 在 w=0…
反向传播算法
2-3-1 网络 13 个参数逐一对拍…
MNIST
七段码造 1000 个样本切 800/2…
第5章 卷积神经网络
卷积神经网络的基础
同样接 128 个单元:全连接 1004…
卷积运算
5×5 的图配 3×3 的横线探测器:横…
卷积层
3 通道 8×8 进、2×3×3×3 的…
深层卷积神经网络
感受野 1/2/3/5 层 3×3 分别…
以补零卷积
5×5 输入配 3×3 核:补 0 圈得…
增广范围的卷积
7×7 配 3×3 不补零:步幅 1/2…
卷积 ReLU 层
四个随机核过 ReLU,被截成 0 的比…
池化层
4×4 做 2×2 池化:最大池化得 5…
全连结层
32×13×13 摊平 5408 维,接…
深层卷积神经网络的学习
三类 8×8 图案(横线竖线对角线,位置…
过适与丢弃
每类 20 张训练、两层各 128 单元…
卷积的进一步详细资讯
32 通道压到 8:1×1 卷积 264…