深度学习入门python考试速成：神经网络之前向传播

  • 开发
  • 62

矩阵乘法

A B =C\\ A:M*N\\ B:N*P\\ C:M*P

神经网络的内积

\begin{matrix} (x_{1}& x_{2}) & \begin{pmatrix} 1 & 3 & 5\\ 2& 4 & 6 \end{pmatrix} \end{matrix}=\begin{pmatrix} y_{1} & y_{2} & y_{3} \end{pmatrix}\\ \begin{matrix} 1*2 &&&& 2*3 &&&&&1*3 \end{matrix}

即

XW=Y

W=\begin{pmatrix} 1 & 3&5 \\ 2& 4& 6 \end{pmatrix}

用数学式表示 a_{1}^{(1)}

使用矩阵的乘法运算

Z^{(1)}=h(A^{(1)})\\ Z^{(1)}=\begin{pmatrix} z_{1}^{(1)} &z_{2}^{(1)} & z_{3}^{(1)} \end{pmatrix}

其它层计算类似，图如下

输出层所用的激活函数，要根据求解问题的性质决定。一般地，回 归问题可以使用恒等函数，二元分类问题可以使用sigmoid函数， 多元分类问题可以使用softmax函数。

阅读全部

相关推荐

  6. 神经网络（深度学习，计算机视觉，得分函数，损失函数，前向传播，反向传播，激活函数）

    2023-12-31 19:48:02       41 阅读

  9. 深度学习入门：传统神经网络（前馈型神经网络、反馈型神经网络和自组织神经网络）

    2023-12-31 19:48:02       35 阅读

最近更新

  3. docker php8.1+nginx base 镜像 dockerfile 配置

    2023-12-31 19:48:02       94 阅读

  4. Could not load dynamic library ‘cudart64_100.dll‘

    2023-12-31 19:48:02       101 阅读

  9. 在Django里面运行非项目文件

    2023-12-31 19:48:02       82 阅读

  19. Python语言-面向对象

    2023-12-31 19:48:02       91 阅读

  20. 如何分清楚常见的 Git 分支管理策略Git Flow、GitHub Flow 和 GitLab Flow

    2023-12-31 19:48:02       85 阅读

热门阅读

  1. Bug升级记

    2023-12-31 19:48:02       64 阅读

  2. CF1914C Quests

    2023-12-31 19:48:02       52 阅读

  5. C++/Qt版酒店客房管理系统代码详解——入住管理模块

    2023-12-31 19:48:02       54 阅读

  15. Crow：run的流程2 建立io_service及线程

    2023-12-31 19:48:02       60 阅读

  23. C语言K&R圣经笔记 4.10递归 4.11 C预处理

    2023-12-31 19:48:02       53 阅读

  26. 归并排序模板

    2023-12-31 19:48:02       50 阅读