[PyTorch][chapter 7][李宏毅深度学习][深度学习简介]

前言:

        深度学习常用的开发平台

TensorFlow

torch

theano

caffe

DSSTNE

mxnet

libdnn

CNTK

 目录:

     1: 深度学习发展历史

     2: DeepLearning 工程简介

     3: DNN 简介

        


一 发展历史


二 DeepLearning 工程简介

      深度学习三大步:

   

  定义映射函数(神经网络)
  定义损失函数
  通过梯度更新,选择最好的映射函数

       

   2.1 Neural Network

        给定了一个函数,可以设置不同的参数,所以对应为

一个函数集合

    z^{l+1}=X^{l}w^{l}+b^{l}

    a^{l+1}=\sigma(z^{l+1})

   不同模型在图像识别上面的错误率,


三 DNN

    深度神经网络(Deep Neural Networks, 以下简称DNN)是深度学习的基础,这里面结合

手写数字的例子简单的介绍一下

   3.1 模型

         

  可以分为三部分:

      输入层,隐藏层,输出层

   3.2 损失函数

       L(y,\hat{y})=-\sum_{i}^{10}\hat{y_i}log y_i

  3.3 Graident Descent

      通过Backpropagation(反向传播算法)更新梯度,Backpropagation 后面会单独介绍

参考:

6: Brief Introduction of Deep Learning_哔哩哔哩_bilibili

相关推荐

最近更新

  1. TCP协议是安全的吗?

    2023-12-15 05:32:02       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2023-12-15 05:32:02       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2023-12-15 05:32:02       19 阅读
  4. 通过文章id递归查询所有评论(xml)

    2023-12-15 05:32:02       20 阅读

热门阅读

  1. 小区生活污水处理设备生产厂家讲解

    2023-12-15 05:32:02       39 阅读
  2. 量子技术将如何重构我们的生活

    2023-12-15 05:32:02       43 阅读
  3. DPDK多进程之间的通信

    2023-12-15 05:32:02       46 阅读
  4. 人脸检测算法

    2023-12-15 05:32:02       32 阅读
  5. 第一次使用ThreadPoolExecutor处理业务

    2023-12-15 05:32:02       33 阅读
  6. MATLAB 2018一本通 学习笔记一

    2023-12-15 05:32:02       39 阅读