目录

1.参数与超参数

2.深度学习是一个基于实验的高度迭代过程

1.参数与超参数
  • 普通参数：W, b
  • 超参数(Hyperparameter)：
    已学：学习率α，迭代次数，隐藏层层数L，每层神经元数，激活函数选择。
    其他超参数：动量，最小批大小，正则化参数。
2.深度学习是一个基于实验的高度迭代过程
  • 图示
  • 基于实验：指的是不断尝试找到最优参数
  • 不同领域问题的参数通常不同
  • 由于硬件不断发展，现在最优的参数，以后可能就不是最优了
# 深度学习 # 神经网络
Logo
DAMO开发者矩阵

DAMO开发者矩阵，由阿里巴巴达摩院和中国互联网协会联合发起，致力于探讨最前沿的技术趋势与应用成果，搭建高质量的交流与分享平台，推动技术创新与产业应用链接，围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐

cover

同样是“8+2”交换机，凭什么它能扛60℃高温，还能省电30%？

avatar DAMO开发者矩阵
cover

AI硬件涨疯了，虚拟仿真学具身智能“真香”了

avatar DAMO开发者矩阵

Android GMSL camera 调试指南

在车载摄像头、机器人及高带宽远程传输场景中，普通的 MIPI-CSI 接口传输距离极短（通常不超 10cm）。GMSL是美信（Maxim/Analog Devices）推出的一种高速串行/解串器（SerDes）技术。摄像头端（Sensor） $\rightarrow$串行器（Serializer，如 MAX96717）$\rightarrow$ 同轴电缆/双绞线（长达 15 米） $\righta

avatar DAMO开发者矩阵