动手学深度学习（pytorch）学习记录12-激活函数[学习记录]

激活函数

激活函数（activation function）通过计算加权和并加上偏置来确定神经元是否应该被激活， 它们将输入信号转换为输出的可微运算。

import torch  
import matplotlib.pyplot as plt 

简单定义一个画图的函数

def graph_drawing(x_,y_,label_=None): 
    plt.figure(figsize=(5, 2.5))  # 设置图形窗口的大小
    if label_ is None:
        plt.plot(x_, y_)
    else:
        plt.plot(x_, y_, label = label_)
        # plt.plot()里不要marker='x'更好看
        plt.legend()  # 显示图例      
    plt.show()

创建数据

# 创建 x 数据，并设置 requires_grad=True  
x