1 Star 1 Fork 0

Mae/grad

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
文件
该仓库未声明开源许可证文件(LICENSE),使用请关注具体项目描述及其代码上游依赖。
克隆/下载
aliyun_test.py 839 Bytes
一键复制 编辑 原始数据 按行查看 历史
Mae 提交于 2022-04-07 01:34 . 梯度下降
import torch
# 首先我们得有训练样本X,Y, 这里我们随机生成
x = torch.rand(20, 1) * 10
y = 2 * x + (5 + torch.randn(20, 1))
# print(x)
# print(y)
# 构建线性回归函数的参数
w = torch.randn(1, requires_grad=True)
b = torch.zeros(1, requires_grad=True) # 这俩都需要求梯度
# 设置学习率lr为0.1
lr = 0.1
for iteration in range(10):
# 前向传播
wx = torch.mul(w, x)
y_pred = torch.add(wx, b)
print(wx)
print(y_pred)
# 计算loss
loss = (0.5 * (y - y_pred) ** 2).mean()
# 反向传播
loss.backward()
# 更新参数
b.data.sub_(lr * b.grad) # 这种_的加法操作时从自身减,相当于-=
w.data.sub_(lr * w.grad)
# 梯度清零
w.grad.data.zero_()
b.grad.data.zero_()
print(w.data, b.data)
Loading...
马建仓 AI 助手
尝试更多
代码解读
代码找茬
代码优化
Python
1
https://gitee.com/mae123456/grad.git
[email protected]:mae123456/grad.git
mae123456
grad
grad
master

搜索帮助