data.DataLoader详解

部署运行你感兴趣的模型镜像

data.DataLoader 是 PyTorch 中的一个工具,用于从给定的数据集中加载数据,实现批量化的训练。它是在训练神经网络时常用的一个组件,能够方便地迭代数据集并生成小批量数据。

下面是一个简单的例子,演示如何使用 DataLoader

import torch
from torch.utils.data import DataLoader, TensorDataset

# 假设有特征张量 features 和标签张量 labels
features = torch.tensor([[1.0, 2.0], [3.0, 4.0], [5.0, 6.0]])
labels = torch.tensor([0, 1, 0])

# 使用 TensorDataset 创建数据集
dataset = TensorDataset(features, labels)

# 使用 DataLoader 加载数据集
batch_size = 2
data_loader = DataLoader(dataset, batch_size=batch_size, shuffle=True)

# 迭代数据集中的小批量数据
for batch in data_loader:
    batch_features, batch_labels = batch
    print("Batch Features:", batch_features)
    print("Batch Labels:", batch_labels)

在这个例子中,DataLoaderTensorDataset 中的数据按照指定的批量大小 (batch_size) 进行加载。shuffle=True 表示在每个 epoch 开始时打乱数据,以增加模型的泛化能力。通过迭代 data_loader,你可以逐批次地获取数据用于训练。

这种批量加载的方式对于大规模数据集和复杂模型的训练是非常有效的。

您可能感兴趣的与本文相关的镜像

PyTorch 2.7

PyTorch 2.7

PyTorch
Cuda

PyTorch 是一个开源的 Python 机器学习库,基于 Torch 库,底层由 C++ 实现,应用于人工智能领域,如计算机视觉和自然语言处理

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值