pytorch升级打怪(四)

数据加工(转变数据)

transforms

数据并不总是以训练机器学习算法所需的最终处理形式出现。我们使用转换来对数据进行一些操作,并使其适合训练。

所有TorchVision数据集都有两个参数-transform用于修改功能和target_transform用于修改标签-接受包含转换逻辑的可调用。torchvision.transforms模块提供了几个常用的开箱即用的转换。

FashionMNIST功能采用PIL图像格式,标签为整数。为了训练,我们需要作为归一化张量的特征,以及作为单热编码张量的标签。为了进行这些转换,我们使用ToTensor和Lambda。


import torch
from torchvision import datasets
from torchvision.transforms import ToTensor, Lambda

ds = datasets.FashionMNIST(
    root="data",
    train=True,
    download=True,
    transform=ToTensor(),
    target_transform=Lambda(lambda y: torch.zeros(10, dtype=torch.float).scatter_(0, torch.tensor(y), value=1))
)

ToTensor

ToTensor将PIL图像或NumPy ndarray转换为FloatTensor。并在[0.,1.]范围内缩放图像的像素强度值。

转换和增强图像

Torchvision支持torchvision.transforms和torchvision.transforms.v2模块中的常见计算机视觉转换。转换可用于转换或增强数据,以训练或推断不同任务(图像分类、检测、分割、视频分类)。


# Image Classification
import torch
from torchvision.transforms import v2

H, W = 32, 32
img = torch.randint(0, 256, size=(3, H, W), dtype=torch.uint8)

transforms = v2.Compose([
    v2.RandomResizedCrop(size=(224, 224), antialias=True),
    v2.RandomHorizontalFlip(p=0.5),
    v2.ToDtype(torch.float32, scale=True),
    v2.Normalize(mean=[0.485, 0.456, 0.406], std=[0.229, 0.224, 0.225]),
])
img = transforms(img)

# Detection (re-using imports and transforms from above)
from torchvision import tv_tensors

img = torch.randint(0, 256, size=(3, H, W), dtype=torch.uint8)
boxes = torch.randint(0, H // 2, size=(3, 4))
boxes[:, 2:] += boxes[:, :2]
boxes = tv_tensors.BoundingBoxes(boxes, format="XYXY", canvas_size=(H, W))

# The same transforms can be used!
img, boxes = transforms(img, boxes)
# And you can pass arbitrary input structures
output_dict = transforms({"image": img, "boxes": boxes})

Lambda变换

Lambda变换应用任何用户定义的lambda函数。在这里,我们定义了一个函数,将整数转换为单热编码张量。它首先创建一个大小为10的零张量(我们数据集中的标签数量),并调用scatter_,在标签y给出的索引上分配一个value=1。


target_transform = Lambda(lambda y: torch.zeros(
    10, dtype=torch.float).scatter_(dim=0, index=torch.tensor(y), value=1))

相关推荐

  1. pytorch升级

    2024-03-19 20:14:03       21 阅读
  2. pytorch升级(一)

    2024-03-19 20:14:03       22 阅读
  3. pytorch升级(二)

    2024-03-19 20:14:03       17 阅读
  4. pytorch升级(八)

    2024-03-19 20:14:03       19 阅读
  5. pytorch升级(七)

    2024-03-19 20:14:03       19 阅读
  6. pytorch升级(五)

    2024-03-19 20:14:03       19 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-03-19 20:14:03       16 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-03-19 20:14:03       16 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-03-19 20:14:03       15 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-03-19 20:14:03       18 阅读

热门阅读

  1. Uni App中去掉访问路径中的#

    2024-03-19 20:14:03       21 阅读
  2. C++day6

    C++day6

    2024-03-19 20:14:03      20 阅读
  3. JDK发布信息、历史及未来规划

    2024-03-19 20:14:03       22 阅读
  4. azure databricks 常用的JDBC连接

    2024-03-19 20:14:03       20 阅读
  5. C++/C#/QT 绝对路径和相对路径设置

    2024-03-19 20:14:03       21 阅读
  6. 2024.3.19每日一题

    2024-03-19 20:14:03       22 阅读
  7. Linux重命名文件有几种方法

    2024-03-19 20:14:03       22 阅读
  8. python线程的使用和介绍

    2024-03-19 20:14:03       20 阅读
  9. Vue箭头函数还原为匿名函数示例

    2024-03-19 20:14:03       23 阅读
  10. 24.1 SpringCloud电商实战一刷

    2024-03-19 20:14:03       18 阅读
  11. @Builder用法

    2024-03-19 20:14:03       20 阅读