文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

怎么使用pytorch准备自己的图片数据

2023-07-02 13:47

关注

本篇内容主要讲解“怎么使用pytorch准备自己的图片数据”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么使用pytorch准备自己的图片数据”吧!

正文

图片数据一般有两种情况:

所有图片放在一个文件夹内,另外有一个txt文件显示标签。

不同类别的图片放在不同的文件夹内,文件夹就是图片的类别。

针对这两种不同的情况,数据集的准备也不相同,第一种情况可以自定义一个Dataset,第二种情况直接调用torchvision.datasets.ImageFolder来处理。下面分别进行说明:

一、所有图片放在一个文件夹内

这里以mnist数据集的10000个test为例, 我先把test集的10000个图片保存出来,并生着对应的txt标签文件。

先在当前目录创建一个空文件夹mnist_test, 用于保存10000张图片,接着运行代码:

import torchimport torchvisionimport matplotlib.pyplot as pltfrom skimage import iomnist_test= torchvision.datasets.MNIST(    './mnist', train=False, download=True)print('test set:', len(mnist_test))f=open('mnist_test.txt','w')for i,(img,label) in enumerate(mnist_test):    img_path="./mnist_test/"+str(i)+".jpg"    io.imsave(img_path,img)    f.write(img_path+' '+str(label)+'\n')f.close()

经过上面的操作,10000张图片就保存在mnist_test文件夹里了,并在当前目录下生成了一个mnist_test.txt的文件,大致如下:

怎么使用pytorch准备自己的图片数据

前期工作就装备好了,接着就进入正题了:

from torchvision import transforms, utilsfrom torch.utils.data import Dataset, DataLoaderimport matplotlib.pyplot as pltfrom PIL import Imagedef default_loader(path):    return Image.open(path).convert('RGB')class MyDataset(Dataset):    def __init__(self, txt, transform=None, target_transform=None, loader=default_loader):        fh = open(txt, 'r')        imgs = []        for line in fh:            line = line.strip('\n')            line = line.rstrip()            words = line.split()            imgs.append((words[0],int(words[1])))        self.imgs = imgs        self.transform = transform        self.target_transform = target_transform        self.loader = loader    def __getitem__(self, index):        fn, label = self.imgs[index]        img = self.loader(fn)        if self.transform is not None:            img = self.transform(img)        return img,label    def __len__(self):        return len(self.imgs)train_data=MyDataset(txt='mnist_test.txt', transform=transforms.ToTensor())data_loader = DataLoader(train_data, batch_size=100,shuffle=True)print(len(data_loader))def show_batch(imgs):    grid = utils.make_grid(imgs)    plt.imshow(grid.numpy().transpose((1, 2, 0)))    plt.title('Batch from dataloader')for i, (batch_x, batch_y) in enumerate(data_loader):    if(i<4):        print(i, batch_x.size(),batch_y.size())        show_batch(batch_x)        plt.axis('off')        plt.show()

自定义了一个MyDataset, 继承自torch.utils.data.Dataset。然后利用torch.utils.data.DataLoader将整个数据集分成多个批次。

二、不同类别的图片放在不同的文件夹内

同样先准备数据,这里以flowers数据集为例

提取 链接: https://pan.baidu.com/s/1dcAsOOZpUfWNYR77JGXPHA?pwd=mwg6 

花总共有五类,分别放在5个文件夹下。大致如下图:

怎么使用pytorch准备自己的图片数据

我的路径是d:/flowers/.

数据准备好了,就开始准备Dataset吧,这里直接调用torchvision里面的ImageFolder

import torchimport torchvisionfrom torchvision import transforms, utilsimport matplotlib.pyplot as pltimg_data = torchvision.datasets.ImageFolder('D:/bnu/database/flower',                                            transform=transforms.Compose([                                                transforms.Scale(256),                                                transforms.CenterCrop(224),                                                transforms.ToTensor()])                                            )print(len(img_data))data_loader = torch.utils.data.DataLoader(img_data, batch_size=20,shuffle=True)print(len(data_loader))def show_batch(imgs):    grid = utils.make_grid(imgs,nrow=5)    plt.imshow(grid.numpy().transpose((1, 2, 0)))    plt.title('Batch from dataloader')for i, (batch_x, batch_y) in enumerate(data_loader):    if(i<4):        print(i, batch_x.size(), batch_y.size())        show_batch(batch_x)        plt.axis('off')        plt.show()

到此,相信大家对“怎么使用pytorch准备自己的图片数据”有了更深的了解,不妨来实际操作一番吧!这里是编程网网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯