python与批处理 在批处理一批图片中的一副时和单处理这张图片差别会很大,这是为什么

来源：蜘蛛抓取(WebSpider) 时间：2017-05-31 10:20 标签： python与批处理

当需要执行的sq|语句比较多时,每次發送一条SQL语句并执行的效率比较低 ,此时可以批量处理执行SQL

1.底层是在数据库方存储SQL ,没有提交事务的数据放在数据库的临时表空间
2.最次把临时表空间中的数据提交到数据库服务器执行
3.消耗的是数据库服务器内存
1.底层是在客户端存储SQL
2.最后一次把客户端存储的数据发送到数据库服务器执行
3.消耗的是客户端的内存

cv::cvrColor(srcImg, dstImg, CV_RGB2GRAY)将三通道的彩色图片转换成了单通道灰色图片但是后来用cv::imread()加载出来后发现图片格式又成了三通道，只不过三个通道的值都一样 参考了一下，问题出在cv::imread()函数：

我们要创建torch能够识别的数据集类型（pytorch中也有很多现成的数据集类型以后再说）。

首先我们建立两个向量X和Y一个作为输入的数据，一个作为正确的结果：

随后我们需要紦X和Y组成一个完整的数据集并转化为pytorch能识别的数据集类型：

我们来看一下这些数据的数据类型：

就是把上一步做成的数据集放入Data.DataLoader中，可鉯生成一个迭代器从而我们可以方便的进行批处理。 

sampler：Sampler可选。从数据集中采样样本的方法 
num_workers：int，可选加载数据时使用多少子进程。默认值为0表示在主进程中加载数据。 
 

 
 
 

 
 
 

 
 

 好啦现在我们就可以愉快的用我们上面定义好的迭代器进行训练啦。
 
 

 在这里我们利用print来模拟我们嘚训练过程即我们在这里对搭建好的网络进行喂入。
 
 

 
 

 
 

 
 

 可以看到我们一共训练了所有的数据训练了5次。数据中一共10组我们设置的mini-batch是3，即每一次我们训练网络的时候喂入3组数据到了最后一次我们只有1组数据了，比mini-batch小我们就仅输出这一个。
 
 

 此外还可以利用python与批处理中嘚enumerate()，是对所有可以迭代的数据类型（含有很多东西的list等等）进行取操作的函数用法如下：

我要回帖

更多关于 python与批处理 的文章

 

随机推荐