博客
关于我
ACNE04 读数据的过程
阅读量:798 次
发布时间:2023-04-17

本文共 1520 字,大约阅读时间需要 5 分钟。

交叉验证设置

通过交叉验证来评估模型性能,分别设置5个验证指标为'0','1','2','3','4'。对于每个验证指标,执行以下操作:

for cross_val_index in cross_val_lists:    log.write('\n\ncross_val_index: ' + cross_val_index + '\n\n')    if True:        trainval_test(cross_val_index, sigma=30 * 0.1, lam=6 * 0.1)

数据集文件路径

训练集和测试集的文件路径分别为:

TRAIN_FILE = './Classification/NNEW_trainval_' + cross_val_index + '.txt'TEST_FILE = './Classification/NNEW_test_' + cross_val_index + '.txt'

数据集处理

对训练集和测试集分别进行数据增强处理,训练集采用随机裁剪、水平翻转等变换,测试集则仅进行缩放和标准化处理。

dset_train = dataset_processing.DatasetProcessing(    DATA_PATH, TRAIN_FILE, transform=transforms.Compose([        transforms.Scale((256, 256)),        transforms.RandomCrop(224),        transforms.RandomHorizontalFlip(),        transforms.ToTensor(),        RandomRotate(rotation_range=20),        normalize,    ]))dset_test = dataset_processing.DatasetProcessing(    DATA_PATH, TEST_FILE, transform=transforms.Compose([        transforms.Scale((224, 224)),        transforms.ToTensor(),        normalize,    ]))

批量数据加载

使用DataLoader封装训练集和测试集,分别设置不同的批次大小,训练集采用随机洗牌,测试集则不洗牌。

train_loader = DataLoader(dset_train,                          batch_size=BATCH_SIZE,                          shuffle=True,                          num_workers=NUM_WORKERS,                          pin_memory=False)test_loader = DataLoader(dset_test,                         batch_size=BATCH_SIZE_TEST,                         shuffle=False,                         num_workers=NUM_WORKERS,                         pin_memory=False)

训练流程

每个epoch遍历所有批次,完成一次完整的训练循环。

转载地址:http://nvgfk.baihongyu.com/

你可能感兴趣的文章
MySQL中的GROUP_CONCAT()函数详解与实战应用
查看>>
MySQL中的IO问题分析与优化
查看>>
MySQL中的ON DUPLICATE KEY UPDATE详解与应用
查看>>
mysql中的rbs,SharePoint RBS:即使启用了RBS,内容数据库也在不断增长
查看>>
mysql中的undo log、redo log 、binlog大致概要
查看>>
Mysql中的using
查看>>
MySQL中的关键字深入比较:UNION vs UNION ALL
查看>>
mysql中的四大运算符种类汇总20多项,用了三天三夜来整理的,还不赶快收藏
查看>>
mysql中的字段如何选择合适的数据类型呢?
查看>>
MySQL中的字符集陷阱:为何避免使用UTF-8
查看>>
mysql中的数据导入与导出
查看>>
MySQL中的时间函数
查看>>
mysql中的约束
查看>>
MySQL中的表是什么?
查看>>
mysql中穿件函数时候delimiter的用法
查看>>
Mysql中索引的分类、增删改查与存储引擎对应关系
查看>>
Mysql中索引的最左前缀原则图文剖析(全)
查看>>
MySql中给视图添加注释怎么添加_默认不支持_可以这样取巧---MySql工作笔记002
查看>>
Mysql中获取所有表名以及表名带时间字符串使用BetweenAnd筛选区间范围
查看>>
Mysql中视图的使用以及常见运算符的使用示例和优先级
查看>>