Advertisement

2024年最新一文实现nnUNet v2 分割肾脏肿瘤数据集KiTS19_kits19数据集,2024年最新2024大厂面试合集

阅读量:

img
img

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化资料的朋友,可以戳这里获取

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

下载百度飞桨的公共数据集 – Kits19肾脏肿瘤分割 - 飞桨AI Studio (baidu.com)")

2、数据集结构化处理

在下载好数据以后,对数据进行处理。首先,先新建几个文件夹。

在nnUNet文件夹下,新建dataset。

然后在dataset中,新建四个文件夹如下图所示,其中后三个用来存储nnunet数据和结果。dataset_conversion用来存储过程代码。

在nnUNet_raw文件中,新建文件夹Dataset040_KiTS。注意此处必须为Dataset,因为nnunetV1版本是task,v2改为了Dataset。然后在其中存放结构化处理后的数据。

然后在dataset_conversion文件中,新建一个py文件,用来生成对KiTS数据集做出描述的json文件dataset。(此处我还将其命名为Dataset040_KiTS)

代码内容如下:(此处参考博客nnUnet肾脏肿瘤分割实战(KiTS19)_宁远x的博客-博客_宁远x的博客-博客"),并做了一些改动)

复制代码
    import os
    import json
    import shutil
    
    
    def save_json(obj, file, indent=4, sort_keys=True):
    with open(file, 'w') as f:
        json.dump(obj, f, sort_keys=sort_keys, indent=indent)
    
    
    def maybe_mkdir_p(directory):
    directory = os.path.abspath(directory)
    splits = directory.split("/")[1:]
    for i in range(0, len(splits)):
        if not os.path.isdir(os.path.join("/", *splits[:i + 1])):
            try:
                os.mkdir(os.path.join("/", *splits[:i + 1]))
            except FileExistsError:
                # this can sometimes happen when two jobs try to create the same directory at the same time,
                # especially on network drives.
                print("WARNING: Folder %s already existed and does not need to be created" % directory)
    
    
    def subdirs(folder, join=True, prefix=None, suffix=None, sort=True):
    if join:
        l = os.path.join
    else:
        l = lambda x, y: y
    res = [l(folder, i) for i in os.listdir(folder) if os.path.isdir(os.path.join(folder, i))
           and (prefix is None or i.startswith(prefix))
           and (suffix is None or i.endswith(suffix))]
    if sort:
        res.sort()
    return res
    
    
    base = "/root/data/wt/data/KiTS19/origin"  # 原始数据集路径
    out = "/root/data/wt/nnUNet/dataset/nnUNet_raw/Dataset040_KiTS"  # 结构化数据集目录
    cases = subdirs(base, join=False)
    
    maybe_mkdir_p(out)
    maybe_mkdir_p(os.path.join(out, "imagesTr"))
    maybe_mkdir_p(os.path.join(out, "imagesTs"))
    maybe_mkdir_p(os.path.join(out, "labelsTr"))
    
    for c in cases:
    case_id = int(c.split("_")[-1])
    if case_id < 210:
        shutil.copy(os.path.join(base, c, "imaging.nii.gz"), os.path.join(out, "imagesTr", c + "_0000.nii.gz"))
        shutil.copy(os.path.join(base, c, "segmentation.nii.gz"), os.path.join(out, "labelsTr", c + ".nii.gz"))
    else:
        shutil.copy(os.path.join(base, c, "imaging.nii.gz"), os.path.join(out, "imagesTs", c + "_0000.nii.gz"))
    
    json_dict = {}
    """
    name: 数据集名字
    dexcription: 对数据集的描述
    modality: 模态,0表示CT数据,1表示MR数据。nnU-Net会根据不同模态进行不同的预处理(nnunet-v2版本改为channel_names)
    labels: label中,不同的数值代表的类别(v1版本和v2版本的键值对刚好是反过来的)
    file_ending: nnunet v2新加的
    numTraining: 训练集数量
    numTest: 测试集数量
    training: 训练集的image 和 label 地址对
    test: 只包含测试集的image. 这里跟Training不一样
    """
    json_dict['name'] = "KiTS"  
    json_dict['description'] = "kidney and kidney tumor segmentation"
    json_dict['tensorImageSize'] = "4D"
    json_dict['reference'] = "KiTS data for nnunet"
    json_dict['licence'] = ""
    json_dict['release'] = "0.0"
    
    json_dict['channel_names'] = {
    "0": "CT",
    }
    json_dict['labels'] = {
    "background": "0",
    "Kidney": "1",
    "Tumor": "2"
    }
    json_dict['numTraining'] = len(cases)  # 应该是210例
    json_dict['file_ending'] = ".nii.gz"
    json_dict['numTest'] = 0
    json_dict['training'] = [{'image': "./imagesTr/%s.nii.gz" % i, "label": "./labelsTr/%s.nii.gz" % i} for i in cases]
    #json_dict['test'] = []
    save_json(json_dict, os.path.join(out, "dataset.json"))
    
    
    
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
    

结构化处理的结果是在nnUNet_raw/Dataset040_KiTS文件下,生成四个文件。

分别是,训练数据(应该是210条),测试数据(90),训练标签(210),数据说明。



3、设置数据路径

命令行,确保在nnunet激活环境下,输入vim ~/.bashrc,然后点击键盘insert开始插入,在bashrc文末,添加如下三行代码。然后按Esc键,输入:wq,就可以保存退出。

复制代码
![img]()
![img]()
![img]()
    
    **既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!** **由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新** **[需要这份系统化资料的朋友,可以戳这里获取]()**
    
    上大数据知识点,真正体系化!** **由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新** **[需要这份系统化资料的朋友,可以戳这里获取]()**
    
    
    
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
      
    

全部评论 (0)

还没有任何评论哟~