HALCON 20.11:深度学习笔记(3)

HALCON 20.11:深度学习笔记(3)---Data(数据)

HALCON 20.11.0.0中,实现了深度学习方法。其中,关于术语“数据”的介绍如下:

术语“数据”是在深度学习的背景下使用的图像和信息。

最后的信息必须以网络可以理解的方式提供。

毫不奇怪,不同的DL方法对于必须提供什么信息以及如何提供这些信息有自己的要求。具体要求见相应章节。

网络对图像的尺寸、灰度值范围和类型提出了进一步要求。具体的值取决于网络本身,可以用函数get_dl_model_param查询。

此外,根据方法的不同,对图像信息也有要求,如包围框。为了满足所有这些需求,可能必须对数据进行预处理,这可以通过相应的过程preprocess_dl_samples来最方便地完成。

当你训练你的网络时,网络就会适应它的任务。但在某一时刻,你会想要评估网络所学到的东西,在更晚的时候,你会想要测试网络。

因此,数据集将被分为三个子集,它们应该是独立的和具有相同的分布。

简单地说,子集之间不应该以任何方式连接,每个集合包含每个类相同的图像分布。这种分割可以由函数split_dl_dataset过程方便地完成。

显然最大的子集将用于训练,我们将此数据集称为训练数据集

在某一点上,评估网络的性能,以检查是否有利于继续进行网络优化。对于这种验证,使用的是第二组数据,即验证数据集

即使验证数据集与第一个数据集不相交,也会对网络优化产生影响。因此,为了测试模型在现实世界中部署时可能的预测,使用了第三个数据集,即测试数据集

对于具有代表性的网络验证或评估,验证数据集和测试数据集应该具有统计上相关的数据,这给出了所需数据量的一个下界。

还要注意的是,为了训练网络,你最好使用具有代表性的图像,也就是那些你想要稍后处理的图像,而不仅仅是“完美”的图像,否则网络在处理非“完美”的图像时可能会有困难。

(0)

相关推荐

  • 3D点云的深度学习

    使用卷积神经网络(CNN)架构的深度学习(DL)现在是解决图像分类任务的标准解决方法.但是将此用于处理3D数据时,问题变得更加复杂.首先,可以使用各种结构来表示3D数据,所述结构包括: 1  体素网格 ...

  • Proceedings of the IEEE:医学影像深度学习(下)

    深度学习(DL)已被广泛用于各种医学成像任务,并在许多医学成像应用中取得了显著成功,从而将我们带入了所谓的人工智能(AI)时代.但人工智能的成功主要归功于单任务标记大数据的可用性以及高性能计算的发展. ...

  • HALCON 20.11:深度学习笔记(10)

    HALCON 20.11.0.0中,实现了深度学习方法. 本章解释了如何在训练和推理阶段使用基于深度学习的分类. 基于深度学习的分类是一种对一幅图像分配一组置信值的方法.这些置信度值表明图像属于每个可 ...

  • HALCON 20.11:深度学习笔记(12)

    HALCON 20.11.0.0中,实现了深度学习方法. 本章解释了如何使用基于深度学习的语义分割,包括训练和推理阶段. 通过语义分割,我们使用深度学习(DL)网络将输入图像的每个像素分配到一个类. ...

  • HALCON 20.11:深度学习笔记(11)

    HALCON 20.11.0.0中,实现了深度学习方法. 本章讲解了如何使用基于深度学习的对象检测. 通过对象检测,我们希望在图像中找到不同的实例,并将它们分配给一个类.实例可以部分重叠,但仍然可以区 ...

  • HALCON 20.11:深度学习笔记(9)

    HALCON 20.11.0.0中,实现了深度学习方法. 本章解释了如何使用基于深度学习的异常检测. 通过异常检测,我们想要检测图像是否包含异常.异常指的是偏离常规的.未知的东西. 异常检测的例子:输 ...

  • HALCON 20.11:深度学习笔记(8)

    HALCON 20.11.0.0中,实现了深度学习方法. 本章解释HALCON中深度学习(DL)模型的一般概念和数据处理. 从概念上讲,HALCON中的深度学习模型是深度神经网络的内部表示. 每个深度 ...

  • HALCON 20.11:深度学习笔记(7)

    HALCON 20.11.0.0中,实现了深度学习方法.下面,我们将描述深度学习环境中使用的最重要的术语: anchor (锚) Anchors are fixed bounding boxes. T ...

  • HALCON 20.11:深度学习笔记(6)

    HALCON 20.11.0.0中,实现了深度学习方法.不同的DL方法有不同的结果.相应地,它们也使用不同的测量方法来确定网络的"好坏".在训练一个网络时,不同的模型会有不同的行为 ...

  • HALCON 20.11:深度学习笔记(5)

    HALCON 20.11.0.0中,实现了深度学习方法.关于超参数的有关设置内容如下: 不同的DL方法被设计用于不同的任务,它们的构建方式也会有所不同.它们都有一个共同点,即在模型的训练过程中都面临着 ...

  • HALCON 20.11:深度学习笔记(4)

    HALCON 20.11.0.0中,实现了深度学习方法.关于网络和训练过程如下: 在深度学习中,任务是通过网络发送输入图像来执行的.整个网络的输出由许多预测组成.例如,对于一个分类任务,预测得到的每个 ...