deep-learning - 是否可以使用 PyTorch Lightning Bolts 在实例分割任务上微调 SimCLR？

Question

我有一个高分辨率无人机图像数据集，我已将其拆分为大小为 512x512 的图块。瓷砖将通过描绘特定类型的植被进行注释，并以 COCO 格式存储。我想使用自我监督学习来进行瓷砖中的实例分割。Pytorch Lightning bolts 模块提供了已经预训练的自我监督模型，例如 SimCLR。根据bolts 模块文档，应该可以使用 bolts 在任何计算机视觉任务上微调 SimCLR，例如实例分割。

然而，我发现的唯一示例显示了 SimCLR 如何在分类任务上进行微调。如何在实例分割任务上微调 SimCLR（或另一个自监督模型）？

Answer 1

我认为是的，您可以使用 SimCLR 作为特征提取器和深度模型，基于从 SimCLR 获得的数据表示（而不是正常情况下的数据）进行实例分割。