在深度学习方法中结合临床和图像数据的最佳方法是什么？

Question

我有来自患者的CT图像,并将CNN应用于这些图像以预测疾病.我想将我的临床数据与CNN方法中的图像数据结合起来,这可能吗？我的临床数据包含年龄,性别,日期,吸烟者等信息,所有这些信息都是数字,例如吸烟者为1,非吸烟者为0.

Answer 1

例如,看一下这篇论文,它们将CNN的特征与文本数据结合起来.在那篇论文中,CNN已经过预先训练(即,CNN本质上是一个特征),但你可以一口气清楚地学习.这个想法总是如此

• 通过卷积/子采样层在输入中运行图像
• 在最终的完全连接(决策)层之前,连接您可用的其他功能
• 将所有(预处理的图像和其他特征)输入决策层.

所以答案是"肯定,肯定",细节取决于您使用的框架.