欢迎访问昆山医疗器械高新技术产业园官网!
您现在的位置: 首页>新闻中心>肠息肉辅助诊断软件临床试验设计思考
肠息肉辅助诊断软件临床试验设计思考
发布时间:2022/7/19 14:33:58

肠息肉辅助诊断软件临床试验设计思考


肠息肉辅助诊断软件(以下简称肠息肉AI)是一类利用深度学习算法,在内镜检查过程中同步、实时识别结直肠息肉的辅助诊断软件。肠息肉AI可有效提高内镜医师在结肠镜检查中息肉的检出率,相当于医生的“第三只眼”,有利于达到结直肠癌早发现、早治疗的目的,尤其适用于基层医疗机构以及经验相对不足的内镜医生。目前,肠息肉AI产品的临床试验设计是深度学习辅助诊断软件研究的热点之一。


兼顾准确度与优效性

从检测对象来看,肠息肉AI是对目标疾病的病变病灶进行辅助检测的产品。根据国家药监局医疗器械技术审评中心于2019年7月发布的《深度学习辅助决策医疗器械软件审评要点》以及于今年5月发布的一则题为《基于深度学习的计算机辅助决策产品临床试验设计类型如何考虑》的共性问题解答,对于此类产品的临床试验,建议采用对照设计,试验组为医师与申报产品共同检测,对照组则为传统检测诊断方法(如临床医师的阅片/综合诊断)。对于主要评价指标,应考虑诊断准确度指标,同时,为体现产品的临床价值,应采用优效性检验。因此,肠息肉AI的临床试验应采用“AI+人>人”的试验设计。

与常规病灶辅助检测的产品不同,肠息肉AI为实时检测诊断产品,用于电子结肠镜检查过程中结直肠息肉的实时识别。患者在电子结肠镜检查过程中,结直肠息肉,尤其是可疑的腺瘤性息肉,往往会被内镜医师摘除,患者的疾病状态在检查过程中会不断发生变化,因此,肠息肉AI无法像传统病灶辅助检测产品一样采用严格意义上的配对诊断试验设计,而一般以平行对照设计为主,并在试验过程中对研究者联合申报产品的病灶诊断水平进行评价,分析其是否优于传统结肠镜检查的诊断水平。

两类临床试验设计各有利弊

从目前已有的文献报告及产品申报情况来看,肠息肉AI产品的临床试验设计主要分为两种:传统平行对照和平行序贯对照。其中,传统平行对照设计以研究者联合申报产品进行结肠镜检查作为试验组,传统结肠镜检查作为对照组,主要评价指标一般为息肉检出率或腺瘤检出率,以评价试验组的息肉/腺瘤检出率在统计学意义上优于对照组,从而体现产品的临床价值。传统平行对照对每例受试者仅进行1次电子结肠镜检查,受试者依从性往往较高,且试验操作与临床实际诊疗流程基本相符,研究者的接受程度也较高,因此,传统平行对照是目前大部分文献以及产品申报的主流试验设计方式之一。

尽管传统平行对照试验的可操作性较好,但在产品评价上存在一些难以避免的固有偏倚。例如,传统平行对照设计的主要评价指标一般为息肉(或腺瘤)检出率,而检出率往往受发病率及研究者诊疗水平的影响较大。虽然试验设计可引入分层区组随机,以尽量使试验组及对照组的发病率趋于相同,但组间研究者经验水平差异带来的试验偏倚将无法避免。因此,传统平行对照设计得出的优效性结果可能带有研究者经验水平的混杂因素,且试验结果可能存在较为显著的中心效应。另外,大样本临床试验及荟萃分析均显示,我国目前通过传统电子结肠镜检查的息肉(或腺瘤)检出率依然偏低,远达不到临床指南的推荐水平,因此,采用传统平行对照设计的样本量往往较大,一般在800例左右。

除了传统平行对照设计外,肠息肉AI产品的临床试验还可以采用平行序贯对照设计的试验方法。该类试验设计具体为同一研究者对同一受试者在使用AI与不使用AI的条件下分别进行2次电子结肠镜检查,且研究者是否使用AI进行检查的顺序随机。平行序贯对照设计的主要评价指标为息肉(或腺瘤)漏诊率。其中,漏诊率的定义为,研究者在第二次检查中新发现的息肉(或腺瘤)数目占前后两次检查发现的息肉(或腺瘤)总数的比例。由于漏诊率是研究者与自身在是否使用AI的情景下对比获得,故平行序贯对照设计可有效避免研究者诊疗水平造成的偏倚。除此以外,平行序贯对照设计还可按照受试者的就诊原因进行组间分层,以使得不同就诊原因下患者的发病率差异在两组间趋于均衡,从而有效避免受试者发病率的偏倚。由此可见,平行序贯对照设计可较好地反映产品本身的诊断性能。

然而,平行序贯对照设计的主要难点在于受试者需要进行连续2次电子结肠镜检查,依从性可能较差。因此,研究者在采用平行序贯对照设计时,建议在全麻状态下对受试者进行电子结肠镜检查,以改善受试者的检查体验。值得注意的是,由于结直肠息肉在临床实践中不一定会被全部摘除或进行活检,试验设计还应考虑设立“金标准”阅片小组,以评价那些没有被摘除或活检但被“发现”的息肉的准确性。除此以外,在序贯设计中,由于两次结肠镜检查的部位和角度不可能完全相同,评价息肉漏诊时,可能还需要对比两次结肠镜检查所拍摄的位置是否完全一致,以更加准确评价息肉的漏诊情况。

总体来说,由于肠息肉AI的临床试验设计具有较大的特殊性,与常规病灶识别的辅助诊断产品具有较大的差别,其临床试验设计应从控制偏倚的角度入手,以充分体现产品的临床应用性能和价值。

 

来源:中国食品药品网

【声明】部分文章和信息来源于互联网,不代表本订阅号赞同其观点和对其真实性负责。如转载内容涉及版权等问题,请立即与我们联系,我们将迅速采取适当措施。