Google Health推出一个AR显微镜(ARM)系统,现在能够提供医生癌症的即时检测和诊断,在检测乳腺癌和前列腺癌的测试上获得相当高的准确,对未来尽早发现癌症将有极大帮助。
据了解,这套设备主要由3个部分组成:一台标准显微镜、一个镜头和一台搭载AI软件及Nvidia Titan Xp GPU(加速运算)的计算机。相机会连续拍摄放在显微镜下的身体组织,并将这些图片发送到计算机上进行分析。
随后计算机中的卷积神经网络(CNN)便会即时产出细胞热图(heatmap),标记出良性和异常的区域供医生检查。
使用乳腺细胞和前列腺细胞样本的检测测试中,ARM都拿到相当高的分数,在近期刊载于《自然》(Nature)的论文中,团队详细描述了显微镜系统的细节。
为了捕捉细胞级别的细节,系统在实验中面对的图片尺寸为5,120×5,120像素,远比现在一般深度学习算法所面对的300×300要大得多,但其实光是后者的图片就需要数百万个参数进行数十亿次浮点运算才能处理。
面对这些更大的图片,Google使用基于Inception V3架构的神经网络会将图片分解小部分单独分析,通过花耗时间训练检测,系统现在已经能够即时性的完成工作——不是数小时或数天,也只有这样对医生来说才有实质的帮助。
不仅能即时提供热图,ARM也比传统的类似扫描仪器还要便宜许多,研究人员认为,虽然ARM目前只是用来研究癌症,但他相信这对在其他应用也有相当帮助。
“除了诊所之外,ARM还可以通过利用反向图片搜索作为教学工具,帮助学员快速搜索参考来源提供问题解答,更有经验的医生则可以便用ARM进行临床研究。”
(首图来源:pixabay)
领取专属 10元无门槛券
私享最新 技术干货