• 资讯中心

    仪器快讯周刊380期

    仪器信息网APP

    资讯 专题
    搜索
    • 分享
    • 1
    • 扫码

      手机扫码阅读

    当前位置:首页 > 资讯中心 > 厂商

    胶囊机器人是如何完成深度学习与算法训练的?EinScan Pro 2X带你了解SLAM机器视觉

    仪器信息网 2020/08/14 10:30:12 点击 112 次

    一颗胶囊大小的胃肠道内窥镜机器人,被服下后,通过体外磁控的方式实现在消化道中的运动,途经食道、胃部、肠部,最后被人体排出。这个过程中,电脑可以同步显示胃肠道的相关检测数据,从而让医生有依据地完成诊断。

    (图片来源:2018 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS))

    听起来好像很简单,而实际上胶囊机器人在投入使用前,必须先经过深度学习和训练。就像游戏玩家出发去升级打怪需要游戏装备和地图一样,胶囊机器人需要通过深度学习技术改善密集地形重建和姿态估计算法,以及通过SLAM( Simultaneous Localization and Mapping)同步定位与地图构建的机器视觉技术实现检测、识别能力。

    通俗一点讲,机器人不是人,它的视觉和决策能力,都需要研制者通过一些方法赋予给它。通过深度学习获得的能力相当于胶囊机器人的大脑,而通过SLAM机器视觉获得的就相当于胶囊机器人的“火眼金睛”。

    2000年,以色列研制的第一个胶囊内镜获得FDA批准进入临床,当时的胶囊机器人是随消化道的自然蠕动而前进的,由于没有经过深度学习训练,也没有SLAM技术的加持,有点像盲人摸象,对于像胃这样大的消化道器官,其观察范围十分有限,因此会造成相当大的漏检。

    土耳其伊斯坦布尔的Bogazici大学的生物医学工程专业,有一个专业的生物医学实验室,其研究领域包括生物医学仪器、生物电子学、生物力学、神经信号分析、生物光子学、医学成像、细胞成像和电生理学、机器人技术、医疗设备设计和测试,以及心理物理学等。

    2020年,该实验室的Mehmet Turan博士,通过TUBI TAK2232国际杰出研究人员研究金方案获得了资金支持,开展了一项名为“磁性驱动的Al-Powered内窥镜胶囊机器人用于靶向药物传递和多活检操作”的研究项目。该项目旨在利用人工智能的最新进展,在无线胶囊内窥镜(WCE)机器人的机电一体化设计、远程磁控以及定位和映射算法方面进行重大的科技创新。

    在该项目中,研究人员基于1个胶囊内镜图像的基础SLAM数据集,1只Panda机械臂,1台EinScan Pro 2X(先临三维品牌的3D扫描仪),2个具有不同相机特性的商用胶囊机器人,对体外猪胃肠道的数据进行了采集,并完成了算法测试和胶囊机器人的深度学习与训练。

    研究人员把器官固定在六个支架上,创造出L形、Z形和O形三种胃肠道形态,以模拟通过升结肠到横结肠的GI-牵引路径。EinScan Pro 2X的功能就是3D扫描获取这六个器官形态的点云数据。所收集的数据结果,需要满足两点:使SLAM数据集适合于迁移学习;此外,还可以对同一器官类型的具有不同纹理细节的组织进行算法性能测试。

    由于被扫描的物体本身明暗多变,柔软易变形,一开始并不顺利。先临三维的技术人员在了解项目情况后,为研究人员及时提供了3D扫描仪的操作指导,包括如何通过亮度调整应对明暗变化,如何使用标志点辅助数据高精度拼接,选择哪一种无毒无害的医用显影剂可以帮助进一步改善数据细节,以及面对不同的情况如何选择合适的扫描模式。



    最终,我们很高兴地看到,研究人员如愿以偿获取到了六组高精细的3D数据,如实记录了器官所有结构、角落和深度。

    然后,原始点云数据被进一步编辑,得到了色谱图。

    这些数据都被用于胶囊机器人的深度学习和算法训练。Bogazici大学的研究人员使用胶囊内镜图像的基础SLAM数据集作为输入,然后利用此次3D扫描获取的三维模型在SLAM数据集中确定定位。

    研究组的Mehmet Turan博士说:“在以前的一个研究项目中,我使用过另一个品牌的3D扫描仪。那款3D扫描仪也很好,但是与EinScan Pro 2X相比,在分辨率和点精度上存在技术差异。点精度是我们此次项目实现深度学习过程的最重要因素之一,这就是为什么团队最终决定依靠EinScan Pro 2X的能力来完成这个项目的原因!

    原文:In a previous research project, another 3D Scanner was used. This 3D scanner had also achieved good results, but there exist technical differences in the resolution and point accuracy. Point accuracy was one of the most important factors in our project to achieve the deep learning process which is why the team decided to count on the capacities of the EinScan Pro 2X for this project.

    关注我们,了解更多新鲜有趣的3D数字技术故事。


    [来源:SHINING 3D]  
    我要投稿
    广告P3实验室
    网友评论:

    版权与免责声明:

    ① 凡本网注明"来源:仪器信息网"的所有作品,版权均属于仪器信息网,未经本网授权不得转载、摘编或利用其它方式使用。已获本网授权的作品,应在授权范围内使用,并注明"来源:仪器信息网"。违者本网将追究相关法律责任。

    ② 本网凡注明"来源:xxx(非本网)"的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,且不承担此类作品侵权行为的直接责任及连带责任。如其他媒体、网站或个人从本网下载使用,必须保留本网注明的"稿件来源",并自负版权等法律责任。

    ③ 如涉及作品内容、版权等问题,请在作品发表之日起两周内与本网联系,否则视为默认仪器信息网有权转载。

    相关新闻
    广告创新
    日排行
    周排行
    月排行
    参展仪器 耗材配件 试剂标物 解决方案 厂商 厂商动态 论坛帖子 博文 资料 谱图 资讯 期刊 求购 仪器专场 试剂专场 耗材专场 仪器分类 论坛分类 仪器问答 仪器无线 English
    关于我们 | 栏目导航 | 期刊 | 培训 | 诚聘英才 | VIP会员中心 | 客户投诉 | 友情链接 | 法律声明 | 联系我们 | 本网动态

    Instrument.com.cn Copyright ©1999-2020,All Rights Reserved 版权所有,未经书面授权,所有页面内容不得以任何形式进行复制

    三级国产国语三级在线 <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <蜘蛛词>| <文本链> <文本链> <文本链> <文本链> <文本链> <文本链>