向善而生的AI助盲,让AI多一点,障碍少一点******
有人说,盲人与世界之间,相差的只是一个黎明。在浪潮信息研发人员的心中,失去视力的盲人不会陷入永夜,科技的进步正在力图给每一个人以光明未来。
AI助盲在人工智能赛道上一直是最热门的话题之一。以前,让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破,更多的失明者正在借助AI提供的感知、理解与交互能力,以另一种方式重新“看见世界”。
新契机:多模态算法或将造福数以亿计失明者
科学实验表明,在人类获取的外界信息中,来自视觉的占比高达70%~80%,因此基于AI构建机器视觉系统,帮助视障患者拥有对外界环境的视觉感知与视觉理解能力,无疑是最直接有效的解决方案。
一个优秀的AI助盲技术,需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展,才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够,以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。
多个模态的交互可以提升AI的感知、理解与交互能力,也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说,多模态算法在AI助盲领域的应用一旦成熟,将能够造福数以亿计的失明者。据世卫组织统计,全球至少22亿人视力受损或失明,而我国是世界上盲人最多的国家,占世界盲人总数的18%-20%,每年新增的盲人数量甚至高达45万。
大挑战:如何看到盲人“眼中”的千人千面
AI助盲看似简单,但多模态算法依然面临重大挑战。
多模态智能算法,营造的是沉浸式人机交互体验。在该领域,盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一,这项研究已经吸引了全球数以万计的视障患者参与,这些患者们上传自己拍摄的图像数据和相匹配的文本问题,形成了最真实的模型训练数据集。
但是在现有技术条件下,盲人视觉问答任务的精度提升面临巨大挑战:一方面是盲人上传的问题类型很复杂,比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。
另一方面,由于盲人的特殊性,很难提取面前物体的有效特征。比如盲人在拍照时,经常会产生虚焦的情况,可能上传的照片是模糊的或者没有拍全,或者没拍到关键信息,这就给AI推理增加了难度。
为推动相关研究,来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”,并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题,然后要求给出相应的答案,解决盲人的求助。
另外,盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说,盲人逛超市,由于商品外观触感相似,很容易犯错,他可能会拿起一瓶醋却询问酱油的成分表,拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效,没法给出有效信息。
最后,针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制,同样也是现阶段的研发难点。
多解法:浪潮信息AI助盲靶向消灭痛点
AI助盲哪怕形式百变,无一例外都是消灭痛点,逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究,只为帮助盲人“看”到愈发精彩的世界。
在VizWiz官网上公布的2万份求助中,盲人最多的提问就是想知道他们面前的是什么东西,很多情况下这些物品没法靠触觉或嗅觉来做出判断,例如 “这本书书名是什么?”为此研发团队在双流多模态锚点对齐模型的基础上,提出了自监督旋转多模态模型,通过自动修正图像角度及字符语义增强,结合光学字符检测识别技术解决“是什么”的问题。
盲人所拍摄图片模糊、有效信息少?研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法,并提出多阶段交叉训练策略,具备更充分的常识能力,低质量图像、残缺的信息,依然能够精准的解答用户的求助。
目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点,在AI助盲领域斩获世界冠军两项、亚军两项。
真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此,研发团队首次提出视觉定位文本去噪推理任务FREC,FREC提供3万图片和超过25万的文本标注,囊括了口误、歧义、主观偏差等多种噪声,还提供噪声纠错、含噪证据等可解释标签。同时,该团队还构建了首个可解释去噪视觉定位模型FCTR,噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议,该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。
在智能交互研究方面上,浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA,同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。
眼球虽然对温度并不敏感,但浪潮信息的研发团队,却在努力让盲人能“看”到科技的温度,也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍,跨越山海。科技的伟大之处不仅仅在于改变世界,更重要的是如何造福人类,让更多的不可能变成可能。当科技成为人的延伸,当AI充满人性光辉,我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意,见证着更加光明宏大的远方。
处方药在部分网上药店可以随意买 公益诉讼督促加强网售处方药监管******
处方药在部分网上药店可以随意买
北京铁检院:公益诉讼督促加强网售处方药监管
远程诊疗、网上开方、送药上门……随着互联网医疗的蓬勃发展,网上药店让消费者足不出户就能快速获取药物。然而,由此带来的药品误用、滥用、过量服用事件也时常发生。药品安全非同儿戏,网上用药安全该如何保障?近日,最高人民检察院发布了一批药品安全公益诉讼典型案例。其中,北京铁路运输检察院(下称北京铁检院)办理的督促整治网络平台药店违法销售处方药行政公益诉讼案对保障用药安全问题进行了一系列探索。
调查发现,网上药店销售处方药存在诸多问题
“网上药店无处方销售处方药”“轻轻松松能买到12周以上用量的处方药”“药师审核形同虚设”“处方上没有执业药师的签字”……2021年7月,北京铁检院检察官在履职中发现网售处方药存在诸多不规范现象。同时,最高检也向北京铁检院交办了相关线索。
处方药规范经营是国家药品重点管理事项,我国多部法律法规对处方药的销售作出了明确规定。2019年修订的药品管理法明确了药品经营线上线下相同标准、一体监管的原则。药品零售企业从事药品经营活动,应当有依法经过资格认定的药师或者其他药学技术人员负责本企业的药品管理、处方审核和调配、合理用药指导等工作。2021年8月,国家卫生健康委办公厅、国家医保局办公室发布的《关于印发长期处方管理规范(试行)的通知》中指出,长期处方的处方量一般在4周内;根据慢性病特点,病情稳定的患者适当延长,最长不超过12周。
“通过查阅相关法律法规,我们发现网上药店违法销售处方药可能会给群众用药安全带来隐患,损害社会公共利益。因此,我们决定立案调查,针对网上药店违法违规销售处方药可能涉及的药品安全领域问题开展专项监督,对北京市范围内的药品网络零售企业销售处方药的情况进行排查。”北京铁检院检察官康辉介绍说。
2021年9月,该院公益诉讼检察部门将在京注册网络平台的药店及京外注册网络平台在京注册的药店作为调查重点,通过大数据筛查、人工复核、梳理分析等方式,全面了解网上处方药的销售情况。调查结果显示,3家网络平台(其中包括2家在京注册网络平台)上有28家药店存在执业药师未依法履行电子处方审核责任的情况,共涉及北京市的5个区。具体问题包括:部分网络平台药店在接收线上购药订单后,执业药师未按照相关规定对电子处方进行审核就进入了线下配送环节,存在配送超过用量的处方药、执业药师未在处方上签名等违法行为。
检察建议引发“整治风暴”
执业药师的审核是网售处方药的最后一关,关乎消费者能否吃准药、吃对药,绝不能形同虚设。为此,2021年9月,北京铁检院分别与市区两级药品监管部门就网售处方药的监管权责划分问题进行座谈,就网售处方药监管现状、网上药店日常经营、药师审核义务等进行深入沟通。
随后,北京铁检院分别向5个区的药品监管部门制发了诉前检察建议,督促行政机关对相关违法行为进行查处,对网络平台药店执业药师履行电子处方审核职责加强监管。
收到检察建议后,药品监管部门高度重视,开展了一系列有针对性的工作:通过对辖区涉案网络平台药店进行约谈及现场检查,对存在执业药师未对电子处方进行审核调配问题的网络药店作出行政处罚决定,责令限期整改;开展网络销售处方药专项监管执法工作,对辖区网售处方药的药店进行延伸检查、全面排查,对排查中发现的违法行为进行处理;逐一约谈重点关注的网络平台药店,结合相关法律规范对药店的具体经营进行规范指导;推动网络平台药店在电子处方服务方面建章立制,并定期发布工作专刊,组织学习交流。
溯源治理推动平台企业加快技术更新
办案中,承办检察官还发现,在部分备案的纸质处方上有执业药师签字,可电子处方上却没有。这种现象是因为药师的疏忽,还是技术的迟滞?
“据药品监督管理部门反映,相关互联网平台操作系统不完善,造成药师在诊疗系统中使用不便。”康辉介绍,《处方管理办法》规定,药师在完成处方调剂后,应当在处方上签名或者加盖专用签章。由此可见,电子处方也应当符合上述要求。
为推动溯源治理,承办检察官分别与涉案的3家网络平台进行座谈,建议平台进一步完善相关机制,加快技术更新,为执业药师审核电子处方提供便利条件,推动平台销售处方药规范化发展。随后,相关平台对系统进行了优化升级,不仅解决了药师签名上传失败的问题,还可以对处方开具的药量进行监测。对于医师、药师超用量开药等行为,系统可以自动提醒,并限制超过用量的处方开具权限。平台企业还研发了辅助监控系统,帮助网上药店开展相关审核事项。
据悉,2022年12月1日,国家市场监督管理总局发布的《药品网络销售监督管理办法》正式施行,明确规定药品网络零售企业应当建立在线药学服务制度,由依法经过资格认定的药师或者其他药学技术人员开展处方审核调配、指导合理用药等工作;同时明确第三方平台应当加强检查,对平台上药店的药品信息展示、处方审核、药品销售和配送等行为进行管理,督促其严格履行法定义务。“管理办法与我们之前的办案思路不谋而合。我们也将持续关注药品网售合规问题,保障群众用药安全。”同时,康辉也提醒广大消费者,在线上选购药品时一定要遵循互联网医师的指导,看清药品名称、批准文号、有效期等,留心执业药师对电子处方的审核意见,理性购药、科学用药,当好自己健康的第一责任人。
近日,该院检察官跟踪回访后发现,消费者在相关平台购药开具的电子处方已标有执业药师的审核签名,在开具的长期处方上标注了理由,相关药店也配备了线下执业药师。(检察日报 简洁 田慧娟)