人工智能如何改变指南的未来

陈耀龙, 罗旭飞, 史乾灵, 吕萌, 周奇, 王健健, 杨楠, 高东平, 杨书, 商洪才, 杨克虎

陈耀龙, 罗旭飞, 史乾灵, 吕萌, 周奇, 王健健, 杨楠, 高东平, 杨书, 商洪才, 杨克虎. 人工智能如何改变指南的未来[J]. 协和医学杂志, 2021, 12(1): 114-121. DOI: 10.12290/xhyxzz.2021-0012
引用本文: 陈耀龙, 罗旭飞, 史乾灵, 吕萌, 周奇, 王健健, 杨楠, 高东平, 杨书, 商洪才, 杨克虎. 人工智能如何改变指南的未来[J]. 协和医学杂志, 2021, 12(1): 114-121. DOI: 10.12290/xhyxzz.2021-0012
CHEN Yao-long, LUO Xu-fei, SHI Qian-ling, LYU Meng, ZHOU Qi, WANG Jian-jian, YANG Nan, GAO Dong-ping, YANG Shu, SHANG Hong-cai, YANG Ke-hu. How Will Artificial Intelligence Lead the Future of Clinical Practice Guidelines[J]. Medical Journal of Peking Union Medical College Hospital, 2021, 12(1): 114-121. DOI: 10.12290/xhyxzz.2021-0012
Citation: CHEN Yao-long, LUO Xu-fei, SHI Qian-ling, LYU Meng, ZHOU Qi, WANG Jian-jian, YANG Nan, GAO Dong-ping, YANG Shu, SHANG Hong-cai, YANG Ke-hu. How Will Artificial Intelligence Lead the Future of Clinical Practice Guidelines[J]. Medical Journal of Peking Union Medical College Hospital, 2021, 12(1): 114-121. DOI: 10.12290/xhyxzz.2021-0012

人工智能如何改变指南的未来

基金项目: 

国家重点研发计划 2018YFC1705500

详细信息
    通讯作者:

    陈耀龙 电话: 0931-8912639,E-mail: chenyaolong@vip.163.com

  • 中图分类号: R181.2; TP18

How Will Artificial Intelligence Lead the Future of Clinical Practice Guidelines

Funds: 

The National Key R&D Program of China 2018YFC1705500

More Information
  • 摘要: 近年来,人工智能的快速发展和进步对医学领域的影响日益加深。科技部发布的人工智能指南明确提出要加大人工智能技术在医药卫生领域应用的支持力度。临床实践指南作为医疗实践的重要指导性文件,可以规范医务人员的诊疗行为,缩小最佳研究证据与当前实践之间的差距,具有重要意义和价值。如何利用人工智能技术加速指南的制订流程,提高其制订效率,创新其传播与实施模式,乃至改变指南的未来发展,已引起国内外学者的广泛关注。本文就人工智能在临床实践指南领域的应用现状和发展前景进行分析和讨论,并在此基础上提出促进人工智能与临床实践指南结合的思考与建议。
    Abstract: In the past decades, with the rapid development and progress of artificial intelligence (AI), its impact on the field of medicine is deepening. The AI guideline released by the Ministry of Science and Technology of the People's Republic of China also suggested increasing support for the application of AI in medicine. As an important guiding document in medical practice, clinical practice guidelines are of great significance and value in regulating the behavior of healthcare professionals and bridging the gap between the best evidence of research and current practice. How to use AI to accelerate the development process, improve efficiency, innovate the format of dissemination and implementation, and even lead the future of clinical practice guidelines has received more attention from researchers all over the world. This paper analyzed and discussed the current situation and prospects of AI in clinical practice guidelines. We also proposed ideas and suggestions on how to promote the integration of AI and guidelines.
  • 在医学领域,人工智能(artificial intelligence,AI)目前不仅被广泛应用于辅助诊断、治疗选择、风险预测等[1],还被引入循证医学(evidence-based medicine,EBM)领域,用于系统评价和临床实践指南(下文简称“指南”)的制订、评价、传播与实施等[2-3]。虽然目前该领域很多方面仍处于理论探索阶段[4],但进展迅速,未来可期。本文通过分析AI在指南中的应用现状,探讨如何通过AI缩短指南的制订周期,提高其制订效率,创新其传播与实施模式,并对促进AI与指南领域的有效结合提出思考与建议。

    美国食品药品监督管理局迄今已批准29款AI相关医疗产品[5]。尽管AI在医学领域的应用取得了一系列较为重要的成果,但其在指南领域的应用仍处于起步阶段。目前国际上AI与指南结合的领域主要集中在模型、算法及工具的开发方面,其相关方法已在指南的制订、评价、传播与实施等某些环节小范围内试用,常用的算法和技术包括朴素贝叶斯法和决策树等。表 1列举了近年来AI在指南领域应用的重要事件及进展情况。

    表  1  人工智能在临床实践指南领域应用的重要事件
    年份 重要事件 应用环节
    1996年 Ertle等[9]应用自动化计数算法,基于指南快速从EMR中筛选和提取相关数据,预测和评估哮喘严重程度 制订环节
    1998年 哈佛大学、哥伦比亚大学及斯坦福大学的InterMed合作项目研究者开发了GLIF,将指南转化为机器可读格式的模型,实现机构及临床决策支持系统之间的指南共享。GLIF可在不同医疗机构和系统平台上应用,并与EMR系统进行整合。目前,GLIF3已建立了基于抑郁、流感等编码化指南本体和有效性工具的实例[10] 评价、传播与实施环节
    1998年 Dubey等[11]的研究表明XML在指南实施方面的使用可能比HTML更具优势 实施环节
    1999年 Mani等[12]提出了通过“两阶段”机器学习模型进行数据挖掘、制订指南,并应用于痴呆分期领域中 制订环节
    2000年 Shiffman等[13]提出了GEM,该模型是一种采用XML的指南文档知识模型,可存储和组织临床实践中的异构信息。GEM定义了110个元素,用于表示指南的开发者、目的、目标人群等内容 评价、传播与实施环节
    2001年 Metfessel等[14]开发了提高指南依从性的自动化工具,旨在通过大规模的自动化方法全面追踪指南的规范性,从而推动科学研究向临床实践转化 传播与实施环节
    2004年 Shahar等[15]提出了基于网页、模块化的电子指南库,旨在优化指南的呈现方式和分类汇总形式 传播与实施环节
    2007年 Kaiser等[16]提出了使用自动化提取及格式化指南的工具,并将此方法用于耳鼻咽喉领域的指南 评价、传播与实施环节
    2008年 Terenziani等[17]总结了指南实施及呈现的AI方法,并对膀胱癌、反流性食管炎及心力衰竭等疾病进行测试 传播与实施环节
    2013年 Oliveira等[2]从AI观点出发,介绍了相关工具,总结了指南的制订和实施 制订、传播与实施环节
    2015年 Bui等[18]开发了帮助检索指南制订证据的机器学习系统 制订环节
    2015年 国际系统评价自动化小组成立,并提出了系统评价自动化的维也纳原则[19] 制订环节
    2019年 Bowles等[20]开发了使用自动化方法探测、解决指南中共病药物治疗冲突的框架 评价、传播与实施环节
    EMR:电子病历;GLIF:指南交换格式;XML:可扩展标记语言;HTML:超文本标记语言;GEM:指南元素模型
    下载: 导出CSV 
    | 显示表格

    我国相关研究人员已在该领域开展积极探索。2013年,李博等[6]基于语义关系,将高血压指南文本转变为临床实践指南知识库,以提高指南的转化和利用;2019年,罗旭飞等[4]将AI在指南领域的应用现状和发展进行了概况评价,结果显示来自美国、澳大利亚、英国和加拿大的研究居多,但大部分研究仍停留于理论探索和算法的验证阶段;2020年,蒲晓蓉等[7]提出了一种基于机器学习的计算机辅助智能分析方法,自动分析不同版本《新型冠状病毒肺炎诊疗方案》的异同。此外,北京大学第三医院开发的EBM AI-Reviewer(http://www.ebm-easyreviewer.com/login),致力于协助系统评价人员快速筛选文献。

    AI应用于指南制订领域,旨在缩短指南的制订时间、提高制订质量、优化和加速整个制订流程,现就其中较为重要的5个方面展开阐述。

    关于研究选题的确定,传统方法主要依靠研究人员的经验。随着AI的发展,Chen等[8]采用结构主题模型(structural topic modeling,STM)与文献计量分析相结合的方法,从近十年AI辅助人脑研究的6317篇文献中自动识别突出的研究主题,通过对主题趋势、相关性和集群的分析,以及对其在有影响力的国家/地区和研究机构中多样化分布的描述,揭示了有研究前景的主题方向。

    关于临床问题的遴选,传统方法一般需耗时数月,对临床一线医务人员进行多轮调查后方可完成,但AI技术可对数据库或网络上已有的相关临床问题进行快速分析,自动筛选出高频问题清单,作为指南拟解决问题的重要参考。AI可对已发表的指南、系统评价及临床研究进行快速、全面的文献扫描和分析,发现指南与研究领域的关联分布,以及指南与临床问题的涵盖关系。

    关于指南专家的遴选,传统方法多采用“方便抽样”,而AI有助于查找到最适合参与指南制订的成员,特别是在专业、地域、性别等方面更具代表性。同时,可借助算法分析出每位专家潜在的利益冲突。如AI通过对不同渠道信息和数据的关联分析,可发现某专家多次出席某企业产品的推广活动或其直系亲属与医药企业关系密切,指南利益冲突管理委员会可以此作为其存在潜在利益冲突的证据。Graham等[21]使用机器学习法对159种期刊发表的128 781篇文章的利益冲突进行分析,发现有商业利益关系的期刊更有可能发表存在利益冲突的文章。

    使用自动化软件可极大缩短系统评价制作过程中文献检索、筛选及质量评价等过程的周期[22-23](表 2);国际系统评价自动化小组(International Collaboration for the Automation of Systematic Reviews,ICASR)提出的系统评价自动化维也纳原则[19](表 3),为AI加速系统评价制作指明了方向。此外,为方便读者选用合适的自动化工具,Marshall等[24]于2015年建立了系统评价制作工具箱(systematic review toolbox),用户可登录网站进行文献搜索和选取。AI技术的应用使系统评价的制作周期缩短至几天甚至几个小时。Clark等[22]使用自动化技术,仅用2周时间完成了一篇评估患者增加液体摄入量对泌尿系统感染(urinary tract infection,UTI)的复发、抗菌素的使用及UTI症状影响因素的随机对照试验的系统评价。

    表  2  系统评价中的自动化工具汇总[22-23]
    序号 系统评价的制作步骤 工具 描述或评论
    1 制订检索策略 (1)SRA-Word Frequency Analyser
    (https://sr-accelerator.com/#/help/wordfreq)
    (2)The Search Refiner
    (https://ielab-sysrev2.uqcloud.net/account/login)
    (1)系统检索时,一般使用高频词汇,SRA-Word Frequency Analyser通过统计某个词或词组在文章中出现的次数,确定检索策略中应该使用的检索词, 如对痛风领域的文献进行分析,发现高频词为“gout”和“hyperuricemia”,检索痛风相关文献时,则需包含上述2个词
    (2)The Search Refiner通过检查字符串中每个检索词,查找相关研究的数量及不相关研究的数量,快速确定需要删除的检索词,从而加速检索策略的制订
    2 实施检索 (1)SRA-Polyglot Search Translator
    (https://sr-accelerator.com/#/polyglot)
    (1)通过将PubMed或Ovid Medline搜索转换为其他不同数据库的检索语句以加速检索
    (2)RobotSearch
    (https://robotsearch.vortext.systems)
    (3)Cochrane Register of Studies
    (https://community.cochrane.org/help/tools-and-software/crs-cochrane-register-studies)
    (4)RCT tagger
    (http://arrowsmith.psych.uic.edu/cgi-bin/arrowsmith_
    uic/RCT_Tagger.cgi)
    (5)Thalia(http://nactem-copious.man.ac.uk/Thalia/)

    ①经过验证的机器学习过滤器可用于识别RCT,并可以全自动使用
    ②传统的特定主题关键词搜索策略仍需采用
    ③目前无广泛使用的非RCT设计工具
    (2)允许在PubMed中搜索相关概念(如化学品、疾病、药物、基因、代谢物、蛋白质、物种和解剖实体)
    3 去除重复 SRA-De-duplicator
    (https://sr-accelerator.com/#/help/dedupe)
    从一组上传的记录中识别、删除相同的研究,自动完成大部分重复数据的删除过程;因数据库之间标引存在差异,仍有重复记录存在,此时需手动删除
    4 筛选摘要 (1)RobotSearch(https://robotsearch.vortext.systems)
    (2)SRA Helper(https://sr-accelerator.com/#/sra-helper)
    (3)Endnote(https://endnote.com/)
    (4)Abstrackr(http://abstrackr.cebm.brown.edu/account/login)
    (5)EPPI reviewer(https://eppi.ioe.ac.uk/cms/er4)
    (6)RobotAnalyst(http://www.nactem.ac.uk/robotanalyst/)
    (7)SWIFT-Review(https://www.sciome.com/swift-review/)
    (8)Colandr(https://www.colandrapp.com/signin)
    (9)Rayyan(https://rayyan.qcri.org)
    (1)从一组检索结果中识别出明显的非RCT研究,自动移除这些研究,留下潜在的RCT库进行筛选
    (2)使用快捷键加速筛选和全文获取,快捷键还可用于搜索预先指定的位置列表,以尝试查找全文
    (3)多任务管理,协助管理参考文献,有助于存储搜索结果,查找全文,在筛选过程中进行分组排序,并将参考文献插入文稿中
    ①筛选系统按相关性自动对搜索进行排序
    ②RobotAnalyst和SWIFT-Review还可进行主题建模,与类似主题相关的摘要会自动分组,便于用户检索
    5 获取全文 (1)SRA Helper(https://sr-accelerator.com/#/sra-helper)
    (2)SARA(https://sr-accelerator.com/#/)
    (1)SRA helper中快捷键可加速筛选和全文获取,快捷键还可用于搜索预先指定的位置列表,以尝试查找全文
    (2)采用SARA可自动向图书馆索取全文,只需申请一次即可获取所需全文;通常这些申请需要一次处理并发送;工具可在SRA内使用
    6 提取数据 (1)ExaCT
    (https://exact.cluster.gctools.nrc.ca/ExactDemo/)
    (2)RobotReviewer(https://robotreviewer.vortext.systems)
    (3)NaCTeM(http://www.nactem.ac.uk/software.php)
    这些软件从自由文本中自动提取数据元素,如样本量大小、PICO等
    7 评估偏倚风险 RobotReviewer(https://robotreviewer.vortext.systems) 通过突出原始PDF中的支持性短语,加速评估7个“偏倚风险”领域中的4个领域;同时结合人工评价对软件评估结果进行验证和检查
    8 撰写结果 RevMan Replicant(https://sr-accelerator.com/#/replicant) 通过RevMan软件中的森林图快速拟定结果初稿,加快结果的撰写
    SRA:系统评价自动化;RCT:随机对照试验;PICO:患者、干预、对照及结局指标;PDF:便携式文档格式
    下载: 导出CSV 
    | 显示表格
    表  3  系统评价自动化维也纳原则[19]
    条目 解释
    原则一:系统评价的制作涉及许多工作,每项工作存在不同问题,但都必须改进 目前证据检索、质量评价、证据综合及发表 4个步骤可使用自动化工具以提高效率,但需识别出每个步骤可能面临的关键问题
    原则二:自动化可协助完成系统评价的所有步骤,从确定选题到发现研究空白,从计划书的撰写到全文的撰写及传播 标准的系统评价制作一般需6个月~2年,使用自动化方法则可缩短一半时间,目前需关注的是开发能够应用于系统评价整个制作过程的自动化工具
    原则三:每个步骤都可以且应不断改进,以提高应用自动化方法和工具时的效率和准确性 目前大多数自动化工具仍处于开发的早期阶段,因此,应做好这些工具的用户测试和反馈意见收集工作,从而不断改进自动化工具
    原则四:自动化可以且应高标准地促进系统评价的报告、制作和更新 使用自动化工具和技术的目的是更及时、更省力地制作高质量的系统评价,因此开发和测试新工具时,必须保持较高的标准
    原则五:开发商还应提供友好的界面和组件,如将任务进行细分或合并,允许不同用户使用不同的界面 不同类型系统评价的制作者需求不同, 因此开发自动化工具的过程中, 需考虑其用户界面的友好性
    原则六:具有不同专长的工作组在系统评价制作的不同部分发挥作用,需加强小组间的合作 系统评价的制作涉及多学科专家的参与,应将资源进行整合,避免不必要的重复工作
    原则七:每一项自动化技术都应该共享,最好免费提供代码、评估数据和语料 共享代码或技术可减少重复研究工作, 开发商应向公众提供这些资源,并开放自动化技术的计算代码,以便相关人员可以重复使用并进一步开展工作
    原则八:所有自动化技术和工具都应使用可靠、可复制的方法进行评估,并报告评估结果和数据 自动化过程的所有任务都应由第三方独立评估,评价方法和体例应共享, 不仅需评估技术规范,还需评估用户界面等要素,以及其在系统评价制作流程整体的契合度,可防止自我评价可能带来的偏倚
    下载: 导出CSV 
    | 显示表格

    传统方法制订的指南推荐意见,主要依靠专家对干预措施的安全性、有效性、成本、可实施性及患者意愿等进行综合分析后得出。然而,在指南制订过程中是否对这些因素进行了全面考虑,以及各因素之间相互作用对指南造成影响的系统考量,是传统方法的主要局限性。AI可以在更广阔的视野下对相关数据进行挖掘和分析,为制订者提供更全面的有效信息,协助制订者更好地平衡干预措施的利弊,形成对患者最优的推荐意见。

    传统依靠人工更新指南的方法,已满足不了对最新文献的跟进与整合。借助AI可推断出最佳证据的出现时间,协助完成指南的及时更新,并确定指南中推荐意见最适合的实施环境。特别是随着动态指南(living guideline)的出现,指南更新的频率和要求越来越高[25]。如关于新型冠状病毒肺炎的文献已超过20万篇,占2020年所有文献的4%。新型冠状病毒肺炎指南的更新频率已从每月缩短至每周甚至实时[26]。AI可对新文献进行更快速和更高效地监测和遴选;另一方面,还可帮助缺乏指南制订能力的国家改编现有的指南[27]。与指南的制订过程不同,指南的改编需评估已有的指南推荐意见,以及与本地区人群和临床环境的匹配性,通过AI提供更为全面的当地数据,可协助指南改编人员,作出更合适的推荐意见。

    当前指南传播与实施最常用的方法为媒体、期刊或学术会议宣传等,通过多种途径让使用者知晓指南,进而应用于临床实践。研究显示,这种模式花费时间较长,从指南发布到被指南使用者知晓和应用,需数月甚至数年不等[28]。应用AI技术,则可将该过程明显缩短。AI技术将指南中的推荐意见整合至电子病历(electronic medical record,EMR)系统中,通过OpenMRS及DHIS2等开源EMR平台,进一步加速了指南信息的传播,惠及更多医疗资源匮乏的机构或地区[29-30]。此外,研究显示,美国约25%的医疗费用被浪费掉,每年约合7600亿~9350亿美元[31];若采用AI技术,则可以促进指南或医疗信息在患者中的传播,通过去伪存真,为患者提供有价值的信息,从而节约医疗资源。

    目前针对单个临床研究的风险偏倚AI评估工具已经产生[32]。而指南的评价工具,有针对方法学质量的指南研究与评价工具(Appraisal of Guidelines for Research and Evaluation Ⅱ,AGREE Ⅱ),包含6个领域的23个条目[33];以及针对报告质量的国际实践指南报告标准(Reporting Items for Practice Guidelines in Healthcare,RIGHT),包含7个领域的22个条目[31]。然而,研究显示使用这些工具时存在一定挑战,即不同的使用者对标准的把握不一致,人力和时间成本亦不可控[34-35]。如使用AGREE Ⅱ评价一部指南,常规情况下需要3~4名经过培训的研究人员,每人至少耗时1 h;如评价糖尿病领域百余部指南的质量,则需500 h以上。但通过开发、训练相应的AI算法,不仅可以降低评价的主观偏倚,还可较大程度上缩短评价所需的时间。此外,对指南的评价还包括对推荐意见的对比分析,而快速提取其中的推荐意见是关键步骤。Hussain等[36]开发的AI算法,用于提取高血压指南中的推荐意见,其准确度可达85.54%。

    就目前科技进步的速度和学科交叉的深度而言,AI技术与指南的结合已是箭在弦上。指南的制订已从1.0时代迈向2.0时代[37],而AI很有可能引领指南发展的3.0时代。为提前做好应对并促进其科学发展,笔者提出以下思考与建议。

    AI在指南领域的发展和应用,除技术支持外,还有赖于政策支撑。2021年,国家自然科学基金委新增设了交叉科学部,为AI与指南结合相关研究工作的开展提供了获取更多支持的可能性。近年来,“国家重点研发计划”“科技创新2030-重大项目”等也加大了对AI、大数据在医学领域应用的支持力度。此外,多所高校先后设立了人工智能学院,开设AI与医学交叉相关课程,招收本科生和研究生,并在基础理论和关键技术等方面开展相关研究和培训,是未来在该领域把握机遇和掌握话语权的重要途径。

    在指南制订者和实施者层面主要提出以下建议:(1)制订指南或开展指南研究时,应纳入AI相关学科人员。(2)使用已被证实可靠的AI算法、模型和工具时,应提供相应的指导手册或操作规范。(3)撰写基于AI的指南手册或专著。英国国家健康与临床优化研究所(National Institute for health and Clinical Excellence,NICE)在其指南制订手册中纳入应用机器学习搜索和筛选文献的内容[38],其他指南制订手册则无相关内容的描述。(4)借助AI加速指南的传播与实施,促进医患沟通,改善患者关系。正如斯坦福大学AI实验室主任Christopher Manning教授所言:“AI可以把指南带入每一次的患者咨询中,让每一次咨询都安全、稳妥地支持医患双方沟通。”[39]

    在研究者层面主要提出以下建议:(1)研发基于AI的系统评价工具。指南制订的限速环节主要是系统评价的制作,尽管当前已有AI协助系统评价制作的案例,但仍需进一步深入研究,推动AI大范围应用于系统评价的制作是当前指南制订最重要和最需优先开展的研究。(2)研发AI相关的报告规范。指南制订过程中应用AI的关键步骤和信息应予以充分、透明地报告,故应研发AI应用于指南的报告规范“RIGHT for AI”,现已成为RIGHT工作组扩展版内容之一。目前,AI声明“CONSORT(Consolidated Standards of Reporting Trail) for AI ”已完成研发,其成果已在学术期刊上发表[40]。随着AI相关系统评价的不断增多,系统评价和Meta分析优先报告条目“PRISMA (Preferred Reporting Items for Systematic Reviews and Meta-Analyses) for AI”的出现将是必然。在AI相关的临床研究、系统评价和指南等领域形成完整的报告规范体系,对于促进AI发展、彰显其应用价值具有重要意义。(3)开展AI识别与管理指南参与人员的利益冲突、患者偏好及形成推荐意见等相关研究是未来需要探索的重要方向。如利用AI收集患者偏好与价值观等信息时,如何考虑公平性(当前关于患者偏好与价值观的研究基本上是基于西方患者人群);管理指南参与人员的利益冲突时,如何保护其个人隐私等,都是研究者需要关注和解决的问题。AI为指南提供的信息越全面,制订者做出最优推荐意见的可能性越大。

    目前,AI在指南领域的应用仍处于起步阶段,未来前景广阔,其可在指南的制订、实施到自动更新全过程中发挥作用,但也面临诸多问题与挑战,这些问题和挑战将随着人们对AI的认识和掌握不断加深而转化为机遇。我们可以期待,未来指南的制订也许只需基于患者个体数据便可产出极具针对性的“基于证据的个体化指南”,届时精准医学的受益对象将不再是少数人的罕见病,而是所有人的大健康。

    作者贡献: 陈耀龙、罗旭飞负责统计数据并撰写文章初稿;史乾灵、吕萌、周奇、王健健、杨楠、高东平、杨书、商洪才、杨克虎负责修改初稿;陈耀龙负责文章审校。
    利益冲突  无
    陈耀龙、罗旭飞对本文同等贡献
  • 表  1   人工智能在临床实践指南领域应用的重要事件

    年份 重要事件 应用环节
    1996年 Ertle等[9]应用自动化计数算法,基于指南快速从EMR中筛选和提取相关数据,预测和评估哮喘严重程度 制订环节
    1998年 哈佛大学、哥伦比亚大学及斯坦福大学的InterMed合作项目研究者开发了GLIF,将指南转化为机器可读格式的模型,实现机构及临床决策支持系统之间的指南共享。GLIF可在不同医疗机构和系统平台上应用,并与EMR系统进行整合。目前,GLIF3已建立了基于抑郁、流感等编码化指南本体和有效性工具的实例[10] 评价、传播与实施环节
    1998年 Dubey等[11]的研究表明XML在指南实施方面的使用可能比HTML更具优势 实施环节
    1999年 Mani等[12]提出了通过“两阶段”机器学习模型进行数据挖掘、制订指南,并应用于痴呆分期领域中 制订环节
    2000年 Shiffman等[13]提出了GEM,该模型是一种采用XML的指南文档知识模型,可存储和组织临床实践中的异构信息。GEM定义了110个元素,用于表示指南的开发者、目的、目标人群等内容 评价、传播与实施环节
    2001年 Metfessel等[14]开发了提高指南依从性的自动化工具,旨在通过大规模的自动化方法全面追踪指南的规范性,从而推动科学研究向临床实践转化 传播与实施环节
    2004年 Shahar等[15]提出了基于网页、模块化的电子指南库,旨在优化指南的呈现方式和分类汇总形式 传播与实施环节
    2007年 Kaiser等[16]提出了使用自动化提取及格式化指南的工具,并将此方法用于耳鼻咽喉领域的指南 评价、传播与实施环节
    2008年 Terenziani等[17]总结了指南实施及呈现的AI方法,并对膀胱癌、反流性食管炎及心力衰竭等疾病进行测试 传播与实施环节
    2013年 Oliveira等[2]从AI观点出发,介绍了相关工具,总结了指南的制订和实施 制订、传播与实施环节
    2015年 Bui等[18]开发了帮助检索指南制订证据的机器学习系统 制订环节
    2015年 国际系统评价自动化小组成立,并提出了系统评价自动化的维也纳原则[19] 制订环节
    2019年 Bowles等[20]开发了使用自动化方法探测、解决指南中共病药物治疗冲突的框架 评价、传播与实施环节
    EMR:电子病历;GLIF:指南交换格式;XML:可扩展标记语言;HTML:超文本标记语言;GEM:指南元素模型
    下载: 导出CSV

    表  2   系统评价中的自动化工具汇总[22-23]

    序号 系统评价的制作步骤 工具 描述或评论
    1 制订检索策略 (1)SRA-Word Frequency Analyser
    (https://sr-accelerator.com/#/help/wordfreq)
    (2)The Search Refiner
    (https://ielab-sysrev2.uqcloud.net/account/login)
    (1)系统检索时,一般使用高频词汇,SRA-Word Frequency Analyser通过统计某个词或词组在文章中出现的次数,确定检索策略中应该使用的检索词, 如对痛风领域的文献进行分析,发现高频词为“gout”和“hyperuricemia”,检索痛风相关文献时,则需包含上述2个词
    (2)The Search Refiner通过检查字符串中每个检索词,查找相关研究的数量及不相关研究的数量,快速确定需要删除的检索词,从而加速检索策略的制订
    2 实施检索 (1)SRA-Polyglot Search Translator
    (https://sr-accelerator.com/#/polyglot)
    (1)通过将PubMed或Ovid Medline搜索转换为其他不同数据库的检索语句以加速检索
    (2)RobotSearch
    (https://robotsearch.vortext.systems)
    (3)Cochrane Register of Studies
    (https://community.cochrane.org/help/tools-and-software/crs-cochrane-register-studies)
    (4)RCT tagger
    (http://arrowsmith.psych.uic.edu/cgi-bin/arrowsmith_
    uic/RCT_Tagger.cgi)
    (5)Thalia(http://nactem-copious.man.ac.uk/Thalia/)

    ①经过验证的机器学习过滤器可用于识别RCT,并可以全自动使用
    ②传统的特定主题关键词搜索策略仍需采用
    ③目前无广泛使用的非RCT设计工具
    (2)允许在PubMed中搜索相关概念(如化学品、疾病、药物、基因、代谢物、蛋白质、物种和解剖实体)
    3 去除重复 SRA-De-duplicator
    (https://sr-accelerator.com/#/help/dedupe)
    从一组上传的记录中识别、删除相同的研究,自动完成大部分重复数据的删除过程;因数据库之间标引存在差异,仍有重复记录存在,此时需手动删除
    4 筛选摘要 (1)RobotSearch(https://robotsearch.vortext.systems)
    (2)SRA Helper(https://sr-accelerator.com/#/sra-helper)
    (3)Endnote(https://endnote.com/)
    (4)Abstrackr(http://abstrackr.cebm.brown.edu/account/login)
    (5)EPPI reviewer(https://eppi.ioe.ac.uk/cms/er4)
    (6)RobotAnalyst(http://www.nactem.ac.uk/robotanalyst/)
    (7)SWIFT-Review(https://www.sciome.com/swift-review/)
    (8)Colandr(https://www.colandrapp.com/signin)
    (9)Rayyan(https://rayyan.qcri.org)
    (1)从一组检索结果中识别出明显的非RCT研究,自动移除这些研究,留下潜在的RCT库进行筛选
    (2)使用快捷键加速筛选和全文获取,快捷键还可用于搜索预先指定的位置列表,以尝试查找全文
    (3)多任务管理,协助管理参考文献,有助于存储搜索结果,查找全文,在筛选过程中进行分组排序,并将参考文献插入文稿中
    ①筛选系统按相关性自动对搜索进行排序
    ②RobotAnalyst和SWIFT-Review还可进行主题建模,与类似主题相关的摘要会自动分组,便于用户检索
    5 获取全文 (1)SRA Helper(https://sr-accelerator.com/#/sra-helper)
    (2)SARA(https://sr-accelerator.com/#/)
    (1)SRA helper中快捷键可加速筛选和全文获取,快捷键还可用于搜索预先指定的位置列表,以尝试查找全文
    (2)采用SARA可自动向图书馆索取全文,只需申请一次即可获取所需全文;通常这些申请需要一次处理并发送;工具可在SRA内使用
    6 提取数据 (1)ExaCT
    (https://exact.cluster.gctools.nrc.ca/ExactDemo/)
    (2)RobotReviewer(https://robotreviewer.vortext.systems)
    (3)NaCTeM(http://www.nactem.ac.uk/software.php)
    这些软件从自由文本中自动提取数据元素,如样本量大小、PICO等
    7 评估偏倚风险 RobotReviewer(https://robotreviewer.vortext.systems) 通过突出原始PDF中的支持性短语,加速评估7个“偏倚风险”领域中的4个领域;同时结合人工评价对软件评估结果进行验证和检查
    8 撰写结果 RevMan Replicant(https://sr-accelerator.com/#/replicant) 通过RevMan软件中的森林图快速拟定结果初稿,加快结果的撰写
    SRA:系统评价自动化;RCT:随机对照试验;PICO:患者、干预、对照及结局指标;PDF:便携式文档格式
    下载: 导出CSV

    表  3   系统评价自动化维也纳原则[19]

    条目 解释
    原则一:系统评价的制作涉及许多工作,每项工作存在不同问题,但都必须改进 目前证据检索、质量评价、证据综合及发表 4个步骤可使用自动化工具以提高效率,但需识别出每个步骤可能面临的关键问题
    原则二:自动化可协助完成系统评价的所有步骤,从确定选题到发现研究空白,从计划书的撰写到全文的撰写及传播 标准的系统评价制作一般需6个月~2年,使用自动化方法则可缩短一半时间,目前需关注的是开发能够应用于系统评价整个制作过程的自动化工具
    原则三:每个步骤都可以且应不断改进,以提高应用自动化方法和工具时的效率和准确性 目前大多数自动化工具仍处于开发的早期阶段,因此,应做好这些工具的用户测试和反馈意见收集工作,从而不断改进自动化工具
    原则四:自动化可以且应高标准地促进系统评价的报告、制作和更新 使用自动化工具和技术的目的是更及时、更省力地制作高质量的系统评价,因此开发和测试新工具时,必须保持较高的标准
    原则五:开发商还应提供友好的界面和组件,如将任务进行细分或合并,允许不同用户使用不同的界面 不同类型系统评价的制作者需求不同, 因此开发自动化工具的过程中, 需考虑其用户界面的友好性
    原则六:具有不同专长的工作组在系统评价制作的不同部分发挥作用,需加强小组间的合作 系统评价的制作涉及多学科专家的参与,应将资源进行整合,避免不必要的重复工作
    原则七:每一项自动化技术都应该共享,最好免费提供代码、评估数据和语料 共享代码或技术可减少重复研究工作, 开发商应向公众提供这些资源,并开放自动化技术的计算代码,以便相关人员可以重复使用并进一步开展工作
    原则八:所有自动化技术和工具都应使用可靠、可复制的方法进行评估,并报告评估结果和数据 自动化过程的所有任务都应由第三方独立评估,评价方法和体例应共享, 不仅需评估技术规范,还需评估用户界面等要素,以及其在系统评价制作流程整体的契合度,可防止自我评价可能带来的偏倚
    下载: 导出CSV
  • [1]

    He JX, Baxter SL, Xu J, et al. The practical imple-mentation of artificial intelligence technologies in medicine[J]. Nat Med, 2019, 25: 30-36. DOI: 10.1038/s41591-018-0307-0

    [2]

    Oliveira T, Novais P, Neves J. Development and implementation of clinical guidelines: An artificial intelligence perspective[J]. Artif Intell Rev, 2014, 42: 999-1027. DOI: 10.1007/s10462-013-9402-2

    [3]

    Isern D, Moreno A. Computer-based execution of clinical guidelines: a review[J]. Int J Med Inform, 2008, 77: 787-808. DOI: 10.1016/j.ijmedinf.2008.05.010

    [4]

    Luo XF, Xiao YJ, Liu X, et al. How to Combine Artificial Intelligence with Clinical Practice Guideline: A Scoping Review[C/OL].(2019-10-31). https://journals.lww.com/ijebh/fulltext/2019/12000/abstracts_for_the_gin_and_jbi_conference,_adelaide.2.aspx.

    [5]

    Benjamens S, Dhunnoo P, Meskó B. The state of artificial intelligence-based FDA-approved medical devices and algorithms: an online database[J]. NPJ Digit Med, 2020, 3: 118. DOI: 10.1038/s41746-020-00324-0

    [6] 李博, 李科, 曾东, 等.基于语义关系的高血压临床指南知识库构建[J].中国数字医学, 2013: 64-67.

    Li B, Li K, Zeng D, et al.Construction of Hypertension Clinical Guideline Knowledge Base Based on Semantic[J].Zhongguo Shu Zi Yi Xue, 2013: 64-67.

    [7] 蒲晓蓉, 陈柯成, 刘军池, 等. COVID-19中国诊疗方案的机器学习智能分析方法[J].生物医学工程学杂志, 2020, 37:365-372.

    Pu XR, Chen KC, Liu JC, et al. Machine learning-based method for interpreting the guidelines of the diagnosis and treatment of COVID-19[J].Sheng Wu Yi Xue Gong Cheng Xue Za Zhi, 2020, 37:365-372.

    [8]

    Chen XL, Chen J, Cheng G, et al. Topics and trends in artificial intelligence assisted human brain research[J]. PLoS One, 2020, 15: e0231192. DOI: 10.1371/journal.pone.0231192

    [9]

    Ertle AR, Campbell EM, Hersh WR. Automated application of clinical practice guidelines for asthma management[J]. Proc AMIA Annu Fall Symp, 1996:552-556.

    [10]

    Ohno-Machado L, Gennari JH, Murphy SN, et al. The guideline interchange format: a model for representing guidelines[J]. J Am Med Inform Assoc, 1998, 5: 357-372. DOI: 10.1136/jamia.1998.0050357

    [11]

    Dubey AK, Chueh H. Using the extensible markup language (XML) in automated clinical practice guidelines[J]. Proc AMIA Symp, 1998:735-739.

    [12]

    Mani S, Shankle WR, Dick MB, et al. Two-stage machine learning model for guideline development[J]. Artif Intell Med, 1999, 16: 51-71. DOI: 10.1016/S0933-3657(98)00064-5

    [13]

    Shiffman RN, Karras BT, Agrawal A, et al. GEM: a pro-posal for a more comprehensive guideline document model using XML[J]. J Am Med Inform Assoc, 2000, 7: 488-498. DOI: 10.1136/jamia.2000.0070488

    [14]

    Metfessel BA. An automated tool for an analysis of compli-ance to evidence-based clinical guidelines[J]. Stud Health Technol Inform, 2001, 84: 226-230.

    [15]

    Shahar Y, Young O, Shalom E, et al. The Digital electronic Guideline Library (DeGeL): a hybrid framework for representation and use of clinical guidelines[J]. Stud Health Technol Inform, 2004, 101: 147-151.

    [16]

    Kaiser K, Akkaya C, Miksch S. How can information extraction ease formalizing treatment processes in clinical practice guidelines? A method and its evaluation[J]. Artif Intell Med, 2007, 39: 151-163. DOI: 10.1016/j.artmed.2006.07.011

    [17]

    Terenziani P, Montani S, Bottrighi A, et al. Applying artificial intelligence to clinical guidelines: the GLARE approach[J]. Stud Health Technol Inform, 2008, 139: 273-282.

    [18]

    Bui DD, Jonnalagadda S, Del Fiol G. Automatically finding relevant citations for clinical guideline development[J]. J Biomed Inform, 2015, 57: 436-445. DOI: 10.1016/j.jbi.2015.09.003

    [19]

    Beller E, Clark J, Tsafnat G, et al. Making progress with the automation of systematic reviews: principles of the International Collaboration for the Automation of Systematic Reviews (ICASR)[J]. Syst Rev, 2018, 7: 77. DOI: 10.1186/s13643-018-0740-7

    [20]

    Bowles J, Caminati MB, Cha S, et al. A framework for automated conflict detection and resolution in medical guidelines[J]. Sci Comput Program, 2019, 182:42-63. DOI: 10.1016/j.scico.2019.07.002

    [21]

    Graham SS, Majdik ZP, Clark D, et al. Relationships among commercial practices and author conflicts of interest in biomedical publishing[J]. PLoS One, 2020, 15: e0236166. DOI: 10.1371/journal.pone.0236166

    [22]

    Clark J, Glasziou P, Del Mar C, et al. A full systematic review was completed in 2 weeks using automation tools: a case study[J]. J Clin Epidemiol, 2020, 121: 81-90. DOI: 10.1016/j.jclinepi.2020.01.008

    [23]

    Marshall IJ, Wallace BC. Toward systematic review automation: a practical guide to using machine learning tools in research synthesis[J]. Syst Rev, 2019, 8: 163. DOI: 10.1186/s13643-019-1074-9

    [24]

    Marshall C, Brereton P. Systematic review toolbox: a catalogue of tools to support systematic reviews[C/OL].(2015-05-08).https://www.researchgate.net/publication/275967185_Syste-matic_Review_Toolbox_A_Catalogue_of_Tools_to_Support_Systematic_Reviews.

    [25]

    Akl EA, Meerpohl JJ, Elliott J, et al. Living Systematic Review Network. Living systematic reviews: 4. Living guideline recommendations[J]. J Clin Epidemiol, 2017, 91:47-53. DOI: 10.1016/j.jclinepi.2017.08.009

    [26]

    Else H. How a torrent of COVID science changed research publishing-in seven charts[J]. Nature, 2020, 588: 553. DOI: 10.1038/d41586-020-03564-y

    [27]

    Groot P, Hommersom A, Lucas P. Adaptation of clinical practice guidelines[J].Stud Health Technol Inform, 2008, 139:121-139.

    [28]

    Gagliardi AR, Marshall C, Huckson S, et al. Developing a checklist for guideline implementation planning: review and synthesis of guideline development and implementation advice[J]. Implement Sci, 2015, 10:19. DOI: 10.1186/s13012-015-0205-5

    [29]

    Landis Lewis Z, Mello-Thoms C, Gadabu OJ, et al. The feasibility of automating audit and feedback for ART guideline adherence in Malawi[J]. J Am Med Inform Assoc, 2011, 18: 868-874. DOI: 10.1136/amiajnl-2011-000097

    [30]

    Wahl B, Cossy-Gantner A, Germann S, et al.Artificial intelligence (AI) and global health: how can AI contribute to health in resource-poor settings?[J]. BMJ Glob Health, 2018, 3:e000798. DOI: 10.1136/bmjgh-2018-000798

    [31]

    Shrank WH, Rogstad TL, Parekh N. Waste in the US Health Care System: Estimated Costs and Potential for Savings[J]. JAMA, 2019, 322:1501-1509. DOI: 10.1001/jama.2019.13978

    [32]

    Marshall IJ, Kuiper J, Wallace BC. RobotReviewer: evaluation of a system for automatically assessing bias in clinical trials[J]. J Am Med Inform Assoc, 2016, 23: 193-201. DOI: 10.1093/jamia/ocv044

    [33]

    Brouwers MC, Kho ME, Browman GP, et al. AGREE Ⅱ: advancing guideline development, reporting and evaluation in health care[J]. CMAJ, 2010, 182: E839-E842. DOI: 10.1503/cmaj.090449

    [34]

    Chen YL, Yang KH, Marušic A, et al. A reporting tool for practice guidelines in health care: the RIGHT statement[J]. Ann Intern Med, 2017, 166: 128-132. DOI: 10.7326/M16-1565

    [35]

    Tokalić R, Viđak M, Buljan I, et al. Reporting of Clinical Practice Guidelines: Practical Testing of AGREE and RIGHT Checklists[J]. J Gen Intern Med, 2020, 35:2167-2172. DOI: 10.1007/s11606-020-05819-w

    [36]

    Hussain M, Hussain J, Sadiq M, et al. Recommendation statements identification in clinical practice guidelines using heuristic patterns[C/OL].(2018-07-27).https://www.computer.org/csdl/proceedings-article/snpd/2018/08441036/13bd1sv5NyA.

    [37]

    Schünemann HJ, Wiercioch W, Etxeandia I, et al. Guidelines 2.0: systematic development of a comprehensive checklist for a successful guideline enterprise[J]. CMAJ, 2014, 186: E123-E142. DOI: 10.1503/cmaj.131237

    [38]

    National Institute for Health and Care Excellence. Develop-ing NICE guidelines: the manual[M/OL].(2020-10-15). https://www.nice.org.uk/process/pmg20/chapter/introduction.

    [39]

    Manning CL. Artificial intelligence could bring relevant guide-lines into every consultation[J]. BMJ, 2019, 366: l4788.

    [40]

    Liu XX, Rivera SC, Moher D, et al. Reporting guidelines for clinical trial reports for interventions involving artificial intelligence: the CONSORT-AI extension[J]. BMJ, 2020, 370:m3164.

  • 期刊类型引用(28)

    1. 刘晶,杜晶辉,刘瑞岩,鲍志军,贺鑫,赵岩,王俊,雷曜荣,刘旭. 实时荧光聚合酶链反应检测新型冠状病毒室内质控方法初探. 国际检验医学杂志. 2023(01): 74-78 . 百度学术
    2. 谢晓霞,朱林,黄江华,杨涛,廖茂杉,徐少华. 区域检验中心大规模新冠病毒核酸检测流程管理经验总结. 现代临床医学. 2023(01): 29-31+38 . 百度学术
    3. 张淑正,常中宝,任雪芳,王翠华,潘飞,冯广东. 气膜实验室在大规模核酸筛查背景下的建设实践. 医学理论与实践. 2023(04): 714-715+702 . 百度学术
    4. 王莹,姚瀚鑫,刘真意,王艺婷,周琪,许建成. 新型冠状病毒核酸检测假阳性及假阴性影响因素分析. 检验医学与临床. 2023(08): 1176-1179 . 百度学术
    5. 王兆睿,刘娜,郑阳,张云帆,郭琳琳,宋银森. 某新冠肺炎三级定点医院医护感染的风险评估. 河南医学研究. 2023(07): 1168-1171 . 百度学术
    6. 郝铮,杨洪,汪轩羽,翟振翔,洪燕英. 新型冠状病毒快速抗原检测与核酸检测结果一致与不一致因素探讨. 标记免疫分析与临床. 2023(02): 233-236 . 百度学术
    7. 陈志芳,曹文玲,邢红娜,朱萍,李铭睿,刘田田,刘宏涛,刘华,李秀池,马春梅,杨红云,汪朝晖,康熙雄. 新冠病毒抗体三项在体检人群中的应用. 中国医药生物技术. 2023(04): 333-338 . 百度学术
    8. 许果,董晨,田华,李楚楚,孔筱筱,李志锋,彭杰夫,储金金,许可,胡建利,鲍倡俊,朱立国. 新冠抗体检测技术进展及在防控工作中的应用. 江苏预防医学. 2023(03): 248-251 . 百度学术
    9. 陈志芳,曹文玲,邢红娜,刘宏涛,荣策,杨红云,汪朝晖,康熙雄. 大范围疫情中新型冠状病毒抗体免疫城市墙形成的现状调研. 现代医学与健康研究电子杂志. 2023(17): 105-108 . 百度学术
    10. 夏远,张海蓉,李乌云塔娜,张楠,沈媛,刘昆. 思维导图在卫生检验学知识建构中的应用. 卫生职业教育. 2023(24): 65-68 . 百度学术
    11. 王菀叶,聂珍琳,杨昕澄,何帮顺,谭明娟. 实验室病毒核酸检测工作中的实际问题与实验细节的改良. 标记免疫分析与临床. 2023(11): 1918-1925 . 百度学术
    12. 江晶晶,高春,冯富娟,于晓辉,张久聪. 新型冠状病毒肺炎无症状感染者的检测方法研究进展. 海南医学院学报. 2022(03): 161-165 . 百度学术
    13. 周丹,何进才,李惠贞,黄涛,谷大伟,张德明,罗胜华. 新型冠状病毒核酸检测的性能验证及评价. 检验医学与临床. 2022(03): 324-329 . 百度学术
    14. 李洁,朱智威,张思森,郝义彬. “人物同防”新型冠状病毒核酸快速检测策略在进口冷链食品集中监管仓疫情防控中的应用. 河南预防医学杂志. 2022(02): 90-93+111 . 百度学术
    15. 甘雁妃,钟礼信,戴奇山,聂玉强,王轶. 大规模新冠病毒核酸筛查的生物安全问题. 广州医药. 2022(01): 101-104 . 百度学术
    16. 何剑锋. 不同灭活方式对新型冠状病毒标本核酸检测效率的影响. 中国消毒学杂志. 2022(03): 177-179 . 百度学术
    17. 安超,施嘉楠,何瑞芬,马雯,朴文花. 应用不同消毒方法清除新型冠状病毒核酸污染的效果观察. 西安交通大学学报(医学版). 2022(02): 273-277 . 百度学术
    18. 周鹏程,肖伟,田芳芳,赵先平,马乐龙,章迪,胡崇宇,黄勋,吴安华,梁英,李亚,陈媛媛,宋巧,李春辉. 新冠肺炎方舱核酸检测基地感染防控策略. 中国感染控制杂志. 2022(02): 140-146 . 百度学术
    19. 张睿,杨帆. 新型冠状病毒疫苗接种相关ICD-10编码探讨. 现代医院. 2022(05): 725-727 . 百度学术
    20. 周毅,李婷婷,唐云,刘芬,陈爽,文泽力,张列,赵勇,唐萍,漆莉. 我国重庆市1例尼泊尔输入Delta变异株新型冠状病毒肺炎病例的流行病学调查. 疾病监测. 2022(04): 435-439 . 百度学术
    21. 周伟,李俊峰,刘才周,何强,颉晓玲. 新型冠状病毒大规模核酸筛检扩增试剂保存方式研究. 甘肃科学学报. 2022(04): 34-38 . 百度学术
    22. 陈顺利,汤灵宇,蔡璐瑶,陈颖异,郑思琳. 新型冠状病毒核酸标本采集的最佳证据总结. 中国临床新医学. 2022(09): 867-872 . 百度学术
    23. 李卓敏,张昕雨,于洋,张磊,王新宇,杜金龙,王志阳,谭延国. 不同核酸提取及扩增系统组合检测新型冠状病毒核酸的效能比较. 国际检验医学杂志. 2022(23): 2828-2831+2836 . 百度学术
    24. 张华,耿亚松,王倩,付东鹤,唐洪影,杨玲,董莉真,吴高鹏,李桂柃,李天宁,袁玉华. 三种新型冠状病毒抗体检测系统一致性评价. 山东医药. 2021(14): 33-36 . 百度学术
    25. 魏剑浩,朱召芹. 新型冠状病毒肺炎实验室检测技术进展. 上海医药. 2021(17): 6-10 . 百度学术
    26. 曲林琳,郭伟刚,杨宗兴,陈雍哲,齐翀,郑柏松,于得海,王莹,吴彤彤,张诚,佟学颍,杨晶,赵靖. 大规模新型冠状病毒核酸检测需求下城市检测基地的流程设计及改进. 国际检验医学杂志. 2021(19): 2423-2429 . 百度学术
    27. 邬巧玲,应娇茜,曹永彤,马亮,崔勇. 方舱核酸检测实验室在综合医院核酸检测中的应用. 中国医学装备. 2021(11): 166-169 . 百度学术
    28. 宋桃花,高岩,陈柯,郑皖怿,付玉荣,伊正君. 新型冠状病毒N蛋白的原核表达及其多克隆抗体的制备. 中国病原生物学杂志. 2021(12): 1373-1376 . 百度学术

    其他类型引用(5)

表(3)
计量
  • 文章访问数:  1687
  • HTML全文浏览量:  641
  • PDF下载量:  224
  • 被引次数: 33
出版历程
  • 收稿日期:  2021-01-04
  • 录用日期:  2021-01-16
  • 刊出日期:  2021-01-29

目录

/

返回文章
返回
x 关闭 永久关闭