在线问诊辅助方法装置电子设备和存储介质与流程

本发明涉及人工智能,尤其涉及一种在线问诊辅助方法、装置、电子设备和存储介质。

背景技术:

1、在线问诊是在线医疗的重要环节,在线问诊中就诊患者和医生通过视频对话交流,即就诊患者在远端,医生通过语音对话和视频图像对患者进行诊断。

技术实现思路

1、本发明提供了一种在线问诊辅助方法、装置、电子设备和存储介质,以解决在线问诊通过语音沟通难以获得准确有效的信息,影响医生对就诊患者病症的判断的问题。

2、第一方面,本发明提供了一种在线问诊辅助方法,包括:

3、获取就诊患者的就诊目标科室id;

4、加载与所述就诊目标科室id匹配的微表情识别模型;

5、获取所述就诊患者的视频数据;

6、将所述视频数据输入所述微表情识别模型中,得到所述就诊患者的表情标签;

7、根据所述表情标签和所述就诊目标科室id确定辅助文本,并在医生终端显示所述辅助文本。

8、可选的,所述微表情识别模型通过以下方式训练:

9、对efficientdet-lite0模型进行剪枝处理,并将剪枝处理后的模型作为微表情识别模型;

10、将efficentdet-b6模型确定为教师模型;

11、获取训练数据集;

12、采用所述训练数据集训练所述efficentdet-b6模型;

13、在所述efficentdet-b6模型训练完成后,采用所述efficentdet-b6模型和所述训练数据集训练所述微表情识别模型。

14、可选的,将所述视频数据输入所述微表情识别模型中,得到所述就诊患者的目标表情标签,包括:

15、计算所述视频数据中相邻两帧视频图像的相似度;

16、将相似度小于预设阈值的两帧视频图像确定为目标视频图像;

17、将所述目标视频图像输入所述微表情识别模型中,得到所述就诊患者的各个表情标签的第一概率;

18、基于所述第一概率确定所述就诊患者的目标表情标签。

19、可选的,在将所述目标视频图像输入所述微表情识别模型中之前,还包括:

20、对所述目标视频图像进行图像增强处理,得到增强处理后的目标视频图像。

21、可选的,在基于所述第一概率确定所述就诊患者的目标表情标签之前,还包括:

22、从所述视频数据中提取所述就诊患者的语音数据;

23、将所述语音数据分别输入预置的频率识别模型和语音识别模型中,得到所述就诊患者的各个表情标签的第二概率和第三概率,所述频率识别模型用于基于所述语音数据的频率识别所述就诊患者的表情标签,所述语音识别模型用于将所述语音数据转换为文本后识别所述就诊患者的表情标签;

24、所述基于所述第一概率确定所述就诊患者的目标表情标签,包括:

25、针对每个表情标签,根据所述表情标签的第一概率、第二概率和第三概率计算所述表情标签的目标概率;

26、将目标概率最高的表情标签确定为所述就诊患者的目标表情标签。

27、可选的,根据所述表情标签的第一概率、第二概率和第三概率计算所述表情标签的目标概率,包括:

28、基于所述就诊目标科室id确定所述微表情识别模型的第一权重、所述频率识别模型的第二权重以及所述语音识别模型的第三权重;

29、计算所述第一概率与所述第一权重的第一乘积、第二概率与所述第二权重的第二乘积、第三概率与所述第三权重的第三乘积;

30、计算所述第一乘积、第二乘积、第三乘积的和值,作为所述表情标签的目标概率。

31、可选的,根据所述表情标签和所述就诊目标科室id确定辅助文本,并在医生终端显示所述辅助文本,包括:

32、在预置的文本库中,查找与所述表情标签和所述就诊目标科室id匹配的文本作为辅助文本,并在医生终端显示所述辅助文本。

33、第二方面,本发明提供了一种在线问诊辅助装置,包括:

34、目标科室id获取模块,用于获取就诊患者的就诊目标科室id;

35、微表情识别模型加载模块,用于加载与所述就诊目标科室id匹配的微表情识别模型;

36、视频数据获取模块,用于获取所述就诊患者的视频数据;

37、表情标签识别模块,用于将所述视频数据输入所述微表情识别模型中,得到所述就诊患者的表情标签;

38、辅助文本确定和显示模块,用于根据所述表情标签和所述就诊目标科室id确定辅助文本,并在医生终端显示所述辅助文本。

39、第三方面,本发明提供了一种电子设备,所述电子设备包括:

40、至少一个处理器;以及

41、与所述至少一个处理器通信连接的存储器;其中,

42、所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明第一方面任一项所述的在线问诊辅助方法。

43、第四方面,本发明提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明第一方面任一项所述的在线问诊辅助方法。

45、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种在线问诊辅助方法,其特征在于,包括:

2.如权利要求1所述的在线问诊辅助方法,其特征在于,所述微表情识别模型通过以下方式训练:

3.如权利要求1所述的在线问诊辅助方法,其特征在于,将所述视频数据输入所述微表情识别模型中,得到所述就诊患者的目标表情标签,包括:

4.如权利要求3所述的在线问诊辅助方法,其特征在于,在将所述目标视频图像输入所述微表情识别模型中之前,还包括:

5.如权利要求3所述的在线问诊辅助方法,其特征在于,在基于所述第一概率确定所述就诊患者的目标表情标签之前,还包括:

6.如权利要求5所述的在线问诊辅助方法,其特征在于,根据所述表情标签的第一概率、第二概率和第三概率计算所述表情标签的目标概率,包括:

7.如权利要求1-6任一项所述的在线问诊辅助方法,其特征在于,根据所述表情标签和所述就诊目标科室id确定辅助文本,并在医生终端显示所述辅助文本,包括:

8.一种在线问诊辅助装置,其特征在于,包括:

9.一种电子设备,其特征在于,所述电子设备包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的在线问诊辅助方法。

THE END
1.每日先瞻·黑科技视界数颜机数颜机—能线上成交的面部美学问诊导流设备 项目介绍 万美京数颜机项目搭载了尖端的3D成像技术与革命性的空中虚拟诊室服务,引领国际前沿。其先进的3D成像技术能够以高精度完成面部重建,确保了数据的高效准确性。该技术使用户能够不受地理限制,随时随地接入远程面部数据建模与专业咨询服务。 https://www.shifair.com/informationDetails/239233.html
2.隐私协议本隐私政策与您所使用的叮当快药的商品购买、在线问诊、心理健康、健康信息浏览服务以及该服务所包括的各种业务功能(以下统称“我们的产品与/或服务”)息息相关,希望您在使用我们的产品与/或服务前仔细阅读并确认您已经充分理解本隐私政策所写明的内容,包括但不限于免除或限制我们责任的条款,并让您可以按照本隐私政策https://m.ddky.com/app/ddky/zhyf/privacy.html
3.智慧社区平台具体都有什么功能?知识中心资讯中心智慧社区平台支持社区活动的在线报名和组织,居民可以通过平台查看活动信息并进行报名,提高了活动的参与度和组织效率。 四、智能家居功能 1.智能家电控制 通过智慧社区平台,居民可以远程控制家中的智能家电设备,如空调、照明、电视等,提升了生活的便利性和舒适性。例如,居民可以在下班途中通过手机APP提前开启空调,回到家时https://sq.simpro.cn/news/zhsqptjtdysmgn.html
4.莆田学院附属医院智慧服务应用建设(一)期项目附件a.投标人应按照福建省政府采购网上公开信息系统设定的评审节点编制电子投标文件,否则资格审查小组、评标委员会将按照不利于投标人的内容进行认定。 b.投标人应在投标截止时间前按照福建省政府采购网上公开信息系统设定的操作流程将电子投标文件1份上传至福建省政府采购网上公开信息系统。电子投标文件的分项报价一览表、投标http://www.ptzfcg.gov.cn/upload/document/20220419/42cbf932c05048548c1b2893e6dd2fc3.html
5.常州供电用AI为考点电力设备“问诊”6月3日,国网常州供电公司工作人员来到常州高级中学高考考点,在为其供电的配电房开关柜、环网柜、箱式变压器等处安装了一种声纹感知装置。这是该公司首次试点应用AI声纹在线监测技术,为运行中的电力设备“问诊”。 就像人的声音具有唯一性、稳定性等特征一样,电力设备在不同状态下尤其是出现故障时,所产生的声音中也http://www.js.sgcc.com.cn/html/main/col81/2024-06/07/20240607093109515702981_1.html
6.复旦大学附属华山医院在线专家问诊复旦大学附属华山医院在线专家问诊 皮肤科 (98人) 国 神经内科 (65人) 国 神经外科 (104人) 国 感染发热 (29人) 国 抗生素研究所 (5人) 重症医学 (2人) 变态反应(过敏和 (2人) 变态反应(过敏和 (1人) 变态反应(过敏和 (3人) 变态反应(过敏和 (4人) 变态反应(过敏和 (http://www.zzfmdn.com/article/753043
7.医院信息系统的作用结构组成分类标准6、提供在线问诊图文咨询 使患者足不出户可完成问诊、检查、药品加工、邮寄等环节。大大提高患者看病就医的效率,使患者小病可以在家看,再也不必经历为看一点小病费时费力去医院排队挂号的尴尬。 7、外部接口功能 提供了医院信息系统与新农合系统的接口,并将逐步实现与医疗保险系统、双向诊疗系统、远程医疗咨询系统、妇https://www.cnpp.cn/focus/28849.html
8.平安降同时,此过程中,我们可能会收集您或您的患者的姓名、身份证信息、面部特征、性别、年龄、症状,用于患者病情的诊断及问诊权益的实名认证。如果您不提供上述权限、信息,将会影响您使用此功能。 1.5 名医就医协助 您可在“平安健康村医版”APP进行在线名医就医协助。在您使用该功能的过程中,因就医实行实名制要求,需要您https://www.jk.cn/stuttgart/agreement.html
9.每周文娱观察2017.2.176、QQ浏览器开通在线问诊 据报道,企鹅医生旗下的“免费问医生”服务日前正式登陆腾讯QQ浏览器,上线了微信小程序,提供在线免费医疗咨询。企鹅医生由腾讯、医联、基汇资本、红杉资本合资组建,控股方为腾讯。在“免费问医生”业务上,其股东医联提供了重要的医生资源。医联官方数据显示,平台目前拥有超过43万名认证执业医生http://www.leshanvc.com/cygc/23764.html
10.骨科移动医疗公司的突破口:教育社交随访资讯相对于其他平台,骨科在线的优势之一是它的权威性,一度承接COA大会网络注册、全国骨科医生登记、骨科学分会30周年庆典、中国骨科界各地各相关学术团体活动报道等工作。据亿欧了解,骨科在线的固定会员超过10万人,未来可能会和移动医疗公司进行合作对接。 上达医疗——新媒体+术后康复+可穿戴设备https://www.iyiou.com/news/2016011523725
11.日日新”大模型体系发布,现场演示AI写代码线上问诊秒做01 中文语言大模型露面:AI现编“手写文档OCR”程序,还充当大夫在线问诊 “商量”是商汤科技自研的中文语言大模型应用平台,支持单轮对话、多轮对话及超长文本理解,能够秒解复杂问题、提供定制化建议、辅助创作文本内容,并具备不断学习进化的特性。 该平台背后,是商汤研发的千亿参数中文语言大模型,支持企业服务、城市管理https://36kr.com/p/2209530028242308
12.全行业100个AIAgent智能体应用嘲合集6. 智能问诊和咨询服务 AI Agent 可以提供 7*24 的在线医疗咨询服务,回答患者的问题,提供初步的诊断建议。这有助于减轻医生的工作负担,提高医疗服务的可及性。 7. 手术辅助和模拟 AI Agent 可以辅助医生进行手术规划和模拟,提高手术的成功率。例如,通过虚拟现实技术,AI Agent 可以帮助医生在手术前模拟手术过程,提http://www.myzaker.com/article/66a46de48e9f0961210bedf8
13.为患者提供居家慢病监测远程问诊等医疗降BOE智慧医疗解决方案:院外管理——通过便携式物联网医疗设备和健康管理平台,为患者提供居家慢病监测、远程问诊等医疗健康服务。社区管理——通过搭建智能社区康养服务中心,依托自助式体检设备及系统,为用户提供社区体检、健康档案完善、在线医生报告解读、健康/生活指导等服务。个人管理——借助便携式健康设备和健康管理 APPhttps://xueqiu.com/3436225335/178310001
14.“华佗在线降扶贫”网络医院启动仪式举行患者足不出村与专家设备免费领 群众足不出村自选医生 此次免费发放的设备每套价值7000多元,均由河南华佗在线网络科技有限公司提供。设备安装调试后,患者可以根据自身病情,在村卫生室通过问诊设备,向乡级、县级、市级、省级医疗机构的专家发起即时问诊或预约问诊,与专家进行“面对面”交流,乡村医生在问诊过程中可以起到辅诊作用。 http://adminc.yywsb.com/dzb/12749.html