技术领域
[0001] 本发明涉及医疗协同服务技术领域，具体是一种高清实时医疗协同平台及其方法。
相关背景技术
[0002] 医学技术、信息技术进步，医疗行业临床治疗技术复杂而精进，岗位间、科室间、医院间的信息(尤其是医疗影像)、人员交互协同需求愈发丰富而高要求。现有利用视频监控平台、视频会议平台与计算机平台形成的集成式产品，在影像品质、实时性与治疗流程响应方面，远达不到临床要求。
[0003] 因此，如何为临床治疗提供优质高效的协同服务是本领域技术人员亟待解决的问题。
具体实施方式
[0049] 下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
[0050] 参照图1所示，本发明实施例提供的一种高清实时医疗协同平台，包括：数据交互模块1、数据库模块2和医疗会诊报告生成模块3；
[0051] 所述数据交互模块1连接多个用户终端，用于采集用户终端的用户音视频信息和用户语音，将所述用户音视频信息发送给其他用户终端，基于所述用户语音生成调用指令，将所述调用指令发送给所述数据库模块2，并将医疗会诊报告和医疗协同音视频信息发送给所述多个用户终端。
[0052] 具体的，数据交互模块1通过标准API接口对接各种标准化网络终端设备(即用户终端)，包括网络摄像机、视频编解码器、会议终端、计算机、网络电话、PDA、智能手机和显示屏。
[0053] 具体的，参照图2所示，数据交互模块1与用户终端之间的交互过程为：对接医院业务系统，调取临床协同任务建立协同分组，并定时通知协同人员采集信息流(包括信息化系统患者病历、医疗设备实时影像、协同场景语音/视频/数据)，信息流分发至协同人员建立高质量实时临床协同，进行示范教学/直播，临床协同过程语音视频同步录制文件可编辑制作教学课件，进行点播教学录制文件可通过关键词快速溯源。
[0054] 所述数据库模块2连接所述数据交互模块1与所述医疗会诊报告生成模块3，用于存储所述医疗会诊报告和所述医疗协同音视频信息，基于所述调用指令将所述医疗会诊报告和医疗协同音视频信息发送给所述数据交互模块1。
[0055] 具体的，基于所述调用指令调取所述医疗会诊报告和所述医疗协同音视频信息，将所述医疗会诊报告和所述医疗协同音视频信息进行绑定并发给所述数据交互模块1，用户终端以分屏的形式显示所述医疗会诊报告和所述医疗协同音视频信息。
[0056] 所述医疗会诊报告生成模块3用于采集会诊信息，并将所述会诊信息输入至会诊报告生成模型中，生成所述医疗会诊报告，并将所述医疗会诊报告发送至所述数据库模块2。
[0057] 具体的，所述会诊报告生成模型可以为会诊报告模板，包括：患者门诊号、姓名，手术名称、时间、主刀医生、麻醉医生，手术名称、手术过程记录、手术结果等必要信息。
[0058] 例如，在检查咽喉部时，当在咽喉部发现积液时记录吸口伸入喉道的距离，吸液时记录吸液功率、吸取的液量、吸取耗时、吸取时的图像留存等等，然后自动填充到“吸取喉液模板”的诊断记录模板中的相应数据项中，得到吸取喉液诊断记录。
[0059] 进一步地，可以将协同双方在术中的意见交流、调取了哪些病例和医疗影像记录和会诊医生建议等信息记录在医疗会诊报告中。
[0060] 本实施例中，通过用户交互模块实现了用户音视频信息的同步显示，在用户终端之间建立统一的通信架构，实现视频、即时通信、语音的统一通信，为临床治疗提供了优质高效的协同服务，并且能够实时采集医疗协同音视频信息进行同步播放显示，为临床治疗提供了高保真影像质量、超低平台延时与灵活的操作界面，建立了高质量的协同服务，提升了医疗质量与运营效率，优化了医疗机构持续发展与医患满意度。
[0061] 在一个实施例中，还包括：存储记录管理模块4；
[0062] 所述存储记录管理模块4连接所述数据库模块2，用于采集医疗协同音视频信息，并将所述医疗协同音视频信息发送给所述数据库模块2。
[0063] 具体的，对医疗协同音视频信息进行全过程记录，支持无损压缩，支持用户端和中心端存储。
[0064] 具体的，利用视频编码器对医疗协同音视频信息进行编码，将编码后的医疗协同音视频信息作为元数据存储至数据库模块2中，数据库模块2基于元数据将临床协同过程语音视频同步录制文件编辑制作为教学课件，在点播教学录制文件可通过元数据中的关键词快速溯源。
[0065] 进一步地，所述医疗协同音视频数据也可以直接根据用户需求直接将发送给多个用户终端进行同步显示，实现用户终端的交互；例如，一端的用户终端为现场医师，另一端的用户终端为远程指导专家，存储记录管理模块4建立现场医师端与远程指导专家端之间的因视频通信，采集现场医师端的医疗协同音视频信息并直接发送给远程指导专家端，远程指导专家根据医疗协同音视频数据来远程指导现场医师下一步该如何做或者自己下一步打算做的事对不对。
[0066] 在一个实施例中，所述存储记录管理模块4，包括：存储位置选择单元5和存储格式选择单元6；
[0067] 所述存储位置选择单元5用于采集所述医疗协同音视频信息，并选取音视频存储位置，将所述存储位置发送给所述存储格式选择单元6。
[0068] 具体的，所述存储位置支持用户端和/或中心端存储，用户也可以根据临床需要灵活选择存储位置。
[0069] 所述存储格式选择单元6用于获取所述医疗协同音视频信息的用途，基于所述医疗协同音视频信息的用途选取存储格式，将所述存储位置、存储格式与所述医疗协同音视频数据进行打包，生成医疗协同音视频信息打包数据，并将所述医疗协同音视频信息打包数据发送给所述数据库模块2。
[0070] 具体的，用户可以选择无损压缩存储和其他压缩存储方式(例如H.264或H.265)。
[0071] 具体的，所述数据库模块2还用于接收所述医疗协同音视频信息打包数据，并基于所述存储位置与存储格式对所述医疗协同音视频数据进行存储。
[0072] 在一个实施例中，参照图3‑4所示，所述数据交互模块1，包括：多点控制单元7、选择性转发单元8、矩阵控制单元9、调用指令生成单元10和视频播放单元11；
[0073] 所述多点控制单元7连接所述选择性转发单元8，用于采集所述用户终端的用户音视频信息，并对所述用户终端的用户音视频信息进行编码和混流，生成传输视频数据。
[0074] 具体的，利用Simulcast模式(联播模式)采集用户音视频数据，并对用户音视频数据进行编码、混流，生成不同分辨率的视频流。
[0075] 进一步地，所述用户终端可以为一个或多个，矩阵控制单元9利用SIP(会话发起协议)创建、修改和释放一个或多个参与者(主用户与协同用户)的会话，基于统一通信应用建立语音管理与视频管理，实现以人为本的融合与协同。
[0076] 所述选择性转发单元8用于获取所述其他用户终端的网络状态，基于所述其他用户终端的网络状态对所述传输视频数据进行处理，生成不同分辨率的视频流。
[0077] 具体的，选择性转发单元8根据其他用户端的网络状态将不同分辨率的视频流进行压缩处理，使得视频流符合其他用户终端的网络状态。
[0078] 例如，若用户终端为手机，其一次性接收的数据量为8兆，而视频流的数据量为16兆，则对该视频流进行压缩，将压缩后的视频流发送给手机端。
[0079] 所述矩阵控制单元9连接所述多个用户终端，用于采集用户需求，并基于所述用户需求将所述不同分辨率的视频流分发至所述其他用户终端。
[0080] 例如，不同分辨率的视频流包括手术开始视频、手术进程视频和手术报告视频三路视频流，用户需求为“观看手术报告视频”，则矩阵控制单元9根据上述用户需求将手术报告视频的视频流发送给用户终端。
[0081] 所述调用指令生成单元10用于采集所述用户语音，并基于所述用户语音生成调用指令，并将所述调用指令发送给所述数据库模块2。
[0082] 具体的，调用指令生成单元10采集用户语音，基于预先设置不同的语音相对应的用户指令(例如，将“显示心肌梗塞的图像”的语音指令生成相应的文字指令“心肌梗塞”“图像”，基于上述文字指令生成用户指令)。
[0083] 进一步地，调用指令生成可以基于用户指令选择性地提取医疗会诊报告和医疗协同音视频信息，将医疗会诊报告和所述医疗协同音视频信息以匹配调用指令的模式方案向用户展示。
[0084] 所述视频播放单元11用于将所述医疗会诊报告和所述医疗协同音视频信息发送给所述多个用户终端进行同步显示。
[0085] 具体的，在用户终端授权条件下，视频播放单元11可以实时将医疗协同音视频分发至直播平台，实现医疗直播活动；对于医疗协同过程中生成的音视频录制信息，按学术需要进行编辑整理形成教学视频，用于非实时状态下的点播学习。
[0086] 需要说明的是，参照图4所示，数据交互模块1实现协同服务需要以下功能：ACC(访问与授权准入控制)、MCU(多点控制)、Matrix(矩阵控制)、DBS(数据库)、MSR(存储与记录管理)、MS(流媒体服务器)、VOD(视频点播)、NAT(网络地址转换)功能。
[0087] 本实施例中，在临床协同场景下，根据协同参与各方的语音动作等指令，进行自动交互式智能识别，实现了医疗影像、病例、协同场景自身音视频及数据按需求的自动调取、自动同步和自动呈现。
[0088] 参照图5所示，一种高清实时医疗协同方法，包括：
[0089] S501、数据交互模块采集用户终端的用户音视频信息和用户语音，将所述用户音视频信息发送给其他用户终端，基于所述用户语音生成调用指令，将所述调用指令发送给数据库模块，并将医疗会诊报告和医疗协同音视频信息发送给所述多个用户终端。
[0090] 具体的，数据交互模块1通过标准API接口对接各种标准化网络终端设备(即用户终端)，包括网络摄像机、视频编解码器、会议终端、计算机、网络电话、PDA、智能手机和显示屏。
[0091] 具体的，参照图2所示，数据交互模块1与用户终端之间的交互过程为：对接医院业务系统，调取临床协同任务建立协同分组，并定时通知协同人员采集信息流(包括信息化系统患者病历、医疗设备实时影像、协同场景语音/视频/数据)，信息流分发至协同人员建立高质量实时临床协同，进行示范教学/直播，临床协同过程语音视频同步录制文件可编辑制作教学课件，进行点播教学录制文件可通过关键词快速溯源。
[0092] S502、数据库模块存储所述医疗会诊报告和所述医疗协同音视频信息，基于所述调用指令将所述医疗会诊报告和医疗协同音视频信息发送给所述数据交互模块。
[0093] 具体的，基于所述调用指令调取所述医疗会诊报告和所述医疗协同音视频信息，将所述医疗会诊报告和所述医疗协同音视频信息进行绑定并发给所述数据交互模块，用户终端以分屏的形式显示所述医疗会诊报告和所述医疗协同音视频信息。
[0094] S503、医疗会诊报告生成模块将所述会诊信息输入至会诊报告生成模型中，生成所述医疗会诊报告，并将所述医疗会诊报告发送至所述数据库模块。
[0095] 具体的，所述会诊报告生成模型可以为会诊报告模板，包括：患者门诊号、姓名，手术名称、时间、主刀医生、麻醉医生，手术名称、手术过程记录、手术结果等必要信息。
[0096] 例如，在检查咽喉部时，当在咽喉部发现积液时记录吸口伸入喉道的距离，吸液时记录吸液功率、吸取的液量、吸取耗时、吸取时的图像留存等等，然后自动填充到“吸取喉液模板”的诊断记录模板中的相应数据项中，得到吸取喉液诊断记录。
[0097] 进一步地，可以将协同双方在术中的意见交流、调取了哪些病例和医疗影像记录和会诊医生建议等信息记录在医疗会诊报告中。
[0098] 在一个实施例中，还包括：
[0099] S504、存储记录管理模块采集医疗协同音视频信息，并将所述医疗协同音视频信息发送给所述数据库模块。
[0100] 具体的，对医疗协同音视频信息进行全过程记录，支持无损压缩，支持用户端和中心端存储。
[0101] 具体的，利用视频编码器对医疗协同音视频信息进行编码，将编码后的医疗协同音视频信息作为元数据存储至数据库模块中，数据库模块基于元数据将临床协同过程语音视频同步录制文件编辑制作为教学课件，在点播教学录制文件可通过元数据中的关键词快速溯源。
[0102] 进一步地，所述医疗协同音视频数据也可以直接根据用户需求直接将发送给多个用户终端进行同步显示，实现用户终端的交互；例如，一端的用户终端为现场医师，另一端的用户终端为远程指导专家，存储记录管理模块建立现场医师端与远程指导专家端之间的因视频通信，采集现场医师端的医疗协同音视频信息并直接发送给远程指导专家端，远程指导专家根据医疗协同音视频数据来远程指导现场医师下一步该如何做或者自己下一步打算做的事对不对。
[0103] 在一个实施例中，如图6所示，步骤S504，即所述存储记录管理模块采集医疗协同音视频信息，并将所述医疗协同音视频信息发送给所述数据库模块，包括：
[0104] S5041、存储位置选择单元采集所述医疗协同音视频信息，并选取音视频存储位置，将所述存储位置发送给所述存储格式选择单元。
[0105] 具体的，所述存储位置支持用户端和/或中心端存储，用户也可以根据临床需要灵活选择存储位置。
[0106] S5042、存储格式选择单元获取所述医疗协同音视频信息的用途，基于所述医疗协同音视频信息的用途选取存储格式，将所述存储位置、存储格式与所述医疗协同音视频数据进行打包，生成医疗协同音视频信息打包数据，并将所述医疗协同音视频信息打包数据发送给所述数据库模块。
[0107] 具体的，用户可以选择无损压缩存储和其他压缩存储方式(例如H.264或H.265)。
[0108] 具体的，所述数据库模块接收所述医疗协同音视频信息打包数据，并基于所述存储位置与存储格式对所述医疗协同音视频数据进行存储。
[0109] 在一个实施例中，如图7所示，步骤S501，即所述数据交互模块采集用户终端的用户音视频信息和用户语音，将所述用户音视频信息发送给其他用户终端，基于所述用户语音生成调用指令，将所述调用指令发送给数据库模块，并将医疗会诊报告和医疗协同音视频信息发送给所述多个用户终端，包括：
[0110] S5011、多点控制单元采集所述用户终端的用户音视频信息，并对所述用户终端的用户音视频信息进行编码和混流，生成传输视频数据。
[0111] 具体的，利用Simulcast模式(联播模式)采集用户音视频数据，并对用户音视频数据进行编码、混流，生成不同分辨率的视频流。
[0112] 进一步地，所述用户终端可以为一个或多个，矩阵控制单元利用SIP(会话发起协议)创建、修改和释放一个或多个参与者(主用户与协同用户)的会话，基于统一通信应用建立语音管理与视频管理，实现以人为本的融合与协同。
[0113] S5012、选择性转发单元获取所述其他用户终端的网络状态，基于所述其他用户终端的网络状态对所述传输视频数据进行处理，生成不同分辨率的视频流。
[0114] 具体的，选择性转发单元根据其他用户端的网络状态将不同分辨率的视频流进行压缩处理，使得视频流符合其他用户终端的网络状态。
[0115] 例如，若用户终端为手机，其一次性接收的数据量为8兆，而视频流的数据量为16兆，则对该视频流进行压缩，将压缩后的视频流发送给手机端。
[0116] S5013、矩阵控制单元采集用户需求，并基于所述用户需求将所述不同分辨率的视频流分发至所述其他用户终端。
[0117] 例如，不同分辨率的视频流包括手术开始视频、手术进程视频和手术报告视频三路视频流，用户需求为“观看手术报告视频”，则矩阵控制单元根据上述用户需求将手术报告视频的视频流发送给用户终端。
[0118] S5014、调用指令生成单元采集所述用户语音，并基于所述用户语音生成调用指令，并将所述调用指令发送给所述数据库模块。
[0119] 具体的，调用指令生成单元采集用户语音，基于预先设置不同的语音相对应的用户指令(例如，将“显示心肌梗塞的图像”的语音指令生成相应的文字指令“心肌梗塞”“图像”，基于上述文字指令生成用户指令)。
[0120] 进一步地，调用指令生成可以基于用户指令选择性地提取医疗会诊报告和医疗协同音视频信息，将医疗会诊报告和所述医疗协同音视频信息以匹配调用指令的模式方案向用户展示。
[0121] S5015、视频播放单元将所述医疗会诊报告和所述医疗协同音视频信息发送给所述多个用户终端进行同步显示。
[0122] 具体的，在用户终端授权条件下，视频播放单元可以实时将医疗协同音视频分发至直播平台，实现医疗直播活动；对于医疗协同过程中生成的音视频录制信息，按学术需要进行编辑整理形成教学视频，用于非实时状态下的点播学习。
[0123] 显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
