[go: up one dir, main page]

CN116097367A - 免提药物跟踪 - Google Patents

免提药物跟踪 Download PDF

Info

Publication number
CN116097367A
CN116097367A CN202180056130.5A CN202180056130A CN116097367A CN 116097367 A CN116097367 A CN 116097367A CN 202180056130 A CN202180056130 A CN 202180056130A CN 116097367 A CN116097367 A CN 116097367A
Authority
CN
China
Prior art keywords
augmented reality
user
reality device
location
medication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180056130.5A
Other languages
English (en)
Inventor
约翰·兰根
埃文·陈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CareFusion 303 Inc
Original Assignee
CareFusion 303 Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CareFusion 303 Inc filed Critical CareFusion 303 Inc
Publication of CN116097367A publication Critical patent/CN116097367A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work or social welfare, e.g. community support activities or counselling services
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G16H20/13ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients delivered from dispensers
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G16H20/17ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients delivered via infusion or injection
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/004Annotating, labelling

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • General Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Medicinal Chemistry (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Chemical & Material Sciences (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Tourism & Hospitality (AREA)
  • Computing Systems (AREA)
  • Ophthalmology & Optometry (AREA)
  • Artificial Intelligence (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Child & Adolescent Psychology (AREA)
  • Strategic Management (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Telephone Function (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Eye Examination Apparatus (AREA)
  • Accommodation For Nursing Or Treatment Tables (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

所公开的系统和方法提供免提药物跟踪。一种方法包括提供可附着到用户面部的增强现实设备。该方法还包括使用增强现实设备的一个或多个传感器来确定关于药物要执行的用户动作。该方法还包括经由增强现实设备的显示界面呈现视觉指示符以帮助用户动作。该方法还包括经由增强现实设备的一个或多个传感器确认用户动作的完成。该方法还包括经由增强现实设备的通信接口向服务器发送指示用户动作完成的更新消息,其中该更新消息使得服务器更新数据库中的药物库存。

Description

免提药物跟踪
相关申请的交叉引用
本申请要求于2020年6月11日提交的题为“HANDS-FREE MEDICATION TRACKING(免提药物跟踪)”的美国临时申请序列号63/038,054的优先权,该申请的全部内容通过引用纳入本文。
技术领域
本公开一般涉及增强现实设备,更具体地涉及用于使用增强现实设备提供免提药物跟踪的方法和系统。
背景技术
为了跟踪药物和管理库存,用户可以使用手持设备和纸质文件。例如,可以使用手持条形码扫描仪以扫描贴附到药物、发票或其他文书工作的条形码标签。药物然后可以基于扫描到的条形码来识别,从而便于库存管理。然而,这些手持设备需要使用一只或多只手,这可能会妨碍医疗护理工作流进程,在这些进程中,双手最好是腾出来拿着图表、平板电脑、医疗设备和其他物品。此外,手持设备可能被栓在具体的位置或设备上,限制了部署灵活性和用户移动性。基于纸质文件的库存更新也可能助长转录错误、文件错放和药物转移。因此,需要改进药物跟踪的系统和方法。
发明内容
根据各种实施方式,提供了一种用于使用增强现实设备提供免提药物跟踪的方法。该方法可以包括提供可附接到用户面部的增强现实设备。该方法还可以包括使用增强现实设备的一个或多个传感器,确定相对于药物要被执行的用户动作。该方法还可以包括经由增强现实设备的显示界面,呈现视觉指示符以协助用户动作。该方法还可以包括经由增强现实设备的一个或多个传感器,确认用户动作的完成。该方法还可以包括经由增强现实设备的通信界面,向服务器传送指示用户动作的完成的更新消息,其中该更新消息致使服务器更新药物库存。其他方面包括用于实施前述方法的相应系统、装置和计算机程序产品。
根据各种实施方式,本主题技术包括一种可穿戴增强现实设备,包括:显示界面,用于呈现包括至少一个不透明或半透明图形元素的图形用户界面;通信接口;位置传感器,用于检测识别可穿戴增强现实设备的位置的位置信息;环境传感器,用于捕捉位置内的信息;以及处理器,被配置为:使用来自位置传感器的位置信息和来自环境传感器的环境信息,确定相对于药物要被执行的用户动作;经由显示界面,呈现视觉指示符以协助用户动作;经由从位置传感器或环境传感器中的至少一个接收到的信息,确认用户动作的完成;以及经由通信界面,向服务器发送指示用户动作的完成的更新消息,其中该更新消息致使服务器更新数据库中的药物库存。其他方面包括用于实施前述设备的相应系统、方法、计算机程序产品和装置。
其他方面包括用于实施前述设备和方法的相应系统、装置和计算机程序产品。
下面参照附图详细地描述了本主题技术的进一步方面、特征和优点,以及本主题技术的各个方面的结构和操作。
附图说明
当结合以下附图考虑时,参照以下详细描述可以更充分地理解本公开的各个目标、特征和优点,在这些附图中,相同的附图标记标识相同的元素。以下附图仅是出于说明的目的,而不是旨在限制本公开,本公开的范围在随后的权利要求中阐述。
图1描绘了根据本主题技术的各个方面的用于使用增强现实设备进行免提药物跟踪的示例系统。
图2描绘了根据本主题技术的各个方面的用于免提药物跟踪的增强现实设备的示例框图。
图3A和图3B描绘了根据本主题技术的各个方面的用于免提药物跟踪的增强现实设备的各种示例增强现实显示。
图4描绘了根据本主题技术的各个方面的用于使用增强现实设备进行免提药物跟踪的示例过程。
图5是说明根据本主题技术的各个方面的用于提供增强现实设备进行免提药物跟踪的示例电子系统的概念图。
图6是说明可促进本文所述的一个或多个增强现实特征的示例通信的交互图。
具体实施方式
虽然本文参照特定应用的说明性示例描述了本主题技术的各方面,但是应该理解,本主题技术不限于那些特定应用。获得本文提供的教导的本领域技术人员将认识到其范围内的附加修改、应用和方面以及本主题技术在其中将具有显著效用的附加领域。
本主题技术提供了一种用于免提药物跟踪的增强现实设备。佩戴着增强现实设备的用户可以例如直视特定药物,用于由该设备的传感器(诸如前置相机)进行识别。除了识别药物以外,还可以确定相对于所识别的药物的用户动作。例如,所认证的用户标识符、检测到的位置和/或由传感器提供的数据可用于确定用户动作。用户动作可以包括例如从重新备货区收纳药物,从自动配药机、货柜或货架中检索药物,将药物放入货架或货柜,给患者施用药物,以及处置过量药物。在确认用户动作的完成之后,更新消息可以被发送到服务器以致使相应的库存更新,例如通过更新库存数据库中的药物数量。以这种方式,药物库存可以由佩戴着增强现实设备的工作人员随时间推移自动更新和建立,从而有利地避免了容易出错的手动更新过程。
图1描绘了根据本主题技术的各个方面的包括用于提供免提药物跟踪的增强现实(Augmented Reality,AR)眼镜130的示例系统100。尽管增强现实设备在图1中被示出为一副集成式眼镜,但是可以提供各种其他实施方式,诸如用于附接到现有眼镜或其他形式的眼用佩戴件(例如,护目镜、面罩和面具)的夹式(clip-on)模块。用户110可以佩戴AR眼镜130以跟踪各种药物,诸如药物120。为了识别药物120,AR眼镜130的传感器可以将数据提供给经由网络112被发送到服务器114的查找请求。该查找请求可以包括诸如位置、视角、图像、视频、音频、用户标识符、用户角色标识符和用户眼睛跟踪信息的信息。服务器114可以基于查找请求查询数据库116以识别药物120。此外,AR眼镜130可以确定和确认相对于药物120的用户动作,诸如添加、移除、施用或处置药物。然后,指示用户动作的消息可以被发送到服务器114,以致使更新存储在数据库116中的库存。
在一些实施方式中,库存管理可以在佩戴着AR眼镜130的用户正在执行另一项任务的同时执行。例如,用户正在访问包括用于不同物品的几个不同存储位置(例如,货柜或药袋)的矩阵抽屉。虽然AR眼镜130可以用于授权和跟踪用户从特定货柜中取出物品,但是由AR眼镜130捕捉到的特定货柜附近的货柜的数据可以用于跟踪其他物品的库存。在一些实施方式中,系统可以识别由AR眼镜130捕捉到的数据与用于物品的库存管理系统计数之间的差异。在检测到差异之后,系统可以调整一个或多个设备以确认库存。例如,配货柜可以接收指令,以要求在允许从货柜配药事件之前录入货柜的计数。作为另一示例,由可以负责维护配药器内物品库存的药房临床医生佩戴的AR眼镜130可以当配药器在其视野中被识别时呈现增强信息,以指示差异被识别出。这种差异可以包括物品的库存计数、有效期,或其他属性,其可以从由AR眼镜130和医院信息系统检测到的数据之间的相关性中检测或推断出。
图2描绘了根据本主题技术的各个方面的用于免提药物跟踪的增强现实设备或AR眼镜130的示例框图。AR眼镜130包括数据总线132、处理器134、存储器136、通信接口140、传感器150、显示界面164、身份访问管理(identity access management,IAM)接口168、音频接口170、电源180以及功率采集器182。存储器136包括非易失性数据存储137。通信接口140包括Wi-Fi无线电142、蓝牙无线电144和射频标识符(radio frequency identifier,RFID)读取器146。传感器150包括RGB相机152、飞行时间相机154、视网膜扫描仪156和位置传感器158。位置传感器可以检测或生成识别AR眼镜130位置的位置信息。环境传感器可以捕捉(例如,生成或检测)关于AR眼镜130位置处或附近的环境的信息。附加的或可替代的传感器可以被包括,以检测AR眼镜130的定位,诸如加速度计、倾斜计等。音频接口170包括麦克风172和扬声器174。包括在AR眼镜130中的部件是示例性的,并且其他实施方式可以包括根据用例要求、功耗目标、护理机构设置和价格点约束的不同部件配置。
AR眼镜130可以包括处理器134,该处理器134可以对应于任何类型的通用或专用处理器、控制器、集成电路、专用集成电路(application specific integrated circuit,ASIC)、现场可编程门阵列(field programmable gate array,FPGA)、片上系统或类似设备,并且可以包括硬编码的电路元件、固件、软件或其任意组合,以实施本文所述的一个或多个具体特征。处理器134可以经由数据总线132与AR眼镜130的其他部件通信,该数据总线132可以包括一个或多个通信总线,诸如并行或串行总线。
AR眼镜130可以包括存储器136,该存储器136可以包括易失性工作存储器以及用于长期数据存储的非易失性数据存储137。例如,非易失性数据存储137可以包括闪存或在电源180不可用后保留数据的其他存储器。当对网络112的访问可用时,AR眼镜130可以经由网络112直接与服务器114通信。当对网络112的访问不可用时,更新消息反而可以被写入非易失性数据存储137,该更新信息记录例如相对于药物的用户动作或者用户摘除AR眼镜130。一旦重新建立了对网络112的访问,AR眼镜130就可以将更新消息发送到服务器114。以这种方式,AR眼镜130可以适应不同级别的网络可用性。
通信接口140可以包括一个或多个无线无线电,以经由网络112与其他设备(诸如服务器114)通信。例如,通信接口140可以包括一个或多个无线电设备、扫描仪或者其他设备,这些设备符合蓝牙和蓝牙低能耗(例如,经由蓝牙无线电144)、近场通信(Near FieldCommunication,NFC)、Wi-Fi(例如,经由Wi-Fi无线电142)、非接触式智能卡、射频识别(例如,经由RFID读取器146)、超宽带以及其他标准化或专有协议。通信接口140还可以利用一个或多个传感器150进行通信,例如通过使用RGB相机152以从扫描到的一维和二维条形码接收数据。
传感器150可以包括一个或多个传感器,以获得关于AR眼镜130的周围环境的数据。RGB相机152可以包括一个或多个前置相机,以捕捉对应于佩戴着AR眼镜130的用户110的注视的视图。飞行时间相机154可以包括一个或多个前置或后置相机,以捕捉深度信息,例如结合从RGB相机152接收到的数据协助物体检测,或者通过面部识别协助用户认证。视网膜扫描仪156可以包括一个或多个后置相机,以扫描用户110的一只或多只眼睛。视网膜扫描仪156被配置为生成可用于认证用户的扫描。例如,授权用户的生物特征信息可以被存储在数据库116中,并与来自视网膜扫描仪156的数据相匹配,以授权用户操作AR眼镜130。根据各种实施方式,视网膜扫描仪156可以扫描用户的视网膜,并向处理器134提供识别用户眼睛相对于AR眼镜130的定向的信息。处理器134可以确定用户相对于AR眼镜130正在注视的方向,或者基于处理器134获知的关于当前环境的其他信息,确定用户正在看着环境内的什么物体或位置。位置传感器158可以包括例如全球定位系统(global positioningsystem,GPS)无线电,以使能进行位置跟踪。可替代地或附加地,在一些实施方式中,三角测量可以用于确定位置,例如通过使用Wi-Fi或蓝牙或使用已知网络和/或集线器的基于超宽带信号的三角测量。传感器150还可以包括未示出的其他传感器。
根据各种实施方式,AR眼镜130被配置为对相机152和/或154的视界内的物体执行实时图像处理。图像处理可以被卸载到服务器114以用于物体的检测,或者这样的处理可以由眼镜的处理器134执行。传感器150可以被动态地激活以基于用户的工作流收集数据。例如,相机152可以每10秒拍摄一个图像。这些图像可以被提供给经过训练的图像分类算法,以便将图像与正在执行的一项或多项可能的临床任务相关联,诸如存储药物、进行输液、审查药物医嘱的履行、用药物配药器重新重新备货、检查患者或房间状态等。分类算法可以提供图像描绘相关联的临床任务的概率。基于所识别的临床任务和概率(如果可用的话),增强数据可以被传送到AR眼镜1130。例如,系统可以检测到用户已经拿起了物体或者放下了物体。当物体被接收到用户手中时,该算法可以检测物体的放置,并且通过图像识别或者通过分析捕捉到的图像进行识别贴附到物体的特征或代码(例如,条形码或Q码)来开始识别物体。
当物品被拿起和/或移动时,处理器134(或服务器114)可以自动识别物品被拿起的位置,并且将佩戴眼镜的用户的标识与该物品的移动或放置相关联。该位置可以使用位置跟踪和/或图像识别来识别,通过这种方式将捕捉到的图像与已知存储位置的图像进行比较。当物品被放置在新位置时,处理器134(或服务器114)可以自动将物体与数据库中的新位置相关联,并且创建指示用户将物体放置在新位置的记录。在这方面,该记录可以包括地理位置或货架或存储标识符、物品的标识符以及将物品放置在新位置的用户的标识符。
在一些实施方式中,可能希望使用AR眼镜130被动地收集数据,以生成护理区域的库存地图。信息是被动收集的,因为用户不需要向特定传感器提供明确的命令以收集信息。相反,AR眼镜130可以自动触发传感器150(单独或通过来自中央服务器的命令)以收集信息。被动收集可以被动态地激活,以优先考虑AR眼镜130用于增强临床活动(例如,那些影响患者护理的活动)的资源而不是数据收集。
随着AR眼镜130被佩戴,传感器150可以被激活以捕捉图像数据或无线信号。捕捉到的数据或信号可以与AR眼镜130在捕捉数据或信号时的位置信息相关联地存储。这些信号可以从临床网络设备(例如,无线网络接入点)、医疗设备、RFID或其他贴附到物品的无线标签、或者办公设备接收。图像数据可以针对临床区域内的具体物品(例如,药物、医疗设备)、药物配药器、医疗设备(例如,输液泵)或物理结构(例如,标志、地砖、门、垃圾桶或其他物理地标)进行捕捉。在一些实施方式中,AR眼镜130可以提供将佩戴者引导至需要数据收集的区域的提示。然而,实际的数据收集典型地将在没有明确的用户输入的情况下执行。
在一些实施方式中,传感器150中的一个或多个可用于识别用户何时正佩戴着AR眼镜130。例如,视网膜扫描仪156可以周期性地或连续地参与,以确保用户110仍然在场且佩戴着AR眼镜130。当检测到使用眼镜时,与AR眼镜130相关联的处理器可以发起会话。当视网膜扫描仪156在预定的时间阈值(例如,1秒)之后无法扫描用户110的视网膜或虹膜时,则可以确定用户110已经摘除了AR眼镜130,从而结束先前授权的用户会话,并且AR眼镜130可以向例如服务器114发送指示这种摘除的警示消息。可以利用确认连续用户会话的其他方法,诸如周期性地发送由用户的另一设备(诸如智能电话、智能卡或其他令牌)确认的心跳消息。由于自动库存管理可能依赖于用户对有效操作的遵行,因此这些警示消息可以协助策略实施并且防止转移。例如,AR眼镜130可以检测到(例如,使用图像识别)用户拿起了受控药物或物质。如果例如,通过将眼镜从用户脸上摘下一段时间而检测到会话中断,则警示消息可以被发送到服务器或与监管功能相关联的设备(例如,用户的监管者)。此外,警示消息还可以在法医调查中提供证据,例如,当调查药物转移时。
显示界面164可以驱动显示器、投影仪或其他设备以向用户110示出各种增强现实投影,表现为用户110查看的真实环境上的覆盖图(overlay)。例如,显示界面164可以驱动半透明或透明显示器、通过AR眼镜130的透镜投射或在其上反射出的图像投影仪、将图像直接投射到视网膜的投影仪、或任何其他增强现实显示设备。图像可以被呈现为给人以半透明或不透明的感觉。AR投影可以包括给用户的指令,例如用于特定药物的用药指令。其他AR投影可以高亮药物的定位以便检索,例如通过提供高对比度的点、圆或其他视觉标识符。还有其他AR投影可以识别用于放置药物的定位,诸如通过识别多层药物货架中的特定隔层或货柜。以这种方式,用户110可以快速且可视地识别用于执行相对于药物的用户动作的正确位置。在Schmalstieg和Reitmayer的“The World as a User Interface:AugmentedReality for Ubiquitous Computing(作为用户界面的世界:用于普适计算的增强现实)”(中欧多媒体和虚拟现实会议)(2005)中描述了用于增强现实图形用户界面的附加特征,其全部内容通过引用纳入本文。
身份访问管理(IAM)接口168可以包括一个或多个设备,以使用户能够提供用于用户认证的凭证。在一些实施方式中,用户可能需要在戴上AR眼镜130之前进行认证。例如,IAM接口168可以包括或者与一个或多个生物特征扫描仪(诸如指纹传感器、视网膜扫描仪156)、心电图(electrocardiogram,ECG)读取器(诸如智能手表)以及用于面部识别的飞行时间相机154交互。IAM接口168还可以包括智能卡读取器或其他设备,以读取非接触式智能卡或其他唯一标识符或令牌。在一些实施方式中,IAM接口168可以使用通信接口140以利用远程设备(诸如平板电脑或智能手机)上存在的生物特征扫描仪或读取器。
音频接口170可以包括一个或多个音频设备,诸如麦克风172和扬声器174。麦克风172可以使语音命令能被使用,并且也可以用作传感器150之一。扬声器174可以使音频提示、反馈和警示能被发射。扬声器174可以包括压电扬声器、动态扬声器或另一种类型的扬声器。例如,不同的音调可以从压电扬声器中发出以指示不同的状态或用户提示。音频接口170(或其一部分)可以被设置在位于用户耳边的AR眼镜130的臂的一部分上。以这种配置,用户可以感知经由音频接口170传送或接收到的低音量声音。这对于降低护理区域内的噪音和向佩戴者提供谨慎的指导可能特别有用。
电源180将功率提供给AR眼镜130的部件。电源180可以包括不可充电电池、可充电电池、电容器或超级电容器,或者另一种能量存储设备。电源180可以是用户可访问的和可替换的。为了补充电源180或给其再充电,功率采集器182可用于从外部源接收功率。例如,功率采集器182可以通过感应线圈、RF源或太阳能电池板接收无线功率。功率采集器182还可以通过直接有线连接接收功率,诸如经由通用串行总线(universal serial bus,USB)充电电缆、AC-DC充电器或DC-DC充电器,其可以被插入到外部电池组或墙壁市电电压源。
图3A和图3B描绘了根据本主题技术的各个方面的用于免提药物跟踪的增强现实设备(诸如AR眼镜130)的各种示例增强现实显示。AR眼镜130被配置为便于将药物收纳到备货室。AR眼镜130被配置为将关于库存控制的图形信息覆盖在由用户感知的真实世界环境上。AR眼镜130被配置为将用户的位置传达到服务器114,包括当前环境内的用户定向和当前视线方向。视觉信息可以被转换为数字信息并且被发送到服务器,服务器然后可以在用户视图内使用物体或图像识别以识别物体及其三维空间内的具体位置。基于用户的当前位置,系统可以识别需要由用户关于医疗物体的库存执行的动作。这样的动作可以包括例如,从重新备货区收纳药物,从特定的自动配药机、货柜或货架中检索药物,将药物放置或递送到特定的自动配药机、货柜或货架,给患者施用药物,以及处置过量药物。不同的模式或动作可以基于对诸如日程表或其他电子医疗记录的信息的光学字符识别来触发。该触发可以是上下文的,由此AR眼镜130接收与特定模式相关联的指示。指示的示例包括具体的音频短语、AR眼镜130的移动或手势或者由AR眼镜130检测到的移动或手势(例如,手的移动或信号)、或者AR眼镜130上的按钮或其他物理元件的激活。这些模式可以是预定义的或由系统动态提供的。每种模式可以对应于AR眼镜130的具体配置,以有效地分配资源(例如,功率、处理、网络、通信等)。例如,针对用户检测到的上下文和活动模式可以指示出用户没有完成具体任务。在这种情况下,AR眼镜130可以进入警示模式,由此资源被分配到在AR眼镜130处接收和处理警示消息。作为另一个示例,如果系统确定用户的班次结束,则AR眼镜130可以将资源调整为优先考虑被动数据收集的配置。该确定可以基于AR眼镜130和医院信息系统(诸如考勤系统)之间的一个或多个通信。
作为动作的一个示例,收纳工作人员可能已经从药房移动到备货室以投放一种或多种药物。在卸下每种药物之前,收纳工作人员可以简单地看下贴附到每种药物的条形码或其他标识符。位置传感器158可以检测到当前位置是备货室,并且用户110可以被认证为收纳工作人员。可替代地或附加地,来自传感器150(诸如RGB相机152和飞行时间相机154)的数据可以通过用医疗机构的视觉数据训练的机器学习模型来处理,以确定物体的当前位置,即使不使用位置传感器158。机器学习模型可以基于来自佩戴着AR眼镜130的用户的数据连续训练。基于当前位置和/或经认证的用户,可以确定用户动作,或者在这种情况下确定药物收纳。佩戴AR眼镜130的用户110可以简单地朝向贴附到药物的标签上的条形码312A直视,如AR显示332A所示。然后,AR消息310A可以被投射给用户,指示药物被检测为200支650mg阿司匹林(Aspirin)。相应的更新消息可以被发送到服务器114,以更新存储在数据库116中的备货室的库存。例如,相关联的医疗护理机构的库存记录表可以用新的记录进行更新,新的记录指示将200支阿司匹林盒添加到备货室,和/或用于备货室的现有阿司匹林记录的数量字段可以被更新以反映200支阿司匹林盒的收纳。此外,诸如经认证的临床医生ID或用户ID、患者ID、当前位置和其他数据的字段也可以针对每条记录写入,使能根据用户、患者、位置或其他标准跟踪物品移动。因此,用户110仅需要在投放(drop-off)之前看下药物,以执行数据库116中的自动库存记录更新,这不需要手持扫描仪的处理、文书工作的更新或其他繁重的手动过程。
另一个示例用例是将药物投放到具体位置,诸如货柜阵列、药物货架和配药机。用户动作或药物投放可以基于检测到的位置(例如,靠近配药机或药物货架)或经认证的用户(例如,药剂师)来确定。首先,用户可以看下药物的标签进行识别,如AR显示332A先前所示。然后,AR消息310B可以被投射给用户,如AR显示332B所示,指示用户将药物投放在药物货架314或“备货室120,货架B-1”内的何处。例如,来自RGB相机152和飞行时间相机154的数据可用于构建周围环境的三维映射。数据库116可以包括药物货架314的虚拟三维模型,该模型包括指定特定药物在货架A-1、B-1、A-2和B-2内的优选定位的元数据。通过将三维映射与虚拟三维模型相匹配,用于投放已识别的药物的优选定位可以被确定,以将AR指示符316和AR消息310B定位在由显示界面164输出的AR投影内。
如果药物货架314不在AR眼镜130的当前视图中,则可以在AR消息中提供导航指令,以指引用户朝向投放的位置。例如,示出用户位置和投放位置的导航地图可以在AR覆盖图中显示出,和/或逐步导航指令可以被提供,其也可以经由例如扬声器174可听见地提供。
一旦药物货架314出现在视图中,AR指示符316就可以被提供为在用户视图内的物体(包括药物货架)上增强的视觉指示符,在此处被示出为高亮的圆圈,尽管也可以使用其他指示符。在一些实施方式中,上面所述的用于确定视觉指示符的定位的三维模型匹配可以在AR眼镜130上进行本地处理,以尽可能快地提供视觉指示符,例如在1秒或更短时间内。因此,AR眼镜130可以缓存和处理来自数据库116的物体和/或图像识别机器学习模型的至少一部分。在其中到网络112的强连接可用的实施方式中,那么一些机器学习模型处理可以被远程卸载,例如,经由服务器114。一旦药物被放置在正确位置或如AR显示332C所示的货架“B-1”,AR消息310C就可以被投射给用户以确认药物投放。在一些实施方式中,该投放可以基于在药物货架314的货架B-1上可见的药物的视觉确认来自动确认。在一些其他实施方式中,用户可以例如经由麦克风172提供语音命令以确认药物投放。与收纳过程一样,更新消息可以被自动发送到服务器114以更新数据库116中相应的表格,以反映药物货架314中药物的更新数量。
上述投放可以类似地进行,用于给自动配药机重新备货。然而,由于AR眼镜130可能先前已经认证了用户110,因此认证令牌可以基于先前的用户认证被自动地提供给自动配药机。认证令牌可以通过使用RFID发射机或者通过使用通信接口140来发送。自动配药机可以接收认证令牌,确认相关联的用户被验证可以操作自动配药机,并且接受认证令牌以授权用户和提供对自动配药机的访问进行重新备货。以这种方式,用户可以避免在自动配药机处进行单独认证,以便于快速且容易地重新备货,同时保持安全性。
在一些实施方式中,AR眼镜130可以检测视野内的药物配货柜或其他医疗设备。在一些实施方式中,该检测可以包括检测用户的手或要访问的特定设备的其他指示。在识别要访问的设备时,AR眼镜130可以发起与该设备的通信信道,以提供生物特征数据(例如,虹膜扫描)。一旦连接,AR眼镜130可以向设备提供一次或多次扫描。然后,该设备可以使用接收到的扫描数据以验证佩戴者是否能够访问配药器。以这种方式,配药器不需要包括独立的生物特征扫描仪,并且可以使用AR眼镜130内的传感器来验证用户。尽管此处的描述侧重于生物特征扫描,但是AR眼镜130的其他传感器150可用于收集针对用户的附加或可替代的识别/验证数据,诸如用户手掌的图像、声纹、手势等。
药物的检索可以按类似的方式进行。例如,用户可以发出语音命令,请求检索特定药物。可替代地,用户可以使用连接到网络112的远程设备(诸如平板电脑或智能手机)以请求检索特定药物。AR眼镜130可以识别要被检索的所请求的药物的位置,并且例如通过经由AR眼镜130内或到用户视网膜上的投影向用户呈现导航消息和AR指示符以指引用户到该位置。在用户检索到药物之后,更新消息可以被发送到服务器114以更新数据库116中的库存。
另一个示例用例是给患者施用药物。用户动作或药物管理可以基于经认证的用户(例如,医生或护士)或位置(例如,在病房中)来确定。该过程可以从用户注视AR显示332D中的条形码312B开始,以识别药物或“10支50mg舒马普坦(Sumatriptan)”。接下来,如AR显示332E所示,用户可以注视附在患者手腕上的条形码312C以识别患者318。可替代实施方式可以使用RFID标签或者识别患者318的其他手段。然后,AR眼镜130可以查找针对患者318的治疗方案,并且在AR消息310E中向用户提供施用指令,该指令指示用户每日两次或按需口服进药。在确认管理之后,更新消息可以被发送到服务器114以更新数据库116中的库存。当施用是针对患者318的特定位置时,那么该位置也可以通过AR指示符被用户识别。例如,如果施用是针对注射,则AR指示符可以识别患者318的静脉定位。在共同拥有和转让的题为“Wearable Electronic Device for Enhancing Visualization during Insertion ofan Invasive Device(用于在介入式设备的插入期间增强可视化的可穿戴电子设备)”的美国专利公开US20150209113A1中描述了其他特征,其全部内容通过引用纳入本文。
在施用药物还涉及其他医疗设备的情况下,诸如经由输液泵提供药物,医疗设备也可以被相应地编程。例如,AR眼镜130可以致使输液泵的泵送参数被自动编程,从而避免由用户手动输入参数的潜在易错步骤。例如,通信接口140可以包括RFID发射机,其可以基于经认证的用户和泵送参数将认证令牌传送到输液泵的RFID读取器。然后,输液泵可以验证认证令牌对于保管相关联的患者标识符是否有效,解锁自身以供用户操作,并且自动设置用于所识别的药物的输液泵参数。附加地或可替代地,AR眼镜130可以使用图像识别和/或通过使用位置跟踪来识别输注泵,并且直接与泵或与连接到泵的服务器通信以解锁泵。以这种方式,用户不必单独解锁用于用药的相关联的医疗设备,或者该示例中的输液泵,并且参数已经被自动且正确地编程,从而简化了用药工作流,同时减少了错误。根据机构政策,除了RFID以外,还可以使用其他通信信道。
另一个示例用例是处置过量药物。例如,患者318可能提前出院,并且可能没有利用舒马普坦的完整处方。在这种情况下,确认过量药物的处置对预防可能很重要。如AR显示332F所示,该处置可以通过检测将药物处置到经许可的容器(诸如处置单元320)中来确认。
以这种方式,由每个用户进行的每个单独的库存变化可以在数据库116中记录和更新。每个改变记录可以包括检测到的当前位置(例如,经由位置(例如,GPS)传感器或机器学习模型匹配)和用户动作的具体位置(例如,在具体货柜或货架上投放或检索)(当其可用时)。相应地,医疗护理机构的库存可以由佩戴着AR眼镜130的用户随时间推移建立和维护,避免了执行手动库存和存货检查的需要。此外,由AR眼镜130收集的数据可用于训练和改进各种机器学习模型,以用于识别库存工作流动作和医疗机构中药物的位置。该模型可以使用初始训练周期来训练和/或可以随着用户在初始训练周期之后继续使用AR眼镜130来持续训练。
AR眼镜130还可以从传感器150中的一个或多个收集数据以验证处置。例如,AR眼镜130可以确定临床医生正在执行废品工作流。随着临床医生移动到废品站时,AR眼镜130可以收集信息以将该位置识别为经许可的废品站。AR眼镜130可以致使消息被传送以记录临床医生在特定时间的位置以及特定废品需求(例如,药物)。AR眼镜130还可以跟踪包含药物的容器。该跟踪可以包括图像捕捉或贴附在容器的标签的无线信号检测。该信息可以与AR眼镜130的位置相关联(例如,在收集时间与AR眼镜130的位置信息一起收集到的时间数据),以指示容器已经在何处。AR眼镜130还可以确认容器已经处于待监控的视野内。由AR眼镜130收集到的图像或其他传感器数据可以由系统处理以检测容器是否被检测到。如果系统没有识别出容器或者容器在一段时间内不可识别,AR眼镜130可以致使AR显示呈现提示,以将容器带入AR眼镜130的感测区域内。该提示可以包括呈现容器的轮廓,佩戴者应该在该轮廓内对准物理容器。这可以便于捕捉关于容器的清晰信号。该系统可以录入该提示的呈现,以提供显示出容器的保管链和废品协议的可审计记录。
图4描绘了根据本主题技术的各个方面的用于使用增强现实设备进行免提药物跟踪的示例过程400。出于解释的目的,本文参照图1-3B以及本文所述的部件和/或过程描述了示例过程400的各个框。过程400的一个或多个框可以例如由计算设备实施,该计算设备包括处理器以及由设备利用的其他部件。在一些实施方式中,一个或多个框可以与其他框分开实施,并且由一个或多个不同的处理器或设备实施。进一步出于解释的目的,示例过程400的框被描述为串行或线性发生。然而,示例过程400的多个框可以并行发生。此外,示例过程400的框不需要按照所示顺序执行,和/或示例过程400的一个或多个框不需要执行。
在所描绘的示例流程图中,提供可由用户佩戴的增强现实设备(411)。参照图1,这可以对应于提供可由用户110佩戴的AR眼镜130。如上所述,增强现实设备也可以是附接到现有眼镜的模块。
过程400可以继续使用一个或多个传感器确定相对于药物要被执行的用户动作(412)。参照图1和图2,这可以对应于处理器134经由传感器150确定相对于药物120要被执行的用户动作。如上面的示例用例所讨论,该确定可以基于经认证的用户(例如,来自视网膜扫描仪156的数据)、当前检测到的位置(例如,来自位置传感器158、RGB相机152、飞行时间相机154的数据)、药物的预期位置(例如,来自匹配于数据库116中的虚拟三维模型的RGB相机152和飞行时间相机154的数据)、患者标识(例如,来自RGB相机152或RFID读取器146),或者来自传感器150和/或通信接口140的其他数据。在一些实施方式中,来自传感器150的数据可以通过机器学习模型进行处理以确定用户动作。例如,如上所讨论,来自传感器150的数据可用于生成周围环境的三维映射。三维映射可以通过机器学习模型处理来自传感器150的数据而生成,该机器学习模型用药物货架、货柜阵列、自动配药机和其他位置的模型数据训练进行检索和递送药物。然后,三维映射可以匹配于数据库116中的虚拟三维模型,其中该虚拟三维模型还指定了特定药物的定位,包括优选的投放定位。虚拟三维模型也可以专用于特定位置处的容器和配药器,其也可用于当位置传感器158不可用时确定当前位置。因此,通过机器学习模型处理来自传感器150的数据,可以确定与用户动作相关联的特定位置。
过程400可以继续经由显示界面呈现视觉指示符以协助用户动作(413)。参照图2和图3A-3B,这可以对应于处理器134经由显示界面164呈现视觉指示符(诸如AR消息310A-310F和AR指示符316)以协助用户动作。如上面示例用例所讨论,视觉指示符还可以包括到药物的具体位置的导航。
视觉增强的呈现可以是环境的一般增强。一般增强可以基于用户、他们的角色(例如,药剂师、药房技术员、护士、医生、生物医学技术员、维修人员、保洁人员等)以及他们的位置(例如,环境内的物理位置,注视方向)中的一个或多个来提供关于物品的一般增强信息。对于一般增强,AR眼镜130可以激活传感器150中的一个或多个以接收关于AR眼镜130附近的物体的信息。接收到的信息可以被处理以收集关于可识别物体的增强数据。例如,供应点附近的保洁人员有可能对药膏的位置不感兴趣,但可能对清洁用品的位置感兴趣。在这种情况下,接收到的信息(或与其相关联的增强数据)可以被过滤,以呈现最可能与用户、他们的位置以及他们的当前活动相关的增强信息。
在一些实施方式中,AR眼镜130可以接收诸如语音命令的附加输入,以进一步限定预期任务。例如,如果检测到临床医生正站在医疗用品柜,可能不清楚临床医生正试图检索什么。在此时,AR眼镜130可以显示建议(例如,“你在寻找纱布垫吗?”)。佩戴者可以说出诸如“寻找杆菌肽(bacitracin)”的命令。使用话语,AR眼镜130或与其相关联的语音识别系统可以确定用户正在寻找杆菌肽并提供具体增强。一旦系统确定了具体物品或意图,增强数据的过滤就可以排除与具体物品或意图不相关的增强信息。增强数据可以与具体任务或物品相关联,并且与具体物品或意图进行比较以便过滤。
在一些实施方式中,可能希望节约AR眼镜130被用于感测和处理信号的资源。一种节约资源的技术是通过选择性地激活有可能检测感兴趣的物体的传感器。例如,如果系统确定药房技术员正在检索药物的供应瓶。该瓶可以与诸如RFID标签标识符的具体标识符相关联。AR眼镜130可以广播RFID询问信号以检测附近的RFID标签。如果接收到对应于标签标识符的响应信号,则相机可以被激活以收集环境的图片,用于增强物体的具体位置。该图像可以示出具体物体,并且相应的增强现实向导可以被呈现以示出位置。该向导可以包括在对应于具体物品位置的用户视野上高亮或着色。
过程400可以继续经由一个或多个传感器确认用户动作的完成(414)。参照图2和图3A-3B,这可以对应于处理器134经由传感器150确认用户动作的完成。例如,可以检测到待放置在正确位置的药物,诸如AR显示332C中的货架“B-1”或AR显示332F中的处置单元320。在另一个示例中,可以检测到待施用给患者(诸如AR显示332E中的患者318)的药物。
过程400可以继续经由通信接口向服务器发送指示用户动作的完成的更新消息,其中该更新消息致使服务器更新数据库中的药物库存(415)。参照图1和图2,这可以对应于处理器134经由网络112经由通信接口140向服务器114发送指示用户动作的完成的更新消息。当服务器114接收到更新消息时,服务器114可以更新数据库116中的相应表格,以反映药物库存的更新。
所描述的特征可以被实施为提供增强现实工作流或在医疗机构内的不同护理区域中监控。例如,一些医疗机构包括中心药房。中心药房可以接收由药房技术员填写的药物订单。订单的填写可以包括识别药物储备容器的位置,计数订购的剂量(例如,药片、液体容积单元、吸入器、贴片等的数量)。该填写可以包括生成订单的标签或其他标识。这些动作可以基于由AR眼镜收集到的传感器数据来检测。
当接收到订单时,系统可以识别有资格填写订单且位于药房的药房技术人员。一旦识别出,诸如基于从在药房内佩戴的AR眼镜接收到的信息,增强内容可以被传送给技术人员以填写订单。增强内容可以包括订单信息,诸如待填写的药物、储备瓶的位置指示符等。用户可以明确地提供输入以指示他们不能完成订单,诸如通过转身开始另一个工作流、眨眼、打手势、说命令或采取可由AR眼镜收集到的数据检测和解释的另一个动作。作为填写订单的最后一步,药房技术员可以接收增强现实内容,指引他们将填写完的订单留到某一位置进行验证。例如,一些订单可能需要佩戴AR眼镜的执业药剂师进行验证。技术人员的眼镜可以传送指示该订单已经被放置在那里以供验证的信号。该信号可以包括与该订单被放置的位置相关联的位置信息。然后,验证系统可以在该区域内识别适当且有空的药剂师以审查订单。识别出的个人可以接收到指示订单正在等待审查的增强现实内容。内容可以包括订单信息或位置标识符,以加速订单的检索以供审查。随着用户拿到订单时,AR眼镜可以接收关于订单或患者的附加信息。例如,实验室结果可能在订单已经被填写完之后但在进行验证之前接收到。增强现实内容可以提醒审查中的药剂师这种变化以及是否有必要改变订单。药剂师佩戴的AR眼镜上的一个或多个传感器可以收集指示药剂师批准订单的数据。该数据可以包括将物体移动到调度或批准的位置。该数据可以包括手势或签名应用。检测到的签名或手势可以与存储的由药剂师采用的签名或手势进行比较。以这种方式,当采用的版本对应于检测到的版本时,可以确认药剂师批准的真实性。
从调度或批准位置,临床医生或其他医疗工作人员可以将填写好的药物处方带到患者或病房,以用于分配给患者。这些工作人员也可能佩戴AR眼镜。当他们接近调度位置时,AR眼镜可以检测到工作人员正在准备通过机构进行一轮递送。AR眼镜或其他系统参与者可以调查等待递送的物体,并且通过例如将相似病房的订单分组在一起来识别使一轮递送最大化的集合。当用户查看调度位置时,该分组可以被呈现为增强现实内容。在下一轮包括的物体可以被突出显示或者列出。AR眼镜还可以提供作为增强现实内容的路线信息,以引导工人沿着高效路线通过机构。高效路线可以是一条这样的路线,例如,避免正被清扫的区域、避免原路返回、使乘坐电梯次数最小化等。
增强现实内容的另一个示例是允许临床医生虚拟地看到病房。在医院环境中,休息和安静对患者的健康和康复非常重要。然而,临床医生可能需要检查病房内生命关键物品的状态,诸如输液泵、生命体征监测、患者位置(例如,在床上或倒在地板上)等。许多基本需要可以使用病房内的传感器(诸如病床衡重监视器或其他医疗设备)来检测。使用来自病房中的传感器的数据,房间的虚拟图像可以经由AR眼镜生成和呈现。虚拟图像可以包括患者的定位、患者的生命体征、患者的历史或未来需要(例如,当前输液在30分钟后结束;晚餐定于4:30等)。这些虚拟看诊(look-in)尤其是在换班期间当一组新的临床医生可能负责一组患者时是有价值的。使用虚拟看诊,临床医生不需要亲自打开每扇门检查他们需要的关键信息。当AR眼镜检测到用户注视着病房门或门附近的房间号标志时,它可以确定是否需要虚拟看诊。一旦检测到,AR眼镜可以传送用于虚拟看诊信息的请求,并且呈现诸如所描述的那些增强现实内容。
上述示例过程400的许多方面以及相关特征和应用也可以被实施为软件过程,这些软件过程被指定为记录在计算机可读存储介质(也被称为计算机可读介质)上的指令的集合,并且可以被自动执行(例如,在没有用户干预的情况下)。当这些指令由一个或多个处理单元(例如,一个或多个处理器、处理器的核或其他处理单元)执行时,它们致使处理单元执行指令中指示的动作。计算机可读介质的示例包括但不限于CD-ROM、闪存驱动器、RAM芯片、硬盘驱动器、EPROM等。计算机可读介质不包括以无线方式或通过有线连接传递的载波和电子信号。
术语“软件”意指酌情包括驻留在只读存储器中的固件或存储在磁存储设备中的应用,其可以被读入存储器以便由处理器处理。另外,在一些实施方式中,本主题公开的多个软件方面可以被实施为较大程序的子部分,同时保持本主题公开的不同软件方面。在一些实施方式中,多个软件方面也可以被实施为单独的程序。最后,共同实施本文所述的软件方面的单独程序的任何组合在本主题公开的范围内。在一些实施方式中,软件程序在被安装为在一个或多个电子系统上操作时,定义了实施和执行软件程序的操作的一个或多个具体的机器实施方式。
计算机程序(也被称为程序、软件、软件应用、脚本或代码)可以以任何形式的编程语言编写,包括编译型或解释型语言、声明型或过程型语言,并且它可以以任何形式部署,包括作为独立程序或作为模块、部件、子例程、物体或适合在计算环境中使用的其他单元。计算机程序可以但不需要对应于文件系统中的文件。程序可以被存储在保存其他程序或数据的文件的一部分(例如,存储在标记语言文档中的一个或多个脚本)中,存储在专用于讨论中的程序的单一文件中,或者存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。计算机程序可以被部署在一台计算机或多台计算机上执行,这些计算机位于一个站点处或者分布在多个地点处且由通信网络互连。
图5是说明根据本主题技术的各个方面的用于使用增强现实设备提供免提药物跟踪的示例电子系统500的概念图。电子系统500可以是用于执行与过程400的一个或多个部分或步骤相关联的软件的计算设备,或由图1A-4提供的一个或多个部件和过程。结合关于图1A-4的公开内容,电子系统500可以是上文所述的AR眼镜130的代表。在这方面,电子系统500可以是微型计算机、个人计算机或移动设备,诸如智能手机、平板电脑、笔记本电脑、PDA、增强现实设备、可穿戴设备(诸如手表或手环或眼镜)或其组合,或者具有嵌入在其中或耦合到其上的一个或多个处理器的其他触摸屏或电视、或者具备网络连接性的任何其他类别的计算机相关电子设备。
电子系统500可以包括各种类型的计算机可读介质和用于各种其他类型的计算机可读介质的接口。在所描绘的示例中,电子系统500包括总线508、处理单元512、系统存储器504、只读存储器(Read-Only Memory,ROM)510、永久存储设备502、输入设备接口514、输出设备接口506以及一个或多个网络接口516。在一些实施方式中,电子系统500可以包括其他计算设备或电路,或者与其集成,用于操作先前描述的各种部件和过程。
总线508共同表示通信地连接电子系统500的众多内部设备的所有系统、外围设备和芯片组总线。例如,总线508将处理单元512与ROM 510、系统存储器504和永久存储设备502通信地连接。
从这些各种存储器单元中,处理单元512检索待执行的指令和待处理的数据,以便执行本主题公开的过程。在不同的实施方式中,处理单元可以是单个处理器或多核处理器。
ROM 510存储处理单元512和电子系统的其他模块所需的静态数据和指令。另一方面,永久存储设备502是读写存储器设备。这种设备是即使在电子系统500关闭时也能存储指令和数据的非易失性存储器单元。本主题公开的一些实施方式使用海量存储设备(诸如磁盘或光盘及其相应的磁盘驱动器)作为永久存储设备502。
一些实施方式使用可移动存储设备(诸如软盘、闪存驱动器及其相应的磁盘驱动器)作为永久存储设备502。与永久存储设备502一样,系统存储器504是读写存储器设备。然而,与存储设备502不同,系统存储器504是易失性读写存储器,诸如随机存取存储器。系统存储器504存储处理器在运行时需要的指令和数据中的一些。在一些实施方式中,本主题公开的过程被存储在系统存储器504、永久存储设备502和/或ROM 510中。从这些各种存储器单元中,处理单元512检索待执行的指令和待处理的数据,以便执行一些实施方式的过程。
总线508还连接到输入和输出设备接口514和506。输入设备接口514使用户能够向电子系统传达信息和选择命令。与输入设备接口514一起使用的输入设备包括例如,字母数字键盘和定点设备(也被称为“光标控制设备”)。输出设备接口506使能例如显示由电子系统500生成的图像。与输出设备接口506一起使用的输出设备包括例如打印机和显示器设备,诸如阴极射线管(Cathode Ray Tube,CRT)或液晶显示器(Liquid Crystal Display,LCD)。有些实施方式包括兼具输入和输出设备作用的设备,诸如触摸屏。
另外,总线508还通过网络接口516将电子系统500耦合到网络(未示出)。网络接口516可以包括例如,无线接入点(例如,蓝牙或WiFi)或用于连接到无线接入点的无线电电路。网络接口516还可以包括用于将计算机连接到计算机网络(诸如局域网(“LAN”)、广域网(“Wide Area Network,WAN”)、无线LAN或内联网)的一部分的硬件(例如,以太网硬件),或者网络中的网络(诸如互联网))。电子系统500的任何或所有部件可以与本主题公开结合使用。
图6是说明根据本主题的各个方面的可促进本文所述的一个或多个增强现实特征的示例通信的交互图。图6的消息流示出了可被包括在增强现实系统中的若干实体之间交换的信息,这些实体包括医院信息服务器690(例如,电子病历系统、患者信息系统、实验室信息系统、考勤系统、安全系统或诸如此类)和医疗设备692,诸如输液泵或药物分配柜。为了便于解释,所示出的实体的数量已经被限制。然而,将理解,与本文中的描述一致,可以添加附加实体或者组合多个实体。
消息传递(Messaging)602可以在AR眼镜130被激活或检测到由用户佩戴之后执行。该激活可以基于AR眼镜130内的按钮或压力传感器(例如,检测手臂靠在用户的耳朵、鼻子或其他身体部位上)或者相机(例如,检测用户的虹膜)的致动来确定。信息传递602可以收集信息以将用户与AR眼镜130关联起来。该收集可以包括激活AR眼镜130的一个或多个传感器,诸如相机(例如,以捕捉用户的图像)或无线传感器(例如,以捕捉来自例如用户徽章的无线信号)。
消息传递604可以将来自AR眼镜130的请求传送到AR服务器114。该请求可以包括经由消息传递602收集到的信息。该请求可以包括用于AR眼镜130的标识符,以促进AR眼镜130和相关联的用户之间的唯一配对。
AR服务器114可以至少部分地基于经由消息传递604接收到的请求中包括的信息,执行消息传递606以将用户与AR眼镜130关联起来。将用户进行关联可以包括验证关于用户的信息以确保用户被授权访问系统以及允许何种级别的访问。该关联可以被存储在由AR服务器114可访问的数据库中。在一些实施方式中,该关联可以包括信息传递608,以发送或接收完成关联的数据。例如,医院信息服务器690可以是用户角色或权限的来源。
将用户进行关联还可以包括识别要经由AR眼镜130呈现的初始增强现实内容。该识别可以基于与关联请求一起发送的数据的分析。例如,如果护士在AR眼镜130位于供应室的同时请求关联,则AR服务器114可以预测护士将要执行库存工作,并且获得与该位置相关的库存或其他内容。在一些实施方式中,可以存在要呈现给用户的一般信息,诸如关于医疗机构的培训提醒或公告。该分析可以包括向经训练的机器学习模型提供传感器数据,以识别用户可能正在与之交互的任务、活动、患者或设备。
AR服务器114可以经由消息传递610向AR眼镜130传送关联确认。该确认可以包括增强现实内容。该确认可以包括唯一识别该关联的令牌或其他值。令牌可以被包括在后续消息中,以确认和关联与AR眼镜130及相关联的用户的通信。该确认可以包括用于AR眼镜130的配置信息。例如,AR服务器114可以确定可能不需要图像的任务。在这种情况下,AR眼镜130可以接收配置信息以从相机转移资源,从而保留可用于AR眼镜130的其他部件的整体资源。
配置信息可以附加地或可替代地包括用于特定传感器的配置,诸如用于无线扫描的采样率、无线电功率或频率,或者类似的配置。AR眼镜130可以呈现从AR服务器114接收到的AR内容。
AR眼镜130的传感器可以收集数据。经由信息传递614,AR眼镜可以将收集到的数据传送到AR服务器114。该传输可以由以下一项或多项触发:收集到的数据的数量、AR眼镜130的位置、AR眼镜130的移动量、或AR眼镜130可检测到的其他参数。在一些实施方式中,该数据可以在收集时或接近收集时(例如,“实时”)被传送到AR服务器114。消息传递614可以包括关联令牌或其他标识符,以将数据与AR眼镜130和/或用户关联起来。
AR服务器114可以使用信息传递616以分析从AR眼镜130接收到的传感器数据。该分析可以包括利用所描述的机器学习模型对图像或其他数据进行分类。该分析可以包括查询医院信息服务器690以获取附加信息,诸如库存或患者数据。该分析可以包括在医院信息服务器690中存储信息,诸如配药事件、库存计数、见证或其他验证、药物管理等。医院信息服务器690处的数据的查询或存储可以经由消息传递618执行。在616处的分析可以包括基于用户、AR眼镜130的位置和传感器数据识别要提供给AR眼镜130的增强现实内容。
例如,AR眼镜130可以捕捉来自待输液的药物的信息。AR服务器114可以将待输液的药物与以前提供给患者的药物进行比较。在一些情况下,药物的组合可能会产生有害的相互作用,或者药物可能会对患者有过敏的担忧。在一些情况下,AR服务器114可以分析收集到的数据以符合药物施用协议。该协议可以包括在输液之前、期间或之后执行的事件序列。该协议可以包括可接受的输液地点,这也可以由从AR眼镜130收集到的数据确认。如果识别出与协议或安全问题的偏离,则警示信息可以作为AR内容提供,以用于经由AR眼镜130呈现。
AR服务器114可以经由消息传递620提供增强现实内容。在接收到AR内容之后,AR眼镜130可以呈现AR内容。呈现AR内容可以包括经由AR眼镜130呈现准备好的内容(例如,显示文本或图像)或者将从AR服务器114接收到的AR内容转换为可由AR眼镜130显示的格式。消息传递620可以包括用于AR眼镜130的配置信息。与来自消息传递610的配置信息一样,消息传递620中的配置信息可以调整AR眼镜130中包括的一个或多个功能或设备。该调整可以被识别为消息传递616处的分析的一部分。
在一些情况下,AR服务器114可以确定AR眼镜130靠近医疗设备692。如所讨论,系统可以基于例如角色、位置、先前动作以及由AR眼镜130收集到的数据来识别AR眼镜130的佩戴者将执行的一个或多个潜在动作。在这种情况下,信息传递620中的增强现实内容可以包括关于医疗设备692的信息。一则示例是允许AR眼镜130与医疗设备692通信的配对信息。这对于例如使用AR眼镜130收集用于医疗设备692的登录信息可能是期望的。
消息传递662可以在AR眼镜130和医疗设备692之间执行以进行配对。配对通常是指在两个或更多个设备之间建立通信路径。消息传递662可以是基于标准的(例如,类似BLUETOOTH)或专有的配对协议。
在配对后,消息传递624可以收集用于医疗设备692的信息,诸如用户生物特征数据、物体信息等。医疗设备692所需的特定信息可以作为配对的一部分或在配对之后被识别。该收集可以包括激活AR眼镜130的一个或多个传感器以获得由医疗设备692请求的数据。消息传递626可以将收集的数据从AR眼镜130传送到医疗设备692。
如图6所示,数据在实体之间直接传送。然而,在一些实施方式中,数据可以经由中间服务器或数据存储来传送。在这种情况下,通信可以识别数据的可用性和数据的位置(例如,文件名或记录标识符)。类似地,图6所示的消息传递被顺序示出,但是可以按不同的顺序执行。例如,可以重复消息传递612至620以利用AR眼镜130连续收集数据,分析数据,并且呈现AR内容。
上述这些功能可以在计算机软件、固件或硬件中实施。这些技术可以使用一个或多个计算机程序产品来实施。可编程处理器和计算机可以被包括在移动设备中或被包装成移动设备。这些过程和逻辑流程可以由一个或多个可编程处理器和一个或多个可编程逻辑电路执行。通用和专用计算设备和存储设备可以通过通信网络互连。
一些实施方式包括诸如微处理器、存储设备和存储器的电子部件,其将计算机程序指令存储在机器可读或计算机可读介质(可替代地,被称为计算机可读存储介质、机器可读介质或机器可读存储介质)中。这样的计算机可读介质的一些示例包括RAM、ROM、只读光盘(Read-Only Compact Disc,CD-ROM)、可记录光盘(Recordable Compact Disc,CD-R)、可重写光盘(Rewritable Compact Disc,CD-RW)、只读数字通用光盘(例如,DVD-ROM、双层DVD-ROM)、各种可记录/可重写DVD(例如,DVD-RAM、DVD-RW、DVD+RW等)、闪存(例如,SD卡、迷你SD卡、微型SD卡等)、磁性和/或固态硬盘、只读和可记录Blu-
Figure BDA0004113315450000241
光盘、超密度光盘、任何其他光学或磁性介质、以及软盘。计算机可读介质可以存储可由至少一个处理单元执行的且包括用于执行各种操作的指令集的计算机程序。计算机程序或计算机代码的示例包括诸如由编译器产生的机器代码,以及包括由计算机、电子部件或微处理器使用解释器执行的更高级代码的文件。
虽然上面的讨论主要是指执行软件的微处理器或多核处理器,但是一些实施方式由一个或多个集成电路执行,诸如专用集成电路(ASIC)或现场可编程门阵列(FPGA)。在一些实施方式中,这样的集成电路执行被存储在电路本身上的指令。
如本申请的说明书和任何权利要求所用,术语“计算机”、“服务器”、“处理器”和“存储器”全都是指电子或其他技术设备。这些术语不包括人或人群。出于说明书的目的,术语“显示(display)”或“正在显示(displaying)”意味着在电子设备上显示。如本申请的说明书和任何权利要求所用,术语“计算机可读介质(computer readable medium)”和“计算机可读介质(computer readable media)”完全受限于以计算机可读形式存储信息的有形物理物体。这些术语排除任何无线信号、有线下载信号和任何其他短暂信号。
为了提供与用户的交互,本说明书中描述的主题的实施方式可以在计算机上实施,该计算机具有用于向用户显示信息的显示设备(例如,CRT(阴极射线管)或LCD(液晶显示器)监视器)以及用户可以通过其向计算机提供输入的键盘和定点设备(例如,鼠标或轨迹球)。其他种类的设备也可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的感官反馈,例如,视觉反馈、听觉反馈或触觉反馈;并且来自用户的输入可以以任何形式接收,包括声音、语音或触觉输入。此外,计算机可以通过向由用户使用的设备发送文档和从其接收文档来与用户交互;例如,通过响应于从Web浏览器接收到的请求将网页发送到用户的客户端设备上的Web浏览器。
本说明书中描述的主题的实施方式可以在计算系统中实施,该计算系统包括后端部件,例如,作为数据服务器,或者包括中间件部件,例如,应用服务器,或者包括前端部件,例如,具有图形用户界面或Web浏览器的客户端计算机,用户可以通过图形用户界面或Web浏览器与本说明书所描述的主题的实施方式交互,或者一个或多个这样的后端、中间件或前端部件的任何组合。系统的部件可以通过数字数据通信的任何形式或介质(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、互联网络(例如,互联网)和对等网络(例如,自组织对等网络(ad hoc peer-to-peer network))。
计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离,并且可以通过通信网络进行交互。客户端和服务器的关系是借助于运行在相应计算机上且彼此具有客户端-服务器关系的计算机程序而产生的。在一些实施例中,服务器将数据(例如,HTML页面)传送到客户端设备(例如,出于向与客户端设备进行交互的用户显示数据和从其接收用户输入的目的)。在客户端设备处生成的数据(例如,用户交互的结果)可以在服务器处从客户端设备接收。
本领域技术人员将理解,本文描述的各种说明性块、模块、元件、部件、方法和算法可以被实施为电子硬件、计算机软件或两者的组合。为了说明硬件和软件的这种可互换性,上文已经依据其功能性大体上描述了各种说明性块、模块、元件、部件、方法和算法。这样的功能性是作为硬件还是软件实施取决于特定的应用和对整个系统施加的设计约束。熟练技术人员可以针对每个特定的应用以不同的方式实施所描述的功能性。在完全不脱离本主题技术范围的情况下,各种部件和块可以被不同地布置(例如,以不同的顺序布置或以不同的方式分隔)。
应当理解,所公开的过程中步骤的具体顺序或层次是示例途径的说明。基于设计偏好,应当理解,过程中步骤的具体顺序或层次可以被重新排列。一些步骤可以被同步执行。随附的方法权利要求以样本顺序呈现各步骤的元素,并且不意味着局限于所呈现的具体顺序或层次。
主题技术作为条款的说明:
条款1、一种可穿戴增强现实设备,包括:显示界面,用于呈现包括至少一个不透明或半透明图形元素的图形用户界面;通信接口;位置传感器,用于检测识别所述可穿戴增强现实设备的位置的位置信息;环境传感器,用于捕捉所述位置内的信息;以及处理器,被配置为:使用来自所述位置传感器的位置信息和来自所述环境传感器的环境信息,确定相对于药物要被执行的用户动作;经由所述显示界面,呈现视觉指示符以协助所述用户动作;经由从所述位置传感器或所述环境传感器中的至少一个接收到的信息,确认所述用户动作的完成;以及经由所述通信接口,向服务器发送指示所述用户动作的完成的更新消息,其中所述更新消息致使所述服务器更新数据库中的药物库存。
条款2、根据条款1所述的可穿戴增强现实设备,其中,所述环境传感器包括相机,并且其中所述处理器被配置为:基于从所述相机接收到的图像信息,自动检测所述药物何时由当前与所述增强现实设备相关联的用户拿起;当所述药物被从当前位置拿起时,基于经由所述相机捕捉所述药物的一个或多个图像,自动确定所述药物的标识;以及生成记录,所述记录指示所述药物被拿起和移动的时间,以及将所述药物从当前位置的移动关联至当前与所述增强现实设备相关联的用户。
条款3、根据条款1或条款2所述的可穿戴增强现实设备,其中,所述环境传感器包括视网膜扫描仪,以及其中在确定所述用户动作之前,所述处理器被配置为:经由由所述视网膜扫描仪收集到的信息,认证用于操作所述增强现实设备的用户。
条款4、根据条款3所述的可穿戴增强现实设备,其中,所述处理器被配置为:基于与所认证的用户相关联的角色或权限,确定要被执行的用户动作。
条款5、根据条款3或条款4中任一项所述的可穿戴增强现实设备,其中,所述处理器进一步被配置为:确定所述视网膜扫描仪在预定的时间阈值内尚未扫描到所述用户的视网膜;和经由所述通信接口,传送指示所述用户移除所述增强现实设备的警示消息。
条款6、根据条款3至5中任一项所述的可穿戴增强现实设备,还包括第二环境传感器,以捕捉所述位置内的附加信息,以及其中,所述处理器进一步被配置为:至少部分地基于由所述第二环境传感器捕捉到的第二环境信息,检测所述位置内的医疗设备;以及在认证所述用户之后,经由所述通信接口向所述医疗设备传送认证令牌,其中所述医疗设备使用所述认证令牌来解锁所述医疗设备以供用户操作。
条款7、根据前述条款中任一项所述的可穿戴增强现实设备,其中,所述处理器进一步被配置为:致使医疗设备的参数基于所述药物进行编程。
条款8、根据前述条款中任一项所述的可穿戴增强现实设备,其中,所述处理器被配置为:通过图像识别机器学习模型的至少部分处理来自所述环境传感器的数据,确定要被执行的用户动作,其中所述图像识别机器学习模型接收图像数据的集合作为输入,并提供至少一个用户动作作为输出。
条款9、根据前述条款中任一项所述的可穿戴增强现实设备,其中,所述处理器被配置为:通过机器学习模型的至少部分处理来自所述位置传感器的数据,确定要被执行的用户动作,其中所述机器学习模型从所述位置传感器接收数据的集合作为输入,并提供至少一个用户动作作为输出。
条款10、根据前述条款中任一项所述的可穿戴增强现实设备,其中,所述处理器被配置为:至少部分地基于以下一项或多项识别患者:所述环境信息和所述位置信息;以及基于所述患者和所述药物确定要被执行的用户动作。
条款11、根据前述条款中任一项所述的可穿戴增强现实设备,其中,所述可穿戴增强现实设备还包括:加速度计,被配置为检测所述可穿戴增强现实设备的位置,以及其中所述处理器被配置为基于由所述加速度计检测到的位置而呈现视觉指示符。
条款12、根据前述条款中任一项所述的可穿戴的增强现实设备,其中,所述视觉指示符包括增强现实投影,其用于在增强现实投影内识别由显示界面输出的所述用户动作相对于所述药物的位置。
条款13、根据前述条款中任一项所述的可穿戴增强现实设备,其中,所述可穿戴增强现实设备还包括:射频标识符(RFID)读取器,以及其中所述处理器被配置为通过经由所述RFID读取器读取所述药物的RFID标签而确定药物。
条款14、一种用于提供免提药物跟踪的方法,所述方法包括:提供用户可穿戴的增强现实设备;使用从所述增强现实设备的一个或多个传感器接收到的第一信息,确定相对于药物要被执行的用户动作;经由所述增强现实设备的显示界面,呈现视觉指示符以协助所述用户动作;经由从所述增强现实设备的一个或多个传感器接收到的第二信息,确认所述用户动作的完成;以及经由所述增强现实设备的通信接口,向服务器传送指示所述用户动作的完成的更新消息,其中所述更新消息致使所述服务器更新数据库中的药物库存。
条款15、根据条款14所述的方法,其中,所述一个或多个传感器包括视网膜扫描仪,并且其中在所述确定步骤之前,所述方法还包括:经由由所述视网膜扫描仪收集到的信息,认证穿戴着所述增强现实设备的用户。
条款16、根据条款15所述的方法,其中,确定要被执行的用户动作是基于所认证的用户的角色或权限。
条款17、根据条款15或条款16所述的方法,其中,所述方法还包括:确定所述视网膜扫描仪在预定的时间阈值内尚未扫描到所述用户的视网膜;以及经由所述通信接口,传送指示所述用户移除所述增强现实设备的警示消息。
条款18、根据条款14至17中任一项所述的方法,还包括:致使医疗设备的参数基于所述药物进行编程。
条款19、根据条款14至18中任一项所述的方法,其中,所述视觉指示符包括增强现实投影,其用于在增强现实投影内识别由所述显示界面输出的所述用户动作相对于所述药物的位置。
条款20、一种非暂时性存储介质,包括指令,所述指令当由一个或多个处理器读取时致使一种方法,所述方法包括:使用增强现实设备的一个或多个传感器,确定相对于药物要被执行的用户动作;经由所述增强现实设备的显示界面,呈现视觉指示符以协助所述用户动作;经由所述增强现实设备的一个或多个传感器,确认所述用户动作的完成;以及经由所述增强现实设备的通信接口,向服务器发送指示所述用户动作的完成的更新消息,其中所述更新消息致使所述服务器更新数据库中的药物库存。
为了方便起见,本公开的各方面的各种示例被描述为带编号的条款(1、2、3等)。这些是作为示例提供的,并且不限制本主题技术。下面提供的附图和参考编号的标识仅仅是作为示例和出于说明性目的,并且条款不受这些标识的限制。
进一步考虑:
应当理解,所公开的过程中步骤的具体顺序或层次是示例途径的说明。基于设计偏好,应当理解,过程中步骤的具体顺序或层次可以被重新排列。一些步骤可以被同步执行。随附的方法权利要求以样本顺序呈现各步骤的元素,并且不意味着局限于所呈现的具体顺序或层次。
提供先前的描述是为了使本领域技术人员能够实践本文所述的各个方面。先前的描述提供了本主题技术的各种示例,并且本主题技术不限于这些示例。对这些方面的各种修改对于本领域技术人员而言将是显而易见的,并且本文所定义的通用原理可以适用于其他方面。因此,权利要求不旨在局限于本文所示的方面,而是要被赋予与语言权利要求一致的全部范围,其中除非特别说明,否则以单数形式对元素的引用并不旨在意指“一个且只有一个”,而是“一个或多个”。除非另有特别说明,否则术语“一些”是指一个或多个。阳性代词(例如,他的(his))包括阴性和中性性别(例如,她的(her)和它的(its)),反之亦然。标题和副标题(如果有的话)只是为了方便而使用,并非限制本公开。
如本文所用,术语“网站(website)”可以包括网站的任何方面,包括一个或多个网页、用于托管或存储web相关内容的一个或多个服务器等。因此,术语“网站”可以与术语“网页(web page)”和“服务器(server)”可互换地使用。谓语动词“被配置为(configuredto)”、“可操作为(operable to)”和“被编程为(programmed to)”并非暗示着对主题的任何特定的有形或无形的修改,而是旨在可互换地使用。例如,被配置为监测和控制操作或部件的处理器也可以意味着被编程为监测和控制操作的处理器或者可操作为监测和控制操作的处理器。同样地,被配置为执行代码的处理器可以被解释为被编程为执行代码或者可操作为执行代码的处理器。
如本文所用,术语“自动(automatic)”可以包括计算机或机器在没有用户干预情况下的执行;例如,通过由计算机或机器或其他启动机制响应于谓语动词动作的指令。本文所使用的词语“示例(example)”意味着“起到示例或说明的作用”。在本文中描述为“示例”的任何方面或设计不一定被解释为优于或有利于其他方面或设计。
诸如“方面(aspect)”的短语并非暗示这方面对于本主题技术而言是必不可少的,或者这方面适用于本主题技术的所有配置。与方面相关的公开内容可以适用于所有配置或者一个或多个配置。一个方面可以提供一个或多个示例。诸如“方面”的短语可以是指一个或多个方面,反之亦然。诸如“实施例(embodiment)”的短语并非暗示这种实施例对于本主题技术而言是必不可少的,或者这种实施例适用于本主题技术的所有配置。与实施例相关的公开内容可以适用于所有实施方式或者一个或多个实施方式。一个实施例可以提供一个或多个示例。诸如“实施例”的短语可以是指一个或多个实施例,反之亦然。诸如“配置(configuration)”的短语并非暗示这种配置对于本主题技术而言是必不可少的,或者这种配置适用于本主题技术的所有配置。与配置相关的公开内容可以适用于所有配置或者一个或多个配置。一种配置可以提供一个或多个示例。诸如“配置”的短语可以是指一个或多个配置,反之亦然。
如本文所用,术语“确定(determine)”或“确定(determining)”涵盖各种各样的动作。例如,“确定”可以包括经由硬件元件进行计算、运算、处理、推导、生成、获取、查找(例如,在表格、数据库或另一数据结构中查找)、确认和诸如此类,而无需用户干预。此外,“确定”可以包括在没有用户干预的情况下经由硬件元件进行接收(例如,接收信息)、访问(例如,访问存储器中的数据)和诸如此类。“确定”可以包括经由硬件元件进行解析、选择、选定、建立和诸如此类,而无需用户干预。
如本文所用,术语“提供(provide)”或“提供(providing)”涵盖各种各样的动作。例如,“提供(providing)”可以包括将值存储在存储设备的位置中以供后续检索、经由至少一个有线或无线通信介质直接将值传送到接收者、传送或存储对值的参考值等。“提供”还可以包括经由硬件元件进行编码、解码、加密、解密、验证、证实和诸如此类。
如本文所用,术语“消息(message)”涵盖用于传递(例如,传送或接收)信息的各种各样的格式。消息可以包括机器可读信息聚合,诸如XML文档、固定字段消息、逗号分隔消息或诸如此类。在一些实施方式中,消息可以包括用于传送该信息的一个或多个表示的信号。虽然以单数形式叙述,但是将理解,消息可以在多个部分中被编写、传送、存储、接收等。
如本文所用,术语“选择性地(selectively)”或“选择性(selective)”可以涵盖各种各样的动作。例如,“选择性(selective)”过程可以包括从多个选项中确定一个选项。“选择性”过程可以包括以下一项或多项:动态确定的输入、预配置的输入、或用户发起的输入,以用于作出确定。在一些实施方式中,n输入开关可以被包括为提供选择性功能,其中n是用于做出选择的输入的数量。
如本文所用,术语“对应(correspond)”或“对应的(corresponding)”涵盖两个或更多个物体、数据集、信息和/或诸如此类之间的结构、功能、定量和/或定性的对应性或关联性,优选地,其中对应关系或关联关系可用于转换两个或更多个物体、数据集、信息和/或诸如此类中的一个或多个,以便看起来是相同的或相等的。对应关系可以使用阈值、值范围、模糊逻辑、模式匹配、机器学习评估模型或其组合中的一个或多个来评估。
在任何实施例中,生成的或检测到的数据可以被转发到“远程(remote)”设备或位置,其中“远程(remote)”意味着除执行程序的位置或设备处以外的位置或装置。例如,远程位置可以是同一城市中的另一位置(例如,办公室、实验室等)、不同城市中的另一个位置、不同州的另一个位置、不同国家的另一个位置等。这样,当一个物品被表示为与另一个物品“远离”时,这意味着这两个物品可以在相同房间但被分开,或者至少在不同房间或不同建筑物中,并且可以相距至少一英里、十英里或至少一百英里。“传递(Communicating)”信息指的是通过合适的通信信道(例如,专用或公用网络)传送表示作为电信号的信息的数据。“转发(Forwarding)”一个物品指的是将该物品从一个位置送到下一个位置的任何手段,无论是通过物理地传输该物品还是其他方式(在可能的情况下),并且至少在数据的情况下,包括物理地传输携带数据或传递数据的介质。通信介质的示例包括无线电或红外传输信道以及到另一台计算机或联网设备的网络连接,以及互联网或包括电子邮件传输和记录在网站上的信息等。
所描述的各方面包括人工智能或其他操作,由此系统用明显智能处理输入并生成输出。人工智能可以全部或部分地通过模型实现。模型可以被实现为机器学习模型。学习可以是受监督的、不受监督的、强化的或混合学习,由此采用多种学习技术以生成模型。学习可以作为训练的一部分执行。训练模型可以包括获得一组训练数据并调整模型的特性以获得期望的模型输出。例如,三个特性可以与期望的物品位置相关联。在这种情况下,训练可以包括接收三个特性作为模型的输入,并且调整模型的特性,使得对于每一组三个特性,输出设备状态匹配与历史数据相关联的期望设备状态。
在一些实施方式中,训练可以是动态的。例如,系统可以使用一组事件来更新模型。来自事件的可检测属性可以用于调整模型。
模型可以是方程、人工神经网络、递归神经网络、卷积神经网络、决策树或其他机器可读人工智能结构。在训练期间可用于调整的结构特性可能会因所选型号而异。例如,如果神经网络是所选择的模型,则该特性可以包括输入元素、网络层、节点密度、节点激活阈值、节点之间的权重、输入或输出值权重等。如果模型被实现为方程(例如,回归),则该特性可以包括用于输入参数的权重、用于评估输出值的阈值或极限、或者用于选自一组方程的标准。
一旦模型被训练,再训练就可以被包括为精炼或更新模型,以反映附加数据或特定操作条件。再训练可以基于由本文所述的设备检测到的一个或多个信号,或者作为本文所述的方法的一部分。在检测到指定的信号后,系统可以激活训练过程以如所描述的那样调整模型。
可以被包括在上面讨论的实施例中的机器学习和建模特征的进一步示例在Qiu等人在EURASIP Journal on Advances in Signal Processing(2016)中的“Asurvey ofmachine learning for big data processing(大数据处理的机器学习的调查)”中有所描述,其在此通过引用整体纳入本文。
对于本领域普通技术人员而言已知或以后将获知的整篇本公开所描述的各个方面的元素的所有结构性和功能性等同物在此通过引用明确纳入本文,并且旨在由权利要求所涵盖。此外,本文所公开的任何内容都不旨在奉献给公众,不管这些公开内容是否在权利要求中明确陈述。除非使用短语“用于……的装置”明确叙述该元素,或者在方法权利要求的情况下,使用短语“用于……的步骤”叙述该元素,否则任何权利要求元素都不得依据35U.S.C.§112第六段的规定进行解释。此外,就描述或权利要求中使用的术语“包括(include)”、“具有(have)”等而言,这样的术语旨在以类似于术语“包括(comprise)”的方式在用作权利要求中的过渡词时所解释的那样是包含性的。

Claims (20)

1.一种可穿戴增强现实设备,包括:
显示界面,用于呈现包括至少一个不透明或半透明图形元素的图形用户界面;
通信接口;
位置传感器,用于检测识别所述可穿戴增强现实设备的位置的位置信息;
环境传感器,用于捕捉所述位置内的信息;以及
处理器,被配置为:
使用来自所述位置传感器的位置信息和来自所述环境传感器的环境信息,确定相对于药物要被执行的用户动作;
经由所述显示界面,呈现视觉指示符以协助所述用户动作;
经由从所述位置传感器或所述环境传感器中的至少一个接收到的信息,确认所述用户动作的完成;以及
经由所述通信接口,向服务器发送指示所述用户动作的完成的更新消息,其中所述更新消息致使所述服务器更新数据库中的药物库存。
2.根据权利要求1所述的可穿戴增强现实设备,其中,所述环境传感器包括相机,并且其中所述处理器被配置为:
基于从所述相机接收到的图像信息,自动检测所述药物何时由当前与所述增强现实设备相关联的用户拿起;
当所述药物被从当前位置拿起时,基于经由所述相机捕捉所述药物的一个或多个图像,自动确定所述药物的标识;以及
生成记录,所述记录指示所述药物被拿起和移动的时间,以及将所述药物从当前位置的移动关联至当前与所述增强现实设备相关联的用户。
3.根据权利要求1所述的可穿戴增强现实设备,其中,所述环境传感器包括视网膜扫描仪,以及其中在确定所述用户动作之前,所述处理器被配置为:
经由由所述视网膜扫描仪收集到的信息,认证用于操作所述增强现实设备的用户。
4.根据权利要求3所述的可穿戴增强现实设备,其中,所述处理器被配置为:基于与所认证的用户相关联的角色或权限,确定要被执行的用户动作。
5.根据权利要求3所述的可穿戴增强现实设备,其中,所述处理器进一步被配置为:
确定所述视网膜扫描仪在预定的时间阈值内尚未扫描到所述用户的视网膜;和
经由所述通信接口,传送指示所述用户移除所述增强现实设备的警示消息。
6.根据权利要求3所述的可穿戴增强现实设备,还包括第二环境传感器,以捕捉所述位置内的附加信息,以及
其中,所述处理器进一步被配置为:
至少部分地基于由所述第二环境传感器捕捉到的第二环境信息,检测所述位置内的医疗设备;以及
在认证所述用户之后,经由所述通信接口向所述医疗设备传送认证令牌,其中所述医疗设备使用所述认证令牌来解锁所述医疗设备以供用户操作。
7.根据权利要求1所述的可穿戴增强现实设备,其中,所述处理器进一步被配置为:致使医疗设备的参数基于所述药物进行编程。
8.根据权利要求1所述的可穿戴增强现实设备,其中,所述处理器被配置为:通过图像识别机器学习模型的至少部分处理来自所述环境传感器的数据,确定要被执行的用户动作,其中所述图像识别机器学习模型接收图像数据的集合作为输入,并提供至少一个用户动作作为输出。
9.根据权利要求1所述的可穿戴增强现实设备,其中,所述处理器被配置为:通过机器学习模型的至少部分处理来自所述位置传感器的数据,确定要被执行的用户动作,其中所述机器学习模型从所述位置传感器接收数据的集合作为输入,并提供至少一个用户动作作为输出。
10.根据权利要求1所述的可穿戴增强现实设备,其中,所述处理器被配置为:
至少部分地基于以下一项或多项识别患者:所述环境信息和所述位置信息;以及
基于所述患者和所述药物确定要被执行的用户动作。
11.根据权利要求1所述的可穿戴增强现实设备,其中,所述可穿戴增强现实设备还包括:
加速度计,被配置为检测所述可穿戴增强现实设备的位置,以及其中所述处理器被配置为基于由所述加速度计检测到的位置而呈现视觉指示符。
12.根据权利要求1所述的可穿戴的增强现实设备,其中,所述视觉指示符包括增强现实投影,其用于在增强现实投影内识别由显示界面输出的所述用户动作相对于所述药物的位置。
13.根据权利要求1所述的可穿戴增强现实设备,其中,所述可穿戴增强现实设备还包括:
射频标识符(RFID)读取器,以及其中所述处理器被配置为通过经由所述RFID读取器读取所述药物的RFID标签而确定药物。
14.一种用于提供免提药物跟踪的方法,所述方法包括:
提供用户可穿戴的增强现实设备;
使用从所述增强现实设备的一个或多个传感器接收到的第一信息,确定相对于药物要被执行的用户动作;
经由所述增强现实设备的显示界面,呈现视觉指示符以协助所述用户动作;
经由从所述增强现实设备的一个或多个传感器接收到的第二信息,确认所述用户动作的完成;以及
经由所述增强现实设备的通信接口,向服务器传送指示所述用户动作的完成的更新消息,其中所述更新消息致使所述服务器更新数据库中的药物库存。
15.根据权利要求14所述的方法,其中,所述一个或多个传感器包括视网膜扫描仪,并且其中在所述确定步骤之前,所述方法还包括:
经由由所述视网膜扫描仪收集到的信息,认证穿戴着所述增强现实设备的用户。
16.根据权利要求15所述的方法,其中,确定要被执行的用户动作是基于所认证的用户的角色或权限。
17.根据权利要求15所述的方法,其中,所述方法还包括:
确定所述视网膜扫描仪在预定的时间阈值内尚未扫描到所述用户的视网膜;以及
经由所述通信接口,传送指示所述用户移除所述增强现实设备的警示消息。
18.根据权利要求14所述的方法,还包括:
致使医疗设备的参数基于所述药物进行编程。
19.根据权利要求14所述的方法,其中,所述视觉指示符包括增强现实投影,其用于在增强现实投影内识别由所述显示界面输出的所述用户动作相对于所述药物的位置。
20.一种非暂时性存储介质,包括指令,所述指令当由一个或多个处理器读取时致使一种方法,所述方法包括:
使用增强现实设备的一个或多个传感器,确定相对于药物要被执行的用户动作;
经由所述增强现实设备的显示界面,呈现视觉指示符以协助所述用户动作;
经由所述增强现实设备的一个或多个传感器,确认所述用户动作的完成;以及
经由所述增强现实设备的通信接口,向服务器发送指示所述用户动作的完成的更新消息,其中所述更新消息致使所述服务器更新数据库中的药物库存。
CN202180056130.5A 2020-06-11 2021-06-09 免提药物跟踪 Pending CN116097367A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063038054P 2020-06-11 2020-06-11
US63/038,054 2020-06-11
PCT/US2021/036542 WO2021252580A1 (en) 2020-06-11 2021-06-09 Hands-free medication tracking

Publications (1)

Publication Number Publication Date
CN116097367A true CN116097367A (zh) 2023-05-09

Family

ID=76731068

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180056130.5A Pending CN116097367A (zh) 2020-06-11 2021-06-09 免提药物跟踪

Country Status (6)

Country Link
US (2) US11972850B2 (zh)
EP (1) EP4165647B1 (zh)
CN (1) CN116097367A (zh)
AU (1) AU2021288589A1 (zh)
CA (1) CA3182176A1 (zh)
WO (1) WO2021252580A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11328801B1 (en) * 2017-06-16 2022-05-10 Walgreen Co. Technology for managing priorities for on-site prescription pickup
US12094243B2 (en) * 2020-05-19 2024-09-17 Board Of Regents, The University Of Texas System Method and apparatus for discreet person identification on pocket-size offline mobile platform with augmented reality feedback with real-time training capability for usage by universal users
US20250259400A1 (en) * 2024-02-12 2025-08-14 Omnicell, Inc. Real-time item recognition using augmented reality

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9256776B2 (en) * 2009-11-18 2016-02-09 AI Cure Technologies, Inc. Method and apparatus for identification
US20120316897A1 (en) * 2011-06-10 2012-12-13 AI Cure Technologies, Inc. Method and Apparatus for Monitoring Medication Adherence
US8743244B2 (en) * 2011-03-21 2014-06-03 HJ Laboratories, LLC Providing augmented reality based on third party information
US11074495B2 (en) * 2013-02-28 2021-07-27 Z Advanced Computing, Inc. (Zac) System and method for extremely efficient image and pattern recognition and artificial intelligence platform
JP6110866B2 (ja) * 2011-10-28 2017-04-05 マジック リープ, インコーポレイテッド 拡張現実および仮想現実のためのシステムおよび方法
EP3697110A1 (en) 2012-01-08 2020-08-19 ImagiStar LLC Portable item containers which identify missing and/or extra container contents
CN107283374B (zh) 2012-06-12 2020-08-07 实耐宝公司 具有高级功能的存货控制系统
EP2732761A1 (en) 2012-11-14 2014-05-21 Hill-Rom Services, Inc. Augmented reality system in the patient care environment
US10288881B2 (en) 2013-03-14 2019-05-14 Fresenius Medical Care Holdings, Inc. Wearable interface for remote monitoring and control of a medical device
US9092954B2 (en) * 2013-03-15 2015-07-28 Immersion Corporation Wearable haptic device
SG11201609827QA (en) 2014-01-29 2016-12-29 Becton Dickinson Co Wearable electronic device for enhancing visualization during insertion of an invasive device
US11100327B2 (en) 2014-05-15 2021-08-24 Fenwal, Inc. Recording a state of a medical device
US10235567B2 (en) * 2014-05-15 2019-03-19 Fenwal, Inc. Head mounted display device for use in a medical facility
EP3200109B1 (en) * 2014-05-15 2022-10-05 Fenwal, Inc. Head-mounted display device for use in a medical facility
NZ773836A (en) * 2015-03-16 2022-07-01 Magic Leap Inc Methods and systems for diagnosing and treating health ailments
US11594313B1 (en) * 2016-06-14 2023-02-28 Intelligent Automation, Llc System, apparatus and method for automated medication adherence improvement
US10146740B1 (en) * 2017-03-08 2018-12-04 Symantec Corporation Sparse data set processing
US20180365385A1 (en) * 2017-06-16 2018-12-20 University Hospitals Of Cleveland Monitoring and evaluating patient reactions to medications
US20190035499A1 (en) * 2017-07-25 2019-01-31 Daya Medicals, Inc. (Canada) Intelligent monitoring, interactive, and wireless internet connected medication adherence, analytics, and database solution
US10574535B2 (en) * 2017-07-30 2020-02-25 Nec Corporation Interference topology inference to enhance performance of LTE unlicensed networks
WO2019162054A1 (en) * 2018-02-20 2019-08-29 Koninklijke Philips N.V. System and method for client-side physiological condition estimations based on a video of an individual
US20190361917A1 (en) * 2018-05-25 2019-11-28 Bao Tran Smart device
US10997251B2 (en) * 2018-10-15 2021-05-04 Bao Tran Smart device
US11315056B2 (en) * 2019-04-05 2022-04-26 International Business Machines Corporation Resource planning having improved visualization
US10726370B1 (en) 2019-04-15 2020-07-28 Zebra Technologies Corporation Method and system for automatic contextual task presentation
US11297285B2 (en) * 2020-03-27 2022-04-05 Sean Solon Pierce Dental and medical loupe system for lighting control, streaming, and augmented reality assisted procedures
US12080391B2 (en) * 2020-08-07 2024-09-03 Zoll Medical Corporation Automated electronic patient care record data capture

Also Published As

Publication number Publication date
CA3182176A1 (en) 2021-12-16
WO2021252580A1 (en) 2021-12-16
EP4165647A1 (en) 2023-04-19
US11972850B2 (en) 2024-04-30
US20240282423A1 (en) 2024-08-22
US12451225B2 (en) 2025-10-21
AU2021288589A1 (en) 2023-02-09
EP4165647B1 (en) 2025-12-17
US20230238098A1 (en) 2023-07-27

Similar Documents

Publication Publication Date Title
US12451225B2 (en) Hands-free medication tracking
US11823791B2 (en) Context-aware healthcare notification system
JP6552607B2 (ja) 遅延された輸液自動プログラムの手動入力された輸液プログラムとの照合
US20220254470A1 (en) Systems and methods for medication management
EP2619723B1 (en) Automatic association of medical elements
US9566395B2 (en) Medicament storage, dispensing, and administration system and method
US7627334B2 (en) Systems and methods for context relevant information management and display
JP2009531146A (ja) 薬剤投与および管理システムおよび方法
WO2011028261A2 (en) Portable medical record storage device with wireless communication capability
JP7725483B2 (ja) 流用検知システム
CN112639993A (zh) 用于分发药物的移动系统
Bai et al. [Retracted] Application of Infusion Control System Based on Internet of Things Technology in Joint Orthopedics Nursing Work
EP2973368B1 (en) Context-aware healthcare notification system
US20220068447A1 (en) Personal care management system and method
EP4154267B1 (en) Patient care unit order confirmation
Subbulakshmi et al. An Automated Drug Dispenser Mobile Application Using Internet of Things (IoT) in Smart Healthcare Systems
Class et al. Patent application title: Personal care management system and method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination