[go: up one dir, main page]

CN111260899A - 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法 - Google Patents

一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法 Download PDF

Info

Publication number
CN111260899A
CN111260899A CN202010125522.XA CN202010125522A CN111260899A CN 111260899 A CN111260899 A CN 111260899A CN 202010125522 A CN202010125522 A CN 202010125522A CN 111260899 A CN111260899 A CN 111260899A
Authority
CN
China
Prior art keywords
reminding
information
capture
reminder
intelligent visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010125522.XA
Other languages
English (en)
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Cuitai Intelligent Technology Co ltd
Original Assignee
Shanghai Cuitai Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Cuitai Intelligent Technology Co ltd filed Critical Shanghai Cuitai Intelligent Technology Co ltd
Priority to CN202010125522.XA priority Critical patent/CN111260899A/zh
Publication of CN111260899A publication Critical patent/CN111260899A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • G08B21/24Reminder alarms, e.g. anti-loss alarms
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/109Time management, e.g. calendars, reminders, meetings or time accounting
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • Emergency Management (AREA)
  • Data Mining & Analysis (AREA)
  • Optics & Photonics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种智能视觉捕捉提醒AR装置,至少包括:可视化信息探测器和备忘事项提醒器,可视化信息探测器,用于获取可视化的提醒信息;备忘事项提醒器,用于根据所述提醒信息在设定的时间和/或地点进行内容提醒显示。本发明中的智能视觉捕捉提醒AR装置,使用时能够对信息进行捕捉和提取,生成相应的备忘信息,并在备忘事件中对应的时间或地点进行提醒,使用户不会错过日程安排。该装置还可以用于疫情期间的传染病隔离病区,将启到极大的辅助提醒作用,具有很好的防疫效果。本发明中的智能视觉捕捉提醒系统和方法,能够随着用户在日常活动中智能捕捉交流信息中的需要提醒的信息,并生成备忘提醒事项,能够提醒用户,能够提高工作效率,避免遗忘事件。

Description

一种智能视觉捕捉提醒AR装置、提醒系统和提醒方法
技术领域
本发明属于事务处理管理领域,具体涉及一种智能视觉捕捉提醒AR装置,同时本发明还涉及一种智能视觉捕捉提醒系统和提醒方法。
背景技术
增强现实技术(Augmented Reality,简称 AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
OCR技术是光学字符识别的缩写(Optical Character Recognition),是通过扫描等光学输入方式将各种票据、报刊、书籍、文稿及其它印刷品的文字转化为图像信息,再利用文字识别技术将图像信息转化为可以使用的计算机输入技术。
机器视觉是人工智能正在快速发展的一个分支。简单说来,机器视觉就是用机器代替人眼来做测量和判断。机器视觉系统是通过机器视觉产品(即图像摄取装置,分CMOS和CCD两种)将被摄取目标转换成图像信号,传送给专用的图像处理系统,得到被摄目标的形态信息,根据像素分布和亮度、颜色等信息,转变成数字化信号;图像系统对这些信号进行各种运算来抽取目标的特征,进而根据判别的结果来控制现场的设备动作。
在今天这个充斥着各种激烈竞争的重压时代,每个人都在忙碌的生活着。在我们的忙碌琐碎日常生活中,会有很多需要记忆的工作。但人的记忆是有限的,我们需要一个能提醒和安排我们工作的东西,如何井井有条的处理和安排任务,在有限的时间内完成最紧急最重要的事情,备忘录提示对我们而言尤为重要。
现行普遍的备忘的方式要么用笔记录,要么用备忘软件进行记录,无论用哪种方式,都要人进行实时记录,但是在平时工作和生活中,难免遇到不方便记录(没有纸笔或录音录像设备)或者懒于记录(自信地认为自己的记忆力可以胜任)的情况。即使现在比较流行的通过手机APP进行事项备忘提醒,但也需要用户手动输入信息,操作比较麻烦,提醒方式也过于单一,提醒效果不好。
还有一些是物品提醒,看到物品联想起要做什么事。但是,人脑生理衰老的原因或者其他事务干扰的原因,即便我们看到某些物品,都不会有反馈或条件反射,已致使错过做事的时机。更有些是人能力的原因,无法同时进行大数据(多件事务)量处理,导致丢三落四。当然客观上,人的并发处理能力是有上限的。能力强的人,并发处理能力强;能力弱的人,并发处理能力弱。更有,人在长期工作状态后,身体疲劳或者脑疲劳也会导致并行处理能力的降低;人处在高度紧张状态下,脑活力下降,并行处理能力也跟着下降。而并行处理能力下降并不简单通过串行事务处理就可以解决的,有时会错过事务处理的时间窗口或者地点窗口,导致事务处理的最终失效。
发明内容
针对以上现有技术中的不足,本发明提供了一种智能视觉捕捉提醒AR装置,能够随着用户在日常生活、工作活动中智能捕捉交流信息中的需要提醒的信息,并生成备忘提醒事项,在相应的时间、地点、物品或人物环境、特定场景环境下可以提醒用户。同时本发明还涉及一种智能视觉捕捉提醒系统和方法,能够提高工作效率,避免遗忘事件。
为了解决上述技术问题,本发明通过下述技术方案得以解决。
一种智能视觉捕捉提醒AR装置,至少包括:可视化信息探测器和备忘事项提醒器,所述可视化信息探测器,用于获取可视化的提醒信息;所述备忘事项提醒器,用于根据所述提醒信息在设定的时间和/或地点进行内容提醒显示。本发明中的智能视觉捕捉提醒AR装置,使用时能够对信息进行捕捉和提取,生成相应的备忘信息,并在备忘事件中对应的时间或地点进行提醒,使用户不会错过日程安排。
一种优选的实施方式中,所述可视化信息探测器至少包括摄像头,所述摄像头:用于获取文字、图片或影像中的内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息,经过处理后生成对应的备忘信息。
一种优选的实施方式中,所述备忘事项提醒器至少包括显示器、扬声器、时钟和/或空间感应器,所述显示器,用于进行视觉内容显示提醒;所述扬声器,用于进行听觉内容播放提醒;所述时钟,用于计时和到时条件触发所述备忘事项提醒器;所述空间感应器,用于定位空间地点和到地条件触发所述备忘事项提醒器。
一种优选的实施方式中,所述智能视觉捕捉提醒AR装置进一步包括交互器,所述交互器,用于与所述智能视觉捕捉提醒AR装置进行互动,比如可以进行主动输入备忘提醒信息,或者对已有的备忘提醒信息进行修改。
一种优选的实施方式中,所述交互器包括:手势识别部件、智慧手套、头瞄部件、眼动跟踪部件、麦克风、操控手柄中的一种或者多种,所述手势识别部件或智慧手套,用于检测手势动作,接收输入的控制指令;所述头瞄部件或者眼动跟踪部件,用于模拟鼠标的所述控制指令;所述麦克风,用于接收并识别出语音信息输入;所述操控手柄,用于接收输入的控制指令。
一种优选的实施方式中,还包括AI识别模块,所述AI识别模块,用于根据所述摄像头获取的所述内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息,和/或,所述麦克风获取的语音信息,识别出其中的所述提醒信息,所述提醒信息至少包括:被提醒人、提醒时间、提醒地点和/或提醒内容,并将所述提醒信息形成提醒事件。
一种优选的实施方式中,还包括信息处理模块和备忘事项处理模块,所述信息处理模块,用于根据所述AI识别模块形成的所述提醒事件在所述备忘事项处理模块进行根据时间顺序排序存放。
一种优选的实施方式中,所述交互器进一步用于添加、修改、删除、标记所述备忘事项处理模块中记录的所述提醒事件。
一种优选的实施方式中,所述AI识别模块进一步从文字、图片和/或影像信息和/或所述麦克风获取的语音信息,识别出提醒发出人的声纹、人脸、外形、邮件发件人或聊天工具中的信息发出人、物品、时间、地点和/或内容信息,可以将信息发出人信息编入到备忘信息中。
一种优选的实施方式中,当所述可视化信息探测器识别出所述提醒发出人或者环境信息,备忘事项提醒器在视场中的所述提醒发出人或者提醒地点周边叠加显示提醒事件。
以上为本申请中的智能视觉捕捉提醒AR装置,使用时,可以捕捉用户日常生活、工作中的信息,并将其中的重要日程事项编排成对应的备忘提醒信息,等到了对应的时间或地点时可以触发提醒时间,提醒用户。
本申请还提供了一种智能视觉捕捉提醒AR装置的扩视器,所述扩视器上至少设有1颗辅助摄像头和无线通讯器,所述无线通讯器将所述辅助摄像头获取的影像信息传送给所述智能视觉捕捉提醒AR装置。
一种优选的实施的扩视器,所述扩视器为“C”、“D”、“O”或“帽子”型。
一种优选的实施的扩视器, 1颗所述辅助摄像头在所述扩视器的轨道中相对运动。
一种优选的实施的扩视器, 3颗所述辅助摄像头分别设置于所述扩视器的正后部,以及2个耳夹方位部。
本申请中涉及的一种智能视觉捕捉提醒系统,至少包括智能视觉捕捉提醒AR装置和网络设备;所述网络设备,用于收集不同所述智能视觉捕捉提醒AR装置上传的提醒事件;所述智能视觉捕捉提醒AR装置,用于根据用户的设定收集提醒信息。
一种优选的实施方式中,所述网络设备进一步整合不同所述提醒事件,并将所述提醒事件根据相关性转发给不同被提醒人的所述智能视觉捕捉提醒AR装置。
以上为本申请中的智能视觉捕捉提醒系统,可以收集提醒事件信息后进行统筹分类编排,并将提醒事件分发至当事人的提醒装置上,用于在特定时间或地点下触发对应的提醒信息。
本申请中涉及的一种智能视觉捕捉提醒方法,包括:获取可视化的提醒信息;根据所述提醒信息在设定的对象、时间和/或地点进行内容提醒显示。对象为用户设定的被搜寻对象。
一种优选的实施方式中,该方法包括:获取文字、图片或影像中的内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息;和/或,获取所述麦克风获取的语音信息。
一种优选的实施方式中,该方法包括:根据所述获取的所述内容信息、物品信息、人信息、时间信息、地点信息、环境信息和/或语音信息,识别出其中的提醒信息,形成提醒事件,所述提醒信息包括:被提醒人、提醒时间、提醒地点和/或提醒内容。
一种优选的实施方式中,所述提醒事件根据时间顺序排序存放。
一种优选的实施方式中,该方法包括:添加、修改、删除、标记所述提醒事件。
一种优选的实施方式中,该方法包括:进行视觉内容显示提醒。
一种优选的实施方式中,该方法包括:进行听觉内容播放提醒,和/或,将所述听觉内容转化为视觉内容后显示提醒。
一种优选的实施方式中,该方法包括:根据到时条件和/或到地条件触发所述视觉内容显示提醒、触发所述听觉内容播放提醒,和/或,触发将所述听觉内容转化为所述视觉内容后显示提醒。
以上为本申请中的提醒方法,可以方便的获取信息,提炼出备忘信息,并在相应的时间或地点上进行备忘信息的提醒。
与现有技术相比,本发明具有以下有益效果:提供了一种智能视觉捕捉提醒AR装置,通过其上的影像、音频输入装置,能够随着用户在日常活动中智能捕捉交流信息中的需要提醒的信息,并生成备忘提醒事项,在相应的时间、地点或人物环境下可以提醒用户。同时本发明还涉及一种智能视觉捕捉提醒系统和方法,能够提高工作效率,避免遗忘事件。
附图说明
图1为本发明中的智能视觉捕捉提醒AR装置的工作流程示意图一。
图2为本发明中的智能视觉捕捉提醒AR装置的工作流程示意图二。
图3为本发明中的实施例中两人交流的示意图。
图4为本发明中的实施例中的备忘提醒状态的示意图。
图5为本发明中的医护人员穿戴智能视觉捕捉提醒AR装置及扩视器的示意图。
图6为本发明中的用户穿戴的智能视觉捕捉提醒AR装置示意图。
图7为本发明中的医护人员穿戴的“O”型扩视器示意图。
图8为本发明中的医护人员穿戴的“C”型扩视器示意图。
具体实施方式
下面结合附图与具体实施方式对本发明作进一步详细描述。
以下实施方式中,自始至终相同或类似的标号表示相同或类似的原件或具有相同或类似功能的原件,以下通过参考附图描述的实施方式是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
本申请中的一种智能视觉捕捉提醒AR装置,至少包括:可视化信息探测器和备忘事项提醒器,所述可视化信息探测器,用于获取可视化的提醒信息;所述备忘事项提醒器,用于根据所述提醒信息在设定的时间和/或地点进行内容提醒显示;所述AR装置包括可佩戴的AR眼镜主体,所述AR眼镜主体包括佩戴时置于人眼前方的显示装置,所述摄像头设于显示装置的前方,所述AR眼镜主体还包括佩戴时架在耳朵上的眼镜架,所述眼镜架中设有本申请中的一些功能模块,如AI识别模块、信息处理模块、备忘事项处理模块、电池模块等。本发明中的智能视觉捕捉提醒AR装置,使用时能够对信息进行捕捉和提取,生成相应的备忘信息,并在备忘事件中对应的时间或地点进行提醒,使用户不会错过日程安排。
具体的,所述可视化信息探测器至少包括摄像头,所述摄像头:用于获取文字、图片或影像中的内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息,经过处理后生成对应的备忘信息。所述备忘事项提醒器至少包括显示器、扬声器、时钟和/或空间感应器,所述显示器,用于进行视觉内容显示提醒;所述扬声器,用于进行听觉内容播放提醒;所述时钟,用于计时和到时条件触发所述备忘事项提醒器;所述空间感应器,用于定位空间地点和到地条件触发所述备忘事项提醒器。
此外,所述智能视觉捕捉提醒AR装置进一步包括交互器,所述交互器,用于与所述智能视觉捕捉提醒AR装置进行互动,比如可以进行主动输入备忘提醒信息,或者对已有的备忘提醒信息进行修改。所述交互器包括:手势识别部件、智慧手套、头瞄部件、眼动跟踪部件、麦克风、操控手柄中的一种或者多种,所述手势识别部件或智慧手套,用于检测手势动作,接收输入的控制指令;所述头瞄部件或者眼动跟踪部件,用于模拟鼠标的所述控制指令;所述麦克风,用于接收并识别出语音信息输入;所述操控手柄,用于接收输入的控制指令。所述交互器进一步用于添加、修改、删除、标记所述备忘事项处理模块中记录的所述提醒事件。
此外,还包括AI识别模块,所述AI识别模块,用于根据所述摄像头获取的所述内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息,和/或,所述麦克风获取的语音信息,识别出其中的所述提醒信息,所述提醒信息至少包括:被提醒人、提醒时间、提醒地点和/或提醒内容,并将所述提醒信息形成提醒事件。
本申请中的智能视觉捕捉提醒AR装置还包括信息处理模块和备忘事项处理模块,所述信息处理模块,用于根据所述AI识别模块形成的所述提醒事件在所述备忘事项处理模块进行根据时间顺序排序存放。所述AI识别模块进一步从文字、图片和/或影像信息和/或所述麦克风获取的语音信息,识别出提醒发出人的声纹、人脸、外形、邮件发件人或聊天工具中的信息发出人,可以将信息发出人信息编入到备忘信息中。
当所述可视化信息探测器识别出所述提醒发出人或者环境信息,备忘事项提醒器在视场中的所述提醒发出人或者提醒地点周边叠加显示提醒事件。
本申请中还涉及一种智能视觉捕捉提醒系统,至少包括智能视觉捕捉提醒AR装置和网络设备;所述网络设备,用于收集不同所述智能视觉捕捉提醒AR装置上传的提醒事件;所述智能视觉捕捉提醒AR装置,用于根据用户的设定收集提醒信息。所述网络设备进一步整合不同所述提醒事件,并将所述提醒事件根据相关性转发给不同被提醒人的所述智能视觉捕捉提醒AR装置。以下结合具体实施例说明。
实施例一
如图1所示,为本申请中的智能视觉捕捉提醒AR装置的工作流程示意图,从图中可以看出,包括:①文字捕捉模块和②声音捕捉模块、信息处理模块、备忘事项主动输入模块、备忘事项处理模块、备忘事项提醒器(模块)。
①文字捕捉模块:通过OCR技术等技术,用于捕捉电脑屏幕、手机屏幕、纸质文件等出现的文字信息。
②声音捕捉模块:用于捕捉人对话的中的语音信息、电子设备发出的语音信息(例如微信语音、电话及视频会议的语音)等,也可以将捕捉的语音转化成信息处理模块可以读取的文字信息。
信息处理模块:用于处理获取到的信息,关联的信息:谁、什么时间 和/或 什么地点、做什么 和/或 怎么做,即,提醒三要素:(识别)提醒人、提醒时间和提醒内容。如果出现“会议”、“交流会”、“专题”、“反馈”、“通知”、“任务”、“上午”、“下午”、日期和时间表达等关键信息,则初步确定为需要备忘的信息,然后进一步提取出备忘事项的时间、地点、备忘内容,AR眼镜提取出的信息,用户还可以进行编辑和修改。
备忘事项主动输入模块:可以允许人为的输入备忘事项,可以语音和文字输入。
备忘事项处理模块:将备忘信息进行记录存储。
备忘事项提醒器(模块):通过AR设备,利用声音、文字、图画、振动等方式进行备忘提醒。
实施例二
如图2所示,为本申请中的智能视觉捕捉提醒AR装置的工作流程示意图,从图中可以看出,还包括:③图片识别提取模块和④影像识别提取模块(提取发言人、其表达内容)、信息处理模块、备忘事项主动输入模块、备忘事项处理模块、备忘事项提醒器(模块)。
③图片识别提取模块:通过AI图片切割识别技术,用于捕捉图片中的人、物品、文字、地点或环境。这些信息可以是用户设定的捕捉对象,然后进一步供后续用户设置对捕捉对象的提醒内容;也可以是AI识别出图片中的上述信息后,后续供用户确定其中某些捕捉对象设定对应提醒内容。
④影像识别提取模块:其实是1秒24帧(甚至更多的)图片的高速AI分割识别处理,再结合声音捕捉模块,更进一步从影像视频中获取具体人,已经该具体人的语音信息。
信息处理模块:用于处理获取到的信息,关联的信息:谁、什么物品、什么时间 和/或 什么地点、做什么 和/或 怎么做,然后进一步提取出备忘事项的物品、时间、地点、备忘内容,AR眼镜提取出的信息,用户还可以进行编辑和修改。
备忘事项主动输入模块:可以允许人为的输入、修改、编辑备忘事项,可以语音或文字输入进行操作。
备忘事项处理模块:将备忘信息进行记录存储。
备忘事项提醒器(模块):通过AR设备,利用声音、文字、图画、非对象模糊化、对象高亮、对象着色、对象振动(动态化)、对象指示标记等方式进行备忘提醒。
实施例三
参见图3,同事A和同事B在进行日常工作交流,同事A带上智能视觉捕捉提醒AR装置,该智能视觉捕捉提醒AR装置可以为AR眼镜,AR眼镜上至少设有摄像头和麦克风。在同事A和同事B交流过程中,AR眼镜记录、筛选谈话内容,当同事B说到“明天上午11点前把PPT给我”的信息时,AR眼镜将该事件记录到备忘提醒库中,备忘内容包括“时间(明天上午11点前,也可以转换为具体的日期)、事件(PPT给我)、人物(同事B)等”,备忘事项处理模块收到信息处理模块处理好的具体备忘事项后,发出文字或者语音询问,确认是否将其加入备忘事项,得到语音、文字或手势许可(例如“好的”、“同意”、“YES”、“OK”等)后,正式加入备忘事项进行储存。
备忘信息生成后,同事A可以通过交互器(模块)进行编辑,如提前半小时进行提醒,或者AR眼镜中的处理模块在处理后,自动提前半小时进行提醒。
第二天,按照备忘提醒的设置,在10点半的时候,同事A的AR眼镜中显示图4中的提醒事项和同事B的头像,叠加显示在同事A的视场中,提醒同事A在11点前把PPT给同事B。
实施例四
朋友A和朋友B在聊天,朋友A带上智能视觉捕捉提醒AR装置,该智能视觉捕捉提醒AR装置可以为AR眼镜,AR眼镜上至少设有摄像头、麦克风、耳机和空间定位器(例如北斗或者GPS)。聊天过程中,朋友B说“后天晚上一起吃饭,你到了XX广场给我电话”,此时AR眼镜将该事件记录到备忘提醒库中,备忘内容包括“时间(具体日期傍晚)、地点(XX广场)、事件(打电话)、人物(朋友B)等”。备忘事项处理模块收到信息处理模块处理好的具体备忘事项后,发出文字或者语音询问,确认是否将其加入备忘事项,得到语音、文字或手势许可(例如“好的”、“同意”、“YES”、“OK”等)后,正式加入备忘事项进行储存。
备忘信息生成后,朋友A可以通过交互器进行编辑,如下午4点进行提醒,或者AR眼镜中的处理模块在处理后,自动提前到下午进行提醒。和/或,此外,具体当天下午,当朋友A达到XX广场后,AR眼镜的空间定位器识别到该地点与备忘中的地点相同,此时耳机中进行语音提醒“你已到达XX广场,请打电话给朋友B”。
实施例五
邮件或者会议通知传阅中提取会议备忘事项:普通白领(非秘书)在自己的PC或者移动设备上,进行办公,收到邮件、微信、QQ或者钉钉内容。如:
收到“技术交流会通知”的邮件或者公司内部传阅文件,邮件或文件中有关于技术交流会的事件、地点、要求的信息,当员工在电脑屏幕上查看该通知时,员工佩戴的AR眼镜通过其上的文字捕捉模块捕捉整个电脑屏幕画面,将画面中的文字信息进行识别和提取。
AR眼镜中的信息处理模块收到文字捕捉模块捕捉的文字信息后,识别出“2019年9月3号”、“周二”、“下午13:00-15:00”、“研讨会”关键文字信息,判断为需要备忘事项,进一步提取出具体备忘事项,比如:
备忘事项:技术研讨会
时间:2019年9月3号,周二,下午13:00-15:00
地点:科技楼7楼701会议室
会议要求:提前十分钟到场,携带笔记本
备忘事项处理模块收到信息处理模块处理好的具体备忘事项后,发出文字或者语音询问,确认是否将其加入备忘事项,得到语音、文字或手势许可(例如“好的”、“同意”、“YES”、“OK”等)后,正式加入备忘事项进行储存;如果得到语音、文字或手势的否定(例如“不通过”、“不行”、“NO”等),则不进行备忘事项储存;如果未得到答复,自动加入备忘事项进行储存。
备忘事项提醒器在会议开始前一段时间,在AR设备端通过声音、文字、图画、振动等方式进行备忘提醒。
实施例六
多人参加的活动上,参会人员都佩戴上智能视觉捕捉提醒AR装置,会议进行过程中,智能视觉捕捉提醒AR装置通过AI识别模块将文稿、图像、音频中的时间及事件信息捕捉出来,生成对应的备忘提醒信息,发送至网络设备(如主机、服务器等),网络设备用于收集不同所述智能视觉捕捉提醒AR装置上传的提醒事件,并进一步整合不同所述提醒事件,并将所述提醒事件根据相关性转发给不同被提醒人的所述智能视觉捕捉提醒AR装置。
不同被提醒人的智能视觉捕捉提醒AR装置收到提醒事件后,发出文字或者语音询问,确认是否将其加入备忘事项,得到语音、文字或手势许可(例如“好的”、“同意”、“YES”、“OK”等)后,正式加入备忘事项进行储存;如果得到语音、文字或手势的否定(例如“不通过”、“不行”、“NO”等),则不进行备忘事项储存;如果未得到答复,自动加入备忘事项进行储存。
之后执行相应的提醒事项。
实施例七
在传染病隔离病区,医护人员高度防护,视觉的广度和清晰度会受到很大的影响,此时智能视觉捕捉提醒AR装置及其附件,将启到极大的辅助提醒作用。如图5、6所示,医护人员先穿戴AR眼镜100及其他防护套装,最后在头部佩戴环形辅助观察器200(当然具体可以是“C”、“D”、“O”、“帽子”型等),如图7所示,“O”型的环形辅助观察器200,至少设置由1个辅助摄像头210,用于在滑动轨道230上移动,观察巡视周边的情形。2个摄像头设置在“‘C’型的环形辅助观察器”的2侧位置;再如图8所示,3个摄像头的话,2个摄像头210固定设置在“C ”型的(缺口)环形辅助观察器200的2侧(靠近耳上部)位置,第3个固定设置在“C ”型的(缺口)环形辅助观察器200的“后脑勺”处。若是一个摄像头,则“C”型的(缺口)环形辅助观察器上设有移动轨道,摄像头设置在滑动装置上,滑动装置在轨道上自由移动,或者根据控制指令而移动位置。环形辅助观察器,也称扩视器,其上还设有蓝牙等通讯芯片,辅助摄像头上获取的信息,通过蓝牙实时传送给AR眼镜,比如将医护人员后方的情形,显示在AR眼镜的视场里。在提醒设定的使用上,例如提醒医护人员去找口罩和病毒试剂盒,那么用户在AR眼镜的提醒系统中,设置对应的不同颜色和角度的图片,通过AI图形识别系统,可以很快地在AR眼镜或辅助观察器的所有摄像头中,环视医护人员的360°环境中,从中寻找口罩或病毒试剂盒,一但发现目标,就立即进行提醒。提醒的方式可以是语音,也可以是高亮、着色或者目标对象图形切割后动态振动提醒。也可以是导航式地,通过指示箭头来显示提醒。辅助观察器,也称扩视器,它与AR眼镜的结合,将大大提高可视角度,方便用户查找物品,提高用户的操作效率。
本申请中的智能视觉捕捉提醒AR装置,可以为AR眼镜、VR眼镜、MR眼镜等,或者其他具有信息输入和提醒功能的头戴式装配。
以上所述,本发明提供了一种智能视觉捕捉提醒AR装置,通过其上的影像、音频输入装置,能够随着用户在日常活动中智能捕捉交流信息中的需要提醒的信息,并生成备忘提醒事项,在相应的时间、地点或人物环境下可以提醒用户。同时本发明还涉及一种智能视觉捕捉提醒系统和方法,能够提高工作效率,避免遗忘事件。
本发明的保护范围包括但不限于以上实施方式,本发明的保护范围以权利要求书为准,任何对本技术做出的本领域的技术人员容易想到的替换、变形、改进均落入本发明的保护范围。

Claims (10)

1.一种智能视觉捕捉提醒AR装置,其特征在于,至少包括:可视化信息探测器和备忘事项提醒器,
所述可视化信息探测器,用于获取可视化的提醒信息;
所述备忘事项提醒器,用于根据所述提醒信息在设定的时间和/或地点进行内容提醒显示。
2.如权利要求1所述的智能视觉捕捉提醒AR装置,其特征在于, 所述可视化信息探测器至少包括摄像头,所述摄像头:用于获取文字、图片或影像中的内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息。
3.如权利要求1所述的智能视觉捕捉提醒AR装置,其特征在于,所述备忘事项提醒器至少包括显示器、扬声器、时钟和/或空间感应器,
所述显示器,用于进行视觉内容显示提醒;
所述扬声器,用于进行听觉内容播放提醒;
所述时钟,用于计时和到时条件触发所述备忘事项提醒器;
所述空间感应器,用于定位空间地点和到地条件触发所述备忘事项提醒器。
4.如权利要求1所述的智能视觉捕捉提醒AR装置,其特征在于,所述智能视觉捕捉提醒AR装置进一步包括交互器,所述交互器,用于与所述智能视觉捕捉提醒AR装置进行互动。
5.如权利要求4所述的智能视觉捕捉提醒AR装置,其特征在于,所述交互器包括:手势识别部件、智慧手套、头瞄部件、眼动跟踪部件、麦克风、操控手柄中的一种或者多种,
所述手势识别部件或智慧手套,用于检测手势动作,接收输入的控制指令;
所述头瞄部件或者眼动跟踪部件,用于模拟鼠标的所述控制指令;
所述麦克风,用于接收并识别出语音信息输入;
所述操控手柄,用于接收输入的控制指令。
6.一种智能视觉捕捉提醒AR装置的扩视器,其特征在于,所述扩视器上至少设有1颗辅助摄像头和无线通讯器,所述无线通讯器将所述辅助摄像头获取的影像信息传送给所述智能视觉捕捉提醒AR装置。
7.一种智能视觉捕捉提醒系统,其特征在于,至少包括智能视觉捕捉提醒AR装置和网络设备;
所述网络设备,用于收集不同所述智能视觉捕捉AR提醒装置上传的提醒事件;
所述智能视觉捕捉提醒AR装置,用于根据用户的设定收集提醒信息。
8.如权利要求7所述的智能视觉捕捉提醒系统,其特征在于,所述网络设备进一步整合不同所述提醒事件,并将所述提醒事件根据相关性转发给不同被提醒用户的所述智能视觉捕捉提醒AR装置。
9.一种智能视觉捕捉提醒方法,其特征在于,
获取可视化的提醒信息;
根据所述提醒信息在设定的对象、时间和/或地点进行内容提醒显示。
10.如权利要求9所述的智能视觉捕捉提醒方法,其特征在于,获取文字、图片或影像中的内容信息、物品信息、人信息、时间信息、地点信息和/或环境信息;和/或,获取所述麦克风获取的语音信息。
CN202010125522.XA 2020-02-27 2020-02-27 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法 Pending CN111260899A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010125522.XA CN111260899A (zh) 2020-02-27 2020-02-27 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010125522.XA CN111260899A (zh) 2020-02-27 2020-02-27 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法

Publications (1)

Publication Number Publication Date
CN111260899A true CN111260899A (zh) 2020-06-09

Family

ID=70945763

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010125522.XA Pending CN111260899A (zh) 2020-02-27 2020-02-27 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法

Country Status (1)

Country Link
CN (1) CN111260899A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113486838A (zh) * 2021-07-19 2021-10-08 歌尔光学科技有限公司 事件提醒方法、头戴式显示设备及存储介质
CN115660576A (zh) * 2022-10-13 2023-01-31 科大乾延科技有限公司 一种元宇宙会议信息采集方法
WO2024078210A1 (zh) * 2022-10-12 2024-04-18 Oppo广东移动通信有限公司 备忘提醒方法、装置、终端及存储介质
CN118193765A (zh) * 2024-05-13 2024-06-14 深圳市金大智能创新科技有限公司 事件提醒与成长记忆整合方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107071179A (zh) * 2017-04-25 2017-08-18 北京小米移动软件有限公司 日程管理方法及装置
CN108040247A (zh) * 2017-12-29 2018-05-15 湖南航天捷诚电子装备有限责任公司 一种头戴式增强现实显示设备及方法
CN108629549A (zh) * 2017-03-15 2018-10-09 腾讯科技(深圳)有限公司 一种日程处理方法及装置
CN109309757A (zh) * 2018-08-24 2019-02-05 百度在线网络技术(北京)有限公司 备忘录提醒方法及终端
CN110166955A (zh) * 2019-05-14 2019-08-23 上海连尚网络科技有限公司 一种进行日程提醒的方法与设备
CN110533398A (zh) * 2019-10-30 2019-12-03 江西科技学院 智慧手表及其提示管理方法、计算机可读存储介质
CN210109744U (zh) * 2019-03-16 2020-02-21 上海萃钛智能科技有限公司 一种头戴交流装置及头戴交流系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108629549A (zh) * 2017-03-15 2018-10-09 腾讯科技(深圳)有限公司 一种日程处理方法及装置
CN107071179A (zh) * 2017-04-25 2017-08-18 北京小米移动软件有限公司 日程管理方法及装置
CN108040247A (zh) * 2017-12-29 2018-05-15 湖南航天捷诚电子装备有限责任公司 一种头戴式增强现实显示设备及方法
CN109309757A (zh) * 2018-08-24 2019-02-05 百度在线网络技术(北京)有限公司 备忘录提醒方法及终端
CN210109744U (zh) * 2019-03-16 2020-02-21 上海萃钛智能科技有限公司 一种头戴交流装置及头戴交流系统
CN110166955A (zh) * 2019-05-14 2019-08-23 上海连尚网络科技有限公司 一种进行日程提醒的方法与设备
CN110533398A (zh) * 2019-10-30 2019-12-03 江西科技学院 智慧手表及其提示管理方法、计算机可读存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113486838A (zh) * 2021-07-19 2021-10-08 歌尔光学科技有限公司 事件提醒方法、头戴式显示设备及存储介质
WO2024078210A1 (zh) * 2022-10-12 2024-04-18 Oppo广东移动通信有限公司 备忘提醒方法、装置、终端及存储介质
CN115660576A (zh) * 2022-10-13 2023-01-31 科大乾延科技有限公司 一种元宇宙会议信息采集方法
CN118193765A (zh) * 2024-05-13 2024-06-14 深圳市金大智能创新科技有限公司 事件提醒与成长记忆整合方法
CN118193765B (zh) * 2024-05-13 2024-08-27 深圳市金大智能创新科技有限公司 事件提醒与成长记忆整合方法

Similar Documents

Publication Publication Date Title
CN111260899A (zh) 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法
US20080136895A1 (en) Mute Function for Video Applications
JP5898378B2 (ja) 情報処理装置およびアプリケーション実行方法
US20160026871A1 (en) Obtaining information from an environment of a user of a wearable camera system
US8942510B2 (en) Apparatus and method for switching a display mode
JP5854806B2 (ja) 映像処理装置および映像処理方法
JPH11296674A5 (zh)
EP2591440A1 (en) Method for displaying augmentation information in an augmented reality system
CN109325450A (zh) 图像处理方法、装置、存储介质及电子设备
JP2014085796A (ja) 情報処理装置およびプログラム
CN105165004A (zh) 摄影系统
US11216648B2 (en) Method and device for facial image recognition
CN109660728A (zh) 一种拍照方法及装置
CN113965550B (zh) 智能交互式远程辅助视频系统
US12272090B2 (en) Information processing apparatus, and information processing method
CN211906492U (zh) 一种智能视觉捕捉提醒装置、提醒系统和扩视器
CN106096912B (zh) 智能眼镜的人脸识别方法及智能眼镜
CN105338183A (zh) 基于移动终端的人物识别提醒系统及方法
CN108898056A (zh) 一种消防单兵装备与人员快速匹配系统
CN110837299A (zh) 一种活动管理智能装置、系统和方法
CN114040145B (zh) 一种视频会议人像显示方法、系统、终端及存储介质
CN103514428A (zh) 智能提示装置及其方法
JP3936295B2 (ja) データベース作成装置
JP7771688B2 (ja) 画像解析装置、会議支援システム、画像解析方法、およびプログラム
CN120496217A (zh) 访客事件处理方法、装置、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination