CN117837168A - 可穿戴电子装置及其操作方法 - Google Patents
可穿戴电子装置及其操作方法 Download PDFInfo
- Publication number
- CN117837168A CN117837168A CN202280054379.7A CN202280054379A CN117837168A CN 117837168 A CN117837168 A CN 117837168A CN 202280054379 A CN202280054379 A CN 202280054379A CN 117837168 A CN117837168 A CN 117837168A
- Authority
- CN
- China
- Prior art keywords
- electronic device
- wearable electronic
- difference
- sound
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1016—Earpieces of the intra-aural type
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
- H04R2420/07—Applications of wireless loudspeakers or wireless microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/15—Determination of the acoustic seal of ear moulds or ear tips of hearing devices
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Telephone Function (AREA)
Abstract
一种包括扬声器和麦克风的可穿戴电子装置被配置为:生成检测信号以检测是否发生声音泄漏,通过麦克风接收反馈信号,在其中通过将检测信号经由扬声器输出到用户的耳道中而获得的信号被收集,计算反馈信号和检测信号之间的差值,以及基于差值校正由可穿戴电子装置输出的回放声音。
Description
技术领域
本公开涉及可穿戴电子装置和可穿戴电子装置的操作方法。
背景技术
可穿戴电子装置可以穿戴在用户的身体部位上,例如耳朵、颈部、头部或手腕。通过可穿戴电子装置,用户可以进行各种任务,例如,听音乐和通过电话与对方交谈。可穿戴电子装置可以有线或无线地连接到用户终端和/或外部电子装置。
发明内容
根据示例实施例,一种操作包括扬声器420和麦克风430的可穿戴电子装置400的方法包括:生成用于检测是否发生可穿戴电子装置400的声音泄漏的检测信号,通过麦克风430接收反馈信号,在其中通过将检测信号经由扬声器420输出到用户的耳道中而获得的信号被收集,计算反馈信号和检测信号之间的差值,以及基于差值校正由可穿戴电子装置输出的回放(playback)声音。
根据示例实施例,一种可穿戴电子装置400包括:声音生成器410,该声音生成器包括被配置为生成用于检测是否发生声音泄漏的检测信号的电路、被配置为将检测信号输出到用户的耳道中的扬声器420、被配置为接收通过扬声器420输出的信号的麦克风430、以及处理器440,该处理器被配置为:计算通过麦克风430接收的反馈信号与检测信号之间的差值,并校正由可穿戴电子装置输出的回放声音。
根据实施例的可穿戴电子装置可以通过补偿泄漏来校正声音。
根据实施例,可穿戴电子装置可以通过根据泄漏程度来确定是补偿声音还是引导用户,来提高可穿戴电子装置的可用性。
根据实施例的可穿戴电子装置可以通过在一定水平内的校正,来补偿耳塞不能提供的声音泄漏偏差。
根据实施例的可穿戴电子装置可以补偿由于每个用户的不同耳朵形状、耳朵大小和/或归因状态中的至少一个而导致的特定信号的泄漏。
根据实施例的可佩戴电子设备可以通过提供与可穿戴电子装置的使用相关的指导,来引导用户正确穿戴可穿戴电子装置并降低故障概率。
附图说明
图1是示出根据实施例的网络环境中的示例电子装置的框图;
图2是示出根据各种实施例的电子装置和可穿戴电子装置的框图;
图3a和3b是示出根据各种实施例的如何穿戴可穿戴电子装置的示例的示意图;
图4是示出根据各种实施例的可穿戴电子装置的示例配置的框图;
图5是示出根据各种实施例的可穿戴电子装置中的示例声音传输路径的图;
图6是示出根据各种实施例的操作可穿戴电子装置的示例方法的流程图;
图7是示出根据各种实施例的基于由可穿戴电子装置检测声音泄漏的结果对差值进行分类的示例范围的示意图;
图8是示出根据各种实施例的当可穿戴电子装置正常穿戴时计算检测信号和反馈信号之间的差值的示例的示意图;
图9是示出根据各种实施例的当差值满足特定补偿条件时补偿声音泄漏的示例的示意图;以及
图10是示出根据各种实施例的操作可穿戴电子装置的示例方法的流程图。
具体实施方式
在下文中,将参考附图更详细地描述各种示例实施例。当参考附图描述示例实施例时,相同的附图标记指代相同的元件,并且将省略与其相关的重复描述。
图1是示出根据各种实施例的网络环境100中的电子装置101的框图。参照图1,网络环境100中的电子装置101可经由第一网络198(例如,短距离无线通信网络)与电子装置102进行通信,或者经由第二网络199(例如,长距离无线通信网络)与电子装置104或服务器108中的至少一个进行通信。根据示例实施例,电子装置101可经由服务器108与电子装置104进行通信。根据示例实施例,电子装置101可包括处理器120、存储器130、输入模块150、声音输出模块155、显示模块160、音频模块170、传感器模块176、接口177、连接端178、触觉模块179、相机模块180、电力管理模块188、电池189、通信模块190、用户识别模块(SIM)196或天线模块197。在一些示例实施例中,可从电子装置101中省略上述部件中的至少一个(例如,连接端178),或者可将一个或更多个其它部件添加到电子装置101中。在一些示例实施例中,可将上述部件中的一些部件(例如,传感器模块176、相机模块180或天线模块197)实现为单个集成部件(例如,显示模块160)。
处理器120可运行例如软件(例如,程序140)来控制电子装置101的与处理器120连接的至少一个其它部件(例如,硬件部件或软件部件),并可执行各种数据处理或计算。根据一个示例实施例,作为所述数据处理或计算的至少部分,处理器120可将从另一部件(例如,传感器模块176或通信模块190)接收到的命令或数据存储到易失性存储器132中,对存储在易失性存储器132中的命令或数据进行处理,并将结果数据存储在非易失性存储器134中。根据示例实施例,处理器120可包括主处理器121(例如,中央处理器(CPU)或应用处理器(AP))或者与主处理器121在操作上独立的或者相结合的辅助处理器123(例如,图形处理单元(GPU)、神经处理单元(NPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。例如,当电子装置101包括主处理器121和辅助处理器123时,辅助处理器123可被适配为比主处理器121耗电更少,或者被适配为专用于特定的功能。可将辅助处理器123实现为与主处理器121分离,或者实现为主处理器121的部分。
在主处理器121处于未激活(例如,睡眠)状态时,辅助处理器123(而非主处理器121)可控制与电子装置101的部件之中的至少一个部件(例如,显示模块160、传感器模块176或通信模块190)相关的功能或状态中的至少一些,或者在主处理器121处于激活状态(例如,运行应用)时,辅助处理器123可与主处理器121一起来控制与电子装置101的部件之中的至少一个部件(例如,显示模块160、传感器模块176或通信模块190)相关的功能或状态中的至少一些。根据示例实施例,可将辅助处理器123(例如,图像信号处理器或通信处理器)实现为在功能上与辅助处理器123相关的另一部件(例如,相机模块180或通信模块190)的部分。根据示例实施例,辅助处理器123(例如,神经处理单元)可包括专用于人工智能模型处理的硬件结构。可通过机器学习来生成人工智能模型。例如,可通过人工智能被执行之处的电子装置101或经由单独的服务器(例如,服务器108)来执行这样的学习。学习算法可包括但不限于例如监督学习、无监督学习、半监督学习或强化学习。人工智能模型可包括多个人工神经网络层。人工神经网络可以是深度神经网络(DNN)、卷积神经网络(CNN)、循环神经网络(RNN)、受限玻尔兹曼机(RBM)、深度置信网络(DBN)、双向循环深度神经网络(BRDNN)或深度Q网络或其两个或更多个的组合,但不限于此。另外地或可选地,人工智能模型可包括除了硬件结构以外的软件结构。
存储器130可存储由电子装置101的至少一个部件(例如,处理器120或传感器模块176)使用的各种数据。所述各种数据可包括例如软件(例如,程序140)以及针对与其相关的命令的输入数据或输出数据。存储器130可包括易失性存储器132或非易失性存储器134。非易失性存储器134可以包括内部存储器136和外部存储器138。
可将程序140作为软件存储在存储器130中,并且程序140可包括例如操作系统(OS)142、中间件144或应用146。
输入模块150可从电子装置101的外部(例如,用户)接收将由电子装置101的其它部件(例如,处理器120)使用的命令或数据。输入模块150可包括例如麦克风、鼠标、键盘、键(例如,按钮)或数字笔(例如,手写笔)。
声音输出模块155可将声音信号输出到电子装置101的外部。声音输出模块155可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的。接收器可用于接收呼入呼叫。根据示例实施例,可将接收器实现为与扬声器分离,或实现为扬声器的部分。
显示模块160可向电子装置101的外部(例如,用户)视觉地提供信息。显示装置160可包括例如显示器、全息装置或投影仪以及用于控制显示器、全息装置和投影仪中的相应一个的控制电路。根据示例实施例,显示模块160可包括被适配为检测触摸的触摸传感器或被适配为测量由触摸引起的力的强度的压力传感器。
音频模块170可将声音转换为电信号,反之亦可。根据示例实施例,音频模块170可经由输入模块150获得声音,或者经由声音输出模块155或与电子装置101直接(例如,有线地)连接或无线连接的外部电子装置(例如,电子装置102)的耳机输出声音。
传感器模块176可检测电子装置101的操作状态(例如,电力或温度)或电子装置101外部的环境状态(例如,用户的状态),然后产生与检测到的状态相应的电信号或数据值。根据示例实施例,传感器模块176可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口177可支持将用来使电子装置101与外部电子装置(例如,电子装置102)直接(例如,有线地)或无线连接的一个或更多个特定协议。根据示例实施例,接口177可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端178可包括连接器,其中,电子装置101可经由所述连接器与外部电子装置(例如,电子装置102)物理连接。根据示例实施例,连接端178可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如,耳机连接器)。
触觉模块179可将电信号转换为可被用户经由他的触觉或动觉识别的机械刺激(例如,振动或运动)或电刺激。根据示例实施例,触觉模块179可包括例如电机、压电元件或电刺激器。
相机模块180可捕获静止图像或运动图像。根据示例实施例,相机模块180可包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块188可管理对电子装置101的供电。根据示例实施例,可将电力管理模块188实现为例如电力管理集成电路(PMIC)的至少部分。
电池189可对电子装置101的至少一个部件供电。根据示例实施例,电池189可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块190可支持在电子装置101与外部电子装置(例如,电子装置102、电子装置104或服务器108)之间建立直接(例如,有线)通信信道或无线通信信道,并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如,应用处理器(AP))独立操作的一个或更多个通信处理器,并支持直接(例如,有线)通信或无线通信。根据示例实施例,通信模块190可包括无线通信模块192(例如,蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如,局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如,短距离通信网络,诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如,长距离通信网络,诸如传统蜂窝网络、5G网络、下一代通信网络、互联网或计算机网络(例如,LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如,单个芯片),或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如,多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如,国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。
无线通信模块192可支持在4G网络之后的5G网络以及下一代通信技术(例如新无线电(NR)接入技术)。NR接入技术可支持增强型移动宽带(eMBB)、大规模机器类型通信(mMTC)或超可靠低延时通信(URLLC)。无线通信模块192可支持高频带(例如,毫米波带)以实现例如高数据传输速率。无线通信模块192可支持用于确保高频带上的性能的各种技术,诸如例如波束成形、大规模多输入多输出(大规模MIMO)、全维MIMO(FD-MIMO)、阵列天线、模拟波束成形或大规模天线。无线通信模块192可支持在电子装置101、外部电子装置(例如,电子装置104)或网络系统(例如,第二网络199)中指定的各种要求。根据示例实施例,无线通信模块192可支持用于实现eMBB的峰值数据速率(例如,20Gbps或更大)、用于实现mMTC的丢失覆盖(例如,164dB或更小)或者用于实现URLLC的U平面延迟(例如,对于下行链路(DL)和上行链路(UL)中的每一个为0.5ms或更小,或者1ms或更小的往返)。
天线模块197可将信号或电力发送到电子装置101的外部(例如,外部电子装置)或者从电子装置101的外部(例如,外部电子装置)接收信号或电力。根据示例实施例,天线模块197可包括天线,所述天线包括辐射元件,所述辐射元件由形成在基底(例如,印刷电路板(PCB))中或形成在基底上的导电材料或导电图案构成。根据示例实施例,天线模块197可包括多个天线(例如,阵列天线)。在这种情况下,可由例如通信模块190(例如,无线通信模块192)从所述多个天线中选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。根据示例实施例,除了辐射元件之外的另外的部件(例如,射频集成电路(RFIC))可附加地形成为天线模块197的一部分。
根据各种示例实施例,天线模块197可形成毫米波天线模块。根据示例实施例,毫米波天线模块可包括印刷电路板、射频集成电路(RFIC)和多个天线(例如,阵列天线),其中,RFIC设置在印刷电路板的第一表面(例如,底表面)上,或与第一表面相邻并且能够支持指定的高频带(例如,毫米波带),所述多个天线设置在印刷电路板的第二表面(例如,顶部表面或侧表面)上,或与第二表面相邻并且能够发送或接收指定高频带的信号。
上述部件中的至少一些可经由外设间通信方案(例如,总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在它们之间通信地传送信号(例如,命令或数据)。
根据示例实施例,可经由与第二网络199连接的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102或电子装置104中的每一个可以是与电子装置101相同类型的装置,或者是与电子装置101不同类型的装置。外部电子装置102可以是例如将在下文中参考图2描述的第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2。
根据示例实施例,将在电子装置101运行的全部操作或一些操作可在外部电子装置102、外部电子装置104或服务器108中的一个或更多个运行。例如,如果电子装置101应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务,则电子装置101可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分,而不是运行所述功能或服务,或者电子装置101除了运行所述功能或服务以外,还可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分,或者执行与所述请求相关的另外功能或另外服务,并将执行的结果传送到电子装置101。电子装置101可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此,可使用例如云计算技术、分布式计算技术、移动边缘计算(MEC)技术或客户机-服务器计算技术。电子装置101可使用例如分布式计算或移动边缘计算来提供超低延迟服务。在另一示例实施例中,外部电子装置104可包括物联网(IoT)装置。服务器108可以是使用机器学习和/或神经网络的智能服务器。根据示例实施例,外部电子装置104或服务器108可被包括在第二网络199中。电子装置101可应用于基于5G通信技术或IoT相关技术的智能服务(例如,智能家居、智能城市、智能汽车或医疗保健)。
图2是示出根据各种实施例的电子装置和可穿戴电子装置的框图。参考图2,电子装置210(例如,图1的电子装置101)可以无线地连接到第一可穿戴电子装置220-1和第二可穿戴电子装置220-2。例如,电子装置210可以通过短距离无线通信(例如,蓝牙和WiFi)连接到第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的至少一个。然而,示例不限于此,并且第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的至少一个可以通过导线(wire)连接到电子装置210。
第一可穿戴电子装置220-1可以作为主装置操作,并且第二可穿戴电子装置220-2可以作为从装置操作,反之亦然。例如,根据嗅探方法(sniffing method)作为主装置操作的第一可穿戴电子装置220-1可以通过短距离无线通信连接到电子装置210,以从电子装置210接收音频数据并输出接收的音频数据。根据嗅探方法作为从装置操作的第二可穿戴电子装置220-2可以通过短距离无线通信连接到第一可穿戴电子装置220-1,以从第一可穿戴电子装置220-1接收音频数据并输出接收的音频数据。在该示例中,为了使音频输出定时与第二可穿戴电子装置220-2同步,第一可穿戴电子装置220-1可以将同步(sync)信息连同音频数据一起发送到第二可穿戴电子装置220-2。
第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2可以是可穿戴在身体部位(例如,耳朵)上的装置。例如,第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的每一个可以是可穿戴在耳朵上的无线耳机或真无线立体声(TWS)。第一可穿戴电子装置220-1可以穿戴在用户的一只耳朵上,并且第二可穿戴电子装置220-2可以穿戴在用户的另一只耳朵上。
第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2可以从电子装置210接收音频信号,并且通过包括在第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的至少一个扬声器(例如,图4的扬声器420和图5的扬声器510)输出接收的音频信号。音频信号可以包括例如在电话上与用户交谈的对方的语音信号、音乐信号或当再现多媒体内容时输出的声音信号,但不限于此。
第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2可以通过至少一个麦克风(例如,图4的麦克风430、图5的误差麦克风520和图5的参考麦克风540)接收用户的语音,通过处理接收的语音来生成语音数据,并将生成的语音数据发送到电子装置210。
在第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中,可以根据它们如何穿戴在用户上而发生声音泄漏。下面将参考图3更详细地描述穿戴第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2的示例。
即使第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2被正常穿戴,也可能无意地发生声音泄漏,因为耳朵形状、耳朵大小和耳朵内部的状态对于每个用户可能不同。
例如,第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的至少一个可以通过扬声器生成用于检测是否发生声音泄漏的检测信号。检测信号可以包括例如与整个频带或被预先设置以检测声音泄漏的低频带相对应的声音信号,但不限于特定频带。
第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的至少一个可以通过麦克风接收反馈信号,作为在通过扬声器输出到用户的耳道中的生成的检测信号被接收之后收集的信号,并且基于反馈信号校正回放声音。
第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2中的至少一个可以计算反馈信号和检测信号之间的差值,并且基于该差值来校正回放声音。
下面将参考图4和图5更详细地描述第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2的示例结构和示例操作。下面将参考图6和图10更详细地描述操作第一可穿戴电子装置220-1和/或第二可穿戴电子装置220-2的示例方法。
图3a和3b是示出根据各种实施例的如何穿戴可穿戴电子装置的示例的图。
参考图3a,示出了不正确地穿戴在用户耳朵上的可穿戴电子装置301(例如,图2的第一可穿戴电子装置220-1或第二可穿戴电子装置220-2)的示例330。如示例330所示,当可穿戴电子装置301松散地或倒置地穿戴而不适合用户的耳道305时,或者当可穿戴电子装置301的耳塞(未示出)不适合用户的耳朵时,声音可能从用户的耳朵泄漏。如上所述从用户的耳朵泄漏出的声音可以被称为声音泄漏。
例如,在通过可穿戴电子装置301输出回放声音时发生声音泄漏的情况下,低音调和中音调的一部分可能泄漏,并且回放声音可能无法正确地发送给用户。在呼叫期间,由入耳式麦克风(例如,图4的麦克风430)收集的用户语音的一部分可能从耳朵泄漏,并且由入耳式麦克风接收的语音可能失真。
可替代地,当可穿戴电子装置301被不正确地穿戴时,即使在使用了主动噪声消除(ANC)功能时,也可能不会正常地收集要由可穿戴电子装置301的入耳式麦克风(例如,麦克风430)收集的声音,因此可能不会发生正常衰减。另外,当可穿戴电子装置301被不正确地穿戴并且使用环境声音允许功能时,输出到可穿戴电子装置301的入耳式扬声器(例如,图4的扬声器420和图5的扬声器510)的声音可能从耳朵泄漏,然后被输入回麦克风(例如,图5的麦克风520),这形成反馈回路并导致出现啸叫。
当用户不正确地穿戴可穿戴电子装置301时,可穿戴电子装置301的各种功能可能无法以正常方式操作,因此可穿戴电子装置301的性能可能劣化。
参考图3b,示出了正常穿戴在用户耳朵上的可穿戴电子装置301的示例310。当可穿戴电子装置301被穿戴以适合用户的耳道305时,如示例310所示,声音可能不会从用户的耳朵泄漏出来,或者外部噪声可能不会被可穿戴电子装置301的入耳式麦克风(例如,图4的麦克风430)收集,因此可穿戴电子装置301可以向用户发送不失真的声音或失真减少的声音。
可穿戴电子装置301可以确定用户是否正确地穿戴可穿戴电子装置301,并且诱导用户重新穿戴可穿戴电子装置301或更换耳塞。
即使如示例310所示,当可穿戴电子装置301被正常穿戴时,由于用户耳朵的大小、耳朵内部的形状和/或耳朵内部的异物中的至少一个,可能异常地发生声音泄漏。可穿戴电子装置301可以通过在发生泄漏的声音时补偿声音泄漏来校正回放声音。
图4是示出根据各种实施例的可穿戴电子装置的示例配置的框图。参考图4,可穿戴电子装置400(例如,图2的第一可穿戴电子装置220-1、图2的第二可穿戴电子装置220-2和图3a和3b的可穿戴电子装置301)可以包括声音生成器410、扬声器420、麦克风430和处理器440。
声音生成器410可以生成检测信号(例如,音调)以检测是否发生声音泄漏。如上所述,检测信号可以是例如对应于整个频带的声音信号或对应于低频带的声音信号,但不限于特定频带。例如,可穿戴电子装置400可以在存储器(未示出)中存储与检测信号相关的媒体数据和/或检测信号的数据(例如,频带信息)。
声音生成器410可以是用于生成检测信号(音调)的功能块,并且可以被实现为例如硬件(H/W)块(例如,硬连线逻辑)、数字信号处理器(DSP)内的单独逻辑或软件(S/W)。要被实现的声音生成器410的形式可以根据示例而变化,但是声音生成器410可以独立地存在。
扬声器420可以在特定方向上输出由声音生成器410生成的检测信号。例如,可以基于扬声器420中包括的振动膜(diaphragm)的布置方向和/或形状来设置检测信号的输出方向。例如,扬声器420可以被设计为当用户正常穿戴可穿戴电子装置400时在用户的耳道的方向上输出检测信号。
扬声器420的至少一部分可以被包括在可穿戴电子装置400的壳体的突起(未示出)中。突起可以以允许其插入到用户的耳道中的形状和大小提供。扬声器420可以是但不限于入耳式扬声器或封闭式扬声器。例如,扬声器420可以包括在突起中。麦克风430的至少一部分可以包括在突起中,但不限于此。
麦克风430可以接收通过扬声器420输出的信号。麦克风430可以是但不限于入耳式麦克风。
处理器440可以计算通过麦克风430接收的反馈信号与由声音生成器410生成的检测信号之间的差值,并且基于该差值来校正由可穿戴电子装置400输出的回放声音。将参考图5更详细地描述根据实施例的可穿戴电子装置的检测信号传输路径。
处理器440可以包括例如微控制单元(MCU)441、控制器443和编解码器445。控制器443和/或编解码器445可以是但不限于在处理器440中执行的软件模块。
MCU 441可以与外部电子装置(例如,图1的电子装置101)通信并操作控制器443。控制器443可以比较检测信号和当前接收的反馈信号以校正回放声音,或者控制可穿戴电子装置400向用户提供通知,以重新穿戴可穿戴电子装置400或更换耳塞。例如,控制器443可以以DSP中的软件的形式存在,但不限于此。
编解码器445可以驱动或操作扬声器420和/或麦克风430。编解码器445可以是但不限于硬件编解码器芯片。
例如,当MCU 441和硬件编解码器445被形成为两个芯片时,DSP可以被包括在硬件编解码器445中。可替代地,当MCU 441和硬件编解码器445被形成为单个芯片时,DSP可以包括在MCU 441中。
处理器440可以基于反馈信号和检测的信号之间的差值是否对应于声音泄漏的允许的补偿范围(例如,图7的允许的补偿范围710)来校正回放声音。将参考图7更详细地描述可穿戴电子装置400基于检测到声音泄漏的结果对差值进行分类的范围。
例如,处理器440可以计算通过转换参考信号的频率获得的第一值,计算通过转换反馈信号的频率获得的第二值,并且计算第一值和第二值之间的差值。处理器440可以通过针对差值补偿回放声音来校正回放声音,以提供预期声音而不受声音泄漏的影响。
处理器440可以基于差值是否满足特定补偿条件来校正回放声音。补偿条件可以包括例如与反馈信号中的特定信号对应的差值的幅度大于与反馈信号中的其他信号对应的差值的幅度之和的条件。下面将参考图9更详细地描述补偿条件。
处理器440可以通过调整与回放声音中的信号相对应的权重值来校正回放声音。当差值在允许的补偿范围(例如,允许的补偿范围710)内时,处理器440可以补偿回放声音。当差值超出允许的补偿范围(例如,允许的补偿范围710)时,处理器440可以提供重新穿戴可穿戴电子装置400或更换耳塞的通知。例如,当差值大于允许的补偿值(例如,图7的允许的补偿值703)并且小于或等于允许的声音泄漏值(例如,图7的允许的声音泄漏值705)时,处理器440可以提供更换耳塞的通知。当差值大于允许的声音泄漏值(例如,允许的声音泄漏值705)时,处理器440可以提供重新穿戴可穿戴电子装置400的通知。
另外,可穿戴电子装置400还可以包括通信接口(未示出),该通信接口被配置为与可穿戴电子装置400的外部电子装置(例如,图1的电子装置101)和/或另一可穿戴电子装置(例如,图2的第一可穿戴电子装置220-1或第二可穿戴电子装置220-2)通信并与其交换信号。通信接口可以支持短距离无线通信。短距离无线通信可以包括例如蓝牙和/或Wi-Fi,但不必限于此。通信接口还可以支持有线通信。
图5是示出根据各种实施例的可穿戴电子装置中的示例声音传输路径的示意图。参考图5,示出了通过可穿戴电子装置500(例如,图4的可穿戴电子装置400)中的扬声器510和麦克风520传输检测信号的路径。
例如,可以假设要再现的音频信号505(例如,回放声音)被传输到可穿戴电子装置500。
在该示例中,可穿戴电子装置500可以生成检测信号S(z)。检测信号S(z)可以由放大器540放大,并且放大的检测信号S(z)可以通过扬声器510(例如,图4的扬声器420)输出。
通过扬声器510输出的检测信号S(z)可以通过麦克风520(例如,图4的麦克风430)接收为反馈信号P(z)。麦克风520可以是但不限于入耳式麦克风。
当通过麦克风520的信号被反馈并被接收为反馈信号P(z)时,可穿戴电子装置500可以计算检测信号S(z)和反馈信号P(z)之间的差值。
例如,可穿戴电子装置500可以基于检测信号S(z)和反馈信号P(z)之间的差值来校正音频信号505。当差值在可对声音泄漏进行补偿的范围(例如,图7的允许的补偿范围710)内时,可穿戴电子装置500可以通过补偿与声音泄漏相对应的差值来校正音频信号505。例如,可穿戴电子装置500可以基于差值是否满足特定补偿条件来校正音频信号505。补偿条件可以包括,例如其中与反馈信号中的特定信号对应的差值的幅度大于与其他信号对应的差值的幅度之和的条件。可穿戴电子装置500可以通过调整与音频信号505中的信号相对应的权重值W1 530来校正音频信号505。
当差值超出可对声音泄漏进行补偿的范围时,即当差值对应于允许的声音泄漏范围(例如,图7的允许的声音泄漏范围730)时或者当差值超出允许的声音泄漏范围时,可穿戴电子装置500可以向用户提供通知以重新穿戴可穿戴电子装置500或更换耳塞,而无需校正音频信号505。
图6是示出根据各种实施例的操作可穿戴电子装置的示例方法的流程图。在以下示例中,操作可以顺序地执行,但不一定顺序地执行。例如,可以以不同的顺序执行操作,并且可以并行地执行操作中的至少两个。
根据实施例,包括扬声器和麦克风的可穿戴电子装置400(例如,图1的外部电子装置102、图2的第一可穿戴电子装置220-1和第二可穿戴电子装置220-2、图3的可穿戴电子装置301以及图5的可穿戴电子装置500)的至少一个部件(例如,图4的处理器440)可以通过执行下文将要描述的操作610至640来校正回放声音。
在操作610中,可穿戴电子装置400可以生成用于检测可穿戴电子装置400中是否发生声音泄漏的检测信号。由可穿戴电子装置400生成的检测信号可以是用于检测声音泄漏的信号,并且可以是但不限于与整个频带对应的检测信号或与低频带对应的检测信号。检测信号可以不限于特定频带。由可穿戴电子装置400生成的检测信号可以是单音调或多音调。
在操作620中,可穿戴电子装置400可以接收反馈信号,该反馈信号是当在操作610中生成的检测信号通过扬声器(例如,图4的扬声器420和图5的扬声器510)输出并通过麦克风(例如,图4的麦克风430和图5的误差麦克风520)接收时获得的信号输出。反馈信号可以对应于输入到麦克风的信号。
在操作630中,可穿戴电子装置400可以计算在操作620中接收的反馈信号与检测信号之间的差值。
在操作640中,可穿戴电子装置400可以基于在操作630中计算的差值来校正回放声音。可穿戴电子装置400可以基于差值是否在声音泄漏的允许的补偿范围(例如,图7的允许的补偿范围710)内来校正回放声音。可穿戴电子装置400可以通过针对差值补偿回放声音来校正回放声音。可穿戴电子装置400可以基于差值是否满足特定补偿条件来校正回放声音。补偿条件可以包括与反馈信号中的特定信号对应的差值的幅度大于与其他信号对应的差值的幅度之和的条件。可穿戴电子装置400可以通过调整与回放声音中的信号相对应的权重值来校正回放声音。
下面将参考图8和图9更详细地描述由可穿戴电子装置400校正回放声音的方法。
当差值超出允许的补偿范围时,可穿戴电子装置400可以提供重新穿戴可穿戴电子装置400或更换耳塞的通知。
图7是示出根据各种实施例的基于由可穿戴电子装置检测到声音泄漏的结果对差值进行分类的示例范围的图。参考图7,示出了允许的补偿范围710和由阈值划分的允许的声音泄漏范围730。
允许的补偿范围710可以是其中可以通过补偿差值(即,声音泄漏)来校正回放声音的范围。当差值在允许的补偿范围710内时,可穿戴电子装置400(例如,图1的外部电子装置102、图2的第一可穿戴电子装置220-1和第二可穿戴电子装置220-2、图3a和3b的可穿戴电子装置301以及图5的可穿戴电子装置500)可以针对差值补偿回放声音。例如,允许的补偿范围710可以对应于第一阈值701和允许的补偿值703之间的值。第一阈值701可以是与几乎没有声音泄漏(例如,最小差异)的状态相对应的允许的补偿范围710的下限。允许的补偿值703可以是允许的补偿范围710的上限,例如,通过其可获得对声音泄漏的补偿的补偿极限。允许的补偿范围710可以对应于例如其中差值为0至15%、0至20%、0至25%或0至30%的区间。
允许的声音泄漏范围730可以对应于大于作为补偿极限的允许的补偿值703并且小于或等于允许的声音泄漏值705的区间。允许声音泄漏范围730也可以被称为耳塞更换范围730。例如,允许的声音泄漏范围730可以对应于差值是上限的区间,该上限与下限相差高达40%、45%、50%或60%,该下限大于允许的补偿值703,该允许的补偿值703是允许的补偿范围710的上限。当差值在耳塞更换范围730内时,可穿戴电子装置400可以提供例如“用新耳塞更换耳塞”的通知。在这种情况下,可以通过可穿戴电子装置400的扬声器以语音的形式提供通知。通知可以以与可穿戴电子装置400通信的图1的电子装置101的显示模块160的屏幕上的文本的形式提供,或者可以通过图1的声音输出模块155以声音的形式提供。然而,示例不限于此。
当差值在允许的声音泄漏范围730之外的重新穿戴范围750中时,可穿戴电子装置400可以提供重新穿戴的通知。重新穿戴范围750可以对应于差值大于允许的声音泄漏值705并且小于或等于第二阈值707的区间,该第二阈值707对应于其中存在严重声音泄漏的状态,例如,最大差值。例如,重新穿戴范围750可以对应于其中差值是上限的区间,该上限与下限相差高达70%、80%、90%或95%,该下限大于允许的声音泄漏值705,该允许的声音泄漏值705是允许的声音泄漏范围730的上限。
第二阈值707可以是声音泄漏的上限,其对应于其中差值(即,声音泄漏)几乎占据全部(例如,最大差值)的状态。
当差值在重新穿戴范围750中时,可穿戴电子装置400(例如,图5的可穿戴电子装置500)可以提供例如“将耳机(earbuds)放在良好位置”的通知。通知可以通过可穿戴电子装置400的扬声器以语音的形式提供,以电子装置101的显示模块160的屏幕上的文本的形式提供,或者通过声音输出模块155以声音的形式提供,以与耳塞更换范围730相关联地提供通知的类似方式。
图8是示出根据各种实施例的当可穿戴电子装置正常穿戴时计算参考信号和反馈信号之间的差值的示例的示意图。参考图8,示出了通过转换用于检测可穿戴电子装置400(例如,图1的外部电子装置102、图2的第一可穿戴电子装置220-1和第二可穿戴电子装置220-2、图3的可穿戴电子装置301以及图5的可穿戴电子装置500)中的声音泄漏的发生的测试信号的频率而获得的曲线图810、通过转换可穿戴电子装置400的反馈信号的频率而获得的曲线图830、以及指示测试信号和反馈信号之间的差值的曲线图850。测试信号可以对应于参考信号。
例如,当如图8所示使用多音调时,可穿戴电子装置400可以计算曲线图810所示的测试信号与曲线图830所示的反馈信号之间的差值。可穿戴电子装置400可以通过针对所计算的差值补偿原始回放声音来执行校正。例如,可穿戴电子装置400可以通过计算由下面的等式1表示的差值来校正回放声音。
[等式1]
在上面的等式1中,k表示频率索引,并且n表示音调的数量。另外,wk表示第k个信号的权重,并且xk表示通过转换第k个信号的频率而获得的值。
例如,可穿戴电子装置400可以通过补偿原始回放声音(即,曲线图810所示的测试信号)来校正回放声音,以用于通过将权重wk应用于分别与通过转换四倍音调的频率获得的值xk相对应的差值而获得的结果,如曲线图850所示。在该示例中,例如,wk可以是1。又例如,当使用单音调时,可穿戴电子装置400可以通过测试信号和反馈信号之间的互相关来计算差值。
图9是示出根据各种实施例的当差值满足特定补偿条件时补偿声音泄漏的示例的示意图。参考图9,示出了当差值满足补偿条件时获得的曲线图。
例如,在例外情况下,例如,当耳塞被损坏,耳塞与用户耳朵内部的形状不匹配,由于用户耳朵中的异物(例如,耳垢)而发生共振,或者耳膜中存在孔时,即使用户正确地穿戴可穿戴电子装置400(例如,图1的外部电子装置102、图2的第一可穿戴电子装置220-1和第二可穿戴电子装置220-2图3的可穿戴电子装置301和图5的可穿戴电子装置500),也可能发生声音泄漏。
在前述例外情况下,如图9中的曲线图所示,其中通过转换信号(例如,信号p 910)的频率获得的差值的幅度大于通过转换其他信号的频率获得的差值的幅度之和的补偿条件被满足,如等式2所示。差值的幅度也可以被称为能量。
[等式2]
在上面的等式2中,p表示满足补偿条件的信号(例如,信号p 910)的频率的位置,并且xp表示通过转换满足补偿条件的信号p 910的频率而获得的值。另外,wp表示满足补偿条件的信号p 910的权重。
例如,当信号p 910满足补偿条件时,可穿戴电子装置400可以通过调整回放声音中与信号p 910相对应的权重wp来校正回放声音。在该示例中,对应于信号p 910的权重wp可以表示为wp=1/2*(n-1)(k=p)。
图10是示出根据各种实施例的操作可穿戴电子装置的示例方法的流程图。在以下示例中,操作可以顺序地执行,但不一定顺序地执行。例如,可以以不同的顺序执行操作,并且可以并行地执行操作中的至少两个。
参照图10,可穿戴装置400(例如,图1的外部电子装置102、图2的第一可穿戴电子装置220-1和第二可穿戴电子装置220-2、图3的可穿戴电子装置301以及图5的可穿戴电子装置500)可以通过执行下文将要描述的操作1010至1090来检测声音泄漏的发生并补偿与声音泄漏相对应的差值。
可穿戴电子装置400可以通过允许用户从设置的菜单中选择项目来执行用于检测声音泄漏的发生的操作,使得用户检测声音泄漏是否发生或者验证可穿戴电子装置400是否正确地穿戴在用户身上。
可穿戴电子装置400可以执行用于通过用户的预设动作模式来检测声音泄漏的发生的操作。动作模式可以对应于当可穿戴电子装置400未正确穿戴在用户身上时由用户进行的动作的组合。动作模式可以对应于例如各种动作的各种组合,例如,调整可穿戴电子装置400的声音或音量、调整可穿戴电子装置400的穿戴位置和/或重新穿戴可穿戴电子装置400。
在操作1010中,可穿戴电子装置400可以生成检测信号。检测信号可以是例如用于检测声音泄漏的发生的信号,即,用于检测可穿戴电子装置400是否被穿戴以适合用户的耳朵的信号。
在操作1020中,可穿戴电子装置400可以通过扬声器(例如,图4的扬声器420和图5的扬声器510)将在操作1010中生成的检测信号输出到用户的耳道中。
在操作1030中,可穿戴电子装置400可以通过麦克风(例如,图4的麦克风430和图5的麦克风520)接收反馈信号。
在操作1040中,可穿戴电子装置400可以计算在操作1030中接收到的反馈信号与在操作1010中生成的检测信号之间的差值。
在操作1050中,可穿戴电子装置400可以确定在操作1040中计算的差值是否大于允许的声音泄漏值(例如,图7的允许的声音泄漏值705)。在操作1060中,当在操作1050中确定差值大于允许的声音泄漏值时(1050-是),可穿戴电子装置400可以提供重新穿戴可穿戴电子装置400的通知。
在操作1070中,当在操作1050中确定差值小于或等于允许的声音泄漏值时(1050-否),可穿戴电子装置400可以确定差值是否大于允许的补偿值(例如,图7的允许的补偿值703)。在操作1080中,当确定差值大于允许的补偿值(1070-是)时,可穿戴电子装置400可以提供更换耳塞的通知。
在操作1090中,当差值被确定为小于或等于允许的补偿值时(1070-否),可穿戴电子装置400可以针对差值来补偿由可穿戴电子装置400输出的回放声音。
根据示例实施例,一种操作包括扬声器(例如,图4的扬声器420和图5的扬声器510)和麦克风(例如,图4的麦克风430和图5的麦克风520)的可穿戴电子装置(例如,图4的可穿戴电子装置400)的方法可以包括:生成用于检测在可穿戴电子装置中是否发生声音泄漏的检测信号的操作610,通过麦克风接收反馈信号的操作620,其中通过扬声器从检测信号输出到耳道中的信号被接收,计算反馈信号和检测信号之间的差值的操作630,以及基于差值校正由可穿戴电子装置输出的回放声音的操作640。
操作640可以包括基于差值是否在声音泄漏的允许的补偿范围(例如,图7的允许的补偿范围710)内来校正回放声音的操作。
操作640可以包括通过针对差值补偿检测信号来校正回放声音的操作。
操作640可以包括基于差值是否满足特定补偿条件来校正回放声音的操作。
补偿条件可以包括与反馈信号中的特定信号对应的差值的幅度大于与其他信号对应的差值的幅度之和的条件。
例如,当与满足补偿条件的特定信号对应的差值时,操作640可以包括通过调整与回放声音中的特定信号对应的权重值来校正回放声音的操作。
当差值超出允许的补偿范围时,操作可穿戴电子装置的方法还可以包括提供重新穿戴可穿戴电子装置或更换耳塞的通知。
提供通知的操作可以包括,当差值大于允许的声音泄漏范围(例如,710)的允许的补偿值(例如,图7的允许的补偿值703)并且小于或等于允许的声音泄漏范围(例如,图7的允许的声音泄漏范围730)的允许的声音泄漏值(例如,图7的允许的声音泄漏值705)时,提供更换耳塞的通知的操作。
提供通知的操作可以包括,当差值大于允许的声音泄漏范围的允许的声音泄漏值时,提供重新穿戴可穿戴电子装置的通知的操作。
操作630可以包括计算通过转换检测信号的频率获得的第一值的操作,计算通过转换反馈信号的频率获得的第二值的操作,以及计算第一值和第二值之间的差值的操作。
根据实施例,可穿戴电子装置(例如,图4的可穿戴电子装置400)可以包括:声音生成器(例如,图4的声音生成器410),其被配置为生成检测信号以检测是否发生声音泄漏,被配置为将检测信号输出到用户的耳道中的扬声器(例如,图4的扬声器420和图5的扬声器510),被配置为接收通过扬声器输出的信号的麦克风(例如,图4的麦克风430和图5的麦克风520)。以及处理器(例如,图4的处理器440),其被配置为:计算通过麦克风接收的反馈信号与检测信号之间的差值,并基于该差值校正回放声音。
处理器440可以被配置为基于差值是否在声音泄漏的允许的补偿范围(例如,710)内而校正回放声音。
处理器440可以被配置为通过针对差值补偿检测信号来校正回放声音。
处理器440可以被配置为基于差值是否满足特定补偿条件来校正回放声音。
补偿条件可以包括与反馈信号中的特定信号对应的差值的幅度大于与其他信号对应的差值的幅度之和的条件。
处理器440可以被配置为通过调整与回放声音中的特定信号相对应的权重值来校正回放声音。
当差值在允许的补偿范围710之外时,处理器440可以被配置为提供重新穿戴可穿戴电子装置400或更换耳塞的通知。
当差值大于允许的补偿范围710的允许的补偿值(例如,703)并且小于或等于允许的声音泄漏范围(例如,730)的允许的声音泄漏值(例如,705)时,处理器440可以被配置为提供更换耳塞的通知。
基于差值大于允许的声音泄漏范围的允许的声音泄漏值,处理器可以被配置为提供重新穿戴可穿戴电子装置的通知。
处理器440可以被配置为:计算通过转换检测信号的频率获得的第一值,计算通过转换反馈信号的频率获得的第二值,以及计算第一值和第二值之间的差值。
处理器440可以包括被配置为操作扬声器(例如,420和510)和麦克风(例如,430和520)的编解码器(例如,445)。
可穿戴电子装置400还可以包括通信接口(未示出),该通信接口被配置为与可穿戴电子装置400的外部电子装置(例如,图1的电子装置101)通信并与其交换信号。
Claims (15)
1.一种操作包括扬声器和麦克风的可穿戴电子装置的方法,所述方法包括:
生成用于检测所述可穿戴电子装置的声音泄漏是否发生的检测信号;
通过麦克风接收反馈信号,在其中通过将检测信号经由扬声器输出到耳道中而获得的信号被收集;
计算反馈信号与检测信号之间的差值;以及
基于差值校正由可穿戴电子装置输出的回放声音。
2.根据权利要求1所述的方法,其中,校正回放声音包括:
基于差值是否对应于声音泄漏的允许的补偿范围来校正回放声音。
3.根据权利要求2所述的方法,其中,校正回放声音包括:
通过针对差值补偿回放声音来校正回放声音。
4.根据权利要求1所述的方法,其中,校正回放声音包括:
基于差值是否满足特定补偿条件来校正回放声音。
5.根据权利要求4所述的方法,其中,所述补偿条件包括其中与反馈信号中的特定信号相对应的差值的幅度大于与反馈信号中的其他信号相对应的差值的幅度之和的条件。
6.根据权利要求5所述的方法,其中,基于与满足所述补偿条件的信号相对应的差值来校正回放声音包括:
通过调整与回放声音中的信号相对应的权重值来校正回放声音。
7.根据权利要求2所述的方法,还包括:基于差值超出允许的补偿范围,
提供重新穿戴可穿戴电子装置或更换耳塞的通知。
8.根据权利要求7所述的方法,其中,提供通知包括:
基于差值大于允许的补偿范围的允许的补偿值并且小于或等于允许的声音泄漏范围的允许的声音泄漏值,来提供更换所述耳塞的通知。
9.根据权利要求7所述的方法,其中,提供通知包括:
基于差值大于允许的声音泄漏范围的允许的声音泄漏值,来提供重新穿戴可穿戴电子装置的通知。
10.根据权利要求1所述的方法,其中,差值的计算包括:
计算通过转换检测信号的频率而获得的第一值;
计算通过转换反馈信号的频率而获得的第二值;以及
计算第一值与第二值之间的差值。
11.一种存储指令的非暂时性计算机可读存储介质,所述指令在由处理器执行时,使得所述处理器执行根据权利要求1所述的操作。
12.一种可穿戴电子装置,包括:
声音生成器,包括被配置为生成检测信号以检测是否发生声音泄漏的电路;
扬声器,被配置为将检测信号输出到耳道中;
麦克风,被配置为接收通过扬声器输出的信号;以及
处理器,被配置为:计算通过麦克风接收的反馈信号与检测信号之间的差值,并且基于所述差值校正由可穿戴电子装置输出的回放声音。
13.根据权利要求12所述的可穿戴电子装置,其中,所述处理器被配置为:
通过基于差值是否对应于声音泄漏的允许的补偿范围来针对差值补偿回放声音,来校正所述回放声音。
14.根据权利要求12所述的可穿戴电子装置,其中,所述处理器包括:
编解码器,被配置为操作扬声器和麦克风。
15.根据权利要求12所述的可穿戴电子装置,还包括:
通信接口,被配置为与可穿戴电子装置的外部电子装置通信,并与其交换信号。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2021-0101149 | 2021-08-02 | ||
| KR1020210101149A KR20230019533A (ko) | 2021-08-02 | 2021-08-02 | 웨어러블 전자 장치 및 웨어러블 전자 장치의 동작 방법 |
| PCT/KR2022/004932 WO2023013841A1 (ko) | 2021-08-02 | 2022-04-06 | 웨어러블 전자 장치 및 웨어러블 전자 장치의 동작 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117837168A true CN117837168A (zh) | 2024-04-05 |
Family
ID=85039562
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202280054379.7A Pending CN117837168A (zh) | 2021-08-02 | 2022-04-06 | 可穿戴电子装置及其操作方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US12167191B2 (zh) |
| EP (1) | EP4152767A4 (zh) |
| CN (1) | CN117837168A (zh) |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100584609B1 (ko) | 2004-11-02 | 2006-05-30 | 삼성전자주식회사 | 이어폰 주파수 특성 보정 방법 및 장치 |
| US8774433B2 (en) * | 2006-11-18 | 2014-07-08 | Personics Holdings, Llc | Method and device for personalized hearing |
| JP2009284097A (ja) | 2008-05-20 | 2009-12-03 | Toshiba Corp | カナル型イヤホンおよびその使用方法ならびに共鳴周波数算出装置 |
| US8600067B2 (en) * | 2008-09-19 | 2013-12-03 | Personics Holdings Inc. | Acoustic sealing analysis system |
| US8401200B2 (en) * | 2009-11-19 | 2013-03-19 | Apple Inc. | Electronic device and headset with speaker seal evaluation capabilities |
| GB2536464A (en) * | 2015-03-18 | 2016-09-21 | Nokia Technologies Oy | An apparatus, method and computer program for providing an audio signal |
| GB2597396B (en) | 2015-05-22 | 2022-07-20 | Cirrus Logic Int Semiconductor Ltd | Adaptive receiver |
| EP3712883B1 (en) * | 2019-03-22 | 2024-04-24 | ams AG | Audio system and signal processing method for an ear mountable playback device |
| KR20210001646A (ko) | 2019-06-28 | 2021-01-06 | 삼성전자주식회사 | 전자 장치 및 이를 이용한 오디오 신호를 처리하기 위한 음향 장치를 결정하는 방법 |
| US11706555B2 (en) | 2019-07-08 | 2023-07-18 | Apple Inc. | Setup management for ear tip selection fitting process |
| US11172298B2 (en) | 2019-07-08 | 2021-11-09 | Apple Inc. | Systems, methods, and user interfaces for headphone fit adjustment and audio output control |
| US11470413B2 (en) * | 2019-07-08 | 2022-10-11 | Apple Inc. | Acoustic detection of in-ear headphone fit |
| US10834494B1 (en) | 2019-12-13 | 2020-11-10 | Bestechnic (Shanghai) Co., Ltd. | Active noise control headphones |
-
2022
- 2022-04-06 CN CN202280054379.7A patent/CN117837168A/zh active Pending
- 2022-04-06 EP EP22754759.3A patent/EP4152767A4/en active Pending
- 2022-07-11 US US17/861,444 patent/US12167191B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| EP4152767A1 (en) | 2023-03-22 |
| US12167191B2 (en) | 2024-12-10 |
| US20230033379A1 (en) | 2023-02-02 |
| EP4152767A4 (en) | 2023-09-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20230179912A1 (en) | Electronic apparatus comprising sound radiation unit | |
| US20220353330A1 (en) | Electronic device and method for recording audio data acquired from multiple devices | |
| US12081932B2 (en) | Electronic device for reducing internal noise and method thereof | |
| US12425757B2 (en) | Electronic device and method for operating electronic device | |
| US12167191B2 (en) | Wearable electronic device and operation method thereof | |
| US20230412978A1 (en) | Electronic device for listening to external sound and operating method of electronic device | |
| US20230353925A1 (en) | Audio device with connection terminal and sensor | |
| US20230269522A1 (en) | Electronic device including speaker | |
| US12300211B2 (en) | Electronic device for controlling ambient sound based on audio scene and operating method thereof | |
| KR102883570B1 (ko) | 마이크 모듈을 포함하는 전자 장치 | |
| CN119586160A (zh) | 电池和包括该电池的电子装置 | |
| KR20230103814A (ko) | 웨어러블 장치 | |
| KR20230019533A (ko) | 웨어러블 전자 장치 및 웨어러블 전자 장치의 동작 방법 | |
| CN116261859A (zh) | 用于输出声音的电子装置和用于操作其的方法 | |
| KR20220101968A (ko) | 내부 노이즈를 줄이는 전자 장치 및 이의 동작 방법 | |
| US20250088792A1 (en) | Wearable electronic device | |
| US12035091B2 (en) | Electronic device including microphone module | |
| US20250193569A1 (en) | Wearable electronic device comprising microphone module | |
| US20250246198A1 (en) | Electronic device for acquiring voice signals and operating method thereof | |
| US20250260927A1 (en) | Electronic device for transmitting external sound and method for operating electronic device | |
| US20250380081A1 (en) | Wearable electronic device for controlling output of audio signal, operating method thereof, and storage medium | |
| US20250060781A1 (en) | Wearable electronic device | |
| US20220417631A1 (en) | Electronic device | |
| US20230077324A1 (en) | Electronic device and operating method thereof | |
| KR20250066356A (ko) | Tws와 통신하는 전자 장치 및 이의 제어 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |