WO2017032946A1 - Method of measuring phrtf filters of a hearer, booth for implementing the method, and methods making it possible to culminate in the restitution of a personalized multichannel sound band - Google Patents
Method of measuring phrtf filters of a hearer, booth for implementing the method, and methods making it possible to culminate in the restitution of a personalized multichannel sound band Download PDFInfo
- Publication number
- WO2017032946A1 WO2017032946A1 PCT/FR2016/052103 FR2016052103W WO2017032946A1 WO 2017032946 A1 WO2017032946 A1 WO 2017032946A1 FR 2016052103 W FR2016052103 W FR 2016052103W WO 2017032946 A1 WO2017032946 A1 WO 2017032946A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- filters
- phrtf
- signal
- loudspeakers
- listener
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
- H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
- H04R25/552—Binaural
-
- E—FIXED CONSTRUCTIONS
- E04—BUILDING
- E04B—GENERAL BUILDING CONSTRUCTIONS; WALLS, e.g. PARTITIONS; ROOFS; FLOORS; CEILINGS; INSULATION OR OTHER PROTECTION OF BUILDINGS
- E04B1/00—Constructions in general; Structures which are not restricted either to walls, e.g. partitions, or floors or ceilings or roofs
- E04B1/62—Insulation or other protection; Elements or use of specified material therefor
- E04B1/74—Heat, sound or noise insulation, absorption, or reflection; Other building methods affording favourable thermal or acoustical conditions, e.g. accumulating of heat within walls
- E04B1/82—Heat, sound or noise insulation, absorption, or reflection; Other building methods affording favourable thermal or acoustical conditions, e.g. accumulating of heat within walls specifically with respect to sound only
- E04B1/8218—Heat, sound or noise insulation, absorption, or reflection; Other building methods affording favourable thermal or acoustical conditions, e.g. accumulating of heat within walls specifically with respect to sound only soundproof enclosures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
- H04S1/005—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
- H04S7/304—For headphones
Definitions
- An individual therefore himself causes a certain number of propagation disturbances of the sound wave that he will receive according to his own morphological characteristics. It is these disturbances that make it possible to locate the source of emission, the source, the nature, and the associated object of a sound in space.
- Each individual therefore has, for each of his ears, a unique transfer function (that is to say a single filter) which defines the set of disturbances. This unique filter is called "HRTF" (for "Head Related Transfer Function").
- the present invention also relates to a method of storing the filters in a persistent memory, online or local (in the terminal or directly in the headset)
- the frequency response resulting from the diffusion perceived at the level of the microphones is measured simultaneously for each ear, and characterized by comparing the difference between the acoustic signal emitted by the loudspeakers and that received by the two microphones.
- two PHRTF filters are generated per ear and by diffusion speaker, ie at least 10 PHRTF filters for at least 5 loudspeakers.
- the invention also relates to a cabin for implementing the method according to the invention, characterized in that it encloses said closed volume in an acoustically and acoustically isolated manner with respect to the external environment and in that said cabin is substantially a rectangular parallelepiped whose height is greater than the width, and has walls allowing an attenuation level of the external sound environment between 40dB and 50dB.
- the cabin can be removable or fixed.
- the cabin measures 2100x1800x2400 (hx 1 x L) (in mm).
- the method comprises:
- - left binaural signal (sum (convolution (channel i signal, left hrtf)) + (LFe-13dB signal));
- the PHRTF filters are combined with specific acoustic transformation filters that can be in particular acoustic characteristics of a concert hall, or predefined effects: opera, rock, classical, music, etc.
- the invention also relates to a method of restitution in a mobile device of the personalized soundtrack, modified by the transformation method according to the invention, characterized in that the individualisation of the original soundtrack is performed in a computer server before distribution of the multimedia content in a mobile terminal of the listener.
- it is a virtual reality headset.
- it is a device for the hearing impaired.
- Figure 1 illustrates the arrangement of the speakers in an exemplary embodiment of the invention
- FIG. 8 illustrates a rendering method according to an exemplary embodiment of the invention
- Figure 12 illustrates a method of restitution according to another embodiment of the invention
- the listener (1) is placed in the center of the cabin and placed at least 5 loudspeakers (HP) at the periphery of a circle of about 2m radius.
- Three loudspeakers are positioned in front of the listener (substantially facing him): one strictly opposite him and one on each side positioned at an angle of about 30 °.
- the cabin comprises an acoustic window (2) in front of the listener so that the operator (3) can be visible to the listener (1).
- An acoustic door (5) is located behind the listener (1), opposite the acoustic glass (2).
- the measuring system (7) is located outside the cabin (6) and is placed close to the operator (3).
- the listener (1) carries microphones (8).
- Figure 6 is an example of time and frequency representation of different individual PHRTF filters.
- the overall result of the entire measurement is a set of left and right filters depending on each speaker position, ie for a 5.0 signal, 10 individual PHRTF filters: lg, ld, 2g, 2d, 3g, 3d, 4g, 4d , 5g, 5g.
- a convolution algorithm known to those skilled in the art, is used to transform the at least 5 sound signals from the loudspeakers to two sound signals for both. headphones speakers.
- An example of the transformation is given in Figure 7, in the case of a configuration in 5.1 (6 separate audio channels and non-matrixed). The algorithm above thus allows to customize a multichannel soundtrack according to the specific morphological characteristics of each listener.
- the present invention also relates to a method of restitution in the helmet of the soundtrack adapted to the individual by calculating, in the helmet itself, the resulting soundtrack.
- the convolution is calculated in the helmet, which implies that the helmet has the ability to integrate the electronic device for this purpose. This imposes design constraints.
- the electronic device must integrate directly on the cable (like the currently existing remotes). This has the consequence that this method and system works with all headphones capable of directly receiving a digital signal (in this case a dematriate 5.1 digital audio signal).
- the individual PHRTF filters are stored in the computer server containing the original media content.
- the personalized soundtrack is produced in this server at the moment when the listener wishes to access the content for immediate listening ("streaming") or for storage in his terminal (PC or mobile device).
- the terminal (nomadic or not) receives the individualized soundtrack, stores it locally if necessary and sends it as it is, without further manipulation to the listener's headphones.
- Variant 2 The individualisation of the tape are original is performed in the mobile terminal of the listener. See diagram shown in Figure 10.
- the individual PHRTF filters are stored in the listener's terminal after a prior download procedure. Note that the same terminal can store several individual PHRTF filters corresponding to different listeners. The choice of the right PHRTF filters will then be done by a software offering this selection through an appropriate human-machine interface.
- the computer server containing the original media content distributes the same original content to all listeners.
- the convolution takes place in the terminal.
- the headset receives an analog signal (which represents the original soundtrack individualized for the listener), and there is no new constraint on the headset. This has the consequence that this method and system work with all existing helmets.
- Variation 3 The individualisation of the band are original is performed in a dongle connected to a nomadic equipment or not the listener. See diagram shown in Figure 11.
- the individual PHRTF filters are stored in a "wireless" dongle that includes a connector (USB for example) that allows it to connect to an external port of the terminal, and paired or not with the listener's headphones.
- a connector USB for example
- USB universal adapter
- the terminal (nomadic or not) sends to its external port, the original soundtrack, which is personalized in real time by the dongle "wireless", which sends the personalized soundtrack to the headphone of the listener.
- the "wireless" dongle contains both the individual PHRTF filters, the electronics needed to execute the convolution algorithm.
- the "wireless" dongle can also connect to any digital 5.1 audio broadcast source (unregistered).
- the server and the terminal have no information about the customization of the original soundtrack and therefore make no difference between a listener (and his headphones) that uses the individual PHRTF filters and a listener who uses the original soundtrack.
- the system for broadcasting the original soundtracks does not require any modification or adaptation and can therefore be used in a completely transparent manner for "standard” users and users using the method described here.
- the convolution takes place in the "wireless” dongle and sends to the headphones an analog signal either by wire connection or by "wireless” connection, which contains the original individual soundtrack for the listener.
- This version therefore works for "wireless” headphones able to connect according to "wireless” standards, but also those that have dual wireless and “wireless” connectivity. This has the consequence that this method and system work with all existing "wireless” headsets.
- the individualization of the original soundtrack is performed in hearing aids connected to a terminal that reads multimedia content (smartphone, tablet, TV, decoder, etc.), replacing the audio headset.
- multimedia content smart phone, tablet, TV, decoder, etc.
- the connection is often, but not necessarily, wireless.
- the sound reproduction method related to this variant is illustrated in Figure 12.
- the individual PHRTF filters are stored in the listener's prostheses after a prior loading procedure.
- the present invention is not limited to the embodiment described above by way of example; but it extends to other variants, depending on the number of speakers for the reproduction of the number of audio streams generated, without limitation (5.0, 5.1, 5.2, 7.1, 10.2, 11.1, Atmos ).
- the present invention is compatible with all mono, stereo, quadraphonic broadcast formats.
- the present invention is not limited to the distribution system of the multimedia content including the soundtrack.
- the invention is completely compatible with CD, Blu-Ray, streaming or internet distribution formats. Satellite or cable or "Video on Demand” (VOD), “Near Video on Demand” (NVOD) or Television on Demand.
- VOD Video on Demand
- NVOD Near Video on Demand
- the present invention is also completely compatible with compression algorithms used for storage or broadcasting of multimedia content.
- the nomadic device comprising the electronic device is chosen from the non-exhaustive list of: telephones, tablet computers, laptops, or other device for storing music, films, video, games, audiovisual or multimedia contents.
- the invention also covers all the embodiments and all the applications which will be directly accessible to the person skilled in the art upon reading the present application, and of his own knowledge.
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Architecture (AREA)
- Signal Processing (AREA)
- Structural Engineering (AREA)
- Civil Engineering (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Neurosurgery (AREA)
- Otolaryngology (AREA)
- Stereophonic System (AREA)
Abstract
Description
Procédé de mesure de filtres PHRTF d'un auditeur, cabine pour la mise en œuvre du procédé, et procédés permettant d'aboutir à la restitution d'une bande sonore multicanal personnalisée Secteur technique de l'invention : PHRTF filter measurement method of a listener, cabin for the implementation of the method, and methods for leading to the rendering of a personalized multichannel soundtrack Technical sector of the invention:
La présente invention concerne le secteur technique de la mesure du comportement acoustique d'un individu dans un environnement sonore afin d'intégrer ses particularités morphologiques uniques dans un procédé de traitement du son notamment pour une écoute personnalisée nomade, notamment au casque. The present invention relates to the technical field of measuring the acoustic behavior of an individual in a sound environment in order to integrate its unique morphological features into a sound processing method, particularly for nomadic personal listening, in particular to headphones.
Chaque individu est unique et perçoit des sons de manière modifiée selon ses caractéristiques morphologiques (forme de la tête, forme du pavillon des oreilles, conduit auditif, texture de la peau, nature des cheveux, etc.). Un son ne sera donc pas perçu de manière identique par deux individus différents. Un individu placé dans un champ sonore perçoit en trois dimensions les différentes sources d'une scène sonore avec leurs informations de position, de niveau sonore, d'étendue, de distance et de déplacement. Each individual is unique and perceives sounds in a modified way according to his morphological characteristics (shape of the head, shape of the flag of the ears, auditory canal, texture of the skin, nature of the hair, etc.). A sound will not be perceived identically by two different individuals. An individual placed in a sound field perceives in three dimensions the different sources of a sound scene with their information of position, sound level, extent, distance and displacement.
Un individu provoque donc lui-même un certain nombre de perturbations de propagation de l'onde sonore qu'il va recevoir selon ses propres caractéristiques morphologiques. Ce sont ces perturbations qui permettent de localiser la source d'émission, la provenance, la nature, et l'objet associé d'un son dans l'espace. Chaque individu possède donc, pour chacune de ses oreilles, une fonction de transfert unique (c'est-à-dire un filtre unique) qui définit l'ensemble des perturbations. Ce filtre unique est appelé « HRTF » (pour « Head Related Transfer Function », Fonction de Transfert Liée à la Tête). An individual therefore himself causes a certain number of propagation disturbances of the sound wave that he will receive according to his own morphological characteristics. It is these disturbances that make it possible to locate the source of emission, the source, the nature, and the associated object of a sound in space. Each individual therefore has, for each of his ears, a unique transfer function (that is to say a single filter) which defines the set of disturbances. This unique filter is called "HRTF" (for "Head Related Transfer Function").
Pour évaluer les filtres HRTF d'un individu, on fait déplacer angulairement (suivant un angle azimutal et un angle d'élévation) un haut-parleur tout autour du centre de la tête, en disposant un microphone de mesure à l'intérieur de chaque pavillon des deux oreilles. Les microphones mesurent les perturbations des ondes sonores qu'émet le haut-parleur dans les différentes directions de propagation. Les mesures effectuées permettant d'obtenir les filtres HRTF de cet individu. Les nouvelles techniques, notamment écoute binaurale (relatif à l'écoute avec deux oreilles), permettent d'apporter des informations sonores supplémentaires par rapport à la stéréophonie, notamment beaucoup plus d'informations de perception spatiale. Là où les particularités morphologiques des individus n'ont que peu d'importance dans la stéréophonie (si on envoie les mêmes signaux sonores à plusieurs individus, ceux-ci ne percevront que de très légères modifications car le son stéréophonique n'envoie que certaines informations spatiales, celles qui sont frontales), le rendu spatial obtenu grâce aux mesures des filtres HRTF est beaucoup plus important, et ce de manière audible, lors d'une l'écoute binaurale). To evaluate an individual's HRTF filters, a loudspeaker is moved angularly (azimuth angle and elevation angle) around the center of the head, with a measurement microphone inside each head. flag of both ears. The microphones measure the disturbances of the sound waves emitted by the loudspeaker in the different directions of propagation. The measurements made to obtain the HRTF filters of this individual. New techniques, including binaural listening (related to listening with two ears), provide additional sound information in relation to stereophony, including much more spatial perception information. Where the morphological peculiarities of individuals are of little importance in stereophony (if we send the same sound signals to several individuals, they will perceive only very slight changes because the stereophonic sound sends only certain information spatial, those which are frontal), the spatial rendering obtained thanks to the measurements of the HRTF filters is much more important, and this in an audible way, during a binaural listening).
Pour profiter d'une meilleure reproduction d'un champ sonore spatial, il est nécessaire, soit de placer l'individu au centre du champ sonore (pour qu'il puisse identifier d'où provient chaque son différent) en utilisant un grand nombre de haut- parleurs pour recréer un environnement à 360°; soit, par l'intermédiaire d'une écoute binaurale, d'utiliser des filtres HRTF qui permettent aux haut-parleurs placés au niveau des oreilles (généralement un casque) d'envoyer des ondes sonores modifiées qui donneront à l'individu cette sensation de spatialisation. Art antérieur : To enjoy a better reproduction of a spatial sound field, it is necessary either to place the individual in the center of the sound field (so that he can identify where each different sound comes from) using a large number of speakers to recreate a 360 ° environment; or, through binaural listening, use HRTF filters that allow the speakers placed at the ears (usually a headset) to send modified sound waves that will give the individual that feeling of spatialization. Prior art:
On connaît depuis de nombreuses années, les systèmes home-cinéma qui, en plaçant des haut-parleurs à différents endroits d'une pièce, permettent de créer une certaine reproduction spatiale du son. Ces systèmes ne sont évidemment pas nomades (minimum deux haut-parleurs, plus un amplificateur). Les systèmes home-cinéma généralement adoptés sont pourvus de 6 haut-parleurs qui permettent de reproduire la sensation d'un champ sonore à 360° puisque dans cette configuration 2 HP sont placés à l'arrière. Dans les versions plus modernes des systèmes home-cinéma à 8, 10 ou 12 haut-parleurs, le rendu est amélioré ; et évidemment plus on place de hauts-parleurs, plus le rendu s'approche celui d'un rendu réel à 360°. Le problème est évidement le coût, un système home cinéma à 6 ou 10 haut-parleur est relativement cher, et en outre nécessite d'être disposé dans une pièce et donc occupe beaucoup de place. Ces dispositifs home-cinéma ne sont de plus pas nomades. Le fonctionnement général d'un système home cinéma est d'enregistrer des pistes sonores différentes qui chacune seront renvoyées vers le haut-parleur correspondant en prenant en compte la position d'écoute centrale de l'individu (communément appelé « sweet spot »). For many years, home theater systems have been known to place loudspeakers in different parts of a room to create a certain spatial reproduction of the sound. These systems are obviously not nomadic (minimum two speakers, plus an amplifier). The generally adopted home theater systems are equipped with 6 loudspeakers that reproduce the sensation of a 360 ° sound field since in this configuration 2 HP are placed at the back. In more modern versions of home theater systems with 8, 10 or 12 speakers, the rendering is improved; and of course, the more loudspeakers are placed, the closer the rendering approaches to a real 360 ° rendering. The problem is obviously the cost, a 6 or 10 speaker home theater system is relatively expensive, and furthermore requires to be arranged in a room and therefore occupies a lot of room. These home-cinema devices are not nomadic any more. The general operation of a home theater system is to record different sound tracks which each will be sent back to the corresponding speaker taking into account the central listening position of the individual (commonly called "sweet spot").
Jusqu'à présent, les techniques de reproduction au casque se faisaient uniquement sur 2 canaux en stéréophonie (reproduction sonore visant à recréer l'illusion d'un espace sonore. Cela est habituellement réalisé à l'aide de deux canaux (gauche et droit) diffusés par au moins deux transducteurs (haut-parleurs ou écouteurs)). Until now, headphone reproduction techniques have only been used on 2 stereo channels (sound reproduction aimed at recreating the illusion of a sound space) This is usually done using two channels (left and right) diffused by at least two transducers (speakers or earphones)).
Les nouvelles techniques actuelles d'écoute binaurale, permettent d'apporter des informations sonores supplémentaires par rapport à la stéréophonie en permettant de reproduire les champs sonores diffusés notamment par des systèmes home-cinéma, en ce qui concerne les informations de perception spatiale et cela prend des proportions nettement plus importantes avec des filtres HRTF. The current new techniques of binaural listening, allow to bring additional sound information in relation to the stereophony by allowing to reproduce the sound fields diffused in particular by home-cinema systems, as regards the information of spatial perception and it takes significantly higher proportions with HRTF filters.
L'intérêt d'une écoute binaurale spatialisée est qu'elle permet de diffuser un champ sonore à 360° (préalablement enregistré) et de le retranscrire vers au moins deux haut-parleurs en utilisant la technique de la mesure du filtre HRTF. The advantage of binaural spatialized listening is that it can broadcast a sound field 360 ° (previously recorded) and retranscribe to at least two speakers using the HRTF filter measurement technique.
L'inconvénient majeur de cette technologie est qu'elle est standardisée : les systèmes de rendu sonore spatiaux opèrent sur la base d'un ensemble de filtres binauraux « standards », issus d'une mesure acoustique sur un buste artificiel ou encore un ou plusieurs utilisateurs de morphologie standard. Comme indiqué plus haut, les indices acoustiques perceptifs de localisation ne sont pas du tout généraux pour tous les auditeurs mais bien très spécifiques et par conséquent uniques pour chaque individu, ce qui entraîne un certain nombre d'erreurs de localisation, notamment une augmentation des confusions à l'arrière. Ainsi, les systèmes de rendu sonores basés sur des filtres binauraux standards ne sont pas fiables pour une majorité d'auditeurs. Comme indiqué, une autre possibilité pour recréer la spatialisation est de mesurer les filtres HRTF uniques d'un individu et d'utiliser ces filtres pour traiter les ondes sonores de manière à ce que les données de spatialisation puissent être reproduites à partir uniquement de deux haut-parleurs placés au niveau des oreilles. Ainsi, on prend en compte la déformation sonore unique de chaque individu plutôt qu'une déformation standard. The major disadvantage of this technology is that it is standardized: the spatial sound rendering systems operate on the basis of a set of "standard" binaural filters, derived from an acoustic measurement on an artificial bust or one or more standard morphology users. As noted above, perceptual acoustic location indices are not at all general for all listeners but very specific and therefore unique for each individual, resulting in a number of location errors, including increased confusion. in back. Thus, sound rendering systems based on standard binaural filters are unreliable for a majority of listeners. As noted, another possibility for recreating spatialization is to measure an individual's unique HRTF filters and use these filters to process sound waves so that spatialization data can be reproduced from only two high speakers placed at the level of the ears. Thus, we take into account the unique sound deformation of each individual rather than a standard deformation.
Le problème est que le procédé de mesure des filtres HRTF individuels (pour chaque oreille) est extrêmement fastidieux et dure plusieurs heures. L'individu doit rester immobile pendant cette durée et doit supporter un casque équipé de transducteurs électroacoustiques pour chaque oreille. The problem is that the method of measuring individual HRTF filters (for each ear) is extremely tedious and lasts several hours. The individual must remain stationary for this duration and must support a helmet equipped with electroacoustic transducers for each ear.
On connaît le brevet France Telecom N° FR 03 02467 qui permet de simuler les filtres HRTF unique d'un individu en limitant grandement le temps d'immobilisation de l'individu lors de la mesure. Ce brevet sort de l'approche acoustique-acoustique en proposant un procédé qui utilise des photos de la tête de l'individu. Après la prise de photos, un logiciel va calculer le filtre HRTF en fonction de paramètres intégrés au logiciel d'analyse de morphologie. Les filtres HRTF ne sont donc pas directement mesurés mais estimés algorithmiquement à partir de ces photos. Par la suite, les informations sont transmises à un serveur qui va modifier les données multicanal diffusées en tenant compte des filtres HRTF pour les envoyer vers au moins deux haut- parleurs. Cette solution présente des inconvénients très importants : France Telecom Patent No. FR 03 02467 is known which makes it possible to simulate the unique HRTF filters of an individual by greatly limiting the immobilization time of the individual during the measurement. This patent comes out of the acoustic-acoustic approach by proposing a process that uses photos of the individual's head. After taking pictures, a software program will calculate the HRTF filter based on parameters embedded in the morphology analysis software. HRTF filters are not directly measured but estimated algorithmically from these photos. Subsequently, the information is transmitted to a server that will modify the multichannel data broadcast taking into account the HRTF filters to send them to at least two speakers. This solution has very important disadvantages:
- ne pas être fidèle à la réalité acoustique (estimation mathématique à partir de photos), et - not being faithful to acoustic reality (mathematical estimation from photos), and
- d'omettre certaines caractéristiques perturbant le champ acoustique (éléments non- visibles, zones d'ombre, nature des cheveux, texture de la peau notamment). omitting certain characteristics that disturb the acoustic field (non-visible elements, shadows, nature of the hair, texture of the skin in particular).
La qualité du rendu ne peut absolument pas égaler le rendu de la prise de mesure acoustique - acoustique. La mesure se fait donc au détriment de sa qualité. On connaît également des dispositifs de type home-cinéma qui sont capables d'envoyer le son multicanal vers un casque. L'individu a alors l'impression d'avoir un rendu spatialisé dans un casque. Ces dispositifs présentent les inconvénients suivants : The quality of the rendering absolutely can not equal the rendering of the acoustic - acoustic measurement. The measure is therefore at the expense of its quality. Home theater-type devices are also known which are capable of sending multichannel sound to a headset. The individual then has the impression of having a spatialized rendering in a helmet. These devices have the following drawbacks:
- absolument pas nomade : le casque ne peut fonctionner correctement uniquement à proximité de l'installation home cinéma qui a servi à la mesure des filtres - absolutely not nomadic: the headphones can only work properly near the home cinema installation that was used to measure the filters
HRTF. HRTF.
- aucune personnalisation en fonction du filtre HRTF individuel. Quel que soit l'individu qui utilise le casque, le son en sortie du casque sera le même. D'une manière générale, beaucoup de systèmes traitent le son avant sa fixation sur le support (CD, DVD, Blu-Ray, serveurs, etc) sur différents canaux 5.1, 7.1 ou stéréophonique et l'auditeur ne pourra pas agir pour adapter ce son à ses propres paramètres auditifs. Problème technique posé : - no customization depending on the individual HRTF filter. Whoever uses the headset, the sound coming out of the headphones will be the same. In general, many systems process the sound before it is fixed on the media (CD, DVD, Blu-Ray, servers, etc.) on different 5.1, 7.1 or stereo channels and the listener can not act to adapt this its to its own auditory parameters. Technical problem posed:
Il existe donc un réel besoin pour un procédé de réalisation rapide des mesures des filtres HRTF uniques pour un individu qui soit réalisée de manière uniquement acoustique pour être totalement fidèle à la réalité de la diffusion acoustique, ainsi que pour un procédé permettant d'utiliser ces filtres à destination d'appareils nomades (casques), le tout pour restituer un effet de spatialisation à 360° équivalent à celui rendu par un système de multidiffusion à enceintes. There is therefore a real need for a method of rapid realization of the HRTF filters unique for an individual that is performed only acoustically to be totally faithful to the reality of acoustic diffusion, as well as for a method for using these filters for nomadic devices (headsets), all to restore a 360 ° spatialization effect equivalent to that rendered by a speaker multicast system.
Comme indiqué plus haut, pour une reproduction spatiale, on utilise actuellement plusieurs canaux (et donc plusieurs haut-parleurs qui sont naturellement inadaptés à une reproduction au casque, donc non nomade). Pour une reproduction au casque il est donc nécessaire de définir et de caractériser le comportement de nos oreilles soumises à un stimuli auditif suivant des directions différentes dit « à 360° » puisque c'est une configuration utilisée avec plusieurs haut-parleurs (6,8,12...) pour reproduire des bandes sons de contenus audiovisuels dans ces mêmes formats (5.1,7.1, ...). As indicated above, for a spatial reproduction, we currently use several channels (and therefore several speakers that are naturally unsuitable for a reproduction in headphones, so non-nomadic). For headphone reproduction it is therefore necessary to define and characterize the behavior of our ears subjected to auditory stimuli according to different directions called "360 °" since it is a configuration used with several loudspeakers (6.8 , 12 ...) to reproduce soundtracks of audiovisual content in these same formats (5.1.7.1, ...).
Résumé de l'invention L'invention réside dans l'obtention de filtres HRTF personnalisés pour une spatialisation à 360° du son au casque par synthèse binaurale, désignés ici par PHRTF (« Personalized Head Response Transfert Function », « Fonction de Transfert Liée à la Tête Personnalisée »). Summary of the invention The invention resides in obtaining customized HRTF filters for binaural synthesis of binaural-sounding headset sound, referred to herein as PHRTF (Personalized Head Response Response Function). .
Cette restitution est optimisée et individualisée en prenant compte les caractéristiques morphologiques de chaque individu. This restitution is optimized and individualized taking into account the morphological characteristics of each individual.
La présente invention concerne également un procédé de stockage des filtres dans une mémoire persistante, en ligne ou locale (dans le terminal ou directement dans le casque d'écoute) The present invention also relates to a method of storing the filters in a persistent memory, online or local (in the terminal or directly in the headset)
La présente invention concerne également un procédé de restitution dans le casque de la bande son adaptée à l'individu par calcul, dans le casque lui-même, de la bande son résultante. The present invention also relates to a method of restitution in the helmet of the soundtrack adapted to the individual by calculating, in the helmet itself, the resulting soundtrack.
L'invention concerne un procédé de mesure de filtres PHRTF personnalisés d'un auditeur (« Personalized Head Response Transfert Function »), caractérisé en ce qu'il comprend les étapes suivantes : The invention relates to a method for measuring personalized PHRTF filters of a listener ("Personalized Head Response Transfer Function"), characterized in that it comprises the following steps:
- une étape de diffusion d'un signal acoustique par au moins 5 haut- parleurs tous dirigés au point focal d'un volume clos traité acoustiquement et isolé phoniquement de l'ambiance sonore extérieure audit volume, ledit point focal étant situé au centre volumique dudit volume clos ; a step of diffusion of an acoustic signal by at least 5 loudspeakers all directed to the focal point of a closed volume treated acoustically and acoustically isolated from the sound environment outside said volume, said focal point being located at the center of said volume; closed volume;
- une étape de mesure simultanée pour chaque oreille d'une tête d'un auditeur placée audit point focal dudit volume clos de la réponse fréquentielle résultant de la diffusion, à l'aide d'un microphone par oreille ; et a step of simultaneous measurement for each ear of a head of a listener placed at said focal point of said closed volume of the frequency response resulting from the broadcast, using a microphone per ear; and
- une étape de génération d'un ensemble de filtres PHRTF personnalisés pour ledit auditeur par un système numérique à partir desdites mesures; et où : a step of generating a set of personalized PHRTF filters for said listener by a digital system from said measurements; and or :
- ledit procédé est effectué sans prise de photographie de la tête de l'auditeur. Selon un mode particulier de réalisation, chaque haut-parleur diffuse un signal acoustique de niveau constant ou fréquentiellement pondéré selon un balayage fréquentiel continu de 20000 Hz à 20 Hz au minimum et suivant au moins 5 angles définis par la position des haut-parleurs. - said method is performed without taking a photograph of the head of the listener. According to a particular embodiment, each loudspeaker broadcasts a constant or frequently-weighted acoustic signal according to a continuous frequency sweep from 20000 Hz to at least 20 Hz and according to at least 5 angles defined by the position of the loudspeakers.
Selon un mode particulier de réalisation, à chaque diffusion d'un signal acoustique, on mesure simultanément pour chaque oreille la réponse fréquentielle résultant de la diffusion qui est perçue au niveau des microphones, et caractérisé en ce que l'on compare la différence entre le signal acoustique émis par les haut-parleur et celui reçu par les deux microphones. According to a particular embodiment, at each diffusion of an acoustic signal, the frequency response resulting from the diffusion perceived at the level of the microphones is measured simultaneously for each ear, and characterized by comparing the difference between the acoustic signal emitted by the loudspeakers and that received by the two microphones.
Selon un mode particulier de réalisation, on génère, à partir des mesures, deux filtres PHRTF par oreille et par haut-parleur de diffusion soit au minimum 10 filtres PHRTF pour au moins 5 haut-parleurs. According to a particular embodiment, from the measurements, two PHRTF filters are generated per ear and by diffusion speaker, ie at least 10 PHRTF filters for at least 5 loudspeakers.
L'invention concerne également une cabine pour la mise en œuvre du procédé selon l'invention, caractérisée en ce que qu'elle enferme ledit volume clos de manière traitée acoustiquement et isolée phoniquement par rapport à l'ambiance extérieure et en ce que ladite cabine est sensiblement un parallélépipède rectangle dont la hauteur est supérieure à la largeur, et présente des parois permettant un niveau d'atténuation de l'ambiance sonore extérieure se situant entre 40dB et 50dB. The invention also relates to a cabin for implementing the method according to the invention, characterized in that it encloses said closed volume in an acoustically and acoustically isolated manner with respect to the external environment and in that said cabin is substantially a rectangular parallelepiped whose height is greater than the width, and has walls allowing an attenuation level of the external sound environment between 40dB and 50dB.
Selon un mode particulier de réalisation, on place un minimum de 5 haut- parleurs pour effectuer les mesures acoustiques. According to a particular embodiment, a minimum of 5 loudspeakers are placed for acoustic measurements.
Selon un mode particulier de réalisation, la cabine peut être démontable ou fixe. According to a particular embodiment, the cabin can be removable or fixed.
Selon un mode particulier de réalisation, la cabine mesure 2100x1800x2400 (h x 1 x L) (en mm). According to a particular embodiment, the cabin measures 2100x1800x2400 (hx 1 x L) (in mm).
L'invention concerne également un procédé de transformation d'au moins 5 signaux sonores issus de 5 haut-parleurs vers 2 haut-parleurs d'écoute en utilisant les filtres PHRTF mesurés selon le procédé de l'invention, caractérisée en ce qu'il utilise un algorithme de convolution. The invention also relates to a method of transforming at least 5 sound signals from 5 loudspeakers to 2 listening loudspeakers using the PHRTF filters measured according to the method of the invention, characterized in that it uses a convolution algorithm.
Selon un mode particulier de réalisation, le procédé comprend : According to a particular embodiment, the method comprises:
- une étape d'application pour chaque signal hors LFE et pour chaque oreille du filtre PHRTF mesuré correspondant ; an application step for each signal outside LFE and for each ear of the corresponding measured PHRTF filter;
- une étape d'injection dans chaque signal final droit et gauche du signal du LFE atténué de 13dB soit pour chaque signal de chaque canal: an injection step in each left and right final signal of the attenuated LFE signal of 13 dB, for each signal of each channel:
- signal binaural gauche = (somme(convolution (signal canal i, hrtf_gauche))+(Signal LFe- 13dB)) ; - left binaural signal = (sum (convolution (channel i signal, left hrtf)) + (LFe-13dB signal));
- signal binaural droit = (somme(convolution(signal_canal_i, hrtf droit)) + (Signal LFE-13dB)). - right binaural signal = (sum (convolution (signal_channel_i, right hrtf)) + (Signal LFE-13dB)).
Selon un mode particulier de réalisation, on combine les filtres PHRTF avec des filtres spécifiques de transformation acoustique pouvant être notamment des caractéristiques acoustiques d'une salle de concert, ou des effets prédéfinis : opéra, rock, classique, musique, etc According to a particular embodiment, the PHRTF filters are combined with specific acoustic transformation filters that can be in particular acoustic characteristics of a concert hall, or predefined effects: opera, rock, classical, music, etc.
L'invention concerne également un procédé de stockage dans une mémoire persistante, en ligne ou locale (serveur, PC ou autres) des filtres PHRTF obtenus selon le procédé de mesure selon l'invention, caractérisé en ce que le stockage s'effectue dans un serveur, ou de manière alternative dans une mémoire générique dans un terminal ou dans l'appareil nomade, ou dans un dongle connecté au terminal, ou dans une carte SD ou micro-SD. The invention also relates to a method of storing in a persistent memory, online or local (server, PC or other) PHRTF filters obtained according to the measurement method according to the invention, characterized in that the storage is carried out in a server, or alternatively in a generic memory in a terminal or in the mobile device, or in a dongle connected to the terminal, or in an SD card or micro-SD.
L'invention concerne également un procédé de restitution dans un appareil nomade de la bande son personnalisée, modifiée par le procédé de transformation selon l'invention caractérisé en ce que l'individualisation de la bande son originale est effectuée directement dans le casque de l'auditeur. The invention also relates to a method of restitution in a nomadic device of the personalized soundtrack, modified by the transformation method according to the invention characterized in that the individualization of the original soundtrack is performed directly in the headset of the auditor.
L'invention concerne également un procédé de restitution dans un appareil nomade de la bande son personnalisée, modifiée par le procédé de transformation selon l'invention caractérisé en ce que l'individualisation de la bande son originale est effectuée dans un serveur informatique avant distribution du contenu multimédia dans un terminal mobile de l'auditeur. The invention also relates to a method of restitution in a mobile device of the personalized soundtrack, modified by the transformation method according to the invention, characterized in that the individualisation of the original soundtrack is performed in a computer server before distribution of the multimedia content in a mobile terminal of the listener.
L'invention concerne également un procédé de restitution dans un appareil nomade de la bande son personnalisée, modifiée par le procédé de transformation selon l'invention caractérisé en ce que l'individualisation de la bande sont originale est effectuée dans un terminal mobile de l'auditeur. The invention also relates to a method of restitution in a nomadic device of the personalized soundtrack, modified by the transformation method according to the invention, characterized in that the individualisation of the band is original is performed in a mobile terminal of the auditor.
L'invention concerne également un procédé de restitution dans un appareil nomade de la bande son personnalisée, modifiée par le procédé de transformation selon l'invention caractérisé en ce que l'individualisation de la bande sont originale est effectuée dans un dongle relié à un équipement de l'auditeur. The invention also relates to a method of restitution in a nomadic device of the personalized soundtrack, modified by the transformation method according to the invention characterized in that the individualisation of the band is original is performed in a dongle connected to a device of the listener.
L'invention concerne également un appareil nomade caractérisé en ce qu'il comporte au moins deux haut-parleurs d'écoute d'une bande son et un dispositif électronique permettant : The invention also relates to a mobile device characterized in that it comprises at least two listening loudspeakers of a soundtrack and an electronic device allowing:
- le stockage des filtres PHRTF obtenus selon l'invention; storage of the PHRTF filters obtained according to the invention;
- la transformation et autres filtres selon l'invention via les filtres PHRTF des signaux sonores issus d'au moins 5 haut-parleurs vers 2 haut-parleurs d'écoute ; et - Transformation and other filters according to the invention via PHRTF filters of the sound signals from at least 5 speakers to 2 listening speakers; and
- la restitution de la bande son individualisée. - the return of the individualized soundtrack.
Appareil nomade selon la revendication 17, caractérisé en ce qu'il s'agit d'un casque, notamment de type à deux haut-parleurs, un appliqué à chaque oreille. Mobile device according to claim 17, characterized in that it is a headset, in particular of the two-speaker type, one applied to each ear.
Selon un mode particulier de réalisation, il s'agit d'un casque de réalité virtuelle. According to a particular embodiment, it is a virtual reality headset.
Selon un mode particulier de réalisation, il s'agit d'un dispositif pour malentendants. According to a particular embodiment, it is a device for the hearing impaired.
Selon un mode particulier de réalisation, il s'agit d'un téléphone, d'une tablette informatique, d'un ordinateur portable ou autre dispositif de stockage de musique, films, vidéo, pouvant être relié à un casque. D'autres particularités et avantages de l'invention apparaîtront encore dans la description ci-après et dans les dessins annexés, donnés à titre d'exemples non limitatifs : According to a particular embodiment, it is a telephone, a tablet computer, a laptop or other storage device for music, movies, video, which can be connected to a headset. Other features and advantages of the invention will become apparent in the description below and in the accompanying drawings, given as non-limiting examples:
la figure 1 illustre la disposition des haut-parleurs dans un exemple de réalisation de l'invention ; Figure 1 illustrates the arrangement of the speakers in an exemplary embodiment of the invention;
la figure 2 illustre la disposition des haut-parleurs dans un autre exemple de réalisation de l'invention ; Figure 2 illustrates the arrangement of the loudspeakers in another embodiment of the invention;
la figure 3 illustre la disposition des haut-parleurs dans un autre exemple de réalisation de l'invention ; Figure 3 illustrates the arrangement of the speakers in another embodiment of the invention;
la figure 4 illustre la cabine dans un exemple de réalisation de l'invention ; la figure 5 illustre la représentation fréquentielle des filtres PHRTF dans un exemple de réalisation de l'invention ; FIG. 4 illustrates the cabin in an exemplary embodiment of the invention; FIG. 5 illustrates the frequency representation of the PHRTF filters in an exemplary embodiment of the invention;
la figure 6 illustre un exemple de représentation temporelle et fréquentielle des filtres PHRTF ; FIG. 6 illustrates an example of temporal and frequency representation of the PHRTF filters;
la figure 7 illustre un exemple de transformation d'une bande son multicanal par des filtres PHRTF ; FIG. 7 illustrates an example of transformation of a multichannel soundtrack by PHRTF filters;
la figure 8 illustre un procédé de restitution selon un exemple de réalisation de l'invention ; FIG. 8 illustrates a rendering method according to an exemplary embodiment of the invention;
la figure 9 illustre un procédé de restitution selon un autre exemple de réalisation de l'invention ; Figure 9 illustrates a method of restitution according to another embodiment of the invention;
la figure 10 illustre un procédé de restitution selon un autre exemple de réalisation de l'invention ; Figure 10 illustrates a method of restitution according to another embodiment of the invention;
la figure 11 illustre un procédé de restitution selon un autre exemple de réalisation de l'invention ; Figure 11 illustrates a method of restitution according to another embodiment of the invention;
la figure 12 illustre un procédé de restitution selon un autre exemple de réalisation de l'invention ; Figure 12 illustrates a method of restitution according to another embodiment of the invention;
la figure 13 illustre un procédé de restitution selon un autre exemple de réalisation de l'invention. Figure 13 illustrates a method of restitution according to another embodiment of the invention.
Solution Technique L'invention réside donc dans la mise au point d'un procédé de mesure de filtres PHRTF d'un auditeur, caractérisé en ce que ledit procédé est mis en œuvre dans un volume clos, traité acoustiquement et isolé phoniquement de l'ambiance sonore extérieure audit volume, et ledit volume clos comporte au moins 5 haut-parleurs (sans caisson de basse), diffusant un signal acoustique, tous dirigés au point focal ou point de convergence situé en son centre volumique, à l'endroit exact où se trouve la tête de l'auditeur qui est muni d'un transducteur électro-acoustique permettant la réception de signaux acoustiques (de type microphone, ou autre appareil d'enregistrement) par oreille, et en ce que l'on enregistre et/ou transfère à partir de ces microphones, vers un enregistreur distant comme un PC, ou autre système numérique, les paramètres permettant de calculer les filtres PHRTF, et caractérisé en ce qu'il est effectué sans prise de photographie de la tête de l'auditeur Technical solution The invention therefore lies in the development of a method for measuring PHRTF filters of a listener, characterized in that said method is implemented in a closed volume, acoustically processed and sound isolated from the external sound environment to said volume, and said closed volume comprises at least 5 loudspeakers (without subwoofer), diffusing an acoustic signal, all directed to the focal point or convergence point located at its center of gravity, at the exact location where the the head of the listener who is provided with an electro-acoustic transducer allowing the reception of acoustic signals (microphone type, or other recording apparatus) per ear, and in that one records and / or transfers from from these microphones, to a remote recorder such as a PC, or other digital system, the parameters for calculating the PHRTF filters, and characterized in that it is performed without taking a photograph of the head of the listener
Le procédé de mesure des filtres individuel PHRTF se fait dans une cabine spécialement créée pour être la plus cohérente possible acoustiquement. Seule la déformation sonore liée à l'individu doit exister. The PHRTF individual filter measurement process is done in a specially designed cabin to be as acoustically coherent as possible. Only the sound deformation related to the individual must exist.
Le volume clos est de manière préféré une cabine qui est sensiblement un parallélépipède rectangle dont la hauteur doit être supérieure à la largeur de manière à correspondre aux caractéristiques définies selon la Norme ITU R-BS775 1 et 2 (recommandations concernant le système de son stéréophonique multicanal avec ou sans image associée), et devra également présenter une isolation acoustique permettant d'atténuer les sons venant de l'extérieur pour ne pas fausser la mesure. Le niveau d'atténuation minimum convenable et communément accepté doit se situer entre 40 dB et 50 dB. The enclosed volume is preferably a cabin which is substantially a rectangular parallelepiped whose height must be greater than the width so as to correspond to the characteristics defined according to the ITU R-BS775 1 and 2 standard (recommendations concerning the multichannel stereo sound system with or without associated image), and should also have an acoustic insulation to attenuate the sounds coming from the outside so as not to distort the measurement. The appropriate and commonly accepted minimum attenuation level should be between 40 dB and 50 dB.
Par « cabine », on désigne ici une enceinte fermée sur toutes ses faces et dont la fonction est de contenir ledit volume clos et d'en assurer l'isolation phonique et le traitement acoustique, ce qui implique le choix de matériaux évidents pour l'homme du métier. Naturellement d'autres formes de cabines pourront être envisagées. Celle-ci peut être démontable ou fixe. De manière totalement préférée, dans le cas d'une cabine démontable celle-ci mesure 2400x1800x2100 (en mm) afin de se rapprocher des normes définies dans le document ITU R-BS775 1. Pour effectuer les mesures dans la cabine, on place au minimum 5 haut-parleursBy "cabin" is meant here a closed enclosure on all sides and whose function is to contain said closed volume and ensure sound insulation and acoustic treatment, which implies the choice of obvious materials for the skilled person. Of course other forms of cabins may be considered. This can be removable or fixed. In a completely preferred way, in the case of a demountable cabin it measures 2400x1800x2100 (in mm) in order to get closer to the standards defined in the document ITU R-BS775 1. To carry out measurements in the cabin, we place at least 5 speakers
(nécessaire pour une diffusion sonore 5.0). Naturellement, il est possible de prévoir plus de haut-parleurs si souhaité : 6 pour diffusion en 6.0, 7 pour diffusion en 7.0. (necessary for a 5.0 audio broadcast). Naturally, it is possible to provide more speakers if desired: 6 for broadcast in 6.0, 7 for broadcast in 7.0.
On ne place pas de caisson de basse (dédié à la reproduction des « effets graves »), car la longueur d'onde des fréquences graves est trop grande pour pouvoir être pertinente dans la mesure d'un filtre PHRTF, et donc inutilisable dans une cabine de mesure. La disposition des haut-parleurs se fait selon la Norme ITU R-BS775 1 comme illustré dans les Figures 1 à 3. Dans ces figures schématiques en vue de dessus, on place l'auditeur (1) au centre de la cabine et on place au minimum 5 haut-parleurs (HP) en périphérie d'un cercle d'environ 2m de rayon. Trois haut-parleurs sont positionnés en avant de l'auditeur (sensiblement face à lui) : un strictement en face de lui et un de chaque côté positionné à un angle d'environ 30°. Les deux haut-parleurs arrière (par rapport à l'auditeur) sont positionnés à un angle d'environ 120° par rapport au haut-parleur en face de l'auditeur. Dans les versions présentées en Figures 2 et 3, les positions des 3 haut-parleurs avant restent rigoureusement identiques. En version 6.0 on ajoute un haut-parleur à 180° par rapport à celui en face de l'auditeur (Figure 2). En version 7.0, la position des haut- parleurs est modifiée : deux haut-parleurs situés en arrière à gauche respectivement présentant un angle d'environ 100° et 140° par rapport au haut-parleur en face (1) de l'auditeur ; deux haut-parleurs situés en arrière à droite respectivement présentant un angle d'environ 100° et 140° par rapport au haut-parleur en face (1) de l'auditeur. L'auditeur porte deux microphones (un par oreille) qui sont étalonnés pour effectuer des mesures précises. We do not place a subwoofer (dedicated to the reproduction of "serious effects"), because the wavelength of the low frequencies is too great to be relevant in the measurement of a PHRTF filter, and therefore unusable in a measuring cabin. The arrangement of the loudspeakers is according to the ITU R-BS775 1 standard as illustrated in Figures 1 to 3. In these schematic figures in top view, the listener (1) is placed in the center of the cabin and placed at least 5 loudspeakers (HP) at the periphery of a circle of about 2m radius. Three loudspeakers are positioned in front of the listener (substantially facing him): one strictly opposite him and one on each side positioned at an angle of about 30 °. The two rear speakers (relative to the listener) are positioned at an angle of about 120 ° to the speaker opposite the listener. In the versions shown in Figures 2 and 3, the positions of the 3 front speakers remain exactly the same. In version 6.0, a loudspeaker is added at 180 ° to the one opposite the listener (Figure 2). In version 7.0, the position of the loudspeakers is changed: two loudspeakers located at the back left respectively having an angle of about 100 ° and 140 ° with respect to the loudspeaker in front (1) of the listener; two loudspeakers located at the back right respectively having an angle of about 100 ° and 140 ° relative to the speaker in front (1) of the listener. The listener carries two microphones (one per ear) that are calibrated to perform accurate measurements.
Selon un mode de réalisation préférée de la cabine (6) (Figure 4), la cabine comporte une vitre acoustique (2) en face de l'auditeur pour que l'opérateur (3) puisse être visible de l'auditeur (1). Une porte acoustique (5) est située derrière l'auditeur (1) , à l'opposé de la vitre acoustique (2). According to a preferred embodiment of the cabin (6) (Figure 4), the cabin comprises an acoustic window (2) in front of the listener so that the operator (3) can be visible to the listener (1). An acoustic door (5) is located behind the listener (1), opposite the acoustic glass (2).
Le système de mesure (7) se situe en dehors de la cabine (6) et est placée à proximité de l'opérateur (3). L'auditeur (1) porte de microphones (8). The measuring system (7) is located outside the cabin (6) and is placed close to the operator (3). The listener (1) carries microphones (8).
Les parois à l'intérieur de la cabine sont conçues de manière à atténuer de manière suffisante les réflexions parasitant la localisation en provenance des parois des sons issus des haut-parleurs. Cela permet également d'atténuer « l'effet de salle » (ou effet cocktail) et ainsi d'éviter une modification trop importante de la diffusion des signaux de mesure. The walls inside the cabin are designed in such a way as to sufficiently mitigate reflections that interfere with the localization of the walls of the sounds coming from the loudspeakers. This also makes it possible to attenuate the "room effect" (or cocktail effect) and thus to avoid an excessive modification of the diffusion of the measurement signals.
La cabine est équipée d'une acoustique composée de matériaux acoustiques placés de manière à respecter les règles de l'acoustique de conception de cabine audio selon les dispositions indiquées ci-dessus. Par exemple les premières réflexions seront atténuées par le placement de diffuseurs latéraux et supérieurs (supprimer l'effet de fusion), quant aux fréquences stationnaires graves dans les angles qui provoquent une augmentation l'énergie acoustique indésirable dans ces fréquences, elles seront atténuées par des absorbeurs positionnés dans les angles frontaux, arrières et latéraux supérieurs. The cabin is equipped with acoustics composed of acoustical materials placed in a manner that respects the rules of audio cabin design acoustics in accordance with the provisions indicated above. For example the first reflections will be attenuated by the placement of lateral and upper diffusers (suppress the fusion effect), as for the serious stationary frequencies in the angles which cause an increase the undesirable acoustic energy in these frequencies, they will be attenuated by absorbers positioned in the front, rear and upper lateral angles.
Cela permet une mesure du filtre individuel PHRTF « non-modifiée » par la cabine elle-même. La cabine spécifiée ci-dessus peut être remplacée par une cabine plus petite, n'englobant que la tête et les épaules de l'auditeur. Ses dimensions internes peuvent être, par exemple, les dimensions suivantes : 900 mm de longueur, 810 mm de largeur et 675 mm de hauteur ou des multiples de ces dimensions. Elle comprend des haut-parleurs positionnés de manière similaire au positionnements décrits pour la grande cabine et disposant de réglages similaires. Le volume réel est plus petit que celui de la cabine spécifiée ci-dessus. Pour compenser cette perte de volume réel, la technologie WFS (Wave Field Synthesis en anglais) est utilisée pour modifier l'acoustique de la cabine de façon à reproduire des ondes sonores identiques à celles produites dans le modèle de cabine de plus grandes dimensions. This allows a measurement of the individual "unmodified" PHRTF filter by the cabin itself. The cabin specified above can be replaced by a smaller cabin, encompassing only the head and shoulders of the listener. Its internal dimensions may be, for example, the following dimensions: 900 mm in length, 810 mm in width and 675 mm in height or multiple of these dimensions. It includes loudspeakers positioned similarly to the positions described for the large cabin and having similar settings. The actual volume is smaller than that of the cabin specified above. To compensate for this real volume loss, Wave Field Synthesis (WFS) technology is used to modify cabin acoustics to reproduce sound waves identical to those produced in the larger cabin model.
Dès lors que l'auditeur est installé et que les microphones de mesure sont positionnés dans ses conduits auditifs, la mesure peut commencer. Chaque enceinte diffuse un signal acoustique de niveau constant ou fréquentiellement pondéré selon un balayage fréquentiel continu de 20 000 Hz à 20 Hz au minimum et suivant au moins 5 angles différents dont 2 au minimum à l'arrière de l'individu (qui correspondent aux 5 positions de la Figure 1). Once the listener is installed and the measuring microphones are positioned in his ear canals, the measurement can begin. Each loudspeaker broadcasts an acoustic signal of constant or frequently weighted level according to a continuous frequency sweep from 20,000 Hz to at least 20 Hz and following at least 5 different angles, of which at least 2 at the back of the individual (which correspond to the 5 positions of Figure 1).
A chaque diffusion, on mesure simultanément pour chaque oreille la réponse fréquentielle résultante de la diffusion qui est perçue au niveau des microphones. On obtient alors au moins dix mesures (deux par oreille et par enceinte de diffusion) de perturbations acoustiques directement sur l'individu. At each diffusion, the frequency response resulting from the diffusion that is perceived at the level of the microphones is measured simultaneously for each ear. At least ten measurements (two per ear and per diffusion chamber) of acoustic disturbances are obtained directly on the individual.
On génère, à partir de ces mesures, les nombres de filtres correspondant à l'individu (deux par oreille et par enceinte de diffusion). Dans le cas de 5 haut-parleurs, on obtiendra donc 10 filtres PHRTF individuels. From these measurements, the number of filters corresponding to the individual (two per ear and per diffusion chamber) is generated. In the case of 5 loudspeakers, 10 individual PHRTF filters will be obtained.
Pour chacun des signaux diffusés on obtient donc par différence entre le signal émis (connu) et le signal mesuré (perturbation) un filtre PHRTF unique et individuel qui est l'exacte traduction de la déformation acoustique produite par l'individu dans l'espace de diffusion. For each of the scattered signals, therefore, the difference between the transmitted signal (known) and the measured signal (perturbation) is obtained by a single and individual filter PHRTF which is the exact translation of the acoustic deformation produced by the individual in the space of diffusion.
La figure 5 est un exemple de représentation fréquentielle des filtres PHRTF individuel pour l'oreille gauche et pour l'oreille droite. FIG. 5 is an example of a frequency representation of the individual PHRTF filters for the left ear and for the right ear.
La figure 6 est un exemple de représentation temporelle et fréquentielle de différents filtres PHRTF individuels. La résultante globale de toute la mesure est un ensemble de filtres gauches et droits en fonction de chaque position d'enceinte, soit pour un signal 5.0, 10 filtres PHRTF individuels : lg, ld, 2g, 2d, 3g, 3d, 4g, 4d, 5g, 5g. Figure 6 is an example of time and frequency representation of different individual PHRTF filters. The overall result of the entire measurement is a set of left and right filters depending on each speaker position, ie for a 5.0 signal, 10 individual PHRTF filters: lg, ld, 2g, 2d, 3g, 3d, 4g, 4d , 5g, 5g.
Avec comme convention: With convention:
l=hp gauche, the left hp,
2=hp droit, 2 = right hp,
3=hp central, 3 = central hp,
4=hp arrière gauche, 4 = left rear hp,
5=hp arrière droit. 5 = right rear hp.
Puis g=fïltre pour l'oreille gauche et d=fïltre pour l'oreille droite. Then g = fi lter for the left ear and fi lter for the right ear.
La reproduction d'un signal sonore 5.1 (6 canaux audio discrets) comporte donc 6 signaux. Il faut donc appliquer pour chaque signal hors LFE (« effets basses fréquences ») et pour chaque oreille le filtre PHRTF mesuré correspondant et réinjecter dans chaque signal final droit et gauche le signal du LFE (atténué de lOdB conformément aux préconisations de réglage des home-cinéma, permettant ainsi de préserver dans le signal final un niveau de graves confortable (atténué de 3 dB supplémentaires pour conserver le niveau global équivalent) soit : The reproduction of a 5.1 sound signal (6 discrete audio channels) therefore has 6 signals. It is therefore necessary to apply for each signal out of LFE ("low-frequency effects") and for each ear the corresponding measured PHRTF filter and reinject in each left and right final signal the signal of the LFE (attenuated by 10 dB in accordance with the recommendations of adjustment of home- to preserve a comfortable bass level in the final signal (attenuated by an additional 3 dB to maintain the overall equivalent level):
Pour chaque signal de chaque canal: For each signal of each channel:
signal binaural gauche = (somme(convolution (signal canal i, hrtf_gauche))+(Signal LFe- 13db)) left binaural signal = (sum (convolution (channel i signal, left hrtf)) + (LFe-13db signal))
signal binaural droit = (somme(convolution(signal_canal_i, hrtf droit)) + (Signal LFE-13db)) right binaural signal = (sum (convolution (signal_channel_i, right hrtf)) + (Signal LFE-13db))
Une fois qu'on obtient l'ensemble des mesures PHRTF pour un individu, on utilise un algorithme de convolution, connu par l'homme du métier, pour transformer les au moins 5 signaux sonores des haut-parleurs vers deux signaux sonores pour les deux haut-parleurs du casque. Un exemple de la transformation est donné en Figure 7, dans le cas d'une configuration en 5.1 (6 canaux audio séparés et non-matricés). L'algorithme ci-dessus permet donc de personnaliser une bande son multicanal en fonction des caractéristiques morphologiques spécifiques de chaque auditeur. Once the set of PHRTF measurements for an individual is obtained, a convolution algorithm, known to those skilled in the art, is used to transform the at least 5 sound signals from the loudspeakers to two sound signals for both. headphones speakers. An example of the transformation is given in Figure 7, in the case of a configuration in 5.1 (6 separate audio channels and non-matrixed). The algorithm above thus allows to customize a multichannel soundtrack according to the specific morphological characteristics of each listener.
Il est possible de combiner les filtres PHRTF individuels avec des filtres spécifiques à une salle de concert donnée, comme par exemple, l'opéra de Paris (Bastille ou Garnier) ou le MET à New York. Dans cas, les filtres PHRTF individuels de l'auditeur sont corrigés par addition (positive ou négative, avec un degré de correction adaptable selon l'influence que l'on veut donner à l'acoustique de la salle désirée sur la bande son finale. II est aussi possible de combiner les filtres PHRTF individuels avec des effets prédéfinis tels que ceux déjà présents dans les systèmes de home cinéma classique (par exemple : film, football, standard, opéra, musique...). L'algorithme de correction est le même que celui décrit ci-dessus. Dans les deux cas, l'algorithme de convolution reste identique, puisqu'il applique un jeu unique de filtres PHRTF individuels à la bande son originale. It is possible to combine the individual PHRTF filters with filters specific to a given concert hall, such as, for example, the Paris Opera (Bastille or Garnier) or the MET in New York. In case, the individual PHRTF filters of the listener are corrected by addition (positive or negative, with a degree of correction adaptable according to the influence that one wants to give to the acoustics of the desired room on the final soundtrack. It is also possible to combine the individual PHRTF filters with predefined effects such as those already present in conventional home cinema systems (for example: film, football, standard, opera, music ...). the same as that described above In both cases, the convolution algorithm remains the same, since it applies a unique set of individual PHRTF filters to the original soundtrack.
La présente invention concerne également un procédé de stockage des filtres PHRTF dans une mémoire persistante, en ligne ou locale (dans le terminal ou directement dans le casque d'écoute) The present invention also relates to a method for storing PHRTF filters in a persistent memory, online or local (in the terminal or directly in the headset)
Le stockage des filtres PHRTF peut se faire dans un serveur contenant une base de filtres PHRTF pour, par exemple, les clients d'un service de distribution de contenus audiovisuels. The PHRTF filters can be stored in a server containing a PHRTF filter database for, for example, the clients of an audiovisual content distribution service.
Alternativement, le stockage des filtres PHRTF peut aussi se faire dans une mémoire générique dans le terminal ou dans le casque ou dans un dongle connecté au terminal, capable de stocker ces filtres de façon persistante mais effaçable et réinscriptible ou tout autre mémoire de stockage semi-permanent (par exemple, une mémoire flash ou une carte micro-SD). Ceci permet de déporter la génération de la bande son personnalisée au niveau de l'auditeur et donc de n'envoyer vers les auditeurs que la bande son originale, ce qui simplifie grandement la mise en œuvre côté serveur. Alternatively, the storage of PHRTF filters can also be done in a generic memory in the terminal or in the headphones or in a dongle connected to the terminal, able to store these filters persistently but erasable and rewritable or any other semi-permanent storage memory (for example, a flash memory or a micro-SD card). This makes it possible to defer the generation of the personalized soundtrack at the listener level and thus to send to the listeners only the original soundtrack, which greatly simplifies the implementation on the server side.
La présente invention concerne également un procédé de Restitution dans le casque de la bande son adaptée à l'individu par calcul, dans le casque lui-même, de la bande son résultante. The present invention also relates to a method of restitution in the helmet of the soundtrack adapted to the individual by calculating, in the helmet itself, the resulting soundtrack.
Le traitement, par application de l'algorithme décrit ci-dessus, des données sonores tridimensionnelles se fait suivant les différents scénarii décrit ci-après. The processing, by application of the algorithm described above, three-dimensional sound data is done according to the different scenarios described below.
La mesure de la perturbation est utilisée pour adapter pour chaque individu n'importe quelle bande son originale unique (dans les formats 1.0, 2.0, 4.0, 5.0, 5.1, 6.1, 7.1 et au-delà). Cette adaptation se fait en temps réel par de l'électronique en gardant comme donnée d'entrée, la même bande son originale pour tous les utilisateurs. Disturbance measurement is used to adapt for each individual any single original soundtrack (in 1.0, 2.0, 4.0, 5.0, 5.1, 6.1, 7.1 and beyond). This adaptation is done in real time by keeping the electronic data as input, the same soundtrack for all users.
La présente invention concerne également un procédé de restitution dans le casque de la bande son adaptée à l'individu par calcul, dans le casque lui-même, de la bande son résultante. The present invention also relates to a method of restitution in the helmet of the soundtrack adapted to the individual by calculating, in the helmet itself, the resulting soundtrack.
Il existe plusieurs possibilités d'utilisation des filtres PHRTF individuels pour l'application vers un casque. There are several options for using individual PHRTF filters for application to headphones.
Le mode d'implémentation préféré mis au point selon la présente invention est l'individualisation de la bande son originale est effectuée directement dans le casque de l'auditeur. Cf. schéma montré en Figure 8. Le serveur informatique contenant le contenu multimédia originel distribue le même contenu originel à tous les auditeurs. Le terminal (nomade ou pas) de l'auditeur reçoit la bande son originelle du serveur, la stocke éventuellement localement et l'envoie au casque de l'auditeur quand celui-ci souhaite accéder au contenu. Le terminal ne modifie pas la bande son originale. The preferred implementation mode developed according to the present invention is the individualization of the original soundtrack is performed directly in the headphone of the listener. See diagram shown in Figure 8. The computer server containing the original multimedia content distributes the same original content to all listeners. The terminal (nomadic or not) of the listener receives the original soundtrack from the server, possibly stores it locally and sends it to the listener's headset when he wants to access the content. The terminal does not change the original soundtrack.
Les filtres PHRTF individuels sont stockés dans le casque de l'auditeur et c'est cet équipement qui calcule, en temps réel, la bande son personnalisée, avant diffusion dans les hauts parleurs du casque. Les filtres PHRTF individuels peuvent être stockés comme dans un terminal, dans une mémoire permanente fixe ou amovible du type carte SD ou micro-SD ( ré-inscriptible ou pas) avec un slot spécifique, accessible de l'extérieur par l'auditeur. Ce slot permet donc de personnaliser le casque pour chaque auditeur, en sélectionnant les bons filtres PHRTFs stokés dans le casque ou en insérant la carte mémoire amovible contenant les bons filtres. The individual PHRTF filters are stored in the listener's headphones and it is this equipment that calculates, in real time, the personalized soundtrack, before broadcast in the speakers of the headphones. The individual PHRTF filters can be stored as in a terminal, in a fixed or removable permanent memory of the SD or micro-SD card type (re-writable or not) with a specific slot accessible from the outside by the listener. This slot allows you to customize the headset for each listener, by selecting the right PHRTF filters stored in the headset or by inserting the removable memory card containing the right filters.
La convolution est calculée dans le casque, ce qui implique que le casque ait la capacité d'intégrer le dispositif électronique à cet effet. Ceci impose des contraintes de dimensionnement. Pour les oreillettes intra-auriculaires, le dispositif électronique devra s'intégrer directement sur le câble (à l'image des télécommandes actuellement existantes). Ceci a pour conséquence que ce procédé et système fonctionne avec tous les casques capables de recevoir directement un signal numérique (en l'occurrence un signal audio numérique 5.1 dématricé). The convolution is calculated in the helmet, which implies that the helmet has the ability to integrate the electronic device for this purpose. This imposes design constraints. For in-ear earpieces, the electronic device must integrate directly on the cable (like the currently existing remotes). This has the consequence that this method and system works with all headphones capable of directly receiving a digital signal (in this case a dematriate 5.1 digital audio signal).
D'autres modes d'implémentation possibles sont décrits ci-après : Other possible modes of implementation are described below:
Variante 1 : L'individualisation de la bande son originale est effectuée dans un serveur informatique avant distribution du contenu multimédia dans le terminal. Cf. schéma montré en Figure 9. Variation 1: The individualization of the original soundtrack is performed in a computer server before distribution of the multimedia content in the terminal. See diagram shown in Figure 9.
Dans ce mode, les filtres PHRTF individuels sont stockés dans le serveur informatique contenant le contenu multimédia originel. La bande son personnalisée est produite dans ce serveur au moment où l'auditeur souhaite accéder au contenu pour écoute immédiate (« streaming ») ou pour stockage dans son terminal (PC ou appareil nomade). Le terminal (nomade ou pas) reçoit la bande son individualisée, la stocke localement si nécessaire et l'envoie telle quelle, sans autre manipulation au casque de l'auditeur. In this mode, the individual PHRTF filters are stored in the computer server containing the original media content. The personalized soundtrack is produced in this server at the moment when the listener wishes to access the content for immediate listening ("streaming") or for storage in his terminal (PC or mobile device). The terminal (nomadic or not) receives the individualized soundtrack, stores it locally if necessary and sends it as it is, without further manipulation to the listener's headphones.
La convolution a lieu dans le serveur, le terminal reçoit un signal numérique qui est converti en analogique dans le lecteur et envoyé tel quel au casque. Le casque reçoit donc ce signal analogique (qui représente la bande son originale individualisée pour l'auditeur), et il n'y a aucune contrainte nouvelle sur le casque. Ceci a pour conséquence que ce procédé et système fonctionnent avec tous les casques existants. The convolution takes place in the server, the terminal receives a digital signal which is converted into analog in the reader and sent as is to the headphones. The headset therefore receives this analog signal (which represents the original soundtrack individualized for the listener), and there is no new constraint on the headphones. This has the consequence that this method and system work with all existing helmets.
Variante 2 : l'individualisation de la bande sont originale est effectuée dans le terminal mobile de l'auditeur. Cf. schéma montré en Figure 10. Dans cette version, les filtres PHRTF individuels sont stockés dans le terminal de l'auditeur après une procédure de téléchargement préalable. Notons qu'un même terminal peut stocker plusieurs filtres PHRTF individuels correspondants à différents auditeurs. Le choix des bons filtres PHRTF se fera alors par un logiciel offrant cette sélection au travers d'une interface homme-machine appropriée. Variant 2: The individualisation of the tape are original is performed in the mobile terminal of the listener. See diagram shown in Figure 10. In this version, the individual PHRTF filters are stored in the listener's terminal after a prior download procedure. Note that the same terminal can store several individual PHRTF filters corresponding to different listeners. The choice of the right PHRTF filters will then be done by a software offering this selection through an appropriate human-machine interface.
Le serveur informatique contenant le contenu multimédia originel distribue le même contenu originel à tous les auditeurs. The computer server containing the original media content distributes the same original content to all listeners.
Le terminal (nomade ou pas) calcule la bande son personnalisée directement dans le lecteur au moment où l'auditeur souhaite accéder au contenu, puis envoie la bande son personnalisée au casque de l'auditeur. The terminal (nomadic or not) calculates the personalized soundtrack directly into the player when the listener wants to access the content, then sends the personalized soundtrack to the listener's headphones.
La convolution a lieu dans le terminal. De même que dans la version 1 ci-dessus, le casque reçoit un signal analogique (qui représente la bande son originale individualisée pour l'auditeur), et il n'y a aucune contrainte nouvelle sur le casque. Ceci a pour conséquence que ce procédé et système fonctionnent avec tous les casques existants. Variante 3 : l'individualisation de la bande sont originale est effectuée dans un dongle relié à un équipement nomade ou pas de l'auditeur. Cf. schéma montré en Figure 11. The convolution takes place in the terminal. As in version 1 above, the headset receives an analog signal (which represents the original soundtrack individualized for the listener), and there is no new constraint on the headset. This has the consequence that this method and system work with all existing helmets. Variation 3: The individualisation of the band are original is performed in a dongle connected to a nomadic equipment or not the listener. See diagram shown in Figure 11.
Cette variante est une alternative à la variante 2. Le serveur informatique contenant le contenu multimédia originel distribue le même contenu originel à tous les auditeurs. Le terminal de l'auditeur reçoit la bande son originelle du serveur, et la stocke éventuellement localement. This variant is an alternative to variant 2. The computer server containing the original multimedia content distributes the same original content to all the listeners. The listener's terminal receives the original soundtrack from the server, and optionally stores it locally.
Les filtres PHRTF individuels sont stockés dans un dongle « wireless » (sans fil) qui comporte avec un connecteur (USB par exemple) qui lui permet de se connecter à un port externe du terminal, et appairé ou pas au casque de l'auditeur . Dans le casque soit via une connexion filaire (type une sortie audio analogique) ou via une connexion sans fil (type Bluetooth, ou wi-fî). The individual PHRTF filters are stored in a "wireless" dongle that includes a connector (USB for example) that allows it to connect to an external port of the terminal, and paired or not with the listener's headphones. In the headset either via a wired connection (type an analog audio output) or via a wireless connection (type Bluetooth, or wi-fî).
Le terminal (nomade ou pas) envoie à son port externe, la bande son originale, qui est personnalisée en temps réel par le dongle « wireless », qui envoie donc la bande son personnalisée au casque de l'auditeur. Le dongle « wireless » contient à la fois les filtres PHRTF individuels, l'électronique nécessaire à l'exécution de l'algorithme de convolution. The terminal (nomadic or not) sends to its external port, the original soundtrack, which is personalized in real time by the dongle "wireless", which sends the personalized soundtrack to the headphone of the listener. The "wireless" dongle contains both the individual PHRTF filters, the electronics needed to execute the convolution algorithm.
Notons que le dongle « wireless » peut également se connecter à n'importe quelle source de diffusion sonore 5.1 numérique (dé-matricée). Note that the "wireless" dongle can also connect to any digital 5.1 audio broadcast source (unregistered).
Le serveur et le terminal n'ont aucune information sur la personnalisation de la bande son originelle et ne font donc aucune différence entre un auditeur (et son casque) qui utilise les filtres PHRTF individuels et un auditeur qui utilise la bande son originelle. Le système de diffusion des bandes sons originelles ne requière aucune modification ou adaptation et peut donc servir, de manière totalement transparente, des utilisateurs « standards » et des utilisateurs utilisant le procédé décrit ici. La convolution a lieu dans le dongle « wireless » et envoie au casque un signal analogique soit par connexion fïlaire, soit par connexion « wireless », signal qui contient la bande son originale individualisée pour l'auditeur. Cette version fonctionne donc pour des casques « wireless » capables de se connecter suivant les normes « wireless », mais également ceux qui possèdent la double connectique fïlaire et « wireless ». Ceci a pour conséquence que ce procédé et système fonctionnent avec tous les casques « wireless » existants. The server and the terminal have no information about the customization of the original soundtrack and therefore make no difference between a listener (and his headphones) that uses the individual PHRTF filters and a listener who uses the original soundtrack. The system for broadcasting the original soundtracks does not require any modification or adaptation and can therefore be used in a completely transparent manner for "standard" users and users using the method described here. The convolution takes place in the "wireless" dongle and sends to the headphones an analog signal either by wire connection or by "wireless" connection, which contains the original individual soundtrack for the listener. This version therefore works for "wireless" headphones able to connect according to "wireless" standards, but also those that have dual wireless and "wireless" connectivity. This has the consequence that this method and system work with all existing "wireless" headsets.
Variante 4 : Cette variante est une application aux jeux video et à la réalité virtuelle, qui font appel à des casques spécifiques (couvrant les yeux pour montrer l'espace du jeu ou de l'environnement de l'application de VR). Dans ce cas, la bande son peut provenir d'une source locale au terminal qui reçoit des informations de serveurs en ligne dans le cas où le monde virtuel est partagé avec d'autres joueurs ou utilisateurs. Le son est ou peut être un son « reconstitué » en temps réel en fonction des actions prises par les utilisateurs (par exemple, les bruits de coups de feu, lorsqu'un joueur tire). L'algorithme de convolution s'applique sur le son reconstitué, par application du filtre HRTF de l'utilisateur porteur du casque. La personnalisation peut se faire dans le terminal (PC, console de jeux), comme décrit dans la variante 2 et dans la Figure 9, ou dans le casque lui-même, comme décrit en Figure 8. Variant 4: This variant is an application to video games and virtual reality, which use specific headphones (covering the eyes to show the space of the game or the environment of the VR application). In this case, the soundtrack can come from a local source to the terminal that receives information from online servers in the event that the virtual world is shared with other players or users. The sound is or can be a real-time "reconstructed" sound based on the actions taken by users (for example, gunshot sounds when a player is shooting). The convolution algorithm applies to the reconstituted sound, by applying the HRTF filter of the user wearing the helmet. The customization can be done in the terminal (PC, game console), as described in variant 2 and in Figure 9, or in the headset itself, as described in Figure 8.
Variante 5 : Variant 5:
L'individualisation de la bande son originale est effectuée dans des prothèses auditives connectées à un terminal qui lit un contenu multimédia (smartphone, tablette, TV, décodeur, etc.), en remplacement du casque audio. La connexion est souvent, mais pas obligatoirement, sans fil. Le procédé de restitution sonore lié à cette variante est illustré Figure 12. The individualization of the original soundtrack is performed in hearing aids connected to a terminal that reads multimedia content (smartphone, tablet, TV, decoder, etc.), replacing the audio headset. The connection is often, but not necessarily, wireless. The sound reproduction method related to this variant is illustrated in Figure 12.
Dans cette variante, les filtres PHRTF individuels sont stockés dans les prothèses de l'auditeur après une procédure de chargement préalable. In this variant, the individual PHRTF filters are stored in the listener's prostheses after a prior loading procedure.
Ils sont appliqués au son entrant par le même algorithme de convolution que dans les autres terminaux listés dans ce document. La convolution est appliquée avant la correction auditive habituelle pour l'usager des prothèses. Variante 6 : Cette variante est similaire aux variantes 2 et 5 ci-dessus : les filtres sont stockés dans le terminal, et la personnalisation se fait aussi dans le terminal. Le son personnalisé est envoyé aux prothèses auditives qui le diffusent tel quel, sans opération supplémentaire. Le procédé de restitution sonore lié à cette variante est illustré Figure 13. They are applied to the incoming sound by the same convolution algorithm as in the other terminals listed in this document. Convolution is applied before the usual auditory correction for the prosthesis user. Variant 6: This variant is similar to variants 2 and 5 above: the filters are stored in the terminal, and the customization is also done in the terminal. The personalized sound is sent to the hearing aids that broadcast it as is, without additional operation. The sound reproduction method related to this variant is illustrated in Figure 13.
Variante 7 : Cette variante vise à supprimer le besoin de mesure préalable et donc la nécessité de la cabine de mesure. En lieu et place du filtre PHRTF de l'auditeur, le terminal embarque un certain nombre de filtres mesurés sur d'autres personnes dont les morphologies diffèrent et couvrent, a priori, un large spectre des morphologies humaines. Dans cette variante, l'application logicielle présente dans le terminal permet à l'utilisateur de choisir le filtre qui correspond le mieux à son écoute. Ce choix peut être définitif et permanent, ou pas, c'est-à-dire que l'utilisateur peut choisir d'autres filtres ultérieurement. Bien entendu, il est aussi possible d'inclure le filtre personnel de l'auditeur plus tard, lorsque la mesure aura été réalisée. Variant 7: This variant aims to eliminate the need for prior measurement and therefore the need for the measuring cabin. Instead of the PHRTF filter of the listener, the terminal embeds a certain number of filters measured on other people whose morphologies differ and cover, a priori, a broad spectrum of human morphologies. In this variant, the software application present in the terminal allows the user to choose the filter that best corresponds to his listening. This choice can be definitive and permanent, or not, that is to say that the user can choose other filters later. Of course, it is also possible to include the listener's personal filter later, once the measurement has been completed.
Naturellement, la présente invention ne se limite pas à la forme de réalisation décrite ci-avant à titre d'exemple ; mais elle s'étend à d'autres variantes, en fonction du nombre d'enceintes de restitution du nombre de flux audio générés, sans limitation (5.0, 5.1, 5.2, 7.1, 10.2, 11.1, Atmos...). La présente invention est compatible avec tous les formats de diffusion mono, stéréo, quadriphoniques. Naturally, the present invention is not limited to the embodiment described above by way of example; but it extends to other variants, depending on the number of speakers for the reproduction of the number of audio streams generated, without limitation (5.0, 5.1, 5.2, 7.1, 10.2, 11.1, Atmos ...). The present invention is compatible with all mono, stereo, quadraphonic broadcast formats.
La présente invention concerne également l'adaptation d'un format de diffusion sonore vers un autre - comme le mp3 « surround » ou le HEAAC (« High-Effîciency Advanced Audio Coding »), qui ne sont pas diffusables dans un casque. Le procédé selon la présente invention est capable de transformer les bandes sons issues de chacun de ces formats (dans la mesure où ils sont décodés au préalable) pour les rendre diffusables au casque et ceci de manière totalement personnalisée. The present invention also relates to the adaptation of one sound diffusion format to another - such as mp3 "surround" or HEAAC ("High-Effiency Advanced Audio Coding"), which can not be broadcast in a headset. The method according to the present invention is capable of transforming the soundtracks from each of these formats (to the extent that they are decoded beforehand) to make them broadcastable to the headphones and this in a completely personalized manner.
La présente invention ne se limite pas non plus au système de distribution du contenu multimédia incluant la bande son. L'invention est complètement compatible avec les formats CD, Blu-Ray, de « streaming » par internet ou de distribution par satellite ou câble ou encore de « Video on Demand » (VOD), de « Near Video on Demand » (NVOD) ou encore de Télévision à la demande. The present invention is not limited to the distribution system of the multimedia content including the soundtrack. The invention is completely compatible with CD, Blu-Ray, streaming or internet distribution formats. satellite or cable or "Video on Demand" (VOD), "Near Video on Demand" (NVOD) or Television on Demand.
La présente invention est aussi complètement compatible avec les algorithmes de compression utilisés pour le stockage ou la diffusion du contenu multimédia. The present invention is also completely compatible with compression algorithms used for storage or broadcasting of multimedia content.
La présente invention est aussi compatible avec toutes les technologies de protection du contenu, système de DRM ou accès conditionnel (tels que Viacces, Nagra, Irdeto, Conax ou encore NDS/Cisco) The present invention is also compatible with all content protection technologies, DRM system or conditional access (such as Viacces, Nagra, Irdeto, Conax or NDS / Cisco)
Le procédé fonctionne avec tous les casques existants dans les versions 1, 2 et 3. The process works with all existing helmets in versions 1, 2 and 3.
L'appareil nomade comportant le dispositif électronique est choisi parmi la liste non exhaustive des : téléphones, tablettes informatiques, ordinateurs portables, ou autres dispositif de stockage de musique, films, vidéo, jeux, contenus audiovisuel ou multimédia. The nomadic device comprising the electronic device is chosen from the non-exhaustive list of: telephones, tablet computers, laptops, or other device for storing music, films, video, games, audiovisual or multimedia contents.
Il s'adapte aussi aux 3 types de casques existants : fermés, semi-ouverts, intra- auriculaire et serre-tête. It also adapts to the 3 types of existing helmets: closed, semi-open, in-ear and headband.
L'invention couvre également tous les modes de réalisation et toutes les applications qui seront directement accessibles à l'homme de métier à la lecture de la présente demande, et de ses connaissances propres. The invention also covers all the embodiments and all the applications which will be directly accessible to the person skilled in the art upon reading the present application, and of his own knowledge.
Claims
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1501763A FR3040253B1 (en) | 2015-08-21 | 2015-08-21 | METHOD FOR MEASURING PHRTF FILTERS OF AN AUDITOR, CABIN FOR IMPLEMENTING THE METHOD, AND METHODS FOR RESULTING IN RESTITUTION OF A PERSONALIZED MULTICANAL AUDIO BAND |
| FR1501763 | 2015-08-21 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2017032946A1 true WO2017032946A1 (en) | 2017-03-02 |
Family
ID=56985630
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/FR2016/052103 Ceased WO2017032946A1 (en) | 2015-08-21 | 2016-08-19 | Method of measuring phrtf filters of a hearer, booth for implementing the method, and methods making it possible to culminate in the restitution of a personalized multichannel sound band |
Country Status (2)
| Country | Link |
|---|---|
| FR (1) | FR3040253B1 (en) |
| WO (1) | WO2017032946A1 (en) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4991219A (en) * | 1990-01-09 | 1991-02-05 | John Isenhath | Sound simulation chamber |
| WO1997025834A2 (en) * | 1996-01-04 | 1997-07-17 | Virtual Listening Systems, Inc. | Method and device for processing a multi-channel signal for use with a headphone |
| US5825894A (en) * | 1994-08-17 | 1998-10-20 | Decibel Instruments, Inc. | Spatialization for hearing evaluation |
| US20030147543A1 (en) * | 2002-02-04 | 2003-08-07 | Yamaha Corporation | Audio amplifier unit |
| FR2880755A1 (en) * | 2005-01-10 | 2006-07-14 | France Telecom | METHOD AND DEVICE FOR INDIVIDUALIZING HRTFS BY MODELING |
| EP2096882A2 (en) * | 2008-02-27 | 2009-09-02 | Sony Corporation | Head-related transfer function convolution method and head-related transfer function convolution device |
-
2015
- 2015-08-21 FR FR1501763A patent/FR3040253B1/en not_active Expired - Fee Related
-
2016
- 2016-08-19 WO PCT/FR2016/052103 patent/WO2017032946A1/en not_active Ceased
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4991219A (en) * | 1990-01-09 | 1991-02-05 | John Isenhath | Sound simulation chamber |
| US5825894A (en) * | 1994-08-17 | 1998-10-20 | Decibel Instruments, Inc. | Spatialization for hearing evaluation |
| WO1997025834A2 (en) * | 1996-01-04 | 1997-07-17 | Virtual Listening Systems, Inc. | Method and device for processing a multi-channel signal for use with a headphone |
| US20030147543A1 (en) * | 2002-02-04 | 2003-08-07 | Yamaha Corporation | Audio amplifier unit |
| FR2880755A1 (en) * | 2005-01-10 | 2006-07-14 | France Telecom | METHOD AND DEVICE FOR INDIVIDUALIZING HRTFS BY MODELING |
| EP2096882A2 (en) * | 2008-02-27 | 2009-09-02 | Sony Corporation | Head-related transfer function convolution method and head-related transfer function convolution device |
Non-Patent Citations (2)
| Title |
|---|
| DOBRUCKI ANDRZEJ ET AL: "Measurement System for Personalized Head-Related Transfer Functions and Its Verification by Virtual Source Localization Trials with Visually Impaired and Sighted Individuals", JAES, AES, 60 EAST 42ND STREET, ROOM 2520 NEW YORK 10165-2520, USA, vol. 58, no. 9, 1 September 2010 (2010-09-01), pages 724 - 738, XP040567066 * |
| KANJI WATANABE ET AL: "Dataset of head-related transfer functions measured with a circular loudspeaker array", ACOUSTICAL SCIENCE AND TECHNOLOGY, 1 May 2014 (2014-05-01), Tokyo, pages 159 - 165, XP055323676, Retrieved from the Internet <URL:https://www.jstage.jst.go.jp/article/ast/35/3/35_E1368/_pdf> [retrieved on 20161128], DOI: 10.1250/ast.35.159 * |
Also Published As
| Publication number | Publication date |
|---|---|
| FR3040253A1 (en) | 2017-02-24 |
| FR3040253B1 (en) | 2019-07-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102529122B1 (en) | Method, apparatus and computer-readable recording medium for rendering audio signal | |
| EP1563485B1 (en) | Method for processing audio data and sound acquisition device therefor | |
| CN100586227C (en) | Output equalization in stereo widening networks | |
| JP3435141B2 (en) | SOUND IMAGE LOCALIZATION DEVICE, CONFERENCE DEVICE USING SOUND IMAGE LOCALIZATION DEVICE, MOBILE PHONE, AUDIO REPRODUCTION DEVICE, AUDIO RECORDING DEVICE, INFORMATION TERMINAL DEVICE, GAME MACHINE, COMMUNICATION AND BROADCASTING SYSTEM | |
| US11221820B2 (en) | System and method for processing audio between multiple audio spaces | |
| KR20110069112A (en) | How to Render Binaural Stereo in Hearing Aid Systems and Hearing Aid Systems | |
| CN106664499A (en) | Audio signal processing apparatus | |
| EP2489206A1 (en) | Processing of sound data encoded in a sub-band domain | |
| FR3032586A1 (en) | APPARATUS FOR RECEIVING AND READING AUDIO SIGNALS AND LIVE SOUND SYSTEM | |
| US8666081B2 (en) | Apparatus for processing a media signal and method thereof | |
| EP3729832B1 (en) | Processing of a monophonic signal in a 3d audio decoder, delivering a binaural content | |
| FR3065137A1 (en) | SOUND SPATIALIZATION METHOD | |
| US10440495B2 (en) | Virtual localization of sound | |
| CN108886652A (en) | A method of reproducing sound taking into account individual requirements | |
| FR3040253B1 (en) | METHOD FOR MEASURING PHRTF FILTERS OF AN AUDITOR, CABIN FOR IMPLEMENTING THE METHOD, AND METHODS FOR RESULTING IN RESTITUTION OF A PERSONALIZED MULTICANAL AUDIO BAND | |
| Gupta et al. | Study on differences between individualized and non-individualized hear-through equalization for natural augmented listening | |
| EP4203486A1 (en) | Set-top box for reproducing an additional audio track | |
| EP3711307A1 (en) | Method for live public address, in a helmet, taking into account the auditory perception characteristics of the listener | |
| EP3484185B1 (en) | Modelling of a set of acoustic transfer functions suitable for an individual, three-dimensional sound card and system for three-dimensional sound reproduction | |
| US12395804B1 (en) | System and method for an audio reproduction device | |
| KR102661374B1 (en) | Audio output system of 3D sound by selectively controlling sound source | |
| Ranjan | 3D audio reproduction: natural augmented reality headset and next generation entertainment system using wave field synthesis | |
| Tan | Binaural recording methods with analysis on inter-aural time, level, and phase differences | |
| Griesinger | Accurate reproduction of binaural recordings through individual headphone equalization and time domain crosstalk cancellation | |
| TW202509754A (en) | Generating an audio data signal |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16770293 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 32PN | Ep: public notification in the ep bulletin as address of the adressee cannot be established |
Free format text: NOTING OF LOSS OF RIGHTS (EPO FORM 1205A DATED 23.05.2018) |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 16770293 Country of ref document: EP Kind code of ref document: A1 |