[go: up one dir, main page]

WO2004066590A2 - Dispositif de telesurveillance video par telephone portable, procede d'exploitation, application et reseau de telesurveillance - Google Patents

Dispositif de telesurveillance video par telephone portable, procede d'exploitation, application et reseau de telesurveillance Download PDF

Info

Publication number
WO2004066590A2
WO2004066590A2 PCT/FR2004/050005 FR2004050005W WO2004066590A2 WO 2004066590 A2 WO2004066590 A2 WO 2004066590A2 FR 2004050005 W FR2004050005 W FR 2004050005W WO 2004066590 A2 WO2004066590 A2 WO 2004066590A2
Authority
WO
WIPO (PCT)
Prior art keywords
telephone
video
module
analysis
network
Prior art date
Application number
PCT/FR2004/050005
Other languages
English (en)
Other versions
WO2004066590A8 (fr
WO2004066590A3 (fr
Inventor
Patrick Pirim
Original Assignee
Holding B.E.V. S.A.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Holding B.E.V. S.A. filed Critical Holding B.E.V. S.A.
Priority to JP2006500169A priority Critical patent/JP2006516077A/ja
Priority to EP04700470A priority patent/EP1584175A2/fr
Publication of WO2004066590A2 publication Critical patent/WO2004066590A2/fr
Publication of WO2004066590A3 publication Critical patent/WO2004066590A3/fr
Publication of WO2004066590A8 publication Critical patent/WO2004066590A8/fr

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/0202—Child monitoring systems using a transmitter-receiver system carried by the parent and the child
    • G08B21/0205—Specific application combined with child monitoring using a transmitter-receiver system
    • G08B21/0208—Combination with audio or video communication, e.g. combination with "baby phone" function
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control

Definitions

  • the present invention relates to a video remote monitoring device by mobile phone as well as an operating method, applications as well as a public remote monitoring network. It allows remote monitoring with autonomous decision making based on a video environment captured by the mobile phone. It can be implemented both in professional fields, for example security of premises, road and in particular climatic or traffic conditions (vehicle speed, crossing of traffic lights), as in private fields, for example surveillance of a infants, monitoring of a swimming pool or others with a private individual.
  • a video surveillance device comprises, a camera, a means of analysis and diagnosis of video images depending on the application, and a means of communicating the alarms and programming the device.
  • the telephone is becoming more and more perfected, after having durably fulfilled its primary function of a remote sound link, it has become mobile and today integrates visual communication by shooting by camera and viewing on a flat screen.
  • application EP0 884 905 concerning a method of producing an image to to transmit by a terminal and terminal, it has been proposed to use a telephone with camera comprising a shape recognition means making it possible to locate the face of the user for transmission.
  • application EP1 170 953 concerning a mobile telephone, remote monitoring system, portable information terminal and method of use, remote monitoring has been proposed by transmission of images as a function of an authorization signal. transmission preventing access of the image to third parties.
  • the present invention aims to create a video surveillance device from a telephone having means of visual communication by integrating an image analysis module having its own diagnostic and dialogue processing with the input of the module, the reading of the video signal from the camera and, at the output, a link on the telephone control unit to enable activation / deactivation and autonomous operation of said telephone.
  • each of these histogram calculation and processing units constitutes and updates an analysis output register providing statistical information on the corresponding parameter.
  • the choice of the parameter analyzed by each calculation block and histogram processing, the content of the analysis output register as well as the function (f 0 g) that it fulfills, are determined by software executed in a programming interface. application API (Application Program Interface).
  • each STN unit is likely to have automatic classification, anticipation and learning functions.
  • the maximum RMAX of from the histogram calculated and stored in a memory is determined.
  • Classification limits are also determined which make it possible to delimit an area of interest for the parameter and it has been proposed to take as a criterion for determining the limits, a ratio of the maximum of the histogram, for example RMAX / 2, and d '' get the limits by scanning the memory data from the origin in search of the zone limits corresponding to the criterion.
  • An application of the STN blocks is more particularly detailed in application FR-01/02539 where it has been proposed to hierarchically decompose the object to be identified according to its properties which allows, for example, to first determine the general outline of a moving object with respect to a relatively stable background, then search within this outline for characteristic elements by their tint, their color, their relative position ...
  • Such an analysis allows the rapid development of applications multiples involving the location of an object.
  • These applications can be developed, either from an earlier formalization that has identified the significant characteristics of the object, or, thanks to a learning function by examining a scene in which the object in question is present. , the device allowing itself to extract parameters characteristic of the object.
  • the term element or object will be used without distinction for what is to be identified in a scene of the environment.
  • the invention proposes to incorporate into a portable telephone having sensors of an environment, in particular of an environment of sounds and images, a module allowing an analysis of the signals coming from the sensors and carrying out a diagnosis in order to get a decision.
  • This decision-making may be an absence of action, in particular in the event of a negative diagnosis - or one or more actions in the event of a positive diagnosis (for example recognition and exceeding of parameters threshold of an element of a scene).
  • Analysis consists in extracting and measuring parameters of significant elements of the environment. For example, if the analysis must relate to a face: recognition of the face within the scene then in the face recognition of the eyes, of the mouth then, possibly, inside these elements of the face, determine significant sub-elements: eyelids, pupil or lips ...
  • the diagnosis consists in determining or detecting the existence of particular elements of a scene and / or the exceeding of thresholds of parameters linked to an element of the scene.
  • scene covers everything captured by a sensor, for a camera it is a series of images, for a microphone these are sounds, for a temperature sensor a temperature measurement ... and the corresponding element can for example be a moving object / human in the images, sounds of a particular frequency range and / or duration and / or intensity of sounds, temperature as such .
  • the invention therefore relates to a video remote monitoring device by mobile telephone, the telephone comprising a transmitter and a receiver under the control of a control device for connection to a telephone network, the telephone comprising means for picking up BFm sound signals and video signals Vc by means of a microphone delivering the sound signals BFm and a camera delivering the video signals Vc of video images and, on the other hand, receiving and reproducing sound signals BFe and video signals Ve at destination a sound reproduction means and a video reproduction screen respectively, the telephone comprising a user input interface and an autonomous power source.
  • the telephone also comprises a module for analyzing and diagnosing at least video images provided with a memory for storing at least one remote monitoring application program, an input of said module being connected to the output of the camera and receiving the video signals Vc, the module being connected by at least one output to the control unit for sending at least one diagnostic data item D to said control member as a function of the analysis and diagnosis of the video signal by a calculation means programmed by an application program of said module, the diagnostic data D being instructions acting on the control member.
  • the term video for the analysis module concerns both still or moving images as well as sounds and more generally concerns what is generally called multimedia.
  • the camera is a camcorder
  • the camera is of the CCD (charge transfer) or CMOS type
  • the program memory of the analysis and diagnostic module is preloaded by the application program (the program is originally available)
  • the application program is downloaded into the program memory of the analysis and diagnostic module, the application program comprises at least one telephone number on the network,
  • the application program comprises at least one computer address for calling on the network
  • the analysis and diagnostic module also receives the audio signals BFm as input and the module produces diagnostic data D also as a function of the analysis and diagnosis of the audio signals,
  • the instructions acting on the control body are one or more actions chosen without limitation from the following list: organ wake-up on phone standby, phone organ standby, calling a number on the network, transmission of recorded sounds, transmission of live sounds, transmission of a short message (in particular SMS), transmission of a live video sequence, transmission of a recorded video sequence, transmission of a video analysis, transmission of a video diagnosis, multimedia compatible data transmission for the INTERNET network, dialogue between the telephone and the number called, in the case of using a positioning device, control of said device by positioning instructions from the network, end of call,
  • the analysis and diagnosis module includes a reprogrammable memory for the program of the calculation means
  • the analysis and diagnostic module also receives digital data D from the control unit and the program of the calculation means comes from the network and is transferred to the reprogrammable memory in the form of digital data D,
  • the analysis and diagnostic module also receives digital data D from the control body, the telephone further comprising a smart card reader readable by the control body and the program of the calculation means comes from the smart card and is transferred to the reprogrammable memory in the form of digital data D,
  • the analysis and diagnostic module comprises a module for acquiring and storing video images and a sound detection means for interfacing with the video and sound signals, a means of calculation of the microprocessor type or digital signal processor, memory for the application program and a dialog unit for interfacing with the control unit,
  • the analysis and diagnosis module comprises at least one spatial and temporal processing unit and a set of histogram calculation units whose hardware and functional configuration is dependent on the application program,
  • the analysis and diagnostic module is an IP block that can be integrated (materially and / or functionally) into an electronic circuit
  • the electronic circuit is an electronic component
  • the electronic component is an integrated circuit comprising one / more telephone functions (component with one / more usual functions in telephony: for example transmission, reception, signal processing, signaling, etc.) of the telephone,
  • the telephone is placed on a positioning device making it possible at least to orient said telephone in space according to positioning instructions (OM) originating from the telephone, said positioning instructions being produced by the analysis and diagnostic module,
  • the positioning device comprises a first support in which the telephone is placed, the first support itself being disposed in a second support, the first and the second support being articulated with one another by at least one motor controlled by a control circuit receiving positioning instructions (OM),
  • OM control circuit receiving positioning instructions
  • the second support comprises two motors, the two rotors of which are arranged along two substantially perpendicular axes, the control circuit and a charger intended for recharging the autonomous power source of the telephone, the positioning device of said telephone also makes it possible to move said telephone in space according to positioning instructions (OM),
  • positioning instructions come from the network
  • the positioning instructions are transmitted to the peripheral positioning device via a telephone connector comprising a serial data transmission link
  • the telephone comprises one or more of the following sensors, the output of which is connected to the analysis and diagnostic module, said module analyzing and diagnosing the measurements of said sensors:
  • the telephone sensors are connected to the telephone via a telephone connector comprising a serial data transmission link.
  • the invention therefore also relates to a positioning device compatible with the telephone of the invention and allowing at least to orient said telephone in space according to positioning instructions (OM) originating from the telephone, said positioning instructions being produced by the analysis and diagnostic module.
  • OM positioning instructions
  • the invention also relates to an operating method which results from the implementation of the device as described above according to all of its possibilities and which is a method of operating a video telesurveillance device by mobile telephone, the telephone comprising a transmitter and a receiver under the control of a control device for connection to a telephone network, the telephone being able, on the one hand , receive and transmit BFm sound signals and Vc video signals respectively from a microphone producing BFm sound signals and a camera producing Vc video signals from video images and, on the other hand, receiving and reproducing signals BFe sound signals and Ve video signals intended respectively for a sound reproduction means and a video reproduction screen, the telephone comprising a user input interface and an autonomous power source, in which images from the camera are transmitted to a receiving device connected to the network and capable of viewing the video images, in which a device according to any one is implemented previous characteristics isolated or in combination and in which the telephone further comprises a module for analyzing and diagnosing at least video images, provided with a memory for storing a remote monitoring application program, an input
  • the receiver is a portable or wired telephone and / or the receiver is a computer means capable of viewing compatible data.
  • multimedia for network I NTERNET a server connected to the network and arranged between the telephone and the receiver ensuring the interface between the telephone's data and the INTERNET network.
  • the invention also relates to a particular application of the preceding operating method in which an infant is monitored remotely, the application program allowing at least the analysis and diagnosis of infant movements and the connection to the receiver when movements are diagnosed.
  • the invention finally relates to a public remote monitoring network which is constituted by a network of portable telephones comprising a central transmission, by this network, of remote monitoring application programs for video remote monitoring device by telephone, programs capable of being downloaded by them. this.
  • the mobile phone of the invention therefore includes autonomous means of decision making based on the analysis and diagnosis of an environmental context (images, sounds or other) captured by the telephone's sensors and can therefore on its own initiative decide to alert compatible equipment (conventional or specialized telephone, for example the equipment used by firefighters, the police and central surveillance or IT) remotely: decision-making is automatic.
  • the analysis and the diagnosis being dependent on an application program, the analysis and diagnostic parameters can be adapted to the envisaged application and, preferably, by reprogrammable means and in particular by transmission over the network. by telephone from the program to the telephone of the invention or by inserting into the telephone a smart card containing the program which is then transferred to the analysis and diagnostic module of the telephone.
  • the mobile phone only uses the network for the transmission of digital data, diagnostic data (alarm and type of alarm for example) and / or video data depending on the analysis and diagnosis of a video environment, typically application programs preloaded or downloaded, from the telegram transmission center, which reduces the influence of telemonitoring on the network from the point of view of bandwidth occupation, fine analysis of the image by an elaborate visual perception can also make it possible to achieve compression of the video information to be transmitted.
  • the mobile telephone can as well be intended for a public network as for a private network, for example within a company or a fixed or mobile building.
  • the invention is more generally applicable to means of radio communication of sounds, video (images) and network data specifically developed for the occasion.
  • FIG. 1 represents a video portable telephone of the state of the art
  • Figure 2 which represents a mobile telephone according to the invention with an analysis and diagnostic module
  • Figure 3 which represents an analysis and diagnosis module produced with conventional calculation means
  • Figure 4 which represents a module of analysis and diagnosis carried out with means of calculation with type of spatio-temporal neurons
  • Figure 5 which represents an example of application of the telephone of the invention
  • Figure 6 which represents the schematic material structure of a second example of application of the telephone of the invention
  • Figure 7 which represents a telephone in this second example of application of the invention.
  • FIG. 1 represents a simplified block diagram of a portable telephone 1 integrating visual communication, corresponding to the prior art.
  • This telephone comprises a basic core with a transmitter 2 and a receiver 4 under the control of a control member 8.
  • control interface means 9 at input to type of keyboard and / or voice recognition are connected by an electronic bus Te to the control member 8.
  • a microphone 3 sending a low frequency speech signal BFm and a video signal Vc coming from a camera 6 on phone 1.
  • an output control interface means can also allow interaction with the user by displaying menus or the like. It is also possible in some versions that the sound reproduction means, in particular headphones 5, form an output control interface means by broadcasting instructions or sound menus.
  • the telephone 1 being portable, an autonomous power source is incorporated in said telephone.
  • the functional representation of the mobile telephone in FIG. 1 being very schematized for reasons of simplification, we have not shown in detail all the organs of the telephone such as for example the hardware security means (smart card) and software (programs encryption / decryption) or network and communication management (network search, network connection programs ).
  • FIG. 2 shows how the invention applies in an extremely simple way to a phone of the prior art.
  • the invention consists in the main lines of incorporating into a portable telephone of the type which has been described in relation to FIG. 1, a video analysis and diagnostic module 20.
  • This module receives as input at least the signal Vc video from camera 6 of cell phone 1.
  • the module 20 can also receive the speech signal BFm coming from the microphone 3.
  • the module 20 is connected by a digital link D to the control member 8 in order to transfer diagnostic data to it. It will be seen later that the module 20 can also take over certain functions of the control unit and, for example, the compression of data, in particular video.
  • the link D is indicated bidirectional and it will be seen that the module 20 can also receive digital data coming from the control unit and, for example programming data, in particular the application program, for the analysis. and the diagnosis, notably from the network and received by the mobile telephone 1.
  • the invention can be implemented at within a network structure in which a supervisor / controller operator provides means of communication (including gateways between computer and telephone networks) and management (in particular transmission of application programs allowing video / audio analysis and diagnosis in the telephone module, the module programs being downloaded) between users of the telemonitoring device.
  • the analysis and diagnosis module is an additional entity protected in particular by copyright ("copyright") and / or by semiconductor topography and / or and / or patent law and / or other sui generis rights, which is qualified as an IP block (or virtual component which represents knowledge related to the design of functions that can be integrated into integrated circuits), and which is integrated within a component with conventional telephone functions: the entity is added in a component or circuit conventionally used in telephony (functionally by adding a program and / or materially by adding a functional hardware block of logic and / or mixed doors by configuration or reconfiguration programmable logic gate structure or combination of program and hardware).
  • IP blocks are functional entities now widely used for the production of integrated circuits and they correspond to hardware objects (door structures for example) or software objects (instructions) or a combination of both. IP blocks allow the creation of function libraries from which integrated circuit designers draw for the creation of specific circuits.
  • an IP block corresponding to the analysis and diagnostic module is added to a set of IP blocks intended for telephony to produce an integrated circuit intended for producing a telephone according to the invention.
  • the analysis and diagnostic module is a single integrated circuit, possibly associated with external memory, which is arranged in a telephone with conventional video means.
  • the addition of such an integrated circuit can be carried out in a very simple manner with a minimum of modification of the existing circuits of the telephone.
  • the connection of the module to the control member can be carried out by connection to a communication bus of the control member which is generally implemented within mobile telephones for the control of peripheral organs (transmitter, receiver , keyboard, screen ).
  • FIG. 3 represents the organization of the image analysis and sound detection module 20 according to a first embodiment using computer calculation means, conventional computer, in particular digital signal processor (DSP) or microprocessor.
  • the video signal Vc from the camera 6 enters the video image acquisition and storage subset 21.
  • the electrical sound signal BFm from the microphone 3 enters the sound detection sub-assembly 22.
  • a computer 23 executes the application program (s) 25 which makes it possible to analyze and perform a diagnosis on the image and the sound for a predefined time period, or even time slot.
  • This (or these) application program (s) may (may) already be stored in the phone and / or preloaded (s) and / or downloaded from the network.
  • a digital signal D compatible with the control member 8 is generated by a dialogue unit 24.
  • This digital signal D which corresponds to actions in particular on the network connection means of the telephone, can be the transmission to a predefined number on the network of an appropriate message (SMS) with display of the scene recorded and / or in direct.
  • SMS appropriate message
  • the means used in this embodiment of Figure 3 are particularly greedy in electrical energy and preferably one uses the means of analysis and diagnosis in relation to Figure 4 with space-time neurons (STN) which are particularly adapted to these functions and particularly flexible to use (reorganization and reuse of neurons according to the depth of analysis and / or application), and this for a relatively reduced energy cost.
  • Said means can also be used for video compression purposes as we have seen in the presentation of the state of the art in the first part of the description.
  • FIG. 4 represents a preferred embodiment with space-time neurons (STN) comprising, by way of example, a set of sixteen polyvalent histogram calculation units or modules (or space-time neurons, these terms being equivalent) in the form a generic visual perception processor (GVPP) 20 'which forms the analysis and diagnostic module with space-time neurons.
  • This processor further comprises a sound detection means 22 acting directly on an electronic processor 23 itself in relation to an interface or dialogue unit 24 by a bidirectional bus D to and from the control member 8.
  • These calculation units of histogram constitute a matrix, they are connected to a bus 56 on which the parameters DMVT (direction of movement), VMVT (speed of movement), L (light), T (hue), S (saturation), pO, p1 , p2, ..., p15 are available (pO, p1, p2, ..., p15 are slopes of reference axes produced by unit 54).
  • Bus 57 carries the retro-annotation information.
  • Such a processor is described in particular in the following publications FR-2.61 1 .063 and WO-98/05002.
  • This perception processor 20 implementements a spatial and temporal processing unit 53 which, receiving a video signal, produces a number of parameters for each pixel. These are for example speed (VMVT), direction (DMVT), a time constant and a validation binary parameter in addition to a delayed video signal and the various frame synchronization signals , line and pixel.
  • VMVT speed
  • DMVT direction
  • a validation binary parameter in addition to a delayed video signal and the various frame synchronization signals , line and pixel.
  • the purpose of this type of image processing device is to output a signal which carries for each pixel significant information of the result of the application of recognition or selection criteria according to classification. These criteria are predefined or developed by the image processing methods and devices themselves.
  • Each STN module 51 a oo •• - 51 a33 receives data by a data bus 56 and is interconnected to the others by a retro-annotation bus 57 conveying results after classification.
  • API software application programming interface
  • This API software, as well as the application program 25, is managed by the electronic processor 23 which is in relation to all the STN modules by the bus 55 which also transmits in return the results of the calculations of the STN modules.
  • the entire GVPP processor is therefore controlled by the electronic processor or control unit 23, of the microcontroller type, which determines, as a function of an application program 25, those of the parameters DMVT, VMVT, L, T, S, pO, p 1, p2 p 15 which are processed at a given time by a STN unit or a group of dedicated multipurpose histogram units and as a function of initialization (INIT), write (WRITE) and end (END) signals produced by a sequencer 52.
  • Each histogram calculation unit is connected to a data bus 56 which supplies the various parameters to be processed, and to a retro-annotation bus 57 which supplies the classification signal of each STN neuron and the learning function signals to the various other STN neurons.
  • Each histogram calculation unit includes a memory, a classifier and a retro-annotation unit.
  • Each unit 1 a is capable of having automatic classification functions of anticipation and learning.
  • the generic visual perception processor (GVPP) 520 thus formed can be integrated on a single semiconductor substrate.
  • the number of versatile histogram calculation units depends on the application and the technologies for manufacturing semiconductor components available.
  • the means used allow continuous sequencing
  • Each pixel point of the image
  • P the luminance and / or chrominance
  • i, j, t the instantaneous position
  • i and j define the spatial position within the image matrix and t sequence or time.
  • the consecutive P values are processed in the time domain (in a time processing unit in the case of a dedicated GVPP circuit) for extraction of parameters related to each of the pixels, said parameters being chosen from the luminance, the hue, the saturation, direction of movement, speed of movement, edge orientation, curvature of edges, etc.
  • a dynamic recruitment process for STN modules will be implemented over the sequences to allow active perception of the elements image, recruitment is done according to objectives and in particular a priori knowledge (a face) or not (generic perceptual analysis) of the type of element that can be found in the image.
  • FIG. 5 represents an example of a video surveillance application of an infant 103 who is sleeping with parents who want to be warned at a distance from his alarm clock.
  • Any movement 1 01 of the baby and / or noise picked up by the camera and / or the microphone of the telephone 1 1 0 are analyzed and a diagnosis is carried out using the application program, by the mobile telephone 1 1 0 of the invention which has been posed so that it perceives the scene 1 02 by its camera and its microphone, and transmits 121 an alarm and the scene by means of reception 122 and 123 of the telephone network 120 to a second mobile telephone 130 of the parents and corresponding to the call number requested by the diagnostic part of the application.
  • the second telephone 1 30 which can be a conventional portable telephone, makes it possible to view the scene by a screen 131 and to listen to the sounds by a sound reproduction means 132.
  • the second telephone 130 can be a fixed telephone with or without video means and, in the latter case, only the baby's alarm and sound will be received.
  • the second telephone 130 can be replaced by computer means of the microcomputer type with wired or even radio link or, even a portable telephone-computer, and in particular by means of the INTERNET computer network which allows the transmission of multimedia data including images. and sounds.
  • an INTERNET server will interface within the network 120 between the telephone of the invention 110 and the computer means replacing the conventional portable telephone 130.
  • the telephone of the invention can also be applied to the surveillance of an apartment or a building, of a vehicle for example in the event of fire, theft or other, of a swimming pool within the framework of prevention of drowning thanks to the detection of sounds (falling into water, lapping) and images: moving mass or not on the surface or depth of the liquid.
  • the telephone of the invention can also find an application in teleconferencing and, for example, being able to automatically center on an interlocutor whose lips move, the GVPP analyzing the faces and parts of the face (eyes, mouth %) and the diagnosis being programmed to detect the movement of the face part corresponding to the lips according to an anthropomorphic model.
  • the alarm receiving station (1 30) may for example also be an improved telephone of the firefighter or police or central station type. monitoring.
  • the receiving device can be a specific device.
  • the telephone of the invention makes it possible to control, as a function of the video and / or audio analysis and diagnosis, a peripheral positioning device in the space of said phone.
  • the positioning of the telephone can relate to the orientation of the shooting (the telephone being able to turn on itself to orient the camera in a given direction), the telephone then remaining at a given location.
  • the positioning may also relate, in combination or not with the orientation, to the choice of location in the space of the telephone, the latter being able to move in said space.
  • positioning device from a simple rotary support that can be controlled along one or two axes, a mobile device moving on a surface (motorized trolley controlled), even in a three-dimensional space (airship, plane or submarine ordered in a reduced model). It is understood that the notion of positioning is relative and that if it is in general the telephone of the invention which is positioned in a fixed space (is oriented or moves in space to obtain a direction and / or origin of different point of view), we consider the case where space moves and we try to keep a direction and / or an origin from a constant point of view.
  • the latter case can, for example, correspond to an automated lookout with a video telephone placed on the front of a ship that can be rolled or pitched and intended to prevent a collision by video obstacle detection: the module analysis and diagnostic is then configured to detect bodies floating forward of the ship towards the horizon.
  • FIG. 6 is thus represented, under the general reference 1, a telephone such as that of FIG. 2 with a connector 1 01 for connection for recharging the power supply 1 0 by the line V and for data exchange communication by the OM link shown here unidirectional from the control unit to the outside but which more generally allows bidirectional data exchanges.
  • the telephone 1 is positioned in a stable manner in a first support 100.
  • This first support 100 is itself disposed in a second support 106 in an angularly orientable manner by controlled positioning means, the second support being assumed to be placed on a fixed location of space in this version.
  • the telephone 1 is therefore fixed relative to the first support 1 00 and the first support 1 00 can be oriented angularly relative to the second support 1 06. Consequently, the telephone and therefore the image shooting can be oriented angularly in space.
  • the support system presented thus makes it possible to maintain, orient according to positioning instructions and, incidentally, power (recharge) the telephone 1.
  • the controlled positioning means comprise a motor control circuit 103 acting on two motors 104 and 105 by motor control signals CM.
  • One of the motors referenced 1 05 is fixed immobilized by its stator on the second support 106 and its rotor drives the stator of the other motor referenced 104 whose rotor is fixed to the first support 1 00.
  • the line V and the connection OM of the connector 1 01 reach the second support 1 06 through the first support 1 00.
  • the second support 106 includes a charger 102 (to recharge the telephone 1) receiving an external supply, in particular the sector of the public electrical distribution network, and which also allows the supply of the controlled positioning means (control circuit 1 03 and motors 104 and 1 05).
  • the positioning instructions from the control unit 8 of the telephone 1 and acting on the control circuit 103 are conveyed by the link OM.
  • the initial source of the positioning instructions is preferably the analysis and diagnostic module which uses the link D towards the control member (for example followed by a person or a face). It is however possible to transmit by telephone, from the telephone network, such positioning instructions which are then received by the receiver 4 of the telephone 1 and sent by the link OM via the control member 8.
  • the orientation can for example be obtained from another telephone by acting on its keys or, in the case of the use of computer means, in particular INTERNET, action on one or more display cursors (mouse) of a computer terminal on the telephone network with computer gateway.
  • the line V and the link OM are preferably embodied, in particular by a wired link, or even by or associating one or more rotary contacts (the first and the second support being movable between them).
  • the V line and the OM link are dematerialized, for example an electromagnetic induction means allowing recharging of the power supply of the telephone and the OM link being effected by radio waves (for example BLUETOOTH®) , the second support then further comprising compatible radio communication means connected to the motor control circuit 1 03.
  • the rotors of the motors are offset by 90 ° in order to allow efficient scanning of the space of shooting.
  • a maximum angular displacement that is to say 360 °, will be ensured for the plane of the space where the elements of scene images are most likely to be found.
  • due to mechanical constraints, in particular the presence of the supports there are areas where shooting is not possible.
  • the motors are preferably stepper motors.
  • An indexing means (origin position marker) can be implemented either directly on the rotors, or, in a more complex manner, by image analysis.
  • the indexing means makes it possible to know a reference position from which the displacement can be determined (number of steps for stepping motors, which corresponds to a computable angular displacement).
  • the indexing means in a variant, can return a signal to the telephone 1 by the bidirectional OM link.
  • the positioning interface may also include other sensors such as, for example, angular, speed and / or acceleration, battery level or power supply sensors, the information of which is sent back to the telephone. .
  • Figure 7 shows the arrangement of the telephone 1 of the invention in the first support 100, itself even in the second support 106.
  • the telephone 1 In the rest position, the telephone 1 is substantially vertical and the camera's shooting means has a substantially horizontal shooting axis.
  • the motor 105 the first support 100 can rotate relative to the second support 106 allowing the shooting axis to scan the space in a substantially horizontal plane.
  • the motor 104 it makes it possible to tilt the first support 1 00 with respect to the second support 106, that is to say to cause the telephone 1 to leave its substantially vertical position for positions approaching the 'horizontal, the shooting axis then moving from bottom to top and vice versa.
  • the second support is arranged at a fixed location in space.
  • the telephone 1 can be made mobile in space by using support (s) which have means of moving in said space.
  • the external power supply is not permanently connected, unless there is a reduced displacement radius (the length of the external power supply wire) and that a supply means autonomous, in particular with type of rechargeable battery, is implemented in the mobile support of the telephone.
  • the device in FIGS. 7 and 8 further comprises, on the underside of the second support, rolling and directional means controlled by means of the link OM.
  • the telephone 1 can be arranged substantially vertically on a support carriage comprising drive and directional wheels (an additional means of controlled tilting of the telephone which may possibly be implemented).
  • the displacement means controlled on the ground are adapted to the envisaged uses, as simple rolling means (wheels, caterpillar) or articulated legs, suction cups ...
  • the means of movement will be adapted to said space.
  • Conventional robotic management tools can be usefully implemented in such applications.
  • the perception processor in as a video image compression system as described in FR98 / 16679 and WO99 / 00425 in order to improve the quality and the fluidity of the images transmitted by the telephone 1, 1 10, a greater quantity of compressed information can be transmitted on the transmission channel.
  • the perception processor can be reconfigured to operate in video compression.
  • the reception means 130 and / or the network server in the case where I NTERNET is used for connection with the remote device 1 30, compatible decoding means will be placed there.
  • a connection between two telephones of the invention is particularly advantageous since they both comprise means with a perception processor compatible and configurable for compression / decompression.
  • the invention can be declined in various ways and in particular with regard to the diagnoses as a function of the analyzes which can produce actions of various types: simple alarms, transmission of computer messages, transmission of video data and / or sound, or even multimedia to various equipment of the telephone or even computer type, via a radio-telephone network to which the cell phone of the invention.
  • the applications of the invention are also multiple, both for private or family surveillance with a conventional video portable telephone comprising the analysis and diagnostic module as for professional applications and in this case, the telephone of the invention can be a specific achievement, in particular a militarized mobile phone or in the form of an industrial module.

Landscapes

  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Child & Adolescent Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Telephonic Communication Services (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Selective Calling Equipment (AREA)

Abstract

L'invention concerne un dispositif de télésurveillance vidéo par téléphone portable (1, 110), le téléphone comportant un émetteur (2) et un récepteur (4) sous le contrôle d'un organe de contrôle (8) pour connexion à un réseau téléphonique (120), le téléphone pouvant, d'une part, capter et transmettre des signaux sonores BFm et des signaux vidéo Vc provenant respectivement d'un micro (3) produisant les signaux sonores BFm et d'une caméra (6) produisant les signaux vidéo Vc d'images vidéo et, d'autre part, recevoir et restituer des signaux sonores BFe et des signaux vidéo Ve à destination de respectivement un moyen de restitution sonore (5) et d'un écran de restitution vidéo (7), le téléphone comportant une interface d'entrée utilisateur (9) et une source d'alimentation (10) autonome. Selon l'invention, le téléphone comporte en outre un module (20) d'analyse et de diagnostic d'au moins des images vidéo, une entrée dudit module (20) étant reliée en sortie de la caméra (6) et recevant les signaux vidéo Vc, le module étant relié au moins en sortie à l'organe de contrôle (8) pour envoi d'au moins une donnée de diagnostic D audit organe de contrôle (8) en fonction de l'analyse et du diagnostic du signal vidéo par un moyen de calcul (23, 20') programmé (25) par un programme applicatif dudit module, les données de diagnostic D étant des instructions agissant sur l'organe de contrôle. L'invention concerne également un procédé d'exploitation et une application de télésurveillance.

Description

Dispositif de télésurveillance vidéo par téléphone portable, procédé d'exploitation, application et réseau de télésurveillance
La présente invention concerne un dispositif de télésurveillance vidéo par téléphone portable ainsi qu'un procédé d'exploitation, des applications ainsi qu'un réseau public de télésurveillance. Elle permet une surveillance à distance avec prise de décision autonome en fonction d'un environnement vidéo capté par le téléphone portable. Elle peut être mise en oeuvre aussi bien dans des domaines professionnels, par exemple sécurité de locaux, de conditions routières et notamment climatiques ou de circulation (vitesse des véhicules, franchissement de feux), que dans des domaines privés, par exemple surveillance d'un nourrisson, surveillance d'une piscine ou autres chez un particulier.
Avec l'évolution des technologies, la vidéo surveillance s'introduit dans de plus en plus de domaines. La multiplicité des appareils pour chaque application entraîne un mécanisme de réseau de plus en plus sophistiqué. Un dispositif de vidéo surveillance comporte, une caméra, un moyen d'analyse et de diagnostic d'images vidéo fonction de l'application, et un moyen de communication des alarmes et de programmation du dispositif.
Parallèlement, le téléphone devient de plus en plus perfectionné, après avoir durablement rempli sa fonction première de lien sonore à distance, il est devenu mobile et intègre aujourd'hui la communication visuelle par prise de vue par caméra et visualisation sur écran plat.
Les opérateurs téléphoniques sont à la recherche continuelle de nouvelles utilisations du téléphone mobile et celui-ci devient un compagnon de jeu vidéo que de temps en temps un message SMS vient perturber et la communication sonore passe maintenant au second plan.
C'est ainsi que dans la demande EP0 884 905 concernant une méthode de production d'une image à transmettre par un terminal et terminal, on a proposé d'utiliser un téléphone avec caméra comportant un moyen de reconnaissance de forme permettant de localiser le visage de l'utilisateur pour transmission. Dans la demande EP1 170 953 concernant un téléphone portable, système de surveillance à distance, terminal d'information portable et méthode d'utilisation, on a proposé une surveillance à distance par transmission d'images en fonction d'un signal d'autorisation de transmission empêchant l'accès de l'image à des tiers. Ces méthodes et dispositifs sont cependant sous la dépendance de l'utilisateur pour leur fonctionnement et la transmission des images.
La présente invention vise à créer un dispositif de vidéo surveillance à partir d'un téléphone possédant des moyens de communication visuelle par l'intégration d'un module d'analyse d'images ayant son propre traitement de diagnostic et de dialogue avec pour entrée du module, la lecture du signal vidéo issu de la caméra et, en sortie, un lien sur l'organe de contrôle du téléphone afin de permettre une activation/désactivation et un fonctionnement autonome dudit téléphone.
On connaît par ailleurs des procédés et dispositifs permettant de repérer des objets dans une image. Dans certains d'entre eux il est proposé l'analyse statistique des points ou pixels d'un signal vidéo numérique provenant d'un système d'observation pour la réalisation de dispositifs efficaces susceptibles de fonctionner en temps réel.
Plus récemment, il a été proposé de réaliser ces dispositifs par l'association d'unités de traitement d'informations de même nature s'adressant chacune à un paramètre particulier extrait du signal vidéo pour l'analyser. C'est le cas des demandes de brevet de Monsieur Patrick PIRIM, inventeur : FR96/09420 (repérage d'une zone en mouvement), FR96/09420 et FR98/00378 (surveillance de la vigilance d'un conducteur), FR98/16679 et WO99/00425 (système de compression), WO98/05383 (traitement de l'image), FR00/02355 (perception automatique), FR01 /02539 déposée le 23 février 2001 (repérage d'un objet), FR01 /02530 (adaptation), FR01/1 0750 (système de traitement), FR02/10067 (perception visuelle), FR02/1 0066 (analyse), FR02/10065 (unité fonctionnelle), FR02/1 0064 (recrutement dynamique) ainsi que leurs extensions dont notamment WO98/05002, WO98/05383, WO99/36894, WO99/36893, WO00/1 161 0, WO00/1 1 609, WO00/1 3420, WO01 /63557 ou l'article "Le mécanisme de la vision s'intègre sur une puce" dans Electronique, Juin 2000 N°104 dans lequel on propose la mise en œuvre de blocs ou unités ou modules, ces termes étant ici équivalents, de calcul et traitement d'histogramme constituant de véritables neurones spatio-temporels électroniques, dits STN, analysant chacun un paramètre, ledit paramètre étant traité par une fonction (f0g) pour produire individuellement une valeur de sortie. Ces valeurs de sortie, toutes ensembles, forment une rétro annotation disponible sur un bus pour utilisation dans les blocs lors de l'analyse. En même temps, chacune de ces unités de calcul et de traitement d'histogramme constitue et met à jour un registre de sortie d'analyse fournissant des informations statistiques sur le paramètre correspondant. Le choix du paramètre analysé par chaque bloc de calcul et traitement d'histogramme, le contenu du registre de sortie d'analyse ainsi que la fonction (f0g) qu'elle remplit, sont déterminés par un logiciel exécuté dans une interface de programmation applicative API (Application Program Interface).
On y explique également que chaque unité STN est susceptible d'avoir des fonctions de classification automatique, d'anticipation et d'apprentissage.
Dans une unité de calcul et traitement d'histogramme telle que décrite dans WO01/63557, pour un paramètre donné, on détermine à partir de l'histogramme calculé et stocké dans une mémoire, le maximum RMAX de l'histogramme, la position dudit maximum POSRMAX, un nombre de points NBPTS de l'histogramme. On détermine également des bornes de classification qui permettent de délimiter une zone d'intérêt pour le paramètre et il a été proposé de prendre comme critère pour détermination des bornes, un ratio du maximum de l'histogramme, par exemple RMAX/2, et d'obtenir les bornes par un balayage des données de la mémoire depuis l'origine à la recherche des limites de zones correspondant au critère. Une application des blocs STN est plus particulièrement détaillée dans la demande FR-01 /02539 où il a été proposé de décomposer hiérarchiquement l'objet à repérer en fonction de ses propriétés ce qui permet, par exemple, de déterminer d'abord le contour général d'un objet en mouvement par rapport à un fond relativement stable, puis rechercher à l'intérieur de ce contour des éléments caractéristiques par leur teinte, leur couleur, leur position relative... Une telle analyse permet l'élaboration rapide d'applications multiples mettant en jeu le repérage d'un objet. Ces applications peuvent être développées, soit à partir d'une formalisation antérieure ayant dégagé les caractéristiques significatives de l'objet, soit, grâce à une fonction d'apprentissage par l'examen d'une scène dans laquelle l'objet en question est présent, le dispositif permettant lui-même d'extraire des paramètres caractéristiques de l'objet. Dans la suite on utilisera indistinctement le terme élément ou objet pour ce qui est à repérer dans une scène de l'environnement.
L'invention propose d'incorporer à un téléphone portable possédant des capteurs d'un environnement, notamment d'un environnement de sons et d'images, un module permettant une analyse des signaux provenant des capteurs et d'effectuer un diagnostic afin d'obtenir une prise de décision. Cette prise de décision peut être une absence d'action notamment en cas de diagnostic négatif- ou une ou plusieurs actions en cas de diagnostic positif (par exemple reconnaissance et dépassement de seuil de paramètres d'un élément d'une scène). L'analyse consiste à extraire et à mesurer des paramètres d'éléments significatifs de l'environnement. Par exemple, si l'analyse doit concerner un visage : reconnaissance du visage au sein de la scène puis dans le visage reconnaissance des yeux, de la bouche puis, éventuellement, à l'intérieur de ces éléments du visage déterminer des sous éléments significatifs : paupières, pupille ou lèvres... Le diagnostic consiste à déterminer ou détecter l'existence d'éléments particuliers d'une scène et/ou le dépassement de seuils de paramètres liés à un élément de la scène. Dans le contexte de l'invention, le terme scène couvre tout ce qui est capté par un capteur, pour une caméra c'est une série d'images, pour un microphone ce sont des sons, pour un capteur de température une mesure de température... et l'élément correspondant peut par exemple être un objet/humain en mouvement dans les images, des sons d'une gamme de fréquence particulière et/ou une durée et/ou une intensité de sons, la température en tant que telle. L'invention concerne donc un dispositif de télésurveillance vidéo par téléphone portable, le téléphone comportant un émetteur et un récepteur sous le contrôle d'un organe de contrôle pour connexion à un réseau téléphonique, le téléphone comportant des moyens pour capter des signaux sonores BFm et des signaux vidéo Vc au moyen d'un micro débitant les signaux sonores BFm et d'une caméra débitant les signaux vidéo Vc d'images vidéo et, d'autre part, recevoir et restituer des signaux sonores BFe et des signaux vidéo Ve à destination de respectivement un moyen de restitution sonore et d'un écran de restitution vidéo, le téléphone comportant une interface d'entrée utilisateur et une source d'alimentation autonome.
Selon l'invention, le téléphone comporte en outre un module d'analyse et de diagnostic d'au moins des images vidéo doté d'une mémoire pour le stockage d'au moins un programme applicatif de télésurveillance, une entrée dudit module étant reliée à la sortie de la caméra et recevant les signaux vidéo Vc, le module étant relié par au moins une sortie à l'organe de contrôle pour envoi d'au moins une donnée de diagnostic D audit organe de contrôle en fonction de l'analyse et du diagnostic du signal vidéo par un moyen de calcul programmé par un programme applicatif dudit module, les données de diagnostic D étant des instructions agissant sur l'organe de contrôle. Dans le contexte de l'invention, le terme vidéo pour le module d'analyse concerne aussi bien des images fixes ou animées que des sons et concerne plus généralement ce que l'on appelle généralement le multimédia.
Dans divers modes de mise en œuvre de l'invention, les moyens suivants pris isolément ou en combinaison, sont employés :
- la caméra est un caméscope,
- la caméra est du type CCD (à transfert de charge) ou CMOS, - la mémoire programme du module d'analyse et de diagnostic est préchargée par le programme applicatif (le programme est disponible à l'origine)
- le programme applicatif est téléchargé dans la mémoire programme du module d'analyse et de diagnostic, - le programme applicatif comporte au moins un numéro d'appel sur le réseau,
- le programme applicatif comporte au moins une adresse informatique d'appel sur le réseau,
- le module d'analyse et de diagnostic reçoit en outre en entrée les signaux sonores BFm et le module produit des données de diagnostic D également en fonction de l'analyse et du diagnostic des signaux sonores,
- les instructions agissant sur l'organe de contrôle sont une ou plusieurs actions choisies non limitativement dans la liste suivante : réveil d'organes mis en veille du téléphone, mise en veille d'organes du téléphone, appel d'un numéro sur le réseau, transmission de sons enregistrés, transmission de sons en direct, transmission d'un message court (notamment SMS), transmission d'une séquence vidéo en direct, transmission d'une séquence vidéo enregistrée, transmission d'une analyse vidéo, transmission d'un diagnostic vidéo, transmission de données compatible multimédia pour réseau INTERNET, dialogue entre le téléphone et le numéro appelé, dans le cas d'utilisation d'un périphérique de positionnement, commande dudit périphérique par des instructions de positionnement en provenance du réseau, fin d'appel,
- le module d'analyse et de diagnostic comporte une mémoire reprogrammable pour le programme du moyen de calcul,
- le module d'analyse et de diagnostic reçoit en outre des données numériques D de l'organe de contrôle et le programme du moyen de calcul provient du réseau et est transféré dans la mémoire reprogrammable sous forme de données numériques D,
- le module d'analyse et de diagnostic reçoit en outre des données numériques D de l'organe de contrôle, le téléphone comportant en outre un lecteur de carte à puce lisible par l'organe de contrôle et le programme du moyen de calcul provient de la carte à puce et est transféré dans la mémoire reprogrammable sous forme de données numériques D,
- le module d'analyse et de diagnostic comporte un module d'acquisition et de mémorisation d'images vidéo et un moyen de détection sonore pour interfaçages avec les signaux vidéo et sonores, un moyen de calcul du type micro-processeur ou processeur de signal numérique, la mémoire pour le programme applicatif et une unité de dialogue pour interfaçage avec l'organe de contrôle,
- le module d'analyse et de diagnostic comporte au moins une unité de traitement spatial et temporel et un ensemble d'unités de calcul d'histogramme dont la configuration matérielle et fonctionnelle est sous la dépendance du programme applicatif,
- le module d'analyse et de diagnostic est un bloc IP intégrable (matériellement et/ou fonctionnellement) dans un circuit électronique,
- le circuit électronique est un composant électronique,
- le composant électronique est un circuit intégré comportant une/des fonctions téléphoniques (composant avec une/des fonctions usuelles en téléphonie : par exemple émission, réception, traitement du signal, signalisation...) du téléphone,
- le téléphone est disposé sur un périphérique de positionnement permettant au moins d'orienter ledit téléphone dans l'espace selon des instructions de positionnement (OM) provenant du téléphone, lesdites instructions de positionnement étant produites par le module d'analyse et de diagnostic,
- le périphérique de positionnement comporte un premier support dans lequel est disposé le téléphone, le premier support étant lui-même disposé dans un second support, le premier et le second support étant articulés entre eux par au moins un moteur commandé par un circuit de commande recevant les instructions de positionnement (OM),
- le second support comporte deux moteurs dont les deux rotors sont disposés selon deux axes sensiblement perpendiculaires entre-eux, le circuit de commande et un chargeur destiné à la recharge de la source d'alimentation autonome du téléphone, - le périphérique de positionnement dudit téléphone permet en outre de déplacer dans l'espace ledit téléphone selon des instructions de positionnement (OM),
- en outre, des instructions de positionnement proviennent du réseau,
- les instructions de positionnement (OM) sont transmises au dispositif périphérique de positionnement par l'intermédiaire d'un connecteur du téléphone comportant une liaison de transmission de données série, - le téléphone comporte un ou plusieurs des capteurs suivants dont la sortie est reliée au module d'analyse et de diagnostic, ledit module analysant et diagnostiquant les mesures desdits capteurs :
- capteur de position angulaire, - capteur d'accélération,
- capteur de vitesse,
- capteur de température,
- capteur de luminosité,
- capteur de pression barométrique, (utilisation possible en alarme d'intrusion : l'ouverture d'une porte provoquant une onde de pression dans un local),
- capteur biométrique (empreinte, ADN ...),
- les capteurs du téléphone sont reliés au téléphone par l'intermédiaire d'un connecteur du téléphone comportant une liaison de transmission de données série.
L'invention concerne donc également un périphérique de positionnement compatible avec le téléphone de l'invention et permettant au moins d'orienter ledit téléphone dans l'espace selon des instructions de positionnement (OM) provenant du téléphone, lesdites instructions de positionnement étant produites par le module d'analyse et de diagnostic.
L'invention concerne également un procédé d'exploitation qui découle de la mise en œuvre du dispositif tel que décrit précédemment selon toutes ses possibilités et qui est un procédé d'exploitation d'un dispositif de télésurveillance vidéo par téléphone portable, le téléphone comportant un émetteur et un récepteur sous le contrôle d'un organe de contrôle pour connexion à un réseau téléphonique, le téléphone pouvant, d'une part, capter et transmettre des signaux sonores BFm et des signaux vidéo Vc provenant respectivement d'un micro produisant les signaux sonores BFm et d'une caméra produisant les signaux vidéo Vc d'images vidéo et, d'autre part, recevoir et restituer des signaux sonores BFe et des signaux vidéo Ve à destination de respectivement un moyen de restitution sonore et d'un écran de restitution vidéo, le téléphone comportant une interface d'entrée utilisateur et une source d'alimentation autonome, dans lequel des images provenant de la caméra sont transmises à un appareil récepteur relié au réseau et pouvant visualiser les images vidéo, dans lequel on met en œuvre un dispositif selon l'une quelconque des caractéristiques précédentes isolées ou en combinaison et dans lequel le téléphone comporte en outre un module d'analyse et de diagnostic d'au moins des images vidéo, doté d'une mémoire pour le stockage d'un programme applicatif de télésurveillance, une entrée dudit module étant reliée à la sortie de la caméra et recevant les signaux vidéo Vc, le module étant relié par au moins une sortie à l'organe de contrôle pour envoi d'au moins une donnée de diagnostic D audit organe de contrôle en fonction d'une décision résultant de l'analyse et du diagnostic du signal vidéo par un moyen de calcul programmé par un programme applicatif dudit module, les données de diagnostic D étant des instructions agissant sur l'organe de contrôle et en ce que la connexion à l'appareil récepteur résulte de la décision produite par le module d'analyse et de diagnostic.
Dans des variantes du procédé, le récepteur est un téléphone portable ou filaire et/ou le récepteur est un moyen informatique pouvant visualiser des données compatible multimédia pour réseau I NTERNET, un serveur connecté sur le réseau et disposé entre le téléphone et le récepteur assurant l'interface entre les données du téléphone et le réseau INTERNET. L'invention concerne également une application particulière du procédé d'exploitation précédent dans lequel on surveille à distance un nourrisson, le programme applicatif permettant au moins l'analyse et le diagnostic des mouvements du nourrisson et la connexion au récepteur lorsque des mouvements sont diagnostiqués.
L'invention concerne enfin un réseau public de télésurveillance qui est constitué par un réseau de téléphones portables comportant une centrale de transmission, par ce réseau, de programmes applicatifs de télésurveillance pour dispositif de télésurveillance vidéo par téléphone, programmes aptes à être téléchargé par ceux-ci.
Le téléphone portable de l'invention comporte donc des moyens autonomes de prise de décision en fonction de l'analyse et du diagnostic d'un contexte environnemental (images, sons ou autres) capté par les capteurs du téléphone et peut donc de sa propre initiative décider d'alerter un équipement compatible (téléphone classique ou spécialisé, par exemple les équipements utilisés par les pompiers, la police et les centrales de surveillance ou moyen informatique) à distance : la prise de décision est automatique. De plus l'analyse et le diagnostic étant sous la dépendance d'un programme applicatif, les paramètres d'analyse et de diagnostic peuvent être adaptés à l'application envisagée et, de préférence, par des moyens reprogrammables et notamment par transmission sur le réseau téléphonique du programme vers le téléphone de l'invention ou par insertion dans le téléphone d'une carte à puce contenant le programme qui est alors transféré dans le module d'analyse et de diagnostic du téléphone. Par cette prise de décision en amont, à la source de l'environnement, l'utilisateur d'aval est déchargé des tâches de surveillance et, de plus, le réseau est libéré, la connexion et transmission ne se faisant que selon le résultat d'un diagnostic.
L'utilisation de ce procédé banalise le marché de la vidéo surveillance, et la notion de services associés devient prédominante. Outre le fait que le téléphone portable n'utilise le réseau que pour la transmission de données numériques, données de diagnostic (alarme et type d'alarme par exemple) et/ou données vidéo en fonction de l'analyse et du diagnostic d'un environnement vidéo, typiquement des programmes applicatifs préchargés ou téléchargés, à partir de la centrale de transmission de téléprogramme, ce qui réduit l'emprise de la télésurveillance sur le réseau du point de vue de l'occupation de bande passante, l'analyse fine de l'image par une perception visuelle élaborée peut permettre en outre de réaliser une compression de l'information vidéo à transmettre. Notons enfin que, dans le cadre de l'invention, le téléphone portable peut aussi bien être destiné à un réseau public qu'à un réseau privé, par exemple au sein d'une entreprise ou d'un bâtiment fixe ou mobile. Par ailleurs on considère de préférence la mise en œuvre d'un téléphone portable car celui-ci, du fait de son développement, est maintenant d'un coût relativement réduit et sa modification pour adaptation d'un module d'analyse et de diagnostic n'entraînera qu'un surcoût modéré. Toutefois, l'invention est plus généralement applicable à des moyens de radiocommunication de sons, vidéo (images) et données en réseau spécifiquement développés pour l'occasion.
La présente invention va maintenant être exemplifiée en relation avec : la Figure 1 qui représente un téléphone portable vidéo de l'état de la technique, la Figure 2 qui représente un téléphone portable selon l'invention avec un module d'analyse et de diagnostic, la Figure 3 qui représente un module d'analyse et de diagnostic réalisé avec des moyens de calcul classiques, la Figure 4 qui représente un module d'analyse et de diagnostic réalisé avec des moyens de calcul à type de neurones spatio-temporels, la Figure 5 qui représente un exemple d'application du téléphone de l'invention, la Figure 6 qui représente la structure matérielle schématique d'un second exemple d'application du téléphone de l'invention, et la Figure 7 qui représente un téléphone dans ce second exemple d'application de l'invention. La figure 1 représente un synoptique simplifié d'un téléphone 1 portable intégrant la communication visuelle, correspondant à l'art antérieur. Ce téléphone comporte un noyau de base avec un émetteur 2 et un récepteur 4 sous le contrôle d'un organe de contrôle 8. En outre, afin de permettre une interaction avec l'utilisateur, des moyens d'interface de contrôle 9 en entrée à type de clavier et/ou reconnaissance vocale sont reliés par un bus électronique Te à l'organe de contrôle 8. Sur le noyau de base sont connectés en entrée, un micro 3 envoyant un signal de parole basse fréquence BFm et un signal vidéo Vc provenant d'une caméra 6 du téléphone 1 . Sur le noyau de base sont également connectés en sortie, des écouteurs 5 ou haut- parleur pour diffusion sonore d'un signal BFe provenant du récepteur 4, ainsi qu'un écran vidéo 7 pouvant restituer aussi bien des données vidéo Ve reçues, stockées dans le téléphone ou captées par la caméra 6 du téléphone. Outre le rôle de restitution vidéo de l'écran vidéo 7, celui-ci, en tant que moyen d'interface de contrôle en sortie, peut également permettre une interaction avec l'utilisateur en affichant des menus ou autres. Il est également possible dans certaines versions que les moyens de restitution sonore, notamment écouteurs 5, forment un moyen d'interface de contrôle en sortie par diffusion d'instructions ou menus sonores. Le téléphone 1 étant portable, une source d'alimentation autonome est incorporée dans ledit téléphone. La représentation fonctionnelle du téléphone portable sur la Figure 1 étant très schématisée pour des raisons de simplification, on n'a pas représenté dans le détail tous les organes du téléphone comme par exemple les moyens de sécurité matériels (carte à puce) et logiciels (programmes de cryptage/décryptage) ou de gestion de réseau et de communication (programmes de recherche de réseau, de connexion réseau ...).
La Figure 2 permet de visualiser comment l'invention s'applique d'une manière extrêmement simple à un téléphone de l'état de la technique. En effet, l'invention consiste dans ses grandes lignes à incorporer dans un téléphone portable du type qui a été décrit en relation avec la Figure 1 , un module d'analyse et de diagnostic vidéo 20. Ce module reçoit en entrée au moins le signal vidéo Vc provenant de la caméra 6 du téléphone portable 1 . Dans une version évoluée, le module 20 peut recevoir en outre le signal de parole BFm provenant du micro 3. En sortie le module 20 est connecté par une liaison numérique D à l'organe de contrôle 8 afin de lui transférer des données de diagnostic. On verra ultérieurement que le module 20 peut également prendre en charge certaines fonctions de l'organe de contrôle et, par exemple, la compression de données, notamment vidéo. On peut noter que la liaison D est indiquée bidirectionnelle et l'on verra que le module 20 peut également recevoir des données numériques provenant de l'organe de contrôle et, par exemple des données de programmation, notamment le programme applicatif, pour l'analyse et le diagnostic provenant notamment du réseau et reçues par le téléphone portable 1 . En effet, l'invention peut être mise en œuvre au sein d'une structure en réseau dans laquelle un opérateur superviseur/contrôleur fourni des moyens de communication (dont des passerelles entre réseaux informatiques et téléphoniques) et de gestion (notamment transmission de programmes applicatifs permettant l'analyse et le diagnostic vidéo/audio dans le module du téléphone, les programmes du module étant téléchargés) entre des utilisateurs du dispositif de télésurveillance.
Dans d'autres modes de mise en œuvre, le module d'analyse et de diagnostic est une entité additionnelle protégée notamment par le droit d'auteur (« copyright ») et/ou par topographie de semi-conducteur et/ou et/ou droit des brevets et/ou d'autres droits sui generis, qui est qualifiée de bloc IP (ou composant virtuel qui représente des connaissances liées à la conception de fonctions intégrables dans des circuits intégrés), et qui est intégrée au sein d'un composant à fonctions téléphoniques classiques : l'entité est ajoutée dans un composant ou circuit classiquement utilisé en téléphonie (fonctionnellement par ajout d'un programme et/ou matériellement par ajout d'un bloc matériel fonctionnel de portes logiques et/ou mixte par configuration ou reconfiguration d'une structure programmable de portes logiques ou combinaison de programme et matériel). Les blocs IP sont des entités fonctionnelles maintenant largement utilisées pour la réalisation de circuits intégrés et ils correspondent à des objets matériels (structures de portes par exemple) ou des objets logiciels (instructions) ou une combinaison des deux. Les blocs IP permettent la création de bibliothèques de fonctions dans lesquels les concepteurs de circuits intégrés puisent pour la réalisation de circuits spécifiques. Pour reprendre l'exemple précédent on ajoute à un ensemble de blocs IP destinés à la téléphonie un bloc IP correspondant au module d'analyse et de diagnostic pour réaliser un circuit intégré destiné à la réalisation d'un téléphone selon l'invention. De préférence, le module d'analyse et de diagnostic est un circuit intégré unique, éventuellement associé à de la mémoire externe, qui est disposé dans un téléphone à moyens vidéo classique. L'ajout d'un tel circuit intégré peut s'effectuer d'une manière très simple avec un minimum de modification des circuits existants du téléphone. En particulier, la liaison du module à l'organe de contrôle peut s'effectuer par raccordement sur un bus de communication de l'organe de contrôle qui est généralement mis en œuvre au sein des téléphones portables pour contrôle des organes périphériques (émetteur, récepteur, clavier, écran ... ).
La figure 3 représente l'organisation du module 20 d'analyse d'image et de détection sonore selon un premier mode de réalisation utilisant des moyens de calcul informatiques, calculateur classique, notamment processeur de signaux numériques (DSP) ou micro-processeur. Le signal vidéo Vc issue de la caméra 6 entre dans le sous-ensemble 21 d'acquisition et de mémorisation d'images vidéo. Le signal électrique sonore BFm issue du micro 3 entre dans le sous- ensemble 22 de détection sonore. Un calculateur 23 exécute le (ou les) programme(s) applicatif(s) 25 qui permet(tent) d'analyser et d'effectuer un diagnostic sur l'image et le son pendant une durée temporelle, voire plage horaire, prédéfinie. Ce (ou ces) programme(s) applicatif(s) peut(peuvent) être déjà stocké(s) dans le téléphone et/ou préchargé(s) et/ou téléchargés à partir du réseau. En fonction du diagnostic résultant de l'analyse, et notamment en cas de non conformité à des critères de diagnostic, un signal numérique D compatible avec l'organe de contrôle 8 est généré par une unité 24 de dialogue. Ce signal numérique D, qui correspond à des actions notamment sur les moyens de connexion réseau du téléphone, peut être l'émission a un numéro prédéfini sur le réseau d'un message approprié (SMS) avec visualisation de la scène enregistrée et/ou en direct. Les moyens mis en œuvre dans ce mode de réalisation de la Figure 3 sont particulièrement gourmands en énergie électrique et de préférence on utilise les moyens d'analyse et de diagnostic en relation avec la Figure 4 à neurones spatio- temporels (STN) qui sont particulièrement adaptés à ces fonctions et particulièrement souples d'utilisation (réorganisation et réutilisation des neurones en fonction de la profondeur d'analyse et/ou de l'application), et cela pour un coût énergétique relativement réduit. Lesdits moyens peuvent également être utilisés à des fins de compression vidéo comme on l'a vu dans la présentation de l'état de la technique en première partie de la description.
La figure 4 représente un mode de réalisation préféré à neurones spatio-temporels (STN) comprenant à titre d'exemple un ensemble de seize unités ou modules de calcul d'histogramme polyvalentes (ou neurones spatio-temporels, ces termes étant équivalents) sous forme d'un processeur de perception visuelle générique (GVPP) 20' qui forme le module d'analyse et de diagnostic à neurones spatio-temporels. Ce processeur comporte en outre un moyen de détection sonore 22 agissant directement sur un processeur électronique 23 lui-même en relation avec une interface ou unité de dialogue 24 par un bus bidirectionnel D vers et de l'organe de contrôle 8. Ces unités de calcul d'histogramme constituent une matrice, elles sont reliées à un bus 56 sur lequel les paramètres DMVT (direction du mouvement), VMVT (vitesse du mouvement), L (lumière), T (teinte), S (saturation), pO, p1 , p2, ... ,p15 sont disponibles (pO, p1 , p2, ... ,p15 sont des pentes d'axes de référence produits par l'unité 54). Le bus 57 porte l'information de retro-annotation. Un tel processeur est notamment décrit dans les publications suivantes FR- 2.61 1 .063 et WO-98/05002.
Ce processeur de perception 20' met en œuvre une unité de traitement spatial et temporel 53 qui, recevant un signal de type vidéo, produit un certain nombre de paramètres pour chaque pixel. Il s'agit par exemple de la vitesse (VMVT), de la direction (DMVT), d'une constante de temps et d'un paramètre binaire de validation en plus d'un signal vidéo retardé et des différents signaux de synchronisation de trame, de ligne et de pixel. Dans un tel dispositif, on a déjà souligné l'intérêt de constituer des histogrammes de ces paramètres permettant la constitution la manipulation et l'exploitation d'informations statistiques. Le but de ce type de dispositif de traitement d'images est de fournir en sortie un signal qui porte pour chaque pixel une information significative du résultat de l'application de critères de reconnaissance ou de sélection selon classification. Ces critères sont prédéfinis ou élaborés par les procédés et dispositifs de traitements d'images eux-mêmes. Dans ce même document WO-98/05002, un ensemble de modules de calculs STN permettant de calculer des histogrammes est décrit en relation avec l'unité de traitement spatial et temporel 53. Chaque module STN 51 aoo ••- 51 a33 reçoit des données par un bus de données 56 et est interconnecté aux autres par un bus de rétro annotation 57 véhiculant des résultats après classification. Un logiciel API (interface de programmation applicative) permet de configurer entre-eux les modules et les paramètres de fonctionnement du processeur de perception par l'intermédiaire d'un bus de configuration matérielle et fonctionnelle 55. Ce logiciel API , ainsi que le programme applicatif 25, est géré par le processeur électronique 23 qui est en relation avec l'ensemble des modules STN par le bus 55 qui transmet également en retour les résultats des calculs des modules STN. L'ensemble du processeur GVPP est donc commandé par le processeur électronique ou unité de contrôle 23, du type micro-contrôleur, qui détermine en fonction d'un programme applicatif 25 ceux des paramètres DMVT, VMVT, L, T, S, pO, p 1 , p2 p 15 qui sont traités à un instant donné par une unité STN ou un groupe d'unités d'histogramme polyvalentes dédié et en fonction de signaux d'initialisation (INIT), écriture (WRITE) et de fin (END) produits par un séquenceur 52. Chaque unité de calcul d'histogramme est reliée à un bus de données 56 qui fournit les différents paramètres à traiter, et à un bus 57 de rétro-annotation qui fournit le signal de classification de chaque neurone STN et les signaux de fonction d'apprentissage aux différentes autres neurones STN. Chaque unité de calcul d'histogramme comporte une mémoire, un classifieur et une unité de rétro annotation.
Chaque unité 1 a est susceptible d'avoir des fonctions de classification automatique d'anticipation et d'apprentissage.
Le processeur de perception visuelle générique (GVPP) 520 ainsi constitué peut être intégré sur un seul substrat semi-conducteur. Le nombre d'unités de calcul d'histogramme polyvalentes dépend de l'application et des technologies de fabrications de composants semi-conducteurs disponibles.
On a donc vu qu'il était possible de mettre en œuvre l'invention soit en utilisant essentiellement des moyens logiciels fonctionnant dans des circuits de calcul génériques du type unité centrale ou processeur de signaux numériques (DSP) comme celui utilisé en relation avec la Figure 3, soit en utilisant essentiellement des moyens matériels avec un/des circuits dédiés en logique câblée ou en logique adaptable/programmable comme le circuit GVPP présenté en relation avec le Figure 4 avec ses modules STN. On comprend qu'une telle distinction de moyens n'est pas absolue puisque des moyens logiciels ont besoin de moyens matériels pour fonctionner et que l'adaptation/programmation des circuits dédiés peut faire appel à du logiciel. Ainsi, même dans le cas du circuit dédié de la Figure 4, il a été mis en œuvre un processeur électronique 23 qui permet de superviser le fonctionnement structurel et fonctionnel dudit circuit dédié. De plus ces techniques peuvent être combinées, une partie du traitement d'analyse pouvant faire appel à un circuit dédié et une autre à une unité centrale générique. Les moyens mis en œuvre par l'invention sont donc à la fois matériels et logiciels, ce dernier terme pouvant être pris dans le sens de programme mais également d'instructions de structuration de moyens matériels comme dans le cas d'instructions de configuration de circuits logiques à structure opérationnelle programmable (réseaux de portes logiques programmables, notamment VHDL - circuits à haute densité de portes logiques - au sein d'ASIC).
Dans ces diverses possibilités de réalisation, les moyens mis en œuvre permettent le séquencement en continu
(temps réel) des images d'une scène en provenant du capteur
(caméra, CCD, CMOS) avec sous-séquencement de chacune des images reçues, ceci temporellement et spatialement. Chaque pixel (point de l'image) est connu par sa valeur P fonction de la luminance et/ou chrominance et sa position instantanée (i,j,t) où i et j définissent la position spatiale au sein de la matrice image et t la séquence ou le temps. Les valeurs de P consécutives sont traitées dans le domaine temporel (dans une unité de traitement temporel dans le cas d'un circuit dédié GVPP) pour extraction de paramètres liés à chacun des pixels, lesdits paramètres étant choisis parmi la luminance, la teinte, la saturation, la direction du mouvement, la vitesse du mouvement, l'orientation de bords, la courbure de bords, etc. et les positions i,j respectives de la séquence t sont traitées spatialement (dans une unité de traitement spatial dans le cas d'un circuit dédié GVPP) afin de déterminer des orientations spatiales. Les informations ainsi obtenues seront analysées statistiquement et hiérarchiquement afin de percevoir les éléments composant les images et de parvenir à un diagnostic. Ainsi, dans le cas d'un circuit dédié GVPP, il sera mis en œuvre un processus de recrutement dynamique des modules STN au fil des séquences pour permettre la perception active des éléments de l'image, le recrutement se faisant en fonction d'objectifs et notamment de la connaissance à priori (un visage) ou non (analyse perceptive générique) du type d'élément pouvant se trouver dans l'image. A partir de la perception, un processus de diagnostic est mis en œuvre afin de prendre des décisions d'action, notamment sur l'organe de contrôle, comme, par exemple, l'activation du téléphone et l'envoi d'un message court (SMS) par le téléphone lorsqu'un élément perçu et diagnostiqué comme un visage apparaît dans l'image. La figure 5 représente un exemple d'application de vidéo surveillance d'un nourrisson 103 qui dort avec des parents tiennent à être prévenu à distance de son réveil. Tout mouvement 1 01 du bébé et/ou bruit capté par la caméra et/ou le micro du téléphone 1 1 0 sont analysés et un diagnostic est effectué grâce au programme applicatif, par le téléphone mobile 1 1 0 de l'invention qui a été posé de telle sorte qu'il perçoit la scène 1 02 par sa caméra et son micro, et transmet 121 une alarme et la scène par l'intermédiaire de moyens de réception 122 et 123 du réseau 120 téléphonique vers un second téléphone portable 130 des parents et correspondant au numéro d'appel demandé par la partie diagnostic de l'applicatif.
Le second téléphone 1 30 qui peut être un téléphone portable classique, permet de visualiser la scène par un écran 131 et d'écouter les sons par un moyen de reproduction sonore 132. Le second téléphone 130 peut être un téléphone fixe avec ou sans moyens vidéo et, dans ce dernier cas, l'alarme et le son du bébé seront seuls reçus. Le second téléphone 130 peut être remplacé par des moyens informatiques du type micro-ordinateur avec liaison filaire voire radio ou, même un téléphone portable-ordinateur, et notamment par l'intermédiaire du réseau informatique INTERNET qui permet la transmission de données multimédia incluant des images et des sons. Dans ce dernier cas, un serveur INTERNET fera l'interface au sein du réseau 120 entre le téléphone de l'invention 1 10 et les moyens informatiques remplaçant le téléphone portable classique 130.
Plus généralement, le téléphone de l'invention peut également être appliqué à la surveillance d'un appartement ou d'un immeuble, d'un véhicule par exemple en cas d'incendie, vol ou autre, d'une piscine dans le cadre de la prévention des noyades grâce à la détection des sons (chute dans l'eau, clapotis) et des images : masse mouvante ou non en surface ou profondeur du liquide.
Le téléphone de l'invention peut également trouver une application dans la téléconférence et, par exemple pouvoir se centrer automatiquement sur un interlocuteur dont les lèvres remuent, le GVPP analysant les visages et parties de visage (yeux, bouche... ) et le diagnostic étant programmé pour détecter le mouvement de la partie de visage correspondant aux lèvres selon un modèle anthropomorphique.
Par changement de programme applicatif, il est possible de modifier la fonction de vidéo surveillance, par exemple dans un véhicule, reconnaître le propriétaire ou les personnes habilitées à conduire ledit véhicule, l'alarme est transmise à un destinataire qui peut être un organisme de sécurité en cas de non reconnaissance et elle est alors enregistrée et des consignes sont données en conséquence au véhicule. Des applications de surveillance du trafic automobile sur route ou autoroutes sont également possibles grâce aux moyens de détermination de la vitesse des éléments de perception que permet le GVPP : mesure de fluidité et alarme automatique ou détection de dépassement de vitesse autorisée et transmission d'une alarme à des moyens de répression de la violence routière.
En fonction de l'application, le poste récepteur de l'alarme (1 30) peut par exemple également être un téléphone perfectionné du type pompier ou police ou centrale de surveillance. Ainsi, l'appareil récepteur peut être un dispositif spécifique.
D'autres applications sont possibles comme on va maintenant le voir en relation avec la Figure 6 où le téléphone de l'invention permet de commander, en fonction de l'analyse et du diagnostic vidéo et/ou audio, un dispositif périphérique de positionnement dans l'espace dudit téléphone. Le positionnement du téléphone peut concerner l'orientation de la prise de vue (le téléphone pouvant tourner sur lui-même pour orienter la caméra dans une direction donnée), le téléphone restant alors à un emplacement donné. Le positionnement peut également concerner en combinaison ou non avec l'orientation, le choix de l'emplacement dans l'espace du téléphone, ce dernier pouvant se déplacer dans ledit espace. Ces possibilités dépendent du périphérique de positionnement mis en œuvre, depuis un simple support rotatif pouvant être commandé selon un ou deux axes, un dispositif mobile se déplaçant sur une surface (chariot motorisé commandé), voire dans un espace à trois dimensions (dirigeable, avion ou sous-marin commandé en modèle réduit). On comprend que la notion de positionnement est relative et que si c'est en général le téléphone de l'invention qui se positionne dans un espace fixe (s'oriente ou se déplace dans l'espace pour obtenir une direction et/ou origine de point de vue différente), on envisage le cas où l'espace se déplace et l'on cherche à garder une direction et/ou une origine de point de vue constante. Ce dernier cas peut, par exemple, correspondre à une vigie automatisée avec téléphone vidéo placé sur l'avant d'un navire pouvant être soumis à un roulis ou tangage et destiné à prévenir une collision par détection vidéo d'obstacle : le module d'analyse et de diagnostic est alors configuré pour détecter des corps flottants vers l'avant du navire en direction de l'horizon.
L'adaptation du téléphone avec moyens vidéo de l'invention à une telle application est relativement simple car dans la plupart des cas, le téléphone portable possède un connecteur destiné à la recharge son alimentation et à des échanges de données (en général par liaison série) entre l'organe de contrôle et des périphériques externes. On a ainsi représenté Figure 6, sous la référence générale 1 un téléphone tel que celui de la Figure 2 avec un connecteur 1 01 de liaison pour recharge de l'alimentation 1 0 par la ligne V et pour communication d'échange de données par la liaison OM représentée ici unidirectionnelle depuis l'organe de contrôle vers l'extérieur mais qui permet plus généralement des échanges de données bidirectipnnels.
Le téléphone 1 est positionné d'une manière stable dans un premier support 100. Ce premier support 100 est lui- même disposé dans un second support 106 d'une manière orientable angulairement par des moyens de positionnement commandés, le second support étant supposé posé sur un emplacement fixe de l'espace dans cette version. Le téléphone 1 est donc fixe par rapport au premier support 1 00 et le premier support 1 00 peut être orienté angulairement par rapport au second support 1 06. En conséquence, le téléphone et donc la prise de vue d'image peuvent être orienté angulairement dans l'espace. Le système de supports présenté permet ainsi de maintenir, d'orienter selon des instructions de positionnement et, accessoirement, d'alimenter (recharger) le téléphone 1 .
Les moyens de positionnement commandés comprennent un circuit de commande de moteurs 103 agissant sur deux moteurs 104 et 105 par des signaux de commande moteur CM . Un des moteurs référencé 1 05 est fixé immobilisé par son stator sur le second support 106 et son rotor entraîne le stator de l'autre moteur référencé 104 dont le rotor est fixé au premier support 1 00. La ligne V et la liaison OM du connecteur 1 01 parviennent jusqu'au second support 1 06 à travers le premier support 1 00. Le second support 106 comporte un chargeur 102 (pour recharger le téléphone 1 ) recevant une alimentation extérieure, notamment secteur du réseau de distribution électrique public, et qui permet, en outre, l'alimentation des moyens de positionnement commandés (circuit de commande 1 03 et moteurs 104 et 1 05). Les instructions de positionnement en provenance de l'organe de contrôle 8 du téléphone 1 et agissant sur le circuit de commande 103 sont véhiculés par la liaison OM. La source initiale des instructions de positionnement est de préférence le module d'analyse et de diagnostic qui utilise la liaison D vers l'organe de contrôle (par exemple suivi d'une personne ou d'un visage). Il est cependant possible de transmettre par la voie téléphonique, en provenance du réseau téléphonique, de telles instructions de positionnement qui sont alors reçues par le récepteur 4 du téléphone 1 et envoyées par la liaison OM par l'intermédiaire de l'organe de contrôle 8. Dans ce dernier cas, l'orientation peut par exemple être obtenue à partir d'un autre téléphone en agissant sur ses touches ou, dans le cas de l'utilisation de moyens informatiques, notamment INTERNET, de l'action sur un/des curseurs d'affichage (souris) d'un terminal informatique sur le réseau téléphonique avec passerelle informatique.
La ligne V et la liaison OM sont de préférence matérialisées, notamment par une liaison filaire, voire par ou associant un ou des contacts tournants (le premier et le second support étant mobiles entre eux). Dans une version plus évoluée, la ligne V et la liaison OM sont dématérialisés, par exemple un moyen d'induction électromagnétique permettant la recharge de l'alimentation 10 du téléphone et la liaison OM s'effectuant par ondes radio (par exemple BLUETOOTH®), le second support comportant alors en outre des moyens de radiocommunication compatibles reliés au circuit de commande moteurs 1 03.
De préférence, les rotors des moteurs sont décalés de 90° afin de permettre un balayage efficace de l'espace de prise de vue. De préférence on assurera un débattement angulaire maximum, c'est à dire de 360°, pour le plan de l'espace où les éléments d'images de scènes ont le plus de chance de se trouver. Par exemple pour un téléphone disposé sur une table dans une pièce, il est préférable de pouvoir balayer pour prise de vue à l'horizontale l'ensemble de la pièce (360°) où l'on a plus de chance de détecter une personne que vers le plafond. D'autre part, du fait de contraintes mécaniques, notamment présence des supports, il existe des zones où la prise de vue n'est pas possible.
On comprend que les possibilités de balayage angulaire de l'espace à partir du point de vue sont adaptées en fonction des besoins et du coût de mise en œuvre. Ainsi, si l'on a représenté deux moteurs sur la Figure 6, ce qui permet un balayage volumique de l'espace, dans une version simplifiée, un seul moteur peut être mis en œuvre, de préférence, permettant un balayage dans un plan où les éléments des images ont le plus de chance de se trouver.
Les moteurs sont de préférence des moteurs pas à pas. Un moyen d'indexation (repère de position d'origine) peut être mis en œuvre soit directement sur les rotors, soit, d'une manière plus complexe, par analyse d'images. Le moyen d'indexation permet de connaître une position de référence à partir de laquelle on peut déterminer le déplacement (nombre de pas pour des moteurs pas à pas, ce qui correspond à un déplacement angulaire calculable). Le moyen d'indexation, dans une variante, peut renvoyer un signal vers le téléphone 1 par la liaison OM bidirectionnelle. L'interface de positionnement peut également comporter d'autres capteurs comme par exemple des capteurs de positionnement notamment angulaire, de vitesse et/ou d'accélération, de niveau de batterie ou d'alimentation ... dont les informations sont renvoyées vers le téléphone.
La Figure 7 permet de visualiser la disposition du téléphone 1 de l'invention dans le premier support 100, lui- même dans le second support 1 06. Dans le positionnement de repos, le téléphone 1 est sensiblement vertical et le moyen de prise de vue du téléphone a un axe de prise de vue sensiblement horizontal. Grâce au moteur 1 05, le premier support 100 peut tourner par rapport au second support 1 06 permettant à l'axe de prise de vue de balayer l'espace dans un plan sensiblement horizontal. Le moteur 104 quant à lui, permet de faire basculer le premier support 1 00 par rapport au second support 106, c'est-à-dire de faire en sorte que le téléphone 1 quitte sa position sensiblement verticale pour des positions se rapprochant de l'horizontale, l'axe de prise de vue se déplaçant alors de bas en haut et inversement.
Comme on l'a indiqué pour les Figures 6 et 7, on a supposé que le second support est disposé à un emplacement fixe de l'espace. Toutefois, dans d'autres variantes de l'invention, on peut rendre mobile le téléphone 1 dans l'espace en utilisant un/des supports qui possèdent des moyens de se déplacer dans ledit espace. Dans de tels cas, on comprend qu'il est préférable que l'alimentation extérieure ne soit pas connectée en permanence, sauf à avoir un rayon de déplacement réduit (la longueur du fil d'alimentation extérieure) et qu'un moyen d'alimentation autonome, notamment à type de batterie rechargeable, soit mis en œuvre dans le support mobile du téléphone. Dans une telle version, la plus simple avec moyens de roulement au sol, le dispositif des Figures 7 et 8 comporte en outre à la face inférieure du second support des moyens de roulement et directionnels commandés par l'intermédiaire de la liaison OM. Dans une autre variante, le téléphone 1 peut être disposé sensiblement verticalement sur un chariot support comportant des roues d'entraînement et directionnelles (un moyen supplémentaire de basculement commandé du téléphone pouvant éventuellement être mis en œuvre). On comprend que les moyens de déplacement commandés sur le sol (voir un autre référentiel) sont adaptés aux utilisations envisagées, comme de simples moyens de roulement (roues, chenille) ou des pattes articulées, ventouses... De même si l'on souhaite un déplacement dans un espace à trois dimensions, les moyens de déplacement seront adaptés audit espace. Des outils de gestion robotique classiques peuvent être utilement mis en œuvre dans de telles applications.
Comme on l'a indiqué précédemment et grâce à la possibilité de configuration matérielle et fonctionnelle des modules STN du GVPP en fonction d'un programme applicatif par l'intermédiaire de l'API, il est également possible d'utiliser le processeur de perception en tant que système de compression d'images vidéo tel que décrit dans FR98/16679 et WO99/00425 afin d'améliorer la qualité et la fluidité des images transmises par le téléphone 1 , 1 10, une plus grande quantité d'information comprimée pouvant être transmise sur le canal de transmission. Ainsi, après diagnostic aboutissant à une prise de décision positive entraînant une connexion au réseau, le processeur de perception peut être reconfiguré pour opérer en compression vidéo. On comprend bien que dans un tel cas, les moyens de réception 130 et/ou le serveur réseau au cas où I NTERNET est utilisé pour liaison avec l'appareil distant 1 30, des moyens de décodage compatibles y seront placés. Dans ce cas, une connexion entre deux téléphones de l'invention est particulièrement intéressante car ils comprennent tous deux des moyens à processeur de perception compatibles et configurables pour compression/décompression.
On comprend bien que l'invention peut être déclinée de diverses manières et en particulier en ce qui concerne les diagnostics en fonction des analyses qui peuvent produirent des actions de divers types : alarmes simples, transmission de messages informatiques, transmission de données vidéo et/ou sonores, voire multimédia vers des équipements divers de type téléphonique voire informatique, par l'intermédiaire d'un réseau radio-téléphonique auquel est connecté le téléphone portable de l'invention . Les applications de l'invention sont également multiples, aussi bien pour la surveillance privée ou familiale avec un téléphone portable vidéo classique comportant le module d'analyse et de diagnostic que pour des applications professionnelles et dans ce cas, le téléphone de l'invention peut être une réalisation spécifique, notamment téléphone portable militarisé ou sous forme d'un module industriel. Ces applications peuvent notamment découler des inventions mettant en œuvre des neurones spatio-temporels et décrites dans les demandes dont l'inventeur est Monsieur PI RIM et qui sont notamment listées dans la première partie de la description.

Claims

REVENDICATIONS
1 . Dispositif de télésurveillance vidéo par téléphone portable (1 , 1 1 0), le téléphone comportant un émetteur (2) et un récepteur (4) sous le contrôle d'un organe de contrôle (8) pour connexion à un réseau téléphonique (120), le téléphone comportant des moyens pour capter des signaux sonores BFm et des signaux vidéo Vc au moyen d'un micro (3) débitant les signaux sonores BFm et d'une caméra (6) débitant les signaux vidéo Vc d'images vidéo et, d'autre part, recevoir et restituer des signaux sonores BFe et des signaux vidéo Ve à destination de respectivement un moyen de restitution sonore (5) et d'un écran de restitution vidéo (7), le téléphone comportant une interface d'entrée utilisateur (9) et une source d'alimentation (1 0) autonome, caractérisé en ce que le téléphone comporte en outre un module (20) d'analyse et de diagnostic d'au moins des images vidéo doté d'une mémoire pour le stockage d'au moins un programme applicatif de télésurveillance, une entrée dudit module (20) étant reliée à la sortie de la caméra (6) et recevant les signaux vidéo Vc, le module étant relié par au moins une sortie à l'organe de contrôle (8) pour envoi d'au moins une donnée de diagnostic D audit organe de contrôle (8) en fonction de l'analyse et du diagnostic du signal vidéo par un moyen de calcul (23, 20') programmé (25) par un programme applicatif dudit module, les données de diagnostic D étant des instructions agissant sur l'organe de contrôle.
2. Dispositif selon la revendication 1 , caractérisé en ce que le module d'analyse et de diagnostic reçoit en outre en entrée les signaux sonores BFm et que le module produit des données de diagnostic D également en fonction de l'analyse et du diagnostic des signaux sonores.
3. Dispositif selon la revendication 1 ou 2, caractérisé en ce que les instructions agissant sur l'organe de contrôle sont une ou plusieurs actions choisies non limitativement dans la liste suivante : réveil d'organes mis en veille du téléphone, mise en veille d'organes du téléphone, appel d'un numéro sur le réseau, transmission de sons enregistrés, transmission de sons en direct, transmission d'un message court, transmission d'une séquence vidéo en direct, transmission d'une séquence vidéo enregistrée, transmission d'une analyse vidéo, transmission d'un diagnostic vidéo, transmission de données compatible multimédia pour réseau
INTERNET, dialogue entre le téléphone et le numéro appelé, dans le cas d'utilisation d'un périphérique de positionnement, commande dudit périphérique par des instructions de positionnement en provenance du réseau, fin d'appel.
4. Dispositif selon la revendication 1 , 2 ou 3, caractérisé en ce que le module d'analyse et de diagnostic comporte une mémoire reprogrammable pour le programme
(25) du moyen de calcul (23, 20').
5. Dispositif selon la revendication 4, caractérisé en ce que le module d'analyse et de diagnostic reçoit en outre des données numériques D de l'organe de contrôle et en ce que le programme du moyen de calcul provient du réseau et est transféré dans la mémoire reprogrammable sous forme de données numériques D.
6. Dispositif selon la revendication 4 ou 5, caractérisé en ce que le module d'analyse et de diagnostic reçoit en outre des données numériques D de l'organe de contrôle, le téléphone comportant en outre un lecteur de carte à puce lisible par l'organe de contrôle et en ce que le programme du moyen de calcul provient de la carte à puce et est transféré dans la mémoire reprogrammable sous forme de données numériques D.
7. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que le module d'analyse et de diagnostic comporte un module d'acquisition et de mémorisation d'images vidéo (21 ) et un moyen de détection sonore (22) pour interfaçages avec les signaux vidéo et sonores, un moyen de calcul (23) du type micro-processeur ou processeur de signal numérique, la mémoire pour le programme applicatif (25) et une unité de dialogue (24) pour interfaçage avec l'organe de contrôle (8).
8. Dispositif selon l'une quelconque des revendications 1 à 6, caractérisé en ce que le module d'analyse et de diagnostic comporte au moins une unité de traitement spatial et temporel (53) et un ensemble d'unités de calcul d'histogramme (51 aoo -•• 51 a33) dont la configuration matérielle et fonctionnelle est sous la dépendance du programme applicatif.
9. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que le module (20) d'analyse et de diagnostic est un bloc IP intégrable dans un circuit électronique.
10. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que le téléphone (1 , 1 10) est disposé sur un périphérique de positionnement (100, 106) permettant au moins d'orienter ledit téléphone dans l'espace selon des instructions de positionnement (OM) provenant du téléphone, lesdites instructions de positionnement étant produites par le module (20) d'analyse et de diagnostic.
1 1 . Dispositif selon la revendication 10, caractérisé en ce que le périphérique de positionnement comporte un premier support (100) dans lequel est disposé le téléphone, le premier support (100) étant lui-même disposé dans un second support (1 06), le premier et le second support étant articulés entre eux par au moins un moteur (104, 105) commandé par un circuit de commande (103) recevant les instructions de positionnement (OM).
12. Dispositif selon la revendication 1 1 , caractérisé en ce que le second support comporte deux moteurs (104, 105) dont les deux rotors sont disposés selon deux axes sensiblement perpendiculaires entre-eux, le circuit de commande (1 03) et un chargeur destiné à la recharge de la source d'alimentation (10) autonome du téléphone.
13. Dispositif selon la revendication 10, 1 1 ou 12, caractérisé en ce que le périphérique de positionnement dudit téléphone permet en outre de déplacer dans l'espace ledit téléphone selon des instructions de positionnement (OM).
14. Dispositif selon l'une quelconque des revendications 10 à 132, caractérisé en ce qu'en outre des instructions de positionnement proviennent du réseau.
15. Dispositif selon l'une quelconque des revendications 10 à 14, caractérisé en ce que les instructions de positionnement (OM) sont transmises au dispositif périphérique de positionnement (100, 106) par l'intermédiaire d'un connecteur du téléphone comportant une liaison de transmission de données série.
16. Procédé d'exploitation d'un dispositif de télésurveillance vidéo par téléphone portable (1 , 1 10), le téléphone comportant un émetteur (2) et un récepteur (4) sous le contrôle d'un organe de contrôle (8) pour connexion à un réseau téléphonique (120), le téléphone pouvant, d'une part, capter et transmettre des signaux sonores BFm et des signaux vidéo Vc provenant respectivement d'un micro (3) produisant les signaux sonores BFm et d'une caméra (6) produisant les signaux vidéo Vc d'images vidéo et, d'autre part, recevoir et restituer des signaux sonores BFe et des signaux vidéo Ve à destination de respectivement un moyen de restitution sonore (5) et d'un écran de restitution vidéo (7), le téléphone comportant une interface d'entrée utilisateur (9) et une source d'alimentation (10) autonome, dans lequel des images provenant de la caméra (6) sont transmises à un appareil récepteur (1 30) relié au réseau (120) et pouvant visualiser les images vidéo, caractérisé en ce que l'on met en œuvre un dispositif selon l'une quelconque des revendications précédentes et dans lequel le téléphone comporte en outre un module (20) d'analyse et de diagnostic d'au moins des images vidéo doté d'une mémoire pour le stockage d'au moins un programme applicatif de télésurveillance, une entrée dudit module (20) étant reliée à la sortie de la caméra (6) et recevant les signaux vidéo Vc, le module étant relié par au moins une sortie à l'organe de contrôle (8) pour envoi d'au moins une donnée de diagnostic D audit organe de contrôle (8) en fonction d'une décision résultant de l'analyse et du diagnostic du signal vidéo par un moyen de calcul (23, 20') programmé (25) par un programme applicatif dudit module, les données de diagnostic D étant des instructions agissant sur l'organe de contrôle et en ce que la connexion à l'appareil récepteur résulte de la décision produite par le module d'analyse et de diagnostic.
17. Procédé selon la revendication 16, caractérisé en ce que le récepteur (130) est un téléphone portable ou filaire.
18. Procédé selon la revendication 16, caractérisé en ce que le récepteur est un moyen informatique pouvant visualiser des données compatible multimédia pour réseau INTERNET, un serveur connecté sur le réseau (120) et disposé entre le téléphone (1 , 1 10) et le récepteur (130) assurant l'interface entre les données du téléphone (1 , 1 10) et le réseau INTERNET.
19. Application du procédé d'exploitation de l'une quelconque des revendications 16, 17 ou 18 dans lequel on surveille à distance un nourrisson, le programme applicatif permettant au moins l'analyse et le diagnostic des mouvements du nourrisson et la connexion au récepteur lorsque des mouvements sont diagnostiqués.
20. Réseau public de télésurveillance, caractérisé en ce qu'il est constitué par un réseau de téléphones portables comportant une centrale de transmission, par ce réseau, de programmes applicatifs de télésurveillance pour dispositif de télésurveillance vidéo par téléphone selon l'une quelconque des revendications 1 à 15, programmes aptes à être téléchargés par ceux-ci.
PCT/FR2004/050005 2003-01-08 2004-01-07 Dispositif de telesurveillance video par telephone portable, procede d'exploitation, application et reseau de telesurveillance WO2004066590A2 (fr)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006500169A JP2006516077A (ja) 2003-01-08 2004-01-07 携帯電話操作式のテレビ遠隔監視装置、操作方法、利用、及び、遠隔監視ネットワーク
EP04700470A EP1584175A2 (fr) 2003-01-08 2004-01-07 Dispositif de telesurveillance video par telephone portable, procede d'exploitation, application et reseau de telesurveillance

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0300165A FR2849738B1 (fr) 2003-01-08 2003-01-08 Dispositif de telesurveillance video par telephone portable, procede d'exploitation, applicable et reseau de telesurveillance
FR03/00165 2003-01-08

Publications (3)

Publication Number Publication Date
WO2004066590A2 true WO2004066590A2 (fr) 2004-08-05
WO2004066590A3 WO2004066590A3 (fr) 2004-09-16
WO2004066590A8 WO2004066590A8 (fr) 2005-04-07

Family

ID=32524764

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR2004/050005 WO2004066590A2 (fr) 2003-01-08 2004-01-07 Dispositif de telesurveillance video par telephone portable, procede d'exploitation, application et reseau de telesurveillance

Country Status (4)

Country Link
EP (1) EP1584175A2 (fr)
JP (1) JP2006516077A (fr)
FR (1) FR2849738B1 (fr)
WO (1) WO2004066590A2 (fr)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1890468A1 (fr) * 2006-08-17 2008-02-20 Vodafone Holding GmbH Procédé, babyphone sans fil et système pour apparier un babyphone sans fil et un dispositif électronique
US8489065B2 (en) 2011-05-03 2013-07-16 Robert M Green Mobile device controller application for any security system
US9035771B2 (en) 2013-01-31 2015-05-19 Wal-Mart Stores, Inc. Theft detection system
US9225527B1 (en) 2014-08-29 2015-12-29 Coban Technologies, Inc. Hidden plug-in storage drive for data integrity
US9307317B2 (en) 2014-08-29 2016-04-05 Coban Technologies, Inc. Wireless programmable microphone apparatus and system for integrated surveillance system devices
US10152859B2 (en) 2016-05-09 2018-12-11 Coban Technologies, Inc. Systems, apparatuses and methods for multiplexing and synchronizing audio recordings
US10165171B2 (en) 2016-01-22 2018-12-25 Coban Technologies, Inc. Systems, apparatuses, and methods for controlling audiovisual apparatuses
US10370102B2 (en) 2016-05-09 2019-08-06 Coban Technologies, Inc. Systems, apparatuses and methods for unmanned aerial vehicle
US10789840B2 (en) 2016-05-09 2020-09-29 Coban Technologies, Inc. Systems, apparatuses and methods for detecting driving behavior and triggering actions based on detected driving behavior

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2005297088A1 (en) * 2004-10-22 2006-04-27 Easa Taheri Oskouei Mobile telephone camera system
KR100785647B1 (ko) * 2005-02-11 2007-12-14 비디에이터 엔터프라이즈 인크 휴대 단말기를 이용한 원격 모니터링 방법 및 그 시스템
FR2909504B1 (fr) * 2006-12-05 2009-04-24 Thierry Chevalier Procede et dispositif pour la mise en relation de personnes a distance
US11792499B2 (en) * 2021-10-21 2023-10-17 Raytheon Company Time-delay to enforce data capture and transmission compliance in real and near real time video

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200172315Y1 (ko) * 1997-03-26 2000-04-01 김기일 비상 경보 및 음성과 영상 획득 기능을 가진 휴대폰
FI103001B (fi) * 1997-06-13 1999-03-31 Nokia Corp Menetelmä lähetettävän kuvan muodostamiseksi päätelaitteessa ja päätel aite
EP1170953A3 (fr) * 2000-07-03 2002-07-10 Pioneer Corporation Téléphone portable, système de surveillance à distance, terminal d'information portable et son procédé d'utilisation
JP2002057808A (ja) * 2000-08-09 2002-02-22 Nec Corp 携帯電話機及びそれに用いる遠隔制御方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1890468A1 (fr) * 2006-08-17 2008-02-20 Vodafone Holding GmbH Procédé, babyphone sans fil et système pour apparier un babyphone sans fil et un dispositif électronique
EP2259560A1 (fr) * 2006-08-17 2010-12-08 Vodafone Holding GmbH Procédé, babyphone sans fil et système pour apparier un babyphone sans fil et un dispositif électronique
US8489065B2 (en) 2011-05-03 2013-07-16 Robert M Green Mobile device controller application for any security system
US9035771B2 (en) 2013-01-31 2015-05-19 Wal-Mart Stores, Inc. Theft detection system
US9225527B1 (en) 2014-08-29 2015-12-29 Coban Technologies, Inc. Hidden plug-in storage drive for data integrity
US9307317B2 (en) 2014-08-29 2016-04-05 Coban Technologies, Inc. Wireless programmable microphone apparatus and system for integrated surveillance system devices
US10165171B2 (en) 2016-01-22 2018-12-25 Coban Technologies, Inc. Systems, apparatuses, and methods for controlling audiovisual apparatuses
US10152859B2 (en) 2016-05-09 2018-12-11 Coban Technologies, Inc. Systems, apparatuses and methods for multiplexing and synchronizing audio recordings
US10152858B2 (en) 2016-05-09 2018-12-11 Coban Technologies, Inc. Systems, apparatuses and methods for triggering actions based on data capture and characterization
US10370102B2 (en) 2016-05-09 2019-08-06 Coban Technologies, Inc. Systems, apparatuses and methods for unmanned aerial vehicle
US10789840B2 (en) 2016-05-09 2020-09-29 Coban Technologies, Inc. Systems, apparatuses and methods for detecting driving behavior and triggering actions based on detected driving behavior

Also Published As

Publication number Publication date
FR2849738A1 (fr) 2004-07-09
JP2006516077A (ja) 2006-06-15
EP1584175A2 (fr) 2005-10-12
WO2004066590A8 (fr) 2005-04-07
WO2004066590A3 (fr) 2004-09-16
FR2849738B1 (fr) 2005-03-25

Similar Documents

Publication Publication Date Title
US11158067B1 (en) Neighborhood alert mode for triggering multi-device recording, multi-camera locating, and multi-camera event stitching for audio/video recording and communication devices
US10984641B2 (en) Parcel theft deterrence for A/V recording and communication devices
US11532219B2 (en) Parcel theft deterrence for A/V recording and communication devices
US10885396B2 (en) Generating composite images using audio/video recording and communication devices
US20180233010A1 (en) Neighborhood alert mode for triggering multi-device recording, multi-camera motion tracking, and multi-camera event stitching for audio/video recording and communication devices
US10555393B1 (en) Face recognition systems with external stimulus
US11393108B1 (en) Neighborhood alert mode for triggering multi-device recording, multi-camera locating, and multi-camera event stitching for audio/video recording and communication devices
US11195408B1 (en) Sending signals for help during an emergency event
CN103918247B (zh) 基于背景环境的智能手机传感器逻辑
EP1584175A2 (fr) Dispositif de telesurveillance video par telephone portable, procede d'exploitation, application et reseau de telesurveillance
US10511810B2 (en) Accessing cameras of audio/video recording and communication devices based on location
US20070090180A1 (en) Machine vision system for enterprise management
US10212778B1 (en) Face recognition systems with external stimulus
US11659144B1 (en) Security video data processing systems and methods
WO2014012824A1 (fr) Procede et systeme de reconstruction de trajectoire 3d en temps reel
WO2008107138A1 (fr) Procédé permettant de déterminer automatiquement une probabilité de capture d'image au moyen d'un terminal en utilisant des données contextuelles
US11302156B1 (en) User interfaces associated with device applications
EP2440947A1 (fr) Geolocalisation d'une station mobile d'un reseau de telephonie sans fil
US11069210B2 (en) Selecting a video frame for notification using audio/video recording and communication devices
FR3038770A1 (fr) Systeme de surveillance de l'etat de vigilance d'un operateur
WO2008127235A2 (fr) Système de vision artificielle destiné à la gestion d'entreprise
WO2020065550A1 (fr) Dispositif de contrôle de boite aux lettres connectée
US10735696B1 (en) Backup doorbell communication system and method
Shaout et al. State of the Art-Smart Doorbell Systems
FR3088458A1 (fr) Procede de reconnaissance et de description contextuelles d'un objet d'interet pour un utilisateur deficient visuel, dispositif mettant en oeuvre ledit procede

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A2

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): BW GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
CFP Corrected version of a pamphlet front page
CR1 Correction of entry in section i

Free format text: IN PCT GAZETTE 32/2004 ADD "DECLARATION UNDER RULE 4.17: - OF INVENTORSHIP (RULE 4.17(IV)) FOR US ONLY."

WWE Wipo information: entry into national phase

Ref document number: 2004700470

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2006500169

Country of ref document: JP

WWP Wipo information: published in national office

Ref document number: 2004700470

Country of ref document: EP

WWW Wipo information: withdrawn in national office

Ref document number: 2004700470

Country of ref document: EP