[go: up one dir, main page]

WO2004030347A1 - 撮像装置および方法 - Google Patents

撮像装置および方法 Download PDF

Info

Publication number
WO2004030347A1
WO2004030347A1 PCT/JP2003/009633 JP0309633W WO2004030347A1 WO 2004030347 A1 WO2004030347 A1 WO 2004030347A1 JP 0309633 W JP0309633 W JP 0309633W WO 2004030347 A1 WO2004030347 A1 WO 2004030347A1
Authority
WO
WIPO (PCT)
Prior art keywords
image data
compression
imaging
unit
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2003/009633
Other languages
English (en)
French (fr)
Inventor
Chisato Yoshida
Osamu Date
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to US10/496,890 priority Critical patent/US8736687B2/en
Priority to EP03798370.7A priority patent/EP1549053B1/en
Priority to KR1020047007859A priority patent/KR100933590B1/ko
Priority to EP18192408.5A priority patent/EP3435656A1/en
Application filed by Sony Corp filed Critical Sony Corp
Publication of WO2004030347A1 publication Critical patent/WO2004030347A1/ja
Anticipated expiration legal-status Critical
Priority to US12/291,581 priority patent/US8054334B2/en
Priority to US14/055,189 priority patent/US9374523B2/en
Priority to US14/255,330 priority patent/US10091413B2/en
Priority to US15/664,741 priority patent/US10375297B2/en
Priority to US16/425,562 priority patent/US20190313015A1/en
Ceased legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00347Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with another still picture apparatus, e.g. hybrid still picture apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0015Control of image communication with the connected apparatus, e.g. signalling capability
    • H04N2201/0025Adapting an image communication to a non-image communication or vice versa, e.g. data rate-conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0015Control of image communication with the connected apparatus, e.g. signalling capability
    • H04N2201/0027Adapting to communicate with plural different types of apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034Details of the connection, e.g. connector, interface
    • H04N2201/0037Topological details of the connection
    • H04N2201/0041Point to point
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034Details of the connection, e.g. connector, interface
    • H04N2201/0048Type of connection
    • H04N2201/0049By wire, cable or the like
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0065Converting image data to a format usable by the connected apparatus or vice versa
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0096Portable devices

Definitions

  • the present invention relates to an imaging apparatus and method, and more particularly to an imaging apparatus and method capable of supplying image data having an optimal data amount to another apparatus.
  • imaging devices such as digital video cameras have become widespread, and the resolution of cameras such as CCDs (Charge Coupled Devices) mounted on the imaging devices has been increasing. Also, as represented by digital video cameras with a communication function and mobile phones having an imaging function, imaging devices are becoming multifunctional.
  • CCDs Charge Coupled Devices
  • a digital video camera having a USB (Universal Serial Bus) communication function transfers moving image data obtained by imaging a subject to another device such as a personal computer via a USB cable. , Can be supplied in real time.
  • USB Universal Serial Bus
  • the data amount is always reduced in advance so that the digital video camera of the source compresses the moving image data to be supplied, so that the moving image data can be normally supplied even in low-speed communication.
  • the first data and the second data obtained by compressing the first data are prepared, and when the communication speed is high, the first data is supplied. When the communication speed is low, the first data is supplied.
  • There is a method of supplying second data having a smaller data amount than the first data for example, Japanese Patent Application Laid-Open No. 2002-99393 (page 412, FIG. 4)). See).
  • Japanese Patent Application Laid-Open No. 2002-99393 page 412, FIG. 414
  • the storage area for storing the data to be supplied increases, and it is not suitable for supplying moving image data obtained by imaging a subject in real time. .
  • the present invention has been made in view of such a situation, and is capable of supplying image data having an optimal data amount to another device.
  • a first imaging apparatus includes: an imaging unit that captures an image obtained by capturing an image of a subject as image data; and a communication device that is connected via a network to image data captured by an imaging process performed by the imaging unit. Transmitting means for transmitting the image data, and adjusting means for adjusting the data amount of the image data captured by the imaging means according to the communication speed of the image data transmitted by the transmitting means.
  • a plurality of transmitting means and a selecting means for selecting an arbitrary transmitting means from the plurality of transmitting means, wherein the adjusting means adjusts the communication speed of the image data transmitted from the transmitting means selected by the selecting means.
  • the data amount of the image data captured by the imaging means can be adjusted.
  • the transmitting means may perform an adjustment to reduce the amount of image data taken by the imaging means when transmitting other data.
  • an imaging step of capturing an image obtained by imaging a subject as image data, and image data captured by an imaging process in the imaging step are connected via a network.
  • Transmission that controls transmission to communication devices It is characterized by including a control step and an adjusting step of adjusting the data amount of the image data captured by the processing of the imaging step according to the communication speed of the image data controlled by the processing of the transmission control step.
  • the method further includes a selecting step of selecting, from the plurality of transmitting units that transmit the image data, a transmitting unit that controls transmission by the processing of the transmitting control step.
  • the adjustment step adjusts the data amount of the image data captured by the imaging step processing according to the communication speed of the image data transmitted from the transmission unit selected by the selection step processing. be able to.
  • the transmission control step further controls transmission of data other than the image data, and the adjusting step controls the transmission control step to transmit other data. Adjustments can be made to reduce the amount of data.
  • a second imaging apparatus includes: an imaging unit that captures an image obtained by imaging a subject as image data; a compression unit that compresses the image data; and a compressed image data generated by a compression process performed by the compression unit. Transmitting means for transmitting to a communication device connected via a network, and adjusting means for adjusting a compression ratio in a compression process by the compressing means according to a communication speed of the compressed image data transmitted by the transmitting means. And features.
  • a plurality of transmitting means and a selecting means for selecting an arbitrary transmitting means from the plurality of transmitting means, wherein the adjusting means adjusts the communication speed of the image data transmitted from the transmitting means selected by the selecting means.
  • the compression ratio in the compression processing by the compression means can be adjusted.
  • a second imaging method includes: an imaging step of capturing an image obtained by imaging a subject as image data; a compression step of compressing the image data; and a compressed image data generated by a compression process in the compression step.
  • the method further includes a selecting step of selecting, from the plurality of transmitting units that transmit the compressed image data, a transmitting unit that controls transmission by the processing of the transmitting control step, wherein the transmitting control step is selected by the processing of the selecting step.
  • the transmission in the transmission unit is controlled, and the adjusting step adjusts a compression ratio in the compression processing in the compression step according to a communication speed of the compressed image data transmitted from the transmission unit selected in the processing in the selection step.
  • the transmission control step further controls the transmission of data other than the compressed image data, and the adjusting step includes a step of controlling the transmission control step to transmit other data. Adjustments can be made to increase the rate.
  • a third imaging apparatus includes: an imaging unit that captures an image obtained by imaging a subject as image data; a compression unit that compresses image data; and a compressed image data generated by a compression process performed by the compression unit.
  • a transmitting means for transmitting to a communication device connected via a network; a data amount of image data captured by the imaging means in accordance with a communication speed of the compressed image data transmitted by the transmitting means; Adjusting means for adjusting the compression ratio in the processing.
  • the data amount of the image data taken in by the imaging means and the compression ratio in the compression processing by the compression means can be adjusted.
  • the transmitting means further transmits other data other than the image data, and the adjusting means adjusts the amount of image data captured by the imaging means when the transmitting means transmits other data; and a compressing means. And an adjustment to increase the compression ratio in the compression processing by.
  • a third imaging method includes: an imaging step of capturing an image obtained by imaging a subject as image data; a compression step of compressing the image data; and a compressed image data generated by a compression process in the compression step.
  • the method is characterized by including an adjusting step of adjusting a data amount of data and a compression ratio in a compression process in the compression step.
  • the method further includes a selecting step of selecting, from the plurality of transmitting units that transmit the compressed image data, a transmitting unit that controls transmission by the processing of the transmitting control step, wherein the transmitting control step is selected by the processing of the selecting step.
  • the transmission step is controlled by the transmission unit, and the adjusting step is the amount of image data captured by the imaging step process according to the communication speed of the compressed image data transmitted from the transmission unit selected by the selection step process. And the compression ratio in the compression processing in the compression step can be adjusted.
  • the transmission control step further controls transmission of data other than the image data, and the adjusting step controls the transmission control step to transmit other data. Adjustment to reduce the amount of data and adjustment to increase the compression ratio in the compression processing in the compression step can be performed.
  • an image obtained by imaging a subject is captured as image data, and the image data captured by the imaging process is connected to a communication device connected via a network. Sent and sent The amount of captured image data is adjusted according to the communication speed of the image data.
  • an image obtained by imaging a subject is captured and compressed as image data, and the generated compressed image data is transmitted to a communication device connected via a network.
  • the compression rate in the compression process is adjusted according to the communication speed of the compressed image data to be transmitted.
  • an image obtained by imaging a subject is captured as image data and compressed, and the generated compressed image data is transmitted through a communication network connected via a network.
  • the amount of image data to be captured and the compression ratio in the compression process are adjusted according to the communication speed of the compressed image data to be transmitted to the device.
  • FIG. 1 is a diagram illustrating a basic configuration example of a mobile phone having a camera function to which the present invention is applied.
  • FIG. 2 is a schematic diagram showing a main configuration example inside the CCD of FIG.
  • FIG. 3 is a schematic diagram showing an example of connection between the vertical control signals V1 to V8 of FIG. 2 and a part of the vertical transfer register.
  • FIG. 4 is a schematic diagram illustrating an example of a state of communication using USB.
  • FIG. 5 is a diagram illustrating a detailed configuration example of the wireless communication unit in FIG.
  • FIG. 6A is a schematic diagram illustrating a configuration example of a system that displays image data captured by the mobile phone in FIG.
  • FIG. 6B is a schematic diagram illustrating a configuration example of a system that displays image data captured by the mobile phone in FIG.
  • FIG. 7 is a flowchart for explaining the mode setting process for capturing moving image data in FIGS. 6A and 6B.
  • FIG. 8 is a flowchart illustrating the image capturing control process.
  • FIG. 9 is a schematic diagram showing how the data amount of image data is reduced.
  • FIG. 10 is a flowchart illustrating the image data compression processing.
  • FIG. 11A is a schematic diagram illustrating another configuration example of a system that displays image data captured by the mobile phone in FIG. 1.
  • FIG. 11B is a schematic diagram illustrating another configuration example of a system that displays image data captured by the mobile phone in FIG.
  • FIG. 12 is a flowchart illustrating the mode setting process in the cases of FIGS. 11A and 11B.
  • FIG. 13 is a flowchart illustrating a mode setting process when the moving image capturing mode is set based on a request from the receiver of the moving image data.
  • FIG. 14A is a schematic diagram showing still another configuration example of the system for displaying image data captured by the mobile phone in FIG.
  • FIG. 14B is a schematic diagram illustrating yet another configuration example of the system that displays image data captured by the mobile phone in FIG.
  • FIG. 15 is a flowchart illustrating the mode setting process in the case of FIGS. 14A and 14B.
  • FIG. 16A is a schematic diagram showing still another configuration example of a system for displaying image data captured by the mobile phone in FIG.
  • FIG. 16B is a schematic diagram showing still another configuration example of the system for displaying image data captured by the mobile phone in FIG.
  • Figure 1 7 is based on a request from the PDA of FIG. 1 6 A and FIG. 1 6 B, c Figure 1 8 Furochiya an you want to explain the mode setting process at the time of capturing a still image in high quality mode, 16 is a flowchart illustrating a mode setting process when still image data is transferred in the cases of FIGS. 16A and 16B.
  • FIG. 19 is a schematic diagram showing still another configuration example of the system for displaying image data captured by the mobile phone in FIG.
  • FIG. 20 is a timing chart illustrating an example of the processing flow of each device in the case of FIG.
  • FIG. 21 is a diagram illustrating a configuration example of a CMOS sensor.
  • FIG. 22 is a schematic diagram showing how the amount of image data is reduced using the CMOS sensor of FIG. BEST MODE FOR CARRYING OUT THE INVENTION
  • FIG. 1 is a diagram illustrating a basic configuration example of a mobile phone having a force function to which the present invention is applied.
  • a subject (not shown) is incident on a CCD (Charge Coupled Device) 12 via a lens unit 11 of the mobile phone 1 including a lens, an aperture mechanism, and the like, and is photoelectrically converted.
  • CCD Charge Coupled Device
  • the video signal output from the CCD 12 is supplied to a CDS circuit (Correlated Double Sampling circuit) 13.
  • the CDS circuit 14 performs correlated double sampling on the input signal to remove noise components, and converts the signal into an AGC circuit (Automatic Gain).
  • Control circuit Output to 14.
  • the AGC circuit 14 After adjusting the gain of the input signal, the AGC circuit 14 outputs the signal to an A / D (Analog / Digital) converter 15.
  • the A / D converter 15 converts the input analog signal into a digital signal and outputs the digital signal to a DSP (Digital Signal Processor) 16.
  • the DSP 16 generates control signals such as AF (Auto Focus), AE (Auto Exposure), and AWB (Auto White Balance) based on the input signal by the built-in image adjustment processing unit 21, and the control signal Is supplied to a CPU (Central Processing Unit) 31 via a bus 30.
  • the DSP 16 compresses or further expands the input image signal by the built-in image compression / decompression processing unit 22. At that time, the image compression / decompression processing unit 22
  • the image data compressed by the image compression / decompression processing unit 22 is supplied to a RAM (Random Access Memory) 33 or the like via a bus 30.
  • the CPU 31 controls each unit according to a program stored in a ROM (Read Only Memory) 32 or a program loaded from the storage unit 35 to the RAM 33 and executes various processes. Or
  • the RAM 33 also appropriately stores data necessary for the CPU 31 to execute various processes.
  • the CPU 31 is also connected to an external operation input unit 34 that receives a user operation.
  • the external operation input unit 34 is composed of various buttons such as a shirt button and a menu button, a dial, a knob, a touch panel (all not shown), and the like. , And supplies the instruction information to the CPU 31.
  • the CPU 31 executes various processes based on the instruction information.
  • the CPU 31, ROM 32, and RAM 33 are interconnected via a bus 30.
  • the bus 30 also includes a flash memory 35 composed of a nonvolatile semiconductor memory, a display control unit 36 for controlling an image to be displayed on the LCD 37, a memory to which a memory card 39 and the like are mounted.
  • a wireless communication unit 42 that is controlled by the CPU 31 and supplies the image data captured by the CCD 12 to another device is connected.
  • the display control unit 36 has a built-in VRAM (Video Random Access Memory) not shown.
  • the display control unit 36 stores the image data captured from the CCD 12 in the built-in VRAM, and stores the image corresponding to the image data stored in the VRAM and other memories (RAM 33, flash memory 3 5. Display the image corresponding to the image data stored in the memory card 39 connected to the memory I / F 38) on the LCD 37.
  • VRAM Video Random Access Memory
  • a drive 43 is connected to the bus 30 via an interface (not shown), and the magnetic disk 44 mounted on the drive 43, the optical disk 45, the magneto-optical disk 46, or combination Yuta program read from the semiconductor memory 4 7, c is Instruments Tonore the RAM 3 3 and the flash memory 35 or the like also read from the memory card 3 9 which is suitably mounted in the memory I / F 3 8
  • the issued computer program is also installed in the RAM 33, the flash memory 35, or the like as necessary.
  • the CPU 31 is obtained by executing user's instruction information input from the external operation input unit 34, control information supplied from the image adjustment processing unit 21, or various programs.
  • the operation of the CDS circuit 13, AGC circuit 14, and A / D converter 15 is controlled based on information and the like.
  • a transmission method for transmitting the obtained image data to another device is selected according to an instruction from the user input from the external operation input unit 34. That is, in the example of FIG. 1, the user can freely select whether to transmit image data via the USB connector 41 or the wireless communication unit 42 from the external operation input unit 34.
  • the CPU 31 controls the operation of the CCD 12 based on the selected communication method.
  • the CPU 31 transmits, for example, information such as the communication speed of the wired communication by the USB controller 40, the communication speed of the wireless communication by the wireless communication unit 42, a request supplied from the device of the communication partner, and an external operation.
  • the TG 51 which controls the operation of the CCD 12 based on the information such as the request input from the input unit 34, is controlled to adjust the amount of image data taken in from the CCD 12, It controls the compression ratio of the image data in the compression processing by the image compression / decompression processing unit 22 of the DSP 16 via 30 and adjusts the amount of image data to be transferred.
  • the CPU 31 controls an iris shutter driver 53 that controls the operation of the lens unit 11 to adjust the shutter speed and adjust the aperture mechanism.
  • the TG 51 and the V driver 52 are connected to the CCD l 2, and are controlled by the CPU 31 via the serial control bus to control the operation of the CCD 12.
  • the TG 51 generates a horizontal clock signal for driving the horizontal transfer register 63 of the CCD 12 described later with reference to FIG. 2 and other control signals based on the control signal supplied from the CPU 31. 1 2 and V driver 52
  • the V driver 52 controls the vertical transfer registers 62-1 to 62_n of the CCD 12 as described later with reference to FIG. This is a vertical register driving driver that generates control signals V 1 to V 8 and supplies them to CCD 12.
  • FIG. 2 is a schematic diagram illustrating an example of a main configuration inside the CCD 12.
  • photodiodes 6 1 — 1-1 to 6 1 n _m which are solid-state imaging devices are arranged in m rows and n columns in the CCD 12, and each photodiode 6 1 1 1 1 To 61-n-m are connected to the vertical transfer registers 62-1 to 62-n for each column.
  • the photodiodes 61-1-1 to 61-nm will be referred to as photodiodes 61 when it is not necessary to separately describe each of them.
  • the vertical transfer registers 62-1 to 62-n are also referred to as vertical transfer registers 62 when there is no need to separately describe them.
  • the photodiodes 6 1-1-1 to 6 1-1-m in the first column from the left are connected to the vertical transfer register 62-1, and the photodiodes 6 1-2-1 to 6 in the second column 6 1—2— m is connected to the vertical transfer register 6 2—2.
  • the photodiodes in the third and subsequent columns are connected to the vertical transfer register 62-2, and the photodiodes in the nth column 6 1-n-1 to 6 1-n-m are the vertical transfer registers 6 2-n Connected to.
  • the vertical transfer register 62-1 is composed of a plurality of registers, each of which can hold the charge accumulated in the photodiode 61-1-1 to 61-1-m connected to each register. it can. Also, the vertical transfer register 6 2-1 Connected to the register 63, the stored electric charge can be moved one stage at a time and supplied to the horizontal transfer register 63 sequentially.
  • each of the vertical transfer registers 6 2-1 includes: One of the vertical control signals V1 to V8 is supplied.
  • the vertical transfer register 62-1 is controlled by the vertical control signals V1 to V8, and executes the above-described processing such as charge retention and transfer.
  • the vertical control signals VI and VI are output from the connected photodiodes 6 1 -1-1-1 to 61 -1-1 m.
  • the charge stored in the photodiode specified by 3, 5, and 7 is transferred to the vertical transfer register 62-1. Then, the transferred charges are moved one step at a time downward in the figure under the control of the vertical control signals V 1 to V 8, and are sequentially transferred to the horizontal transfer register 63.
  • the vertical transfer registers 62-2 to 62-n have the same configuration and operate in the same manner as the vertical transfer register 62-1, and a description thereof will be omitted.
  • FIG. 3 is a schematic diagram showing a connection example of the vertical control signals V1 to V8 and a part of the vertical transfer register 62.
  • a photodiode 61 is connected to each of the two stages of each register constituting the vertical transfer register 62, and the vertical control is applied to the register to which the photodiode 61 is connected.
  • the signal V'l, V3, V5, or V7 is connected to each other, and the other registers are connected to V2, V4, V6, or V8, respectively.
  • the vertical control signals V5 and V5 of the photodiodes 61 in which the charges are accumulated are output. Only the charge stored in the photodiode 61 of FIG. 3 to which V and V 7 are input is transferred to the vertical transfer register 62, and the charge stored in the photodiode 61 of FIG. 3B is transferred. Is discharged without That is, in this case, the charge accumulated in one photodiode 61 for every five stages is taken in.
  • the horizontal transfer register 63 is composed of a plurality of registers, and each of the registers transfers the charge supplied from the connected vertical transfer register 62-1 to 62-n to the photodiode 1 It can be held individually. In addition, the horizontal transfer register 63 can move the stored electric charge one stage at a time and supply the electric charge to the outside of the CCD 12 sequentially.
  • the horizontal transfer register 63 is connected to a discharge drain and a column selection discharge gut (both not shown) for selecting whether or not to discharge the electric charge at the discharge drain. It is possible to select the charge to be transferred to the outside of (1) and (2).
  • the CPU 31 controls the CCD 12 to adjust the amount of image data to be captured.
  • FIG. 4 is a schematic diagram illustrating an example of a state of communication using USB.
  • the communicating terminal is divided into a host that controls the communication and a device that is the communication partner.
  • the client software 71 executed by the CPU 31 of FIG. 1 and the like, and the USB system executed by the USB controller 40 of FIG.
  • the communication is instructed to the system software 72, and the USB system software 72 controls the communication via the USB bus I / F 73 which is a physical interface.
  • a function 74 which is a device-specific function, instructs communication to the USB port digital device 75
  • the USB port digital device 75 is a USB bus interface 7 which is a physical interface. Control communication through 6. That is, the client software 71 and the function 74 execute related processing based on the information transmitted and received by the USB communication, and the USB system software 72 and the USB logical device 75 control the USB communication, The requested information is exchanged via USB bus I / Fs 73 and 76.
  • the USB controller 40 in Fig. 1 supports USB version 2.0, which is a communication standard, and communicates at a maximum transfer rate of 48 OMbps.
  • the other device connected to the USB connector 41 via a USB cable is compatible with USB version 1.1, and has a maximum transfer speed of 12 Mbps or less. If the transmission speed is 1.5 Mbps, communication is performed according to the transfer speed. Further, the information is supplied to the CPU 31, and the CPU 31 adjusts the data amount of the image data taken in from the CCD 12 and adjusts the compression ratio of the image data based on the information. I do.
  • the USB controller 40 measures an actual transfer speed that fluctuates due to various loads and the like, and supplies the information to the CPU 31 as described later. Based on the information, the CPU 31 adjusts the data amount of the image data taken in from the CCD 12 or adjusts the compression ratio of the image data.
  • FIG. 5 is a diagram showing a detailed configuration example of the wireless communication unit 42 in FIG.
  • the antenna 81 receives a radio wave from another device, supplies the received signal to the selector 82, and supplies a signal from the selector 82 to the other device by radio wave.
  • the selector 82 converts the signal received from the antenna 81 into, for example, CDMA (Code
  • the demodulated signal is demodulated by a division multiple access method (Division), and the resulting demodulated signal is supplied to the down converter 83.
  • the down-converter 83 converts the carrier frequency of the demodulated signal into a lower frequency, and supplies the demodulated signal to the reception I / F 84.
  • the reception I / F 84 performs processing such as A / D conversion processing on the obtained demodulated signal, and supplies the digital signal to the baseband signal processing 85.
  • the baseband signal processing unit 85 performs a bucket process, an error signal process, and the like based on the standard from the digital signal acquired from the reception I / F 84 to extract reception data and supply the data to the bus 30.
  • a control signal is added to the data acquired via the bus 30, and the data is supplied to the transmission I / F 86.
  • the transmission I / F 86 converts the obtained digital signal into an analog signal and supplies it to the power amplifier 87. In the power amplifier 87, the transmission signal whose output has been increased is output from the antenna 81 via the selector 82.
  • the maximum communication speed in the wireless communication unit 42 differs depending on the communication carrier, communication standard, and the like.
  • the wireless communication unit 42 changes the transfer speed to a communicable speed according to the maximum communication speed of the communication device that is the communication partner.
  • the information is supplied to the CPU 31. Based on the information, the CPU 31 adjusts the data amount of the image data captured by the CCD 12 and adjusts the compression ratio of the image data.
  • the wireless communication unit 42 measures an actual transfer speed fluctuating due to various loads and the like, and supplies the information to the CPU 31 as described later.
  • the CPU 31 adjusts the data amount of the image data taken in from the CCD 12 and adjusts the compression ratio of the image data based on the information.
  • FIG. 6A and 6B are schematic diagrams showing a configuration example of a system for transferring image data captured by the mobile phone 1 of FIG. 1 to another device via a USB cable and displaying the image data.
  • the mobile phone 1 is connected to a PDA (Personal Digital Assistant) via a USB cable 92 connected to a USB connector 41 provided below the mobile phone 1 in the figure. ) 9 Connected to 1.
  • PDA Personal Digital Assistant
  • FIG. 6A the mobile phone 1 is connected to a PDA (Personal Digital Assistant) via a USB cable 92 connected to a USB connector 41 provided below the mobile phone 1 in the figure. ) 9 Connected to 1.
  • moving image data obtained by photoelectrically converting incident light incident on the CCD 12 of FIG.
  • the corresponding moving image is displayed on the LCD 37 provided on the upper front part of the mobile phone 1 in the figure, and is also supplied to the PDA 91 via the USB cable 92. It is displayed on the display provided in front of the PDA 91.
  • the lens unit 11, the LCD 37, and the USB connector 41 may be provided in a location other than the above-described locations of the mobile phone 1.
  • the communication speed between the mobile phone 1 and the PDA 91 is a maximum of 1.5 Mbps.
  • the maximum communication speed between these devices depends on the communication capability of the PDA 91 whose maximum communication speed is lower than that of the mobile phone 1. It will be.
  • the CPU 31 of the mobile phone 1 determines that the maximum possible communication speed in the communication with the PDA 91 is low, and performs control so that the amount of moving image data captured by the CCD 12 becomes small. I do. As a result, moving image data with a small data amount is transferred to the PDA 91, and a low-quality moving image 93 with low image quality is displayed on the display unit of the PDA 91. That is, the CPU 31 controls the CCD 12 so that the amount of data can be transferred normally at the communication speed set by the USB controller 40 according to the maximum communication speed of the PDA 91, Reduce the amount of captured image data. As described above, the mobile phone 1 can supply moving image data to the PDA 1 without causing overflow, dropped frames, etc., even with USB communication at a maximum transfer rate of 1.5 Mbps.
  • the CPU 31 controls the data amount of the moving image data captured by the CCD 12 so as not to decrease, and supplies the captured moving image data to the PDA 91. As a result, a high-quality moving image 94 with high image quality is displayed on the display unit of the PDA 91. As described above, the CPU 31 controls the CCD 12 in accordance with the processing capacity of the apparatus to which the moving image data is supplied, and adjusts the amount of moving image data to be captured.
  • the CPU 31 obtains information on the data supply destination from the USB controller 40, selects a mode for determining the image quality of the moving image data to be captured based on the information, and according to the mode.
  • the CCD 12 and the like are controlled to capture moving image data of which data amount has been adjusted, and the moving image data is supplied to the PDA 91 via the USB cable 92.
  • the CPU 31 When the imaging process is started based on a user's instruction or the like, the CPU 31 first transmits the device information of the PDA 91 including the information on the ability to transfer the moving image data to the USB controller in step S1. Request to the USB controller 40 and determine whether or not it was obtained from the USB controller 40.
  • the CPU 31 sets the mode for capturing moving image data in the CCD 12 in step S2 based on the acquired device information in two modes prepared in advance. Select and set a high image quality mode for transferring image data of a predetermined data amount and a low image quality mode for transferring image data having a smaller data amount than in the high image quality mode.
  • CPU 31 in which the mode has been set advances the process to step S3.
  • step S1 If it is determined in step S1 that the device information has not been obtained, the CPU 31 skips step S2 and proceeds to step S3. In step S3, the CPU 31 determines whether to end the mode setting process, and if not, returns the process to step S1 and repeats the subsequent processes.
  • step S4 If it is determined that the mode setting process is to be ended, the CPU 31 advances the process to step S4, performs an end process, and ends the mode setting process.
  • the CPU 31 that has determined the mode related to the moving image capturing executes the image capturing control processing next.
  • the image capture control process will be described with reference to the flowchart of FIG.
  • step S21 the CPU 31 determines whether or not the current mode for capturing moving images is the high image quality mode. If the CPU 31 determines that the mode is the high image quality mode, the CPU 31 in step S22 controls the CCD 12 and TG 51 in FIG. Generate moving image data.
  • the CPU 31 controls the TG 51 so that the CCD 12 takes in charges from all the photodiodes 61 and outputs one frame of moving image data.
  • step S22 Upon ending the processing in step S22, the CPU 31 advances the processing to step S24.
  • step S21 If it is determined in step S21 that the current mode for capturing moving images is not the high-quality mode (the low-quality mode), the CPU 31 proceeds to step S23 and proceeds to step S23.
  • the CCD 12 and TG 51 are controlled to capture image signals of some pixels and generate low-quality moving image data.
  • the photodiodes 61 In the low image quality mode, when extracting charges for one frame, the photodiodes 61 corresponding to the vertical control signals V5 and V7 shown in FIG. Only the charge accumulated in the photodiode is transferred to the vertical transfer register 62. This reduces the amount of data in the vertical direction by a factor of 5, as shown in FIG.
  • the CCD 12 uses a primary color filter in which R (Red), G (Green), and B (Blue) filters are arranged in a Bayer pattern from the incident light, as shown in Fig. 9.
  • the photodiode 61 corresponds to the row where the photodiode corresponding to the G signal is extracted and the photodiode corresponding to the charge corresponding to the B signal are horizontally adjacent in the figure, and the photodiode corresponds to the R signal.
  • the rows in which the photodiodes from which the corresponding charges are extracted and the photodiodes from which the charges corresponding to the G signals are extracted are arranged alternately in the vertical direction in the figure.
  • the first row from the top in the figure is a row adjacent to the photodiode where the charge corresponding to the G signal is extracted and the photodiode where the charge corresponding to the B signal is extracted.
  • the second row is a row adjacent to the photodiode from which the charge corresponding to the R signal is extracted and the photodiode from which the charge corresponding to the G signal is extracted.
  • the charges in the row A in FIG. 9 are taken in, and the data amount in the vertical direction is reduced to one fifth.
  • the charges transferred to the vertical transfer register 62 are transferred to the horizontal transfer register 63 one by one, as described above.
  • the horizontal transfer register 63 is controlled by the RG signal supplied from the TG 51 to the CCD 12, and discharges charges other than charges in a predetermined column. For example, based on the control of the RG signal, the horizontal transfer register 63 leaves the charge in every fifth row, and discharges the charge in the four rows in between and discharges it from the drain. By operating the horizontal transfer register in this way, the amount of data in the horizontal direction is reduced to one fifth.
  • the CPU 31 takes in charges from a part of the photodiode of the CCD 12 and generates one frame of moving image data.
  • the CPU 31 advances the processing to step S24.
  • step S24 the CPU 31 determines whether to end the image capture control process. If not, the CPU 31 returns the processing to step S21 and repeats the subsequent processing.
  • step S24 If it is determined in step S24 that the image capture control process is to be terminated based on a user input or the like, the CPU 31 performs an end process in step S25 to execute the image capture control process. finish.
  • the moving image data captured as described above can be supplied from the CPU 31 to the USB controller 40 or the like, and can be supplied to the PDA 91 via the USB cable 92.
  • the mobile phone 1 can supply moving image data to the PDA 91 without causing overflow, dropped frames, and the like.
  • the reading method of the photodiode 61 is not limited to the above-described method, and any method may be used as long as the amount of charge read in accordance with the image quality mode is controlled.
  • the CPU 31 may compress the image data before supplying it to the PDA 1.
  • the compression ratio can be changed according to the communication speed, that is, according to the moving image capturing mode. At this time, as described above, the amount of charge read from the CCD 12 does not change according to the image quality mode.
  • step S41 the CPU 31 determines whether or not the current mode is the high image quality mode. If it is determined that the current mode is the high image quality mode, in step S42, the CPU 31 increases the image quality according to the first compression ratio. The high-quality moving image data is compressed, and the process proceeds to step S44.
  • step S41 If it is determined in step S41 that the current mode is not the high-quality mode (low-quality mode), the CPU 31 determines in step S43 that the current mode is the first mode.
  • the low-quality moving image data is compressed by the second compression ratio, which is higher than the compression ratio of, and the process proceeds to step S44.
  • step S44 the CPU 31 determines whether or not to end the image data compression processing, and if not, returns the processing to step S41 and repeats the subsequent processing.
  • step S44 If it is determined in step S44 that the image data compression processing is to be ended for some reason, the CPU 31 performs an end processing in step S45, and then ends the image data compression processing.
  • the CPU 31 compresses the captured moving image data at a compression rate according to the moving image capturing mode, supplies the compressed data to the USB controller 40, etc., and outputs the data to the PDA 9 via the USB cable 92. Can be supplied to one.
  • the mobile phone 1 can supply the moving image data to the PDA 91 without causing overflow, dropped frames, and the like.
  • the moving image capture mode is changed according to the information on the communication speed of the PDA 91 to which the moving image data is supplied.
  • the communication bandwidth of this network 101 may be adjusted according to traffic conditions and the like.
  • the determination of the traffic state is made, for example, in the initial stage of establishing communication between devices, with the communication partner and its Judgment is made by measuring the time until a response is issued from a communication partner in response to a command issued to know the communication capability of the communication partner. For example, as shown in FIG.
  • the CPU 31 of the mobile phone 1 Sets the video capture mode to the high quality mode, generates high quality video data, and supplies it to the PDA 91.
  • the PDA 91 displays a high-quality moving image 94 corresponding to the acquired high-quality moving image data on the display unit.
  • the mobile phone 1 when the network 101 B is a narrow-band network or congested, that is, when high-speed communication is impossible, the mobile phone 1
  • the CPU 31 sets the moving image capturing mode to the low image quality mode, generates moving image data with low image quality and a small amount of data, and supplies the moving image data to the PDA 91.
  • the PDA 91 displays a low-quality moving image 93 corresponding to the obtained low-quality moving image data on the display unit.
  • the CPU 31 controls the USB controller 40 to generate communication information including information on the current communication speed and the like, and acquires the communication information via the bus 30.
  • the CPU 31 determines whether or not the communication information has been obtained, and if it determines that the communication information has been obtained, in step S62, the mode relating to the moving image capturing is determined based on the obtained communication information. Is set, and the process proceeds to step S63.
  • step S61 If it is determined in step S61 that the communication information has not been acquired, the CPU 31 skips step S62 and proceeds to step S63.
  • step S63 the CPU 31 determines whether or not to end the mode setting process, and if determined to end, returns the process to step S61 and repeats the subsequent processes. If it is determined that the mode setting process is to be ended based on a user instruction or the like, the CPU 31 proceeds to step S64, performs the end process, and ends the mode setting process.
  • the CPU 31 can set the mode relating to the moving image capture according to the current communication speed of the USB controller 40. As a result, even when the traffic condition of the network 101 connected to the PDA 91 to which the moving image data is supplied changes, the moving image data can be normally supplied to the PDA 91. Thus, a moving image corresponding to the supplied moving image data can be displayed on the PDA 91 without causing overflow, dropped frames, and the like.
  • the present invention is not limited to this.
  • a communication device such as a relay device that can communicate with the mobile phone 1 and the PDA 91 may be used.
  • the CPU 31 may set a mode relating to capturing of a moving image based on an instruction of the PDA 91 to which the moving image data is supplied.
  • step S81 the CPU 31 controls the USB controller 40 to determine whether or not the image quality specification request has been obtained from the PDA 91, and if it has determined that the request has been obtained, the process proceeds to step S82. Then, based on the acquired image quality designation request, the setting of the mode for capturing moving images is updated, and the process proceeds to step S83.
  • step S81 If it is determined in step S81 that the image quality designation request has not been obtained from the PDA 91, the CPU 31 skips the processing in step S82 and proceeds to step S83.
  • step S83 the CPU 31 controls the USB controller 40 to determine whether or not a specification release request has been obtained from the PDA 91.
  • step S84 the mode setting updated by the process in step S82 is restored, and the process proceeds to step S85.
  • step S83 If it is determined in step S83 that the designation release request has not been obtained, the CPU 31 skips step S84 and proceeds to step S85.
  • step S85 the CPU 31 determines whether or not to end the mode setting process, and if not, returns the process to step S81 and repeats the subsequent processes.
  • the CPU 31 performs an end process in step S86, and then ends the mode setting process.
  • the CPU 31 when the CPU 31 obtains the image quality specification request from the PDA 91 to which the moving image data is supplied, the CPU 31 fixes the requested mode until obtaining the specification release request, and sets according to other conditions. Priority. Then, upon receiving the specification release request, the CPU 31 returns the mode setting to the mode before obtaining the image quality specification request.
  • the CPU 31 can set the mode relating to the moving image capture based on the request from the PDA 91 side.
  • the user of the PDA 91 can specify the image quality of the moving image while checking the moving image displayed on the display unit.
  • the mobile phone 1 can also transmit and receive moving image data to and from other mobile phones by wireless communication using the wireless communication unit 42 as shown in FIG. 14A.
  • the wireless communication unit 42 As shown in B, it is also possible to supply moving image data to the PDA 91 connected to the USB connector 41.
  • the maximum communication speed is 96 OO bps
  • the maximum communication speed is 480 Mbps.
  • the communication speed may change depending on the communication unit used, and the CPU 31 may set the mode according to the communication unit used for supplying the moving image data. .
  • the incident light that has the same configuration as the mobile phone 1 and is incident via the lens unit 11 provided at the upper left of the mobile phone 1A that operates similarly
  • Moving image data obtained by photoelectrically converting the image data in the CCD 12 using a wireless communication at a maximum communication speed of 9600 bps has a configuration similar to that of the mobile phone 1 and operates similarly.
  • the CPU 31 of the mobile telephone 1A sets the mode relating to moving image capturing to the low image quality mode.
  • the CPU 31 of the mobile phone 1A transmits a low image quality moving image corresponding to the moving image data to the mobile phone 1A.
  • the video data is displayed on a display 37 provided in front of A, and the moving image data is supplied to a wireless communication unit 42 via an antenna 81 provided in the upper right part of the mobile phone 1A. Transfer to mobile phone 1B.
  • the CPU 31 of the mobile phone 1B When the CPU 31 of the mobile phone 1B obtains the transmitted moving image data via the antenna 81 provided at the upper right of the mobile phone 1B, the CPU 31 of the mobile phone 1B outputs the corresponding low-quality moving image 93 to the mobile phone 1B. 1 Display on the display 37 provided in front of B.
  • the CPU 31 of the mobile phone 1 sets the mode for capturing moving images to the high image quality mode.
  • the CPU 31 of the mobile phone 1 When moving image data with a small amount of data is captured based on the set high image quality mode, the CPU 31 of the mobile phone 1 outputs a high quality moving image corresponding to the moving image data to the mobile phone 1.
  • the moving image data is supplied to the USB controller 40 while being displayed on the display 37 provided at the front, and is set at the lower part of the mobile phone 1.
  • the PDA 91 Upon acquiring the moving image data, the PDA 91 displays the corresponding high-quality moving image 94 on the display.
  • step S 101 the CPU 31 controls the USB controller 40 and the wireless communication unit 42, obtains information on communication capability from each of them, and checks whether the communication unit used can perform high-speed communication. Determine whether or not. If it is determined that high-speed communication is possible, the CPU 31 sets the high image quality mode in step S102, and ends the mode setting process. If it is determined in step S101 that high-speed communication is not possible, the CPU 31 sets the low image quality mode in step S103, and ends the mode setting process.
  • the CPU 31 can set the mode relating to the capture of a moving image according to the capability of the communication unit to be used.
  • a still image can be captured with a predetermined image quality in the CCD 12 based on a request from the PDA 91 to acquire CPU 31 dynamic image data. You can do it.
  • the still image since the still image does not need to be transferred in real time, it can be transferred normally even if the data amount is large, so the preset mode is used regardless of the current mode for capturing moving images. It may be possible to capture. That is, even when a moving image is currently transferred in the low image quality mode, if the still image shooting mode of the mobile phone 1 is set to the high image quality shooting mode, a still image is captured based on the setting information. be able to.
  • step S121 the CPU 31 controls the USB controller 40 to determine whether or not a still image capture instruction has been acquired, and waits until it is determined that the instruction has been acquired.
  • step S122 the CPU 31 controls the CCD 12 to determine whether or not still image data has been acquired, and waits until it is determined that the still image data has been acquired.
  • the CPU 31 advances the process to step S124, returns the setting changed to the high image quality mode to the original state, and stops the process. Terminates image capture processing and resumes capturing moving images.
  • step S125 the CPU 31 determines whether or not to end the mode setting process, and if not, returns the process to step S122 and repeats the subsequent processes.
  • the CPU 31 performs an end process in step S126, and ends the mode setting process.
  • the CPU 31 acquires still image data corresponding to a high-quality still image based on a request from the PDA 91 irrespective of the current mode for capturing a moving image. be able to.
  • the acquired still image data is further supplied to the PDA 91 based on a request from the PDA 91, as shown in FIG. 16B, and the still image data corresponding to the display unit of the PDA 91 is displayed. 11 may be displayed.
  • the maximum transfer speed of moving image data is reduced, so the CPU 31 of the mobile phone 1 changes the mode relating to the capturing of moving images to the low image quality mode.
  • a low-quality moving image 93 is displayed on the display unit of the PDA 91 together with the captured high-quality still image 11 1.
  • the CPU 31 returns the mode relating to the capture of the moving image to the original mode.
  • the mode setting process when transferring still image data will be described with reference to the flowchart in FIG.
  • step S141 the CPU 31 determines whether or not a still image transfer instruction has been acquired, and waits until it is determined that the instruction has been acquired. If it is determined that the image data has been acquired, the CPU 31 proceeds to step S142, sets the mode relating to moving image capturing to the low image quality mode, controls the USB controller 40, and transfers the still image data. To start.
  • step S144 the CPU 31 determines whether or not the still image transfer processing has been completed, and waits until it determines that the transfer processing has been completed. If it is determined that the still image transfer process has been completed, the CPU 31 advances the process to step S144, and returns the mode setting relating to moving image capture set in the low image quality mode to the original.
  • step S145 the CPU 31 determines whether or not to end, and if not, returns to step S141 and repeats the subsequent processing. If it is determined in step S145 that the processing is to be terminated, the CPU 31 performs termination processing in step S146, and then terminates the mode setting processing.
  • the CPU 31 of the mobile phone 1 can capture a still image based on the request from the PDA 91 and supply the still image data to the PDA 91.
  • the communication device connected to the mobile phone 1 may be other than the PDA 91.
  • the PDA 91 may be connected via a network 120 represented by a LAN or the Internet.
  • a still image is captured by the mobile phone 1A, and the still image data is supplied to the PDA 91 via the network 120 and stored in the built-in storage unit.
  • (Still images 11A and 11B) are captured by the mobile phone 1B, and the moving image data is transferred to the network 1 2 0 is supplied to the PDA 91 via the “0”, and the moving image 112 corresponding to the moving image data is displayed on the display unit.
  • the PDA 91 obtains the still images 111 A and 111 B obtained from the mobile phone 1 A and stored in the built-in storage unit via the network 120 to the mobile phone 1 B.
  • the still images 1111A and 11B supplied from the mobile phone 1A to the PDA 91 can be confirmed on the mobile phone 1B.
  • step S181 the mobile phone 1B sets the mode for capturing moving images to the high image quality mode, and starts generating and transferring moving image data in step S182.
  • the PDA 91 starts receiving the moving image data transferred from the mobile phone 1B in step S171.
  • the mobile phone 1A performs an imaging process in step S161 to generate still image data, and starts the transfer of the still image data in step S162.
  • step S172 the PDA 91 starts receiving still image data transferred from the mobile phone 1A.
  • step S172 the PDA 91 that has started receiving the still image data notifies the mobile phone 1B of the start of receiving the still image data in step S173.
  • the mobile phone 1B sets the mode relating to the capture of the moving image to the low image quality mode in step S184. Thereafter, in the mobile phone 1B, moving image data with a small amount of data corresponding to the low-quality moving image is generated and transferred to the PDA 91.
  • step S174 the PDA 91 starts distribution of the received still image data to the mobile phone 1B.
  • the mobile phone 1B starts receiving still image data distributed from the PDA 91 in step S185.
  • the mobile phone 1A terminates the transfer of the still image data and notifies the PDA 91 in step S163.
  • the PDA 91 Upon acquiring the notification in step S175, the PDA 91 notifies the mobile phone 1B that the reception of the still image data has been completed in step S176.
  • step S186 the mobile phone 1B acquires the notification.
  • the PDA 91 ends the distribution of the still image data in step S177, and notifies the mobile phone 1B.
  • the mobile phone 1B Upon obtaining the notification in step S187, the mobile phone 1B determines that the traffic of the network 120 has decreased based on the notification and the notification obtained in step S186. In S188, the mode for capturing moving images is set to the high image quality mode.
  • the mobile phone 1B can supply the PDA 91 with moving image data having an optimal data amount.
  • the CCD is used as the image sensor of the mobile phone 1.
  • the present invention is not limited to this.
  • a CMOS (Complementary Metal Oxide Semiconductor) sensor may be used.
  • FIG. 21 is a diagram illustrating a configuration example of a CMOS sensor.
  • the CMOS sensor includes a photoelectric conversion element such as a photodiode, and an amplification type M0S (Metal Oxide) that reads and amplifies the accumulated charge of the element.
  • a photoelectric conversion element such as a photodiode
  • M0S Metal Oxide
  • a pixel having a transistor and a selection M0S transistor for activating the amplification type M0S transistor is arranged in 3 rows and 3 columns.
  • a vertical output line Vsig 1 2 4-1 to 1 2 4-3 is connected to these pixels 1 2 1-1 1 to 1 2 1 _ 3 3, and the control output from the shift register 1 2 2
  • the electric charges accumulated in the pixels on the horizontal line selected by the signals VSEL1 2 3-1 to 1 2 3-3 are output to the vertical output line.
  • the vertical shift register 122 as in the case of the CCD 12 described with reference to FIGS. Based on the control of the driver 52, the control signal VSEL 123-1-1 to 123-3-3 is output.
  • the electric charge for each horizontal line output to the vertical output line is stored in storage sections 125-1 to 125-3 having storage capacitors. Then, when the switches 1 26-1 to 1 26-3 selected by the control signal output from the horizontal shift register 1 27 are turned on, the electric charge stored in the storage section connected to the switches is turned off. , Is read out to the output line VH and supplied to the integrator 128.
  • the horizontal shift register 127 similar to the case of the CCD 12 described with reference to FIGS. 1 to 3, controls the control signal based on the control of the TG 51 external to the CMOS sensor. Supply 1 2 6—3.
  • the CPU 31 controls the vertical shift register 122 and the horizontal shift register 127 of the CMOS sensor via the TG 51 and the V-driving pin 52 in the same manner as the CCD 12
  • the pixel from which the electric charge is to be extracted can be selected according to the mode regarding image capture.
  • the CPU 31 determines whether each pixel corresponding to any of R, G, or B is a bayer. It is possible to reduce the amount of generated image data by selecting pixels from which charge is extracted at predetermined intervals, such as by extracting only the pixels with circles in the figure from the CMOS sensors arranged in one pattern. .
  • the CPU 31 sets the mode for capturing the moving image based on the communication speed and the request of the communication partner, as in the case of the CCD 12, and the moving image of the data amount corresponding to the mode is set. Data can be generated, and video data of an appropriate amount can be supplied.
  • the CMOS sensor has been described as having photo registers 1 2 1 — 1 1 to 1 2 1 — 3 3 arranged in 3 rows and 3 columns.
  • the present invention is not limited to this. Can be any number.
  • the mobile phone 1 to which the present invention has been applied is characterized by an external condition based on external conditions of the mobile phone 1, such as the communication capability of another device as a communication partner device and the network bandwidth and traffic status.
  • Optimum data by controlling the amount of moving image data to be transferred in accordance with internal factors such as transmission and reception of a still image while transmitting a moving image, etc. A large amount of image data can be supplied to other devices.
  • the data amount of the image data may be determined according to a predetermined program, or may be determined as needed based on the transmission speed at which the image data is transmitted and the bandwidth of the network.
  • a predetermined program for example, all pixels are read out simply in the case of USB, and thinning out is read out in the case of wireless.
  • the available bandwidth of the network for example, the available bandwidth of the network
  • a device such as a ping bucket is transmitted to the other device, and the time required for the response from the other device to return is monitored and monitored. ) Is determined.
  • the factor for controlling the data amount of the transfer image data may be other than the above-described factor.
  • the factor may be controlled by the load status of the CPU 31 of the mobile phone 1 or the like.
  • the power described using the mobile phone 1 having a camera function is not limited to this.
  • an electronic device having a camera function and a communication function such as a PDA or a personal computer having a camera function, a digital camera with a communication function, or the like Any device can be used.
  • the mobile phone 1 has been described as having two communication functions of the USB control unit 40 and the wireless communication unit 42, but the present invention is not limited to this, and one mobile communication function may be provided. However, three or more may be provided.
  • the communication function may be wired communication or wireless communication.
  • the communication standard used may be, for example, IEEE 1394, SCS I, IEEE 802.3 using Ethernet (R), etc., in addition to USB.
  • other communication standards may be used.
  • short-range wireless communication such as IEEE802.11x, Bluetooth, IrDA using infrared rays, etc. may be used in addition to communication via a telephone line via a communication carrier.
  • the device for acquiring moving image data is the PDA 91 .
  • the present invention is not limited to this.
  • a mobile phone, a digital video camera, or a television It can be widely applied to electronic devices such as receivers.
  • the mode setting conditions in the mode setting process are individually described as the mode setting conditions in the mode setting process.
  • the mode may be set.
  • the series of processes described above can be executed by hardware, but can also be executed by software.
  • the programs that make up the software execute various functions by installing a computer built into a dedicated hard disk or by installing various programs. It is installed from a recording medium on a general-purpose personal computer, for example, which is capable of performing such operations.
  • a recording medium that is installed in a computer and records a program that can be executed by the computer includes a magnetic disk 44 (including a flexible disk), an optical disk 45 (CD-ROM (Compact Disc-On-Only Memory), DVD (including Digital Versatile Disc), magneto-optical disc 46 (including MD (Mini-Disc) (registered trademark)), or semiconductor memory 47 It is composed of package media, or ROM 32 or flash memory 35 on which programs are temporarily or permanently recorded.
  • the recording of the program on the recording medium can be performed via an interface such as a router or modem, if necessary, via a public line network, local area network, or the Internet. It is performed using a wired or wireless communication medium such as a network or digital satellite broadcasting.
  • steps for describing a program to be recorded on a recording medium are not limited to processing performed in chronological order according to the described order, but are not necessarily performed in chronological order. Alternatively, it also includes processing that is executed individually.
  • moving image data can be supplied to another device.
  • image data of an optimal data amount can be supplied to another device.
  • the image capturing apparatus according to the present invention such as transmitting or receiving a still image while transmitting a moving image, a communication capability of another device as a communication partner device, an external factor such as a network bandwidth or a traffic state, or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本発明は、最適なデータ量の画像データを他の装置に供給することができるようにした撮像装置および方法に関する。携帯電話機1は、PDA91の最大転送速度が1.5Mbpsである場合、PDA91との最大通信速度が遅いと判断し、CCDにおいて取り込まれる動画像データのデータ量が少なくなるように制御し、その取り込まれた動画像データをPDA91に供給する。PDA91は、表示部に低画質動画像93を表示する。また、PDA91の最大転送速度が480Mbpsである場合、CPUは、CCDにおいて取り込まれる動画像データのデータ量を減らさないように制御し、その取り込まれた動画像データをPDA91に供給する。PDA91は、表示部に高画質動画像94を表示する。本発明は、デジタルカメラに適用できる。

Description

明細書
撮像装置および方法 技術分野
本発明は撮像装置および方法に関し、 特に、 最適なデータ量の画像データを他 の装置に供給することができるようにした、 撮像装置および方法に関する。 背景技術
近年、 デジタルビデオカメラ等の撮像装置が普及するとともに、 撮像装置に搭 載される CCD (Charge Coup l ed Devi ce)等のカメラの高解像度化が進んでいる。 また、 通信機能付きデジタルビデオカメラや撮像機能を有する携帯電話機等に代 表されるように、 撮像装置の多機能化も進んでいる。
例えば、 USB (Un i versa l Seri al Bus ) 通信機能を有するデジタルビデオ力 メラは、 被写体を撮像することにより得られた動画像データを、 USBケーブルを 介して、 パーソナルコンピュータ等の他の装置に、 リアルタイムに供給すること ができる。
ところで、 カメラの高解像度化に伴い、 被写体を撮像することにより得られる 動画像データのデータ量も増加しており、 供給先の装置の処理能力が低い場合や、 装置間のネットワークが混雑し、 通信速度が低下している場合、 通信処理のォー バーフローや、 再生された動画像のコマ落ち等の問題が発生する恐れがある。 これに対して、 供給元のデジタルビデオカメラが、 供給する動画像データを圧 縮するなどして、 低速な通信においても正常に動画像データを供給できるように、 常に、 データ量を予め少なく してから供給する方法が考えられるが、 高速通信が 可能な場合、 この方法では、 不必要に再生動画像の画質を劣化させてしまうこと になる。
そこで、 第 1のデータと、 第 1のデータを圧縮した第 2のデータの 2つを用意 しておき、 通信速度が速い場合、 第 1のデータを供給し、 通信速度が遅い場合、 第 1のデータと比較してデータ量の少ない第 2のデータを供給する方法がある (例えば、 特開 2 0 0 2— 9 9 3 9 3号公報 (第 4一 1 2ページ、 図 4 ) 参照) 。 しかしながら、 以上のような方法においては、 第 1のデータ、 および内容が対 応する、 第 1のデータと比較してデータ量の小さい第 2のデータの 2つを予め用 意しておかなければならず、 供給するデータを保存するための記憶領域が増大し てしまうとともに、 被写体を撮像して得られた動画像データをリアルタイムに供 給するような場合には不向きであるという課題があった。
また、 用意された第 2の画像データの圧縮率が、 必ずしも、 通信状態に適切な 圧縮率であるとは限らないという課題もあった。
発明の開示
本発明はこのような状況に鑑みてなされたものであり、 最適なデータ量の画像 データを他の装置に供給することができるようにしたものである。
本発明の第 1の撮像装置は、 被写体を撮像して得られる画像を画像データとし て取り込む撮像手段と、 撮像手段による撮像処理により取り込まれた画像データ を、 ネットワークを介して接続された通信装置に送信する送信手段と、 送信手段 が送信する画像データの通信速度に応じて、 撮像手段により取り込まれる画像デ ータのデータ量を調整する調整手段とを備えることを特徴とする。
複数の送信手段と、 複数の送信手段から任意の送信手段を選択する選択手段と をさらに備え、 調整手段は、 選択手段により選択された送信手段から送信する画 像データの通信速度に応じて、 撮像手段により取り込まれる画像データのデータ 量を調整するようにすることができる。
前記送信手段は、 他のデータを送信する際、 撮像手段により取り込まれる画像 データのデータ量を少なくする調整を行うようにすることができる。
本発明の第 1の撮像方法は、 被写体を撮像して得られる画像を画像データとし て取り込む撮像ステップと、 撮像ステップによる撮像処理により取り込まれた画 像データの、 ネッ トワークを介して接続された通信装置への送信を制御する送信 制御ステップと、 送信制御ステップの処理により制御される画像データの通信速 度に応じて、 撮像ステップの処理により取り込まれる画像データのデータ量を調 整する調整ステップとを含むことを特徴とする。
前記画像データを送信する複数の送信部より、 送信制御ステップの処理により 送信を制御する送信部を選択する選択ステップをさらに含み、 送信制御ステップ は、 選択ステップの処理により選択された送信部における送信を制御し、 調整ス テツプは、 選択ステップの処理により選択された送信部から送信する画像データ の通信速度に応じて、 撮像ステップの処理により取り込まれる画像データのデー タ量を調整するようにすることができる。
前記送信制御ステップは、 画像データ以外の他のデータの送信をさらに制御し、 調整ステップは、 送信制御ステップが他のデータを送信するように制御する際、 撮像ステップの処理により取り込まれる画像データのデータ量を少なくする調整 を行うようにすることができる。
本発明の第 2の撮像装置は、 被写体を撮像して得られる画像を画像データとし て取り込む撮像手段と、 画像データを圧縮する圧縮手段と、 圧縮手段による圧縮 処理により生成された圧縮画像データを、 ネットワークを介して接続された通信 装置に送信する送信手段と、 送信手段が送信する圧縮画像データの通信速度に応 じて、 圧縮手段による圧縮処理における圧縮率を調整する調整手段とを備えるこ とを特徴とする。
複数の送信手段と、 複数の送信手段から任意の送信手段を選択する選択手段と をさらに備え、 調整手段は、 選択手段により選択された送信手段から送信する画 像データの通信速度に応じて、 圧縮手段による圧縮処理における圧縮率を調整す るようにすることができる。
前記送信手段は、 圧縮画像データ以外の他のデータをさらに送信し、 調整手段 は、 送信手段が他のデータを送信する際、 圧縮手段による圧縮処理における圧縮 率を高くする調整を行うようにすることができる。 本発明の第 2の撮像方法は、 被写体を撮像して得られる画像を画像データとし て取り込む撮像ステップと、 画像データを圧縮する圧縮ステップと、 圧縮ステツ プによる圧縮処理により生成された圧縮画像データの、 ネットワークを介して接 続された通信装置への送信を制御する送信制御ステップと、 送信制御ステップの 処理により制御される圧縮画像データの通信速度に応じて、 圧縮ステップによる 圧縮処理における圧縮率とを調整する調整ステップとを含むことを特徴とする。 前記圧縮画像データを送信する複数の送信部より、 送信制御ステップの処理に より送信を制御する送信部を選択する選択ステップをさらに含み、 送信制御ステ ップは、 選択ステップの処理により選択された送信部における送信を制御し、 調 整ステップは、 選択ステップの処理により選択された送信部から送信する圧縮画 像データの通信速度に応じて、 圧縮ステップによる圧縮処理における圧縮率とを 調整するようにすることができる。
前記送信制御ステップは、 圧縮画像データ以外の他のデータの送信をさらに制 御し、 調整ステップは、 送信制御ステップが他のデータを送信するように制御す る際、 圧縮ステップによる圧縮処理における圧縮率を高くする調整を行うように することができる。
本発明の第 3の撮像装置は、 被写体を撮像して得られる画像を画像データとし て取り込む撮像手段と、 画像データを圧縮する圧縮手段と、 圧縮手段による圧縮 処理により生成された圧縮画像データを、 ネットワークを介して接続された通信 装置に送信する送信手段と、 送信手段が送信する圧縮画像データの通信速度に応 じて、 撮像手段により取り込まれる画像データのデータ量と、 圧縮手段による圧 縮処理における圧縮率とを調整する調整手段とを備えることを特徴とする。 複数の送信手段と、 複数の送信手段から任意の送信手段を選択する選択手段と をさらに備え、 調整手段は、 選択手段により選択された送信手段から送信する圧 縮画像データの通信速度に応じて、 撮像手段により取り込まれる画像データのデ ータ量と、 圧縮手段による圧縮処理における圧縮率とを調整するようにすること ができる。 前記送信手段は、 画像データ以外の他のデータをさらに送信し、 調整手段は、 送信手段が他のデータを送信する際、 撮像手段により取り込まれる画像データの データ量を少なくする調整と、 圧縮手段による圧縮処理における圧縮率を高くす る調整とを行うようにすることができる。
本発明の第 3の撮像方法は、 被写体を撮像して得られる画像を画像データとし て取り込む撮像ステップと、 画像データを圧縮する圧縮ステップと、 圧縮ステツ プによる圧縮処理により生成された圧縮画像データの、 ネットワークを介して接 続された通信装置への送信を制御する送信制御ステップと、 送信制御ステップの 処理により制御される圧縮画像データの通信速度に応じて、 撮像ステップの処理 により取り込まれる画像データのデータ量と、 圧縮ステップによる圧縮処理にお ける圧縮率とを調整する調整ステップとを含むことを特徴とする。
前記圧縮画像データを送信する複数の送信部より、 送信制御ステップの処理に より送信を制御する送信部を選択する選択ステップをさらに含み、 送信制御ステ ップは、 選択ステップの処理により選択された送信部における送信を制御し、 調 整ステップは、 選択ステップの処理により選択された送信部から送信する圧縮画 像データの通信速度に応じて、 撮像ステップの処理により取り込まれる画像デー タのデータ量と、 圧縮ステップによる圧縮処理における圧縮率とを調整するよう にすることができる。
前記送信制御ステップは、 画像データ以外の他のデータの送信をさらに制御し、 調整ステップは、 送信制御ステップが他のデータを送信するように制御する際、 撮像ステップの処理により取り込まれる画像データのデータ量を少なくする調整 と、 圧縮ステップによる圧縮処理における圧縮率を高くする調整とを行うように することができる。
本発明の第 1の撮像装置および方法においては、 被写体を撮像して得られる画 像が画像データとして取り込まれ、 撮像処理により取り込まれた前記画像データ 力 ネッ トワークを介して接続された通信装置に送信されるとともに、 送信する 画像データの通信速度に応じて、 取り込まれる画像データのデータ量が調整され る。
本発明の第 2の撮像装置および方法においては、 被写体を撮像して得られる画 像が画像データとして取り込まれて圧縮され、 生成された圧縮画像データが、 ネ ットワークを介して接続された通信装置に送信されるとともに、 その送信する圧 縮画像データの通信速度に応じて、 圧縮処理における圧縮率が調整される。 本発明の第 3の撮像装置および方法においては、 被写体を撮像して得られる画 像が画像データとして取り込まれて圧縮され、 生成された圧縮画像データが、 ネ ッ トワークを介して接続された通信装置に送信されるとともに、 その送信する圧 縮画像データの通信速度に応じて、 取り込まれる画像データのデータ量と、 圧縮 処理における圧縮率とが調整される。 図面の簡単な説明
図 1は、 本発明を適用したカメラ機能を有する携帯電話機の基本的な構成例を 表す図である。
図 2は、 図 1の CCDの内部の主な構成例を示す模式図である。
図 3は、 図 2の垂直制御信号 V 1乃至 V 8と垂直転送レジスタの一部との接続 例を示す模式図である。
図 4は、 USBを用いた通信の様子の例を示す模式図である。
図 5は、 図 1の無線通信部の詳細な構成例を示す図である。
図 6 Aは、 図 1の携帯電話機により撮像された画像データを表示するシステム の構成例を示す模式図である。
図 6 Bは、 図 1の携帯電話機により撮像された画像データを表示するシステム の構成例を示す模式図である。
図 7は、 図 6 Aおよび図 6 Bにおける動画像データ取り込みに関するモード設 定処理について説明するフローチヤ一トである。
図 8は、 画像取り込み制御処理を説明するフローチヤ一トである。 図 9は、 画像データのデータ量を削減する様子を示す模式図である。
図 1 0は、 画像データ圧縮処理を説明するフローチャートである。
図 1 1 Aは、 図 1の携帯電話機により撮像された画像データを表示するシステ ムの他の構成例を示す模式図である。
図 1 1 Bは、 図 1の携帯電話機により撮像された画像データを表示するシステ ムの他の構成例を示す模式図である。
図 1 2は、 図 1 1 Aおよび図 1 1 Bの場合におけるモード設定処理を説明する フローチヤ一トである。
図 1 3は、 動画像データの受け手側の要求に基づいて、 動画像取り込みモード を設定する場合のモード設定処理について説明するフローチヤ一トである。
図 1 4 Aは、 図 1の携帯電話機により撮像された画像データを表示するシステ ムの、 さらに他の構成例を示す模式図である。
図 1 4 Bは、 図 1の携帯電話機により撮像された画像データを表示するシステ ムの、 さらに他の構成例を示す模式図である。
図 1 5は、 図 1 4 Aおよび図 1 4 Bの場合におけるモード設定処理を説明する フローチヤ一トである。
図 1 6 Aは、 図 1の携帯電話機により撮像された画像データを表示するシステ ムの、 さらに他の構成例を示す模式図である。
図 1 6 Bは、 図 1の携帯電話機により撮像された画像データを表示するシステ ムの、 さらに他の構成例を示す模式図である。
図 1 7は、 図 1 6 Aおよび図 1 6 Bの PDAからの要求に基づいて、 静止画像 を高画質モードで取り込む際のモード設定処理を説明するフローチヤ一トである c 図 1 8は、 図 1 6 Aおよび図 1 6 Bの場合において、 静止画像データを転送す る際のモード設定処理を説明するフローチヤ一トである。
図 1 9は、 図 1の携帯電話機により撮像された画像データを表示するシステム の、 さらに他の構成例を示す模式図である。 図 2 0は、 図 1 9の場合における各装置の処理の流れの例を説明するタイミン グチャートである。
図 2 1は、 CMOSセンサの構成例を示す図である。
図 2 2は、 図 2 1の CMOSセンサを用いて、 画像データのデータ量を削減する 様子を示す模式図である。 発明を実施するための最良の形態
図 1は、 本発明を適用した力メラ機能を有する携帯電話機の基本的な構成例を 表す図である。
図示せぬ被写体からの光は、 レンズや絞り機構等により構成される携帯電話機 1のレンズ部 1 1を介して CCD (Charge Coupled Device) 1 2に入射され、 光 電変換される。
CCD 1 2が出力する映像信号は CDS回路 (Correlated Double Sampling circuit) 1 3に供給されている。 CDS回路 1 4は、 入力信号に相関二重サンプ リングを施してノイズ成分を除去し、 その信号を AGC回路 (Automatic Gain
Control circuit) 1 4に出力する。 AGC回路 1 4は、 入力信号のゲインを調整 した後、 その信号を A/D (Analog / Digital) 変換器 1 5に出力する。 A/D変 換器 1 5は、 入力されたアナログ信号をデジタル信号に変換し、 DSP (Digital Signal Processor) 1 6に出力する。
DSP 1 6は、 内蔵する画像調整処理部 2 1により、 入力信号に基づいて AF (Auto Focus) 、 AE (Auto Exposure) 、 および AWB (Auto White Balance) 等の制御信号を生成し、 その制御信号を、 バス 3 0を介して CPU (Central Processing Unit) 3 1に供給する。 また、 DSP 1 6は、 内蔵する画像圧縮 '伸 張処理部 2 2により、 入力された画像信号を圧縮したり、 さらに伸張したりする。 その際、 画像圧縮 ·伸張処理部 2 2は、 DSP1 6に内蔵される SDRAM
(Synchronous Dynamic Random Access Memory) コントローラ 2 3に制御され た SDRAM 1 7に映像信号を一時的に保持させながら、 処理を行う。 画像圧縮 '伸張処理部 2 2により圧縮された画像データは、 バス 3 0を介して, RAM (Random Access Memory) 3 3等に供給される。
CPU 3 1は、 ROM (Read Only Memory) 3 2に記憶されているプログラム、 ま たは記憶部 3 5から RAM 3 3に口一ドされたプログラムに従って各部を制御した り、 各種の処理を実行したりする。 RAM 3 3にはまた、 CPU 3 1が各種の処理を 実行する上において必要なデータなども適宜記憶される。
CPU 3 1には、 また、 ユーザの操作を受け付ける外部操作入力部 3 4が接続さ れている。 外部操作入力部 3 4は、 シャツタボタンやメニューボタン等の各種の ボタン、 ダイヤル、 つまみ、 並びにタツチパネル (いずれも図示せず) 等で構成 されており、 ユーザが操作することにより、 各種のユーザからの指示を受け付け、 その指示情報を CPU 3 1に供給する。 CPU 3 1は、 その指示情報に基づいて、 各 種の処理を実行する。
CPU 3 1 , ROM 3 2 , および RAM 3 3は、 バス 3 0を介して相互に接続されてい る。 このバス 3 0にはまた、 不揮発性の半導体メモリ等で構成されるフラッシュ メモリ 3 5、 LCD 3 7に表示させる画像を制御する表示制御部 3 6、 メモリカー ド 3 9等が装着されるメモリ I/F (InterFace) 3 8、 図示せぬ USB (Universal Serial Bus) ケーブルが接続される USBコネクタ 4 1を制御する USBコント口 ーラ 4 0、 並びに、 他の装置と無線通信を行い、 例えば、 CPU 3 1に制御されて、 CCD 1 2において取り込まれた画像データを他の装置に供給する無線通信部 4 2 が接続されている。
表示制御部 3 6は、 図示せぬ VRAM (Video Random Access Memory) が内蔵さ れている。 表示制御部 3 6は、 CCD 1 2より取り込んだ画像データを、 内蔵する VRAMに記憶させ、 その VRAMに記憶されている画像データに対応する画像や、 他 のメモリ (RAM 3 3、 フラッシュメモリ 3 5、 メモリ I/F 3 8に接続されたメモ リカード 3 9等) に記憶されている画像データに対応する画像を、 LCD 3 7に表 示させる。 バス 3 0にはまた、 必要に応じて、 図示せぬインタフェースを介して、 ドライ ブ 4 3が接続され、 ドライブ 4 3に装着された磁気ディスク 4 4、 光ディスク 4 5、 光磁気ディスク 4 6、 或いは半導体メモリ 4 7などから読み出されたコンビ ユータプログラムが、 RAM 3 3やフラッシュメモリ 3 5等にインス トーノレされる c また、 メモリ I/F 3 8に適宜装着されるメモリカード 3 9から読み出されたコン ピュータプログラムも、 必要に応じて、 RAM 3 3やフラッシュメモリ 3 5等にィ ンス トーノレされる。
CPU 3 1は、 外部操作入力部 3 4より入力されたユーザからの指示情報や、 画 像調整処理部 2 1より供給された制御情報、 または、 各種のプログラムを実行す ることにより得られた情報等に基づいて、 CDS回路 1 3、 AGC回路 1 4、 および A/D変換器 1 5の動作を制御する。
また、 外部操作入力部 3 4から入力されたユーザからの指示に応じて、 得られ た画像データを他の装置に送信する送信方式が選択される。 すなわち、 図 1の例 においては USBコネクタ 4 1また、 無線通信部 4 2を介して画像データを送信 するかについて、 外部操作入力部 3 4よりユーザは自由に選択できる。 CPU 3 1 は選択された通信方式に基づいて、 CCD 1 2の動作を制御する TG (Timing
Generator) 5 1を制御し、 CCD 1 2より取り込まれる画像データのデータ量を 調整し、 また、 DSP16における画像データの圧縮を制御する。
また、 CPU 3 1は、 例えば、 USBコントローラ 4 0による有線通信の通信速度 や、 無線通信部 4 2による無線通信の通信速度等の情報、 または通信相手の装置 より供給された要求や、 外部操作入力部 3 4より入力された要求等の情報に基づ いて、 CCD 1 2の動作を制御する TG 5 1を制御し、 CCD 1 2より取り込まれる画 像データのデータ量を調整したり、 バス 3 0を介して DSP 1 6の画像圧縮 ·伸張 処理部 2 2による圧縮処理における画像データの圧縮率を制御し、 転送する画像 データのデータ量を調整したりする。
さらに、 CPU 3 1は、 レンズ部 1 1の動作を制御するアイリスシャツタ ドライ バ 5 3を制御し、 シャツタスピードを調整したり、 絞り機構を調整したりする。 TG5 1および Vドライバ 5 2は、 CCD l 2に接続されており、 シリアルコント ロールバスを介して CPU 3 1に制御されて、 CCD 1 2の動作を制御する。
TG5 1は、 CPU 3 1より供給される制御信号に基づいて、 図 2を参照して後述 する CCD1 2の水平転送レジスタ 6 3を駆動する水平クロック信号やその他の制 御信号を生成し、 CCD 1 2および Vドライバ 5 2に供給する。
Vドライバ 5 2は、 TG5 1より供給される制御信号等に基づいて、 図 2を参 照して後述するように、 CCD1 2の垂直転送レジスタ 6 2— 1乃至 6 2 _nを駆 動する垂直制御信号 V 1乃至 V 8を生成し、 CCD1 2に供給する、 垂直レジスタ 駆動用ドライバである。
図 2は、 CCD 1 2の内部の主な構成例を示す模式図である。
図 2において、 CCD 1 2には、 固体撮像素子であるフォトダイオード 6 1 — 1 - 1乃至 6 1一 n _mが m行 n列に配置されており、 各フォトダイォード 6 1一 1— 1乃至 6 1 _ n—mは、 列ごとに垂直転送レジスタ 6 2 - 1乃至 6 2— nに 接続されている。
なお、 以下において、 フォトダイォード 6 1— 1一 1乃至 6 1— n— mは、 そ れぞれを分けて説明する必要が無い場合、 フォトダイオード 6 1と称する。 また、 垂直転送レジスタ 6 2— 1乃至 6 2— nについても同様に、 分けて説明する必要 の無い場合、 垂直転送レジスタ 6 2と称する。
すなわち、 左から 1列目のフォトダイォード 6 1 - 1 - 1乃至 6 1— 1—mは, 垂直転送レジスタ 6 2— 1に接続され、 2列目のフォトダイオード 6 1— 2— 1 乃至 6 1— 2— mは、 垂直転送レジスタ 6 2— 2に接続される。 3列目以降のフ ォトダイォードも同様に垂直転送レジスタ 6 2— 2に接続され、 n列目のフォ ト ダイォード 6 1 - n - 1乃至 6 1— n— mは、 垂直転送レジスタ 6 2— nに接続 される。
垂直転送レジスタ 6 2— 1は、 複数のレジスタで構成され、 各レジスタが接続 されているフォ トダイオード 6 1— 1— 1乃至 6 1— 1—mに蓄積された電荷を それぞれ保持することができる。 また、 垂直転送レジスタ 6 2— 1は、 水平転送 レジスタ 6 3に接続されており、 保持している電荷を 1段ずつ移動させ、 順次、 水平転送レジスタ 6 3に供給することができる。
CCD 1 2には、 Vドライバ 5 2より垂直制御信号 V 1乃至 V 8が供給されてお り、 図 3を参照して後述するように、 垂直転送レジスタ 6 2— 1の各レジスタに は、 垂直制御信号 V 1乃至 V 8のいずれかの信号が供給される。 垂直転送レジス タ 6 2— 1は、 この垂直制御信号 V 1乃至 V 8に制御され、 上述した電荷の保持 や転送等の処理を実行する。
Vドライバ 5 2より供給される SUB (SUBstrate) 信号により基板電圧が印加 されると、 接続されているフォトダイオード 6 1 - 1 - 1乃至 6 1— 1一 mのう ち、 垂直制御信号 V I, 3 , 5、 および 7により指定されたフォトダイオードに 蓄積された電荷は、 垂直転送レジスタ 6 2— 1に転送される。 そして、 転送され た電荷は、 垂直制御信号 V 1乃至 V 8の制御により、 1段ずつ図の下方向に移動 され、 順次、 水平転送レジスタ 6 3に転送される。
垂直転送レジスタ 6 2— 2乃至 6 2 _ nは、 垂直転送レジスタ 6 2― 1と同様 の構成であり、 同様に動作するので、 その説明は省略する。
図 3は、 垂直制御信号 V 1乃至 V 8と垂直転送レジスタ 6 2の一部との接続例 を示す模式図である。
図 3に示されるように、 垂直転送レジスタ 6 2を構成する各レジスタの 2段ご とに、 フォトダイオード 6 1が接続されており、 フォトダイオード 6 1が接続さ れているレジスタには垂直制御信号 V' l, V 3 , V 5、 または V 7がそれぞれ接 続されており、 それ以外のレジスタには、 それぞれ V 2 , V 4 , V 6、 または V 8が接続されている。
従って、 例えば、 垂直制御信号 V I, V 3 , V 5、 および V 7より所定の信号 を垂直転送レジスタ 6 2に入力すると、 全てのフォトダイォード 6 1に蓄積され た電荷が垂直転送レジスタ 6 2に転送される。
また、 例えば、 垂直制御信号 V 5および V 7のみ、 所定の信号をレジスタに入 力すると、 電荷が蓄積されたフォトダイオード 6 1のうち、 垂直制御信号 V 5お よび V 7が入力される図 3の Aのフォトダイォ一ド 6 1に蓄積された電荷のみが 垂直転送レジスタ 6 2に転送され、 図 3の Bのフォ トダイォード 6 1に蓄積され た電荷は転送されずに排出される。 すなわち、 この場合、 5段につき 1個のフォ トダイオード 6 1に蓄積された電荷が取り込まれる。
図 2に戻り、 水平転送レジスタ 6 3は、 複数のレジスタにより構成され、 各レ ジスタは、 それぞれ接続されている垂直転送レジスタ 6 2— 1乃至 6 2— nより 供給される電荷をフォトダイオード 1個分ずつ保持することができる。 また、 水 平転送レジスタ 6 3は、 保持している電荷を 1段ずつ移動させ、 順次、 CCD 1 2 の外部に供給することができる。
さらに、 水平転送レジスタ 6 3には、 各レジスタに、 吐き出しドレインおよび 吐き出しドレインにて電荷を吐き出すか否かを選択する列選択排出グート (いず れも図示せず) が接続されており、 CCD 1 2の外部に転送する電荷を選択するこ とができる。
TG 5 1より供給される RG 信号により電圧が列選択排出ゲートに印加されると、 接続されている垂直転送レジスタ 6 2— 1乃至 6 2— nより転送されてきた電荷 のうち、 その列選択排出ゲートに接続された吐き出しドレインが配置されている 列の電荷のみを選択的に排出する。 そして、 それ以外の電荷は、 TG 5 1より供 給される水平制御信号 (H Iおよび H 2 ) の制御により、 1段ずつ図の左方向に 移動され、 順次、 CCD 1 2の外部に転送される。
以上のようにして、 CPU 3 1は、 TG 5 1を制御することにより、 CCD 1 2を制 御して、 取り込む画像データのデータ量を調整する。
図 4は、 USBを用いた通信の様子の例を示す模式図である。
USBによる通信においては、 通信を行う端末が、 通信を制御するホス ト側と通 信相手であるデバイス側に分けられる。
ホス ト側においては、 図 1の CPU 3 1等において実行されるクライアントソフ トウエア 7 1力 S、 図 1の USB コントローラ 4 0において実行される USBシステ ムソフトウェア 7 2に対して通信を指示し、 USBシステムソフトウェア 7 2が物 理的なィンタフェースである USBバス I/F 7 3を介した通信を制御する。
これに対して、 デバイス側においては、 デバイス固有の機能であるファンクシ ヨン 7 4が USB口ジカルデバィス 7 5に通信を指示し、 USB口ジカルデバィス 7 5が物理的なインタフェースである USBバス I/F 7 6を介した通信を制御する。 すなわち、 クライアントソフトウェア 7 1とファンクション 7 4は、 USB通信 により授受される情報に基づいて、 互いに関連する処理を実行し、 USBシステム ソフトウェア 7 2と USBロジカルデバイス 7 5が USB通信を制御して、 要求さ れた情報の授受を、 USBバス I/F 7 3および 7 6を介して行う。
図 1の USBコントローラ 4 0は、 通信規格である USBのバージョン 2 . 0に 対応しており、 最大転送速度 4 8 O Mbpsで通信を行う。 また、 USBコントロー ラ 4 0は、 USBコネクタ 4 1に USBケーブルを介して接続された通信相手である 他の装置が USBのバージョン 1 . 1に対応しており、 最大転送速度が 1 2 Mbps や 1 . 5 Mbpsである場合、 それらの転送速度に合わせて通信を行う。 また、 そ の情報は、 CPU 3 1に供給され、 CPU 3 1は、 その情報に基づいて、 CCD 1 2より 取り込まれる画像データのデータ量を調整したり、 画像データの圧縮率を調整し たりする。
さらに、 USBコントローラ 4 0は、 後述するように、 各種の負荷等により変動 する実際の転送速度を測定し、 その情報を CPU 3 1に供給する。 CPU 3 1は、 そ の情報に基づいて、 CCD 1 2より取り込まれる画像データのデータ量を調整した り、 画像データの圧縮率を調整したりする。
図 5は、 図 1の無線通信部 4 2の詳細な構成例を示す図である。
アンテナ 8 1は、 他の装置からの電波を受信し、 その受信信号をセレクタ 8 2 に供給するとともに、 セレクタ 8 2からの信号を、 電波で他の装置に供給する。 セレクタ 8 2は、 アンテナ 8 1より受信した信号を、 例えば、 CDMA (Code
Divi s ion Mu l t iple Acces s)方式等によって復調し、 その結果得られる復調信 号を、 ダウンコンバータ 8 3に供給する。 ― ダウンコンバータ 8 3は、 取得した復調信号の搬送波の周波数を低い周波数に 変換し、 その復調信号を受信 I/F 8 4に供給する。 受信 I/F 8 4は、 取得した復 調信号に対して A/D変換処理等の処理を施し、 そのデジタル信号をベースバン ド信号処理 8 5に供給する。
ベースバンド信号処理部 8 5は、 受信 I /F 8 4より取得したデジタル信号より 規格に基づいて、 バケツト処理やエラー信号処理等を行って受信データを抽出し、 バス 3 0に供給したり、 バス 3 0を介して取得したデータに制御信号等の付加等 を行い、 送信 I/F 8 6に供給したりする。 送信 I/F 8 6は、 取得したデジタル 信号をアナログ信号に変換し、 パワーアンプ 8 7に供給する。 パワーアンプ 8 7 において、 出力を増加された送信信号は、 セレクタ 8 2を介してアンテナ 8 1よ り出力される。
なお、 無線通信部 4 2における最大通信速度は、 通信キャリアや通信規格等に より異なる。
また、 無線通信部 4 2は、 通信相手である通信装置の最大通信速度によって、 通信可能な速度に転送速度を変更する。 その情報は、 CPU 3 1に供給され、 CPU 3 1は、 その情報に基づいて、 CCD 1 2より取り込まれる画像データのデータ量 を調整したり、 画像データの圧縮率を調整したりする。
さらに、 無線通信部 4 2は、 後述するように、 各種の負荷等により変動する実 際の転送速度を測定し、 その情報を CPU 3 1に供給する。 CPU 3 1は、 その情報 に基づいて、 CCD 1 2より取り込まれる画像データのデータ量を調整したり、 画 像データの圧縮率を調整したりする。
次に、 CPU 3 1が、 USBコネクタ 4 1を介して接続された通信装置の最大通信 速度に応じて、 CCD 1 2より取り込まれる画像データのデータ量を調整する場合 について説明する。 図 6 Aおよび Bは、 図 1の携帯電話機 1により撮像された画 像データを、 USBケーブルを介して他の装置に転送し、 表示するシステムの構成 例を示す模式図である。 図 6 Aにおいて、 携帯電話機 1は、 図中、 携帯電話機 1の下部に設けられた USBコネクタ 4 1に接続された USBケーブル 9 2を介して、 PDA (Persona l Di g i ta l Ass i s tant s) 9 1に接続されている。 図中、 携帯電話機 1の左上部に 設けられたレンズ部 1 1を介して図 1の CCD 1 2に入射された入射光を光電変換 して得られた動画像データは、 CPU 3 1に制御されて、 対応する動画像が、 図中, 携帯電話機 1の正面上部に設けられた LCD 3 7に表示されるとともに、 USBケー ブル 9 2を介して、 PDA 9 1に供給され、 図中、 PDA 9 1の正面に設けられた表 示部に表示される。
なお、 レンズ部 1 1、 LCD 3 7、 および USB コネクタ 4 1は、 携帯電話機 1の, 上述した以外の場所に設けられているようにしてもよい。
図 6 Aの場合、 PDA 9 1の最大転送速度は 1 . 5 Mbpsであるとすると、 携帯電 話機 1と PDA 9 1との間の通信速度は、 最大 1 . 5 Mbps となる。 つまり、 携帯 電話機 1が最大通信速度 4 8 0 Mbpsの通信能力を有していたとしても、 これら 機器間の最大通信速度は、 最大通信速度が携帯電話機 1より遅い PDA 9 1の通信 能力に応じたものとなる。
従って、 携帯電話機 1の CPU 3 1は、 この場合、 PDA 9 1との通信における最 大可能通信速度が遅いと判断し、 CCD 1 2において取り込まれる動画像データの データ量が少なくなるように制御する。 これにより、 PDA 9 1にはデータ量の少 ない動画像データが転送され、 PDA 9 1の表示部には画質の低い低画質動画像 9 3が表示される。 すなわち、 CPU 3 1は、 USBコントローラ 4 0が PDA 9 1の最 大通信速度に応じて設定した通信速度において、 正常に転送可能なデータ量とな るように、 CCD 1 2を制御して、 取り込まれる画像データのデータ量を減らす。 以上のようにして、 携帯電話機 1は、 最大転送速度 1 . 5 Mbpsの USB通信であ つても、 オーバーフローやコマ落ち等を発生させずに、 動画像データを PDA 1に 供給することができる。
また、 図 6 Bに示されるように、 PDA 9 1の最大転送速度が 4 8 0 Mbpsである 場合、 すなわち、 転送する画像データのデータ量が大きくても正常に転送可能な 場合、 CPU 3 1は、 CCD 1 2において取り込まれる動画像データのデータ量を減 らさないように制御し、 その取り込まれた動画像データを PDA 9 1に供給する。 これにより PDA 9 1の表示部には画質の高い高画質動画像 9 4が表示される。 以上のように、 CPU 3 1は、 動画像データの供給先の装置の処理能力に応じて、 CCD 1 2を制御して、 取り込む動画像データのデータ量を調整する。
具体的には、 CPU 3 1は、 USB コントローラ 4 0よりデータ供給先の情報を取 得し、 その情報に基づいて、 取り込む動画像データの画質を決定するモードを選 択し、 そのモードに応じて CCD 1 2等を制御して、 データ量を調整した動画像デ ータを取り込み、 その動画像データを、 USBケーブル 9 2を介して PDA 9 1に供 給する。 '
次に、 図 7のフローチャートを参照して、 図 6 Aおよび図 6 Bに示される場合 における CPU 3 1による動画像データ取り込みに関するモード設定処理について 説明する。
ユーザの指示などに基づいて、 撮像処理が開始されると、 CPU 3 1は、 最初に ステップ S 1において、 動画像データの転送に関する能力の情報を含む、 PDA 9 1の機器情報を、 USB コントローラ 4 0に要求し、 USBコントローラ 4 0より取 得したか否かを判定する。
USBコントローラ 4 0より取得したと判定した場合、 CPU 3 1は、 ステップ S 2において、 取得した機器情報に基づいて、 CCD 1 2における動画像データ取り 込みに関するモードを、 予め用意された 2つのモードである、 所定のデータ量の 画像データを転送するための高画質モード、 および、 高画質モードの場合よりも データ量の少ない画像データを転送するための低画質モードより選択し、 設定す る。 モードを設定した CPU 3 1は、 処理をステップ S 3に進める。
また、 ステップ S 1において、 機器情報を取得していないと判定した場合、 CPU 3 1は、 ステップ S 2の処理を省略し、 ステップ S 3に処理を進める。 ステップ S 3において、 CPU 3 1は、 モード設定処理を終了するか否かを判定 し、 終了しないと判定した場合、 処理をステップ S 1に戻し、 それ以降の処理を 繰り返す。
また、 モード設定処理を終了すると判定した場合、 CPU 3 1は、 ステップ S 4 に処理を進め、 終了処理を行い、 モード設定処理を終了する。
以上のように、 動画像取り込みに関するモードを決定した CPU 3 1は、 次に、 画像取り込み制御処理を実行する。 図 8のフローチヤ一トを参照して画像取り込 み制御処理を説明する。
CPU 3 1は、 ステップ S 2 1において、 現在の動画像取り込みに関するモード が高画質モードであるか否かを判定する。 高画質モードであると判定した場合、 CPU 3 1は、 処理をステップ S 2 2において、 図 1の CCD 1 2、 TG 5 1を制御し て、 全ての画素の画像信号を取り込み、 高画質な動画像データを生成する。 高画質モード時において、 動画像の第 1フィールドが抽出される場合、 図 3に 示される垂直制御信号 V 3および V 7に対応するフォトダイォード 6 1に蓄積さ れた電荷が垂直転送レジスタ 6 2に転送され、 画像の第 2フィールドが抽出され る場合、 垂直制御信号 V 1および V 5に対応するフォトダイオード 6 1に蓄積さ れた電荷が垂直転送レジスタ 6 2に転送される。 以上のように、 CPU 3 1は、 CCD 1 2が全てのフォトダイォード 6 1より電荷を取り込み、 1フレーム分の動 画像データを出力するように、 TG 5 1を制御する。
ステップ S 2 2の処理を終了すると CPU 3 1は、 処理をステップ S 2 4に進め る。
また、 ステップ S 2 1において、 現在の動画像取り込みに関するモードが高画 質モードでない (低画質モードである) と判定した場合、 CPU 3 1は、 ステップ S 2 3に処理を進め、 図 1の CCD 1 2、 TG 5 1を制御して、 一部の画素の画像信 号を取り込み、 低画質な動画像データを生成する。
低画質モード時において、 1フレーム分の電荷を抽出する場合、 図 3に示され る垂直制御信号 V 5および V 7に対応するフォトダイォード 6 1 (図 3の Aのフ オトダイオード) に蓄積された電荷のみが垂直転送レジスタ 6 2に転送される。 これにより、 図 9に示されるように、 垂直方向のデータ量が 5分の 1に削減され る。
CCD 1 2には入射光より R (Red) , G (Green) 、 および B (Blue) のフィルタ がべィヤーパターンで配列された原色フィルタが用いられており、 図 9に示され るように、 フォトダイォード 6 1は、 G信号に対応する電荷が抽出されるフォト ダイォード、 および B信号に対応する電荷が抽出されるフォトダイォードが図 中横方向に隣り合う行と、 R信号に対応する電荷が抽出されるフォトダイオード、 および G信号に対応する電荷が抽出されるフォトダイォードが図中横方向に隣 り合う行とが、 図中縦方向に、 交互に配置されている。
すなわち、 図中上から 1行目の行は、 G信号に対応する電荷が抽出されるフォ トダイォード、 および B信号に対応する電荷が抽出されるフォトダイォードが 隣り合う行であり、 図中上から 2行目の行は、 R信号に対応する電荷が抽出され るフォトダイォード、 および G信号に対応する電荷が抽出されるフォトダイォ ードが隣り合う行である。
低画質モードにおいては、 以上のような構成のフォトダイォード 6 1のうち、 図 9の Aの行の電荷が取り込まれ、 垂直方向のデータ量が 5分の 1に削減される。 また、 以上のように、 垂直転送レジスタ 6 2に転送された電荷は、 上述したよ うに、 1段ずつ、 水平転送レジスタ 6 3に転送される。 このとき、 水平転送レジ スタ 6 3は、 TG 5 1より CCD 1 2に供給される RG信号に制御され、 所定の列の 電荷以外の電荷を排出する。 例えば、 水平転送レジスタ 6 3は、 RG信号の制御 に基づいて、 5列おきに電荷を残すようにし、 間の 4列の電荷を吐き出しドレイ ンより排出する。 このように水平転送レジスタを動作させることにより、 水平方 向のデータ量が 5分の 1に削減される。
以上のように、 CPU 3 1は、 CCD 1 2の一部のフォトダイォードより電荷を取り 込み、 1フレーム分の動画像データを生成する。 図 8に戻り、 ステップ S 2 3の処理を終了すると、 CPU 3 1は、 ステップ S 2 4に処理を進める。
ステップ S 2 4において、 CPU 3 1は、 画像取り込み制御処理を終了するか否 かを判定する。 まだ終了しないと判定した場合、 CPU 3 1は、 処理をステップ S 2 1に戻し、 それ以降の処理を繰り返す。
また、 ステップ S 2 4において、 ユーザの入力などに基づいて、 画像取り込み 制御処理を終了すると判定した場合、 CPU 3 1は、 ステップ S 2 5において、 終 了処理を行って、 画像取り込み制御処理を終了する。
以上のようにして取り込んだ動画像データを、 CPU 3 1は、 USBコントローラ 4 0等に供給し、 USBケーブル 9 2を介して PDA 9 1に供給することができる。 これにより、 携帯電話機 1は、 オーバーフローやコマ落ち等を発生させずに、 動 画像データを PDA 9 1に供給することができる。 なお、 フォトダイオード 6 1力、 らの読み出し方法は、 上述した方法に限らず、 画質モードに応じて読み出される 電荷の量が制御されれば、 どのような方法であってもよい。
また、 取り込んだ動画像データを供給する際、 CPU 3 1は、 画像データを圧縮 してから PDA 1に供給するようにしてもよレ、。 その場合、 通信速度に応じて、 す なわち、 動画像取り込みモードに応じて、 圧縮率を変更することができる。 この とき、 上述したように、 画質モードに応じて、 CCD 1 2からの読み出し電荷の量 は、 変化しない。
図 1 0のフローチヤ一トを参照して、 CPU 3 1による画像データ圧縮処理を説 明する。
ステップ S 4 1において、 CPU 3 1は、 現在のモードが高画質モードであるか 否かを判定し、 高画質モードであると判定した場合、 ステップ S 4 2において、 第 1の圧縮率により高画質な動画像データを圧縮し、 処理をステップ S 4 4に進 める。
また、 ステップ S 4 1において、 現在のモードが高画質モードではない (低画 質モードである) と判定した場合、 CPU 3 1は、 ステップ S 4 3において、 第 1 の圧縮率よりも高い圧縮率である第 2の圧縮率により低画質な動画像データを圧 縮し、 処理をステップ S 4 4に進める。
ステップ S 4 4において、 CPU 3 1は、 画像データ圧縮処理を終了するか否か を判定し終了しないと判定した場合、 処理をステップ S 4 1に戻し、 それ以降の 処理を繰り返す。
また、 ステップ S 4 4において、 何らかの理由により画像データ圧縮処理を終 了すると判定した場合、 CPU 3 1は、 ステップ S 4 5において、 終了処理を行つ た後、 画像データ圧縮処理を終了する。
以上のようにして、 CPU 3 1は、 取り込んだ動画像データを、 動画像取り込み モードに応じた圧縮率で圧縮し、 USBコントローラ 4 0等に供給し、 USBケープ ル 9 2を介して PDA 9 1に供給することができる。 これにより、 携帯電話機 1は、 オーバーフローやコマ落ち等を発生させずに、 動画像データを PDA 9 1に供給す ることができる。
また、 上述の実施例を組み合わせた新たな実施例が考えられる。 すなわち、 通 常考えられるものとして、 高画質モード (高速転送可能) 時、 CCD 1 2から読み 出される電荷量を多く して、 低圧縮し、 低画質モード (低速転送のみ可能) 時、 CCD 1 2から読み出される電荷量を少なく して、 高圧縮することにする。 さらに、 圧縮処理を優先した場合には、 高画質モード (高速転送可能) 時、 CCD 1 2から 読み出される電荷量を少なく して、 低圧縮したり、 低画質モード (低速転送のみ 可能) 時、 CCD 1 2から読み出される電荷量を多く して、 高圧縮する。
以上においては、 動画像データの供給先である PDA 9 1の通信速度に関する情 報に応じて動画像取り込みモードを変更するように説明したが、 例えば、 図 1 1 Aおよび図 1 1 Bに示されるように、 携帯電話機 1と PDA 9 1とが LAN (Local Area Ne twork) やインターネットに代表されるネットワーク 1 0 1を介して接 続されているような場合、 このネットワーク 1 0 1の通信帯域やトラフィック状 態等に応じて、 動画像取り込みモードを調整するようにしてもよい。 トラフイツ ク状態の判断は、 例えば、 機器間の通信確立初期段階において、 通信相手やその 通信相手の通信能力を知るために発行されるコマンドに対して、 その通信相手か ら発行されるレスポンスを得るまでの時間を計時することにより判断される。 例えば、 図 1 1 Aに示されるように、 ネットワーク 1 0 1 Aが広帯域のネット ワークであったり、 混雑していなかったりする場合、 すなわち、 高速通信が可能 な場合、 携帯電話機 1の CPU 3 1は、 動画像取り込みモードを高画質モードにし、 高画質な動画像データを生成し、 PDA 9 1に供給する。 PDA 9 1は、 取得した高 画質な動画像データに対応する高画質動画像 9 4を表示部に表示する。
また、 例えば、 図 1 1 Bに示されるように、 ネットワーク 1 0 1 Bが狭帯域の ネットワークであったり、 混雑していたりするような場合、 すなわち、 高速通信 が不可能な場合、 携帯電話機 1の CPU 3 1は、 動画像取り込みモードを低画質モ ードにし、 低画質でデータ量の少ない動画像データを生成し、 PDA 9 1に供給す る。 PDA 9 1は、 取得した低画質な動画像データに対応する低画質動画像 9 3を 表示部に表示する。
次に、 図 1 2のフローチャートを参照して、 上述した場合におけるモード設定 処理を説明する。
最初に、 CPU 3 1は、 USB コントローラ 4 0を制御して、 現在の通信速度等に 関する情報を含む通信情報を生成させ、 バス 3 0を介して取得する。 CPU 3 1は、 ステップ S 6 1において、 その通信情報を取得したか否かを判定し、 取得したと 判定した場合、 ステップ S 6 2において、 取得した通信情報に基づいて、 動画像 取り込みに関するモードを設定し、 ステップ S 6 3に処理を進める。
ステップ S 6 1において、 通信情報を取得していないと判定した場合、 CPU 3 1は、 ステップ S 6 2の処理を省略して、 ステップ S 6 3に処理を進める。
ステップ S 6 3において、 CPU 3 1は、 モード設定処理を終了するか否かを判 定し、 終了すると判定した場合、 処理をステップ S 6 1に戻し、 それ以降の処理 を繰り返す。 また、 ユーザの指示等に基づいて、 モード設定処理を終了すると判定した場合、 CPU 3 1は、 ステップ S 6 4に処理を進め、 終了処理を行った後、 モード設定処 理を終了する。
以上のようにして、 CPU 3 1は、 USBコントローラ 4 0の現在の通信速度に応 じて、 動画像取り込みに関するモードを設定することができる。 これにより、 動 画像データの供給先の PDA 9 1 との間に接続されているネットワーク 1 0 1のト ラフィック状況等が変化した場合においても、 正常に動画像データを PDA 9 1に 供給することができ、 PDA 9 1に、 オーバーフローやコマ落ち等を発生させずに、 供給した動画像データに対応する動画像を表示させることができる。
なお、 以上においては、 動画像データを供給する携帯電話機 1と、 動画像デー タを取得する PDA 9 1の間に、 ネッ トワーク 1 0 1が存在する場合について説明 したが、 これに限らず、 例えば、 中継装置のような携帯電話機 1および PDA 9 1 と通信可能な通信装置であってもよい。
また、 以上に説明した場合以外にも、 動画像データを供給される PDA 9 1の指 示に基づいて、 CPU 3 1が動画像取り込みに関するモードを設定するようにして もよい。
動画像データの受け手側の要求に基づいて、 動画像取り込みモードを設定する 場合のモード設定処理について、 図 1 3のフローチヤ一トを参照して説明する。
CPU 3 1は、 ステップ S 8 1において、 USBコントローラ 4 0を制御して、 PDA 9 1より画質指定要求を取得したか否かを判定し、 取得したと判定した場合、 ス テツプ S 8 2において、 取得した画質指定要求に基づいて、 動画像取り込みに関 するモードの設定を更新し、 処理をステップ S 8 3に進める。
ステップ S 8 1において、 PDA 9 1より画質指定要求を取得していないと判定 した場合、 CPU 3 1は、 ステップ S 8 2の処理を省略し、 ステップ S 8 3に処理 を進める。
ステップ S 8 3において、 CPU 3 1は、 USBコントローラ 4 0を制御して、 PDA 9 1より指定解除要求を取得したか否かを判定し、 取得したと判定した場合、 ス テツプ S 8 4において、 ステップ S 8 2の処理により更新したモードの設定を元 に戻し、 処理をステップ S 8 5に進める。
また、 ステップ S 8 3において、 指定解除要求を取得していないと判定した場 合、 CPU 3 1は、 ステップ S 8 4の処理を省略し、 処理をステップ S 8 5に進め る。
そして、 CPU 3 1は、 ステップ S 8 5において、 モード設定処理を終了するか 否かを判定し、 終了しないと判定した場合、 処理をステップ S 8 1に戻し、 それ 以降の処理を繰り返す。
また、 ユーザの指示等に基づいて、' モード設定処理を終了すると判定した場合、 CPU 3 1は、 ステップ S 8 6において、 終了処理を行った後、 モード設定処理を 終了する。
すなわち、 CPU 3 1は、 動画像データの供給先である PDA 9 1より画質指定要 求を取得した場合、 指定解除要求を取得するまで、 その要求されたモードに固定 し、 他の条件による設定よりも優先させる。 そして、 指定解除要求を取得すると、 CPU 3 1は、 モード設定を、 画質指定要求を取得する前のモードに戻す。
以上のようにして、 CPU 3 1は、 PDA 9 1側からの要求に基づいて、 動画像取 り込みに関するモードの設定を行うことができる。 これにより、 例えば、 PDA 9 1のユーザが表示部に表示された動画像を確認しながら、 動画像の画質を指定す ることができる。
また、 携帯電話機 1は、 無線通信部 4 2を利用して、 図 1 4 Aに示されるよう に、 無線通信により他の携帯電話機と動画像データの授受を行うことも、 また、 図 1 4 Bに示されるように、 USBコネクタ 4 1に接続された PDA 9 1に動画像デ ータを供給することも可能である。 このとき、 例えば、 図 1 4 Aに示されるよう に、 無線通信部 4 2を用いた無線通信の場合、 最大通信速度は 9 6 O O bps とな り、 図 1 4 Bに示されるように、 USBコントローラを使用する有線通信の場合、 最大通信速度は 4 8 0 Mbpsとなる。 このように、 使用する通信部等によっても通信速度が変化する場合があり、 CPU 3 1は、 動画像データの供給に使用する通信部に応じて、 モード設定を行う ようにしてもよレ、。
例えば、 図 1 4 Aに示されるように、 携帯電話機 1と同様の構成であり、 かつ 同様に動作する携帯電話機 1 Aの左上部に設けられたレンズ部 1 1を介して入射 された入射光を CCD 1 2において光電変換して得られた動画像データを、 最大通 信速度 9 6 0 0 bpsの無線通信を用いて、 携帯電話機 1と同様の構成であり、 か つ同様に動作する携帯電話機 1 Bに供給する場合、 携帯電話機 1 Aの CPU 3 1は、 動画像取り込みに関するモードを低画質モードに設定する。
設定された低画質モードに基づいて、 データ量の少ない動画像データが取り込 まれると、 携帯電話機 1 Aの CPU 3 1は、 その動画像データに対応する低画質な 動画像を携帯電話機 1 Aの正面に設けられたディスプレイ 3 7に表示させるとと もに、 その動画像データを、 無線通信部 4 2に供給し、 携帯電話機 1 Aの右上部 に設けられたアンテナ 8 1を介して携帯電話機 1 Bに転送させる。
携帯電話機 1 Bの CPU 3 1は、 送信された動画像データを、 携帯電話機 1 Bの 右上部に設けられたアンテナ 8 1を介して取得すると、 対応する低画質動画像 9 3を、 携帯電話機 1 Bの正面に設けられたディスプレイ 3 7に表示させる。
また、 例えば、 図 1 4 Bに示されるように、 携帯電話機 1の左上部に設けられ たレンズ部 1 1を介して入射された入射光を CCD 1 2において光電変換して得ら れた動画像データを、 最大通信速度 4 8 0 Mbpsの USB通信を用いて、 PDA 9 1 に供給する場合、 携帯電話機 1の CPU 3 1は、 動画像取り込みに関するモードを 高画質モードに設定する。
設定された高画質モードに基づいて、 データ量の少ない動画像データが取り込 まれると、 携帯電話機 1の CPU 3 1は、 その動画像データに対応する高画質な動 画像を携帯電話機 1の正面に設けられたディスプレイ 3 7に表示させるとともに、 その動画像データを、 USB コントローラ 4 0に供給し、 携帯電話機 1の下部に設 けられた USBコネクタ 4 1に接続された USBケーブル 9 2を介して PDA 9 1に転 送させる。
PDA 9 1は、 その動画像データを取得すると、 対応する高画質動画像 9 4を、 ディスプレイに表示させる。
図 1 5のフローチャートを参照して、 以上のような場合のモード設定処理を説 明する。
最初に、 ステップ S 1 0 1において、 CPU 3 1は、 USBコントローラ 4 0およ び無線通信部 4 2を制御し、 それぞれから通信能力に関する情報を取得し、 使用 する通信部が高速通信可能か否かを判定する。 高速通信可能であると判定した場 合、 CPU 3 1は、 ステップ S 1 0 2において、 高画質モードを設定し、 モード設 定処理を終了する。 また、 ステップ S 1 0 1において、 高速通信が不可能である と判定した場合、 CPU 3 1は、 ステップ S 1 0 3において、 低画質モードを設定 し、 モード設定処理を終了する。
以上のようにして、 CPU 3 1は、 使用する通信部の能力に応じて動画像の取り 込みに関するモードを設定することができる。
また、 図 1 6 Aに示されるように、 CPU 3 1力 動画像データを取得する PDA 9 1からの要求に基づいて、 CCD 1 2において、 静止画像を所定の画質で取り込 むことができるようにしてもよレ、。 その際、 静止画像は、 リアルタイムに転送す る必要が無いため、 データ量が多くても正常に転送可能であるので、 動画像取り 込みに関する現在のモードとは関係なく、 予め設定されたモードで取り込むこと ができるようにしてもよい。 すなわち、 現在、 動画像が低画質モードで転送され ている場合においても、 携帯電話機 1の静止画像撮影モードが高画質撮影モード で設定されている場合は、 その設定情報に基づいて静止画を取り込むことができ る。
図 1 7のフローチヤ一トを参照して、 PDA 9 1からの要求に基づいて、 静止画 像を高画質モードで取り込む際のモ一ド設定処理を説明する。 最初に、 CPU 3 1は、 ステップ S 1 2 1において、 USB コントローラ 4 0を制 御して、 静止画像キヤプチャ指示を取得したか否かを判定し、 取得したと判定す るまで待機する。
取得したと判定した場合、 CPU 3 1は、 ステップ S 1 2 2に処理を進め、 高画 質モードに設定する。 そして、 ステップ S 1 2 3において、 CPU 3 1は、 CCD 1 2を制御して、 静止画像データを取得したか否かを判定し、 取得したと判定する まで待機する。
CCD 1 2において、 静止画像を取り込み、 静止画像データを取得したと判定し た場合、 CPU 3 1は、 処理をステップ S 1 2 4に進め、 高画質モードに変更した 設定を元に戻し、 静止画像キヤプチヤの処理を終了し、 動画像の取り込みを再開 する。
CPU 3 1は、 ステップ S 1 2 5において、 モード設定処理を終了するか否かを 判定し、 終了しないと判定した場合、 処理をステップ S 1 2 1に戻し、 それ以降 の処理を繰り返す。
また、 モード設定処理を終了すると判定した場合、 CPU 3 1は、 ステップ S 1 2 6において、 終了処理を行い、 モード設定処理を終了する。
以上のようにして、 CPU 3 1は、 PDA 9 1力 らの要求に基づいて、 動画像取り 込みに関する現在のモードに関係なく、 高画質の静止画像に対応する静止画像デ ータを取得することができる。
取得した静止画像データは、 さらに、 図 1 6 Bに示されるように、 PDA 9 1力 らの要求に基づいて、 PDA 9 1に供給され、 PDA 9 1の表示部に対応する静止画 像 1 1 1が表示されるようにしてもよい。 静止画像データ転送中は、 動画像デー タの最大転送速度が低下するので、 携帯電話機 1の CPU 3 1は、 動画像の取り込 みに関するモードを低画質モードに変更する。 その際、 PDA 9 1の表示部には、 取り込まれた高画質な静止画像 1 1 1とともに、 低画質な動画像 9 3が表示され る。 そして、 全ての静止画像データの転送が終了すると、 CPU 3 1は、 動画像の 取り込みに関するモードを元に戻す。 図 1 8のフローチャートを参照して、 静止画像データを転送する際のモード設 定処理を説明する。
最初に、 ステップ S 1 4 1において、 CPU 3 1は、 静止画像転送指示を取得し たか否かを判定し、 取得したと判定するまで待機する。 取得したと判定した場合、 CPU 3 1は、 ステップ S 1 4 2に処理を進め、 動画像取り込みに関するモードを 低画質モードに設定し、 USB コントローラ 4 0を制御して、 静止画像データの転 送を開始する。
ステップ S 1 4 3において、 CPU 3 1は、 静止画像の転送処理が終了したか否 かを判定し、 終了したと判定するまで待機する。 静止画像の転送処理が終了した と判定した場合、 CPU 3 1は、 処理をステップ S 1 4 4に進め、 低画質モードに 設定した動画像取り込みに関するモードの設定を元に戻す。
そして、 CPU 3 1は、 ステップ S 1 4 5において、 終了するか否かを判定し、 終了しないと判定した場合、 ステップ S 1 4 1に処理を戻し、 それ以降の処理を 繰り返す。 また、 ステップ S 1 4 5において、 終了すると判定した場合、 CPU 3 1は、 ステップ S 1 4 6において、 終了処理を行った後、 モード設定処理を終了 する。
以上のようにして、 携帯電話機 1の CPU 3 1は、 PDA 9 1からの要求に基づい て、 静止画像をキヤプチヤし、 その静止画像データを PDA 9 1に供給することが できる。
また、 携帯電話機 1に接続される通信装置は、 PDA 9 1以外であってもよく、 例えば、 図 1 9に示されるように、 2台の携帯電話機 1 (携帯電話機 1 Aおよび 1 B ) 、 並びに PDA 9 1が LANやインターネットに代表されるネッ トワーク 1 2 0を介して接続されるようにしてもよい。
図 1 9に示される例においては、 携帯電話機 1 Aにおいて静止画像が取り込ま れ、 その静止画像データが、 ネッ トワーク 1 2 0を介して PDA 9 1に供給され、 内蔵する記憶部に記憶される (静止画像 1 1 1 Aおよび 1 1 1 B ) 。 また、 携帯 電話機 1 Bにおいて動画像が取り込まれ、 その動画像データがネッ トワーク 1 2 0を介して PDA 9 1に供給され、 その動画像データに対応する動画像 1 1 2が表 示部に表示されている。 また、 PDA 9 1は、 携帯電話機 1 Aより取得し、 内蔵す る記憶部に記憶している静止画像 1 1 1 Aおよび 1 1 1 Bを、 ネッ トワーク 1 2 0を介して携帯電話機 1 Bに配信しており、 携帯電話機 1 Bにおいて、 携帯電話 機 1 Aより PDA 9 1に供給された静止画像 1 1 1 Aおよび 1 1 1 Bを確認するこ とができる。
このような場合における各装置の処理の流れの例を、 図 2 0のタイミングチヤ ートを参照して説明する。
最初に、 携帯電話機 1 Bは、 ステップ S 1 8 1において、 動画像の取り込みに 関するモードを高画質モードに設定し、 ステップ S 1 8 2において、 動画像デー タの生成および転送を開始する。 この処理に対応して、 PDA 9 1は、 ステップ S 1 7 1において、 携帯電話機 1 Bより転送される動画像データの受信を開始する。 また、 携帯電話機 1 Aは、 ステップ S 1 6 1において、 撮像処理を行い、 静止 画像データを生成し、 ステップ S 1 6 2において、 静止画像データの転送を開始 する。 この処理に対応して、 PDA 9 1は、 ステップ S 1 7 2において、 携帯電話 機 1 Aより転送される静止画像データの受信を開始する。
ステップ S 1 7 2において、 静止画像データの受信を開始した PDA 9 1は、 ス テツプ S 1 7 3において、 静止画像データの受信開始を携帯電話機 1 Bに通知す る。 携帯電話機 1 Bは、 ステップ S 1 8 3において、 その通知を取得すると、 ス テツプ S 1 8 4において、 動画像の取り込みに関するモードを低画質モードに設 定する。 これ以降、 携帯電話機 1 Bにおいては、 低画質の動画像に対応する、 デ ータ量の少ない動画像データが生成され、 PDA 9 1に転送される。
また、 PDA 9 1は、 ステップ S 1 7 4において、 受信した静止画像データの携 帯電話機 1 Bへの配信を開始する。 この処理に伴い、 携帯電話機 1 Bは、 ステツ プ S 1 8 5において、 PDA 9 1より配信される静止画像データの受信を開始する。 携帯電話機 1 Aは、 全ての静止画像データを PDA 9 1に転送すると、 ステップ S 1 6 3において、 静止画像データの転送を終了し、 PDA 9 1に通知する。 PDA9 1は、 ステップ S 1 7 5においてその通知を取得すると、 ステップ S 1 76において、 静止画像データの受信が終了したことを携帯電話機 1 Bに通知す る。 携帯電話機 1 Bは、 ステップ S 1 8 6において、 その通知を取得する。
また、 PDA 9 1は、 全ての静止画像データを携帯電話機 1 Bに配信すると、 ス テツプ S 1 7 7において、 静止画像データの配信を終了し、 携帯電話機 1 Bに通 知する。
携帯電話機 1 Bは、 ステップ S 1 8 7においてその通知を取得すると、 その通 知とステップ S 1 8 6において取得した通知とにより、 ネッ トワーク 1 2 0のト ラフィックが低下したと判断し、 ステップ S 1 8 8において、 動画像取り込みに 関するモードを高画質モードに設定する。
以上のようにして、 携帯電話機 1 Bは、 PDA 9 1に最適なデータ量の動画像デ ータを供給することができる。
なお、 以上においては、 携帯電話機 1の撮像素子として CCDを用いるように 説明したが、 これに限らず、 例えば、 CMOS (Complementary Metal Oxide Semiconductor) センサを用いるようにしてもよい。
図 2 1は、 CMOSセンサの構成例を示す図である。
図 2 1において、 CMOSセンサには、 フォトダイオード等の光電変換素子、 そ の素子の蓄積電荷を読み出して増幅する増幅型 M0S (Metal Oxide
Semiconductor) トランジスタ、 およびその増幅型 M0S トランジスタを活性する 選択 M0S トランジスタ等を有する画素 1 2 1— 1 1乃至 1 2 1— 3 3が 3行 3 列に配置されている。
これらの画素 1 2 1— 1 1乃至 1 2 1 _ 3 3には、 垂直出力線 Vsig 1 2 4 - 1乃至 1 2 4— 3が接続されており、 シフトレジスタ 1 2 2より出力される制御 信号 VSEL1 2 3 - 1乃至 1 2 3— 3によって選択された水平ラインの画素に蓄 積された電荷が垂直出力線に出力される。 垂直シフ トレジスタ 1 2 2は、 図 1乃 至 3を参照して説明した CCD 1 2の場合と同様に、 CMOSセンサの外部の Vドラ ィバ 5 2の制御に基づいて、 制御信号 VSEL 1 2 3— 1乃至 1 2 3— 3を出力す る。
垂直出力線に出力された水平ライン毎の電荷は、 蓄積キャパシタを有する蓄積 部 1 2 5— 1乃至 1 2 5— 3に蓄積される。 そして、 水平シフ トレジスタ 1 2 7 より出力された制御信号によって選択されたスィツチ 1 2 6— 1乃至 1 2 6— 3 がオンされると、 そのスィッチに接続された蓄積部に蓄積された電荷は、 出力線 VHに読み出され、 積分器 1 2 8に供給される。 水平シフトレジスタ 1 2 7は、 図 1乃至 3を参照して説明した CCD 1 2の場合と同様に、 CMOSセンサの外部の TG5 1の制御に基づいて、 制御信号をスィツチ 1 2 6— 1乃至 1 2 6— 3に供 給する。
従って、 CPU3 1は、 CCD 1 2の揚合と同様に、 TG 5 1および Vドライノく 5 2 を介して、 CMOSセンサの垂直シフトレジスタ 1 2 2および水平シフトレジスタ 1 2 7を制御し、 動画像取り込みに関するモードに応じて、 電荷を取り出す画素 を選択することができる。
すなわち、 CPU 3 1は、 図 2 2に示されるように、 例えば、 図 9に示される CCD 1 2の場合と同様に、 R, G、 または Bのいずれかに対応する各画素がべィャ 一パターンで配置された CMOSセンサより、 図中の丸印の画素のみを抽出するな ど、 所定の間隔で電荷を抽出する画素を選択し、 生成された画像データのデータ 量を減らすことができる。
これにより、 CPU 3 1は、 CCD 1 2の場合と同様に、 通信速度や通信相手の要 求などに基づいて、 動画像取り込みに関するモー ドを設定し、 そのモードに応じ たデータ量の動画像データを生成することができ、 適切なデータ量の動画像デー タを供給することができる。
以上においては、 CMOSセンサには、 フォ トレジスタ 1 2 1 — 1 1乃至 1 2 1 — 3 3が 3行 3列に配置されているように説明したが、 これに限らず、 フオ トレ ジスタの数はいくつであってもよレヽ。 以上のように、 本発明を適用した携帯電話機 1は、 通信相手機器である他の機 器の通信能力、 並びに、 ネットワークの帯域幅やトラフィック状態等の、 携帯電 話機 1の外部の条件による外的要因や、 動画像を送信中における静止画の送受信 などのような、 本発明の撮像装置における内的要因に応じて、 転送する動画像デ ータのデータ量を制御することにより最適なデータ量の画像データを他の機器に 供給することが出来る。
その際、 画像データのデータ量は予め決められたプログラムに従って決定され るようにしてもよいし、 画像データが送信される送信速度とネットワークの帯域 により随時決定されるようにしてもよい。 前者の場合、 例えば、 単に USBの場 合は全画素読み出し、 無線の場合は間引き読み出しというように予めプログラム されている。 後者の場合、 例えば、 ネットワークの空き帯域を、 一定期間ごとに
P I N Gバケツ トのようなものを相手機器に送信し、 相手機器からのレスポンス が帰ってくる時間を測定する等して監視し、 その空き帯域と通信速度から最適な 画像データの間引き率 (圧縮率) を決定する。
なお、 転送画像データのデータ量を制御する要因は、 上述した以外であっても よく、 例えば、 携帯電話機 1の CPU 3 1の負荷状況等によっても制御されるよう にしてもよい。
なお、 以上においては、 カメラ機能を有する携帯電話機 1を用いて説明した力 これに限らず、 例えば、 カメラ機能を有する PDAやパーソナルコンピュータ、 通信機能付きデジタルカメラ等、 カメラ機能と通信機能を有する電子機器であれ ば何でもよい。
また、 携帯電話機 1は、 USB コントロール部 4 0および無線通信部 4 2の 2つ の通信機能を備えるように説明したが、 これに限らず、 通信機能を 1つ備えるよ うにしてもよいし、 3つ以上備えるようにしてもよい。
さらに、 その通信機能は、 有線通信であってもよいし、 無線通信であってもよ レ、。 さらに、 利用される通信規格は、 有線通信の場合、 USB以外にも、 例えば、 IEEE 1 3 9 4、 SCS I、 Ethernet (R)を用いた IEEE 8 0 2 . 3等であってもよレヽ し、 それ以外の通信規格であってもよい。 また、 無線通信の場合、 通信キャリア を介した電話回線経由の通信以外にも、 IEEE 8 0 2 . l l x、 ブルートゥース、 赤外線を用いた IrDA等の近距離無線通信であってもよい。
また以上においては、 動画像データを取得する装置が PDA 9 1である場合につ いて説明したが、 本発明は、 これに限られるものではなく、 例えば、 携帯電話機、 デジタルビデオカメラ、 あるいはテレビジョン受像機などの電子機器に広く適用 することができる。
さらに、 以上においては、 モード設定処理におけるモード設定の条件として、 複数の条件をそれぞれ個別に説明したが、 これに限らず、 上述した複数の条件を 組み合わせて同時に適用し、 それらの条件に基づいて、 モードを設定するように してもよい。
上述した一連の処理は、 ハードウェアにより実行させることもできるが、 ソフ トウエアにより実行させることもできる。 一連の処理をソフトウエアにより実行 させる場合には、 そのソフトウェアを構成するプログラムが、 専用のハードゥエ ァに組み込まれているコンピュータ、 または、 各種のプログラムをインス トール することで、 各種の機能を実行することが可能な、 例えば汎用のパーソナルコン ピュータなどに、 記録媒体からインス トールされる。
コンピュータにィンストールされ、 コンピュータによって実行可能な状態とさ れるプログラムを記録する記録媒体は、 図 1に示されるように、 磁気ディスク 4 4 (フレキシブルディスクを含む) 、 光ディスク 4 5 (CD-ROM (Compact Di sc- Read On ly Memory) 、 DVD (Dig ital Versat i l e Di sc)を含む) 、 光磁気デイス ク 4 6 (MD (Mini- Di sc) (登録商標) を含む) 、 もしくは半導体メモリ 4 7など よりなるパッケージメディア、 または、 プログラムが一時的もしくは永続的に記 録される ROM 3 2やフラッシュメモリ 3 5などにより構成される。 記録媒体への プログラムの記録は、 必要に応じてルータ、 モデムなどのインターフェースを介 して、 公衆回線網、 ローカルエリアネットワーク、 またはインターネッ トなどの ネッ トワーク、 デジタル衛星放送といった、 有線または無線の通信媒体を利用し て行われる。
なお、 本明細書において、 記録媒体に記録されるプログラムを記述するステツ プは、 記載された順序に沿って時系列的に行われる処理はもちろん、 必ずしも時 系列的に処理されなくとも、 並列的あるいは個別に実行される処理をも含むもの である。 産業上の利用可能性
以上のように、 本発明によれば、 動画像データを他の装置に供給することがで きる。 特に、 最適なデータ量の画像データを他の装置に供給することができる。 また、 通信相手機器である他の機器の通信能力ゃネッ トワークの帯域幅やトラフ ィック状態などの外的要因や、 動画像を送信中に静止画を送信または受信するな どの本発明の撮像装置における内的要因に応じて、 転送する動画像データのデー タ量を制御することにより最適なデータ量の画像データを他の機器に供給するこ とが出来る。

Claims

請求の範囲
1 . 被写体を撮像して得られる画像を画像データとして取り込む撮像手段と、 前記撮像手段による撮像処理により取り込まれた前記画像データを、 ネットヮ ークを介して接続された通信装置に送信する送信手段と、
前記送信手段が送信する前記画像データの通信速度に応じて、 前記撮像手段に より取り込まれる画像データのデータ量を調整する調整手段と
を備えることを特徴とする撮像装置。
2 . 複数の前記送信手段と、
前記複数の送信手段から任意の送信手段を選択する選択手段と
をさらに備え、
前記調整手段は、 前記選択手段により選択された送信手段から送信する前記画 像データの通信速度に応じて、 前記撮像手段により取り込まれる画像データのデ 一タ量を調整する '
ことを特徴とする請求の範囲第 1項に記載の撮像装置。
3 . 前記送信手段は、 前記画像データ以外の他のデータをさらに送信し、 前記調整手段は、 前記送信手段が前記他のデータを送信する際、 前記撮像手段 により取り込まれる画像データのデータ量を少なくする調整を行う
ことを特徴とする請求の範囲第 1項に記載の撮像装置。
4 . 被写体を撮像して得られる画像を画像データとして取り込む撮像ステップ と、
前記撮像ステップによる撮像処理により取り込まれた前記画像データの、 ネッ トワークを介して接続された通信装置への送信を制御する送信制御ステップと、 前記送信制御ステップの処理により制御される前記画像データの通信速度に応 じて、 前記撮像ステップの処理により取り込まれる画像データのデータ量を調整 する調整ステップと
を含むことを特徴とする撮像方法。
5 . 前記画像データを送信する複数の送信部より、 前記送信制御ステップの処 理により前記送信を制御する送信部を選択する選択ステツプをさらに含み、 前記送信制御ステップは、 前記選択ステップの処理により選択された前記送信 部における前記送信を制御し、
前記調整ステップは、 前記選択ステップの処理により選択された送信部から送 信する前記画像データの通信速度に応じて、 前記撮像ステップの処理により取り 込まれる画像データのデータ量を調整する
ことを特徴とする請求の範囲第 4項に記載の撮像方法。
6 . 前記送信制御ステップは、 前記画像データ以外の他のデータの送信をさら に制御し、
前記調整ステップは、 前記送信制御ステップが前記他のデータを送信するよう に制御する際、 前記撮像ステップの処理により取り込まれる画像データのデータ 量を少なくする調整を行う
ことを特徴とする請求の範囲第 4項に記載の撮像方法。
7 . 被写体を撮像して得られる画像を画像データとして取り込む撮像手段と、 前記画像データを圧縮する圧縮手段と、
前記圧縮手段による圧縮処理により生成された圧縮画像データを、 ネットヮー クを介して接続された通信装置に送信する送信手段と、
前記送信手段が送信する前記圧縮画像データの通信速度に応じて、 前記圧縮手 段による圧縮処理における圧縮率を調整する調整手段と
を備えることを特徴とする撮像装置。
8 . 複数の前記送信手段と、
前記複数の送信手段から任意の送信手段を選択する選択手段と
をさらに備え、
前記調整手段は、 前記選択手段により選択された送信手段から送信する前記画 像データの通信速度に応じて、 前記圧縮手段による圧縮処理における圧縮率を調 整する ことを特徴とする請求の範囲第 7項に記載の撮像装置。
9 . 前記送信手段は、 前記圧縮画像データ以外の他のデータをさらに送信し、 前記調整手段は、 前記送信手段が前記他のデータを送信する際、 前記圧縮手段 による圧縮処理における圧縮率を高くする調整を行う
ことを特徴とする請求の範囲第 7項に記載の撮像装置。
1 0 . 被写体を撮像して得られる画像を画像データとして取り込む撮像ステツ プと、
前記画像データを圧縮する圧縮ステップと、
前記圧縮ステップによる圧縮処理により生成された圧縮画像データの、 ネッ ト ワークを介して接続された通信装置への送信を制御する送信制御ステップと、 前記送信制御ステップの処理により制御される前記圧縮画像データの通信速度 に応じて、 前記圧縮ステップによる圧縮処理における圧縮率とを調整する調整ス テツプと
を含むことを特徴とする撮像方法。
1 1 . 前記圧縮画像データを送信する複数の送信部より、 前記送信制御ステツ プの処理により前記送信を制御する送信部を選択する選択ステップをさらに含み、 前記送信制御ステップは、 前記選択ステップの処理により選択された前記送信 部における前記送信を制御し、
前記調整ステップは、 前記選択ステップの処理により選択された送信部から送 信する前記圧縮画像データの通信速度に応じて、 前記圧縮ステップによる圧縮処 理における圧縮率とを調整する
ことを特徴とする請求の範囲第 1 0項に記載の撮像方法。
1 2 . 前記送信制御ステップは、 前記圧縮画像データ以外の他のデータの送信 をさらに制御し、
前記調整ステップは、 前記送信制御ステップが前記他のデータを送信するよう に制御する際、 前記圧縮ステップによる圧縮処理における圧縮率を高くする調整 を行う ことを特徴とする請求の範囲第 1 0項に記載の撮像方法。
1 3 . 被写体を撮像して得られる画像を画像データとして取り込む撮像手段と、 前記画像データを圧縮する圧縮手段と、
前記圧縮手段による圧縮処理により生成された圧縮画像データを、 ネットヮー クを介して接続された通信装置に送信する送信手段と、
前記送信手段が送信する前記圧縮画像データの通信速度に応じて、 前記撮像手 段により取り込まれる画像データのデータ量と、 前記圧縮手段による圧縮処理に おける圧縮率とを調整する調整手段と
を備えることを特徴とする撮像装置。
1 4 . 複数の前記送信手段と、
前記複数の送信手段から任意の送信手段を選択する選択手段と
をさらに備え、
前記調整手段は、 前記選択手段により選択された送信手段から送信する前記圧 縮画像データの通信速度に応じて、 前記撮像手段により取り込まれる画像データ のデータ量と、 前記圧縮手段による圧縮処理における圧縮率とを調整する
ことを特徴とする請求の範囲第 1 3項に記載の撮像装置。
1 5 . 前記送信手段は、 前記画像データ以外の他のデータをさらに送信し、 前記調整手段は、 前記送信手段が前記他のデータを送信する際、 前記撮像手段 により取り込まれる画像データのデータ量を少なくする調整と、 前記圧縮手段に よる圧縮処理における圧縮率を高くする調整とを行う
ことを特徴とする請求の範囲第 1 3項に記載の撮像装置。
1 6 . 被写体を撮像して得られる画像を画像データとして取り込む撮像ステツ プと、
前記画像データを圧縮する圧縮ステップと、
前記圧縮ステップによる圧縮処理により生成された圧縮画像データの、 ネッ ト ワークを介して接続された通信装置への送信を制御する送信制御ステップと、 前記送信制御ステップの処理により制御される前記圧縮画像データの通信速度 に応じて、 前記撮像ステップの処理により取り込まれる画像データのデータ量と、 前記圧縮ステップによる圧縮処理における圧縮率とを調整する調整ステップと を含むことを特徴とする撮像方法。
1 7 . 前記圧縮画像データを送信する複数の送信部より、 前記送信制御ステツ プの処理により前記送信を制御する送信部を選択する選択ステップをさらに含み、 前記送信制御ステップは、 前記選択ステップの処理により選択された前記送信 部における前記送信を制御し、
前記調整ステップは、 前記選択ステップの処理により選択された送信部から送 信する前記圧縮画像データの通信速度に応じて、 前記撮像ステップの処理により 取り込まれる画像データのデータ量と、 前記圧縮ステップによる圧縮処理におけ る圧縮率とを調整する
ことを特徴とする請求の範囲第 1 6項に記載の撮像方法。
1 8 . 前記送信制御ステップは、 前記画像データ以外の他のデータの送信をさ らに制御し、
前記調整ステップは、 前記送信制御ステップが前記他のデータを送信するよう に制御する際、 前記撮像ステップの処理により取り込まれる画像データのデータ 量を少なくする調整と、 前記圧縮ステップによる圧縮処理における圧縮率を高く する調整とを行う
ことを特徴とする請求の範囲第 1 6項に記載の撮像方法。
PCT/JP2003/009633 2002-09-25 2003-07-30 撮像装置および方法 Ceased WO2004030347A1 (ja)

Priority Applications (9)

Application Number Priority Date Filing Date Title
US10/496,890 US8736687B2 (en) 2002-09-25 2003-07-30 Imaging apparatus and imaging method
EP03798370.7A EP1549053B1 (en) 2002-09-25 2003-07-30 Image pickup device and method
KR1020047007859A KR100933590B1 (ko) 2002-09-25 2003-07-30 촬상 장치 및 방법
EP18192408.5A EP3435656A1 (en) 2002-09-25 2003-07-30 Imaging apparatus and imaging method
US12/291,581 US8054334B2 (en) 2002-09-25 2008-11-12 Imaging apparatus and imaging method
US14/055,189 US9374523B2 (en) 2002-09-25 2013-10-16 Imaging apparatus and imaging method
US14/255,330 US10091413B2 (en) 2002-09-25 2014-04-17 Imaging apparatus and imaging method
US15/664,741 US10375297B2 (en) 2002-09-25 2017-07-31 Imaging apparatus and imaging method
US16/425,562 US20190313015A1 (en) 2002-09-25 2019-05-29 Imaging Apparatus And Imaging Method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002279219A JP3944726B2 (ja) 2002-09-25 2002-09-25 撮像装置および方法
JP2002-279219 2002-09-25

Related Child Applications (4)

Application Number Title Priority Date Filing Date
US10/496,890 A-371-Of-International US8736687B2 (en) 2002-09-25 2003-07-30 Imaging apparatus and imaging method
US12/291,581 Continuation US8054334B2 (en) 2002-09-25 2008-11-12 Imaging apparatus and imaging method
US14/055,189 Continuation US9374523B2 (en) 2002-09-25 2013-10-16 Imaging apparatus and imaging method
US14/255,330 Continuation US10091413B2 (en) 2002-09-25 2014-04-17 Imaging apparatus and imaging method

Publications (1)

Publication Number Publication Date
WO2004030347A1 true WO2004030347A1 (ja) 2004-04-08

Family

ID=32040450

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2003/009633 Ceased WO2004030347A1 (ja) 2002-09-25 2003-07-30 撮像装置および方法

Country Status (6)

Country Link
US (6) US8736687B2 (ja)
EP (2) EP1549053B1 (ja)
JP (1) JP3944726B2 (ja)
KR (1) KR100933590B1 (ja)
CN (2) CN1953514B (ja)
WO (1) WO2004030347A1 (ja)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4265765B2 (ja) * 2003-10-02 2009-05-20 ローム株式会社 携帯通信機器
JP4619051B2 (ja) * 2004-07-01 2011-01-26 株式会社リコー プリントシステム、プリント装置、撮像装置、プリント方法および画像送信方法
CN101027910A (zh) * 2004-09-22 2007-08-29 松下电器产业株式会社 图像编码装置
CN100463521C (zh) * 2004-10-26 2009-02-18 大竑企业股份有限公司 提高网际网络中影音资料成像效果及传输速率的方法
JP4537195B2 (ja) * 2004-12-28 2010-09-01 キヤノン株式会社 画像処理装置
JP4725183B2 (ja) * 2005-05-11 2011-07-13 ソニー株式会社 撮像装置、および方法
JP4745773B2 (ja) * 2005-09-21 2011-08-10 キヤノン株式会社 通信装置、及びその制御方法、並びにコンピュータプログラム
EP1793581A1 (en) 2005-12-05 2007-06-06 Microsoft Corporation Automatic selection of images for transfer depending on connection characteristics
JP5108261B2 (ja) * 2006-07-11 2012-12-26 株式会社リコー 情報処理装置およびデータ通信装置
US10337862B2 (en) * 2006-11-30 2019-07-02 Rafael Advanced Defense Systems Ltd. Digital mapping system based on continuous scanning line of sight
ES2342248B1 (es) * 2008-06-09 2011-04-29 Createcna Xxi S.L. Perfeccionamientos introducidos en la patente de invencion p200501769 por "sistema de emision en directo para television desde un telefono movil".
TW201021556A (en) * 2008-11-19 2010-06-01 Asia Optical Co An image capturing apparatus
EP2387848B1 (en) * 2009-01-19 2017-03-15 Dolby Laboratories Licensing Corporation Multiplexed imaging
JP5435456B2 (ja) * 2009-03-29 2014-03-05 雅英 田中 携帯電話、充電器およびデジタルフォトフレーム
US8879577B2 (en) 2010-02-18 2014-11-04 Hitachi, Ltd. Monitoring system, device, and method
JP2012084968A (ja) * 2010-10-07 2012-04-26 Pentax Ricoh Imaging Co Ltd デジタルカメラ
JP5482629B2 (ja) * 2010-11-16 2014-05-07 株式会社Jvcケンウッド 無線装置および通信方法
JP5485956B2 (ja) * 2011-09-09 2014-05-07 レノボ・シンガポール・プライベート・リミテッド カメラ・モジュールが画像データを転送する方法およびコンピュータ
WO2014080828A1 (ja) * 2012-11-22 2014-05-30 シャープ株式会社 表示装置および電子機器
KR102072731B1 (ko) * 2012-12-18 2020-02-04 삼성전자주식회사 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 저장매체
US20140337505A1 (en) * 2013-05-08 2014-11-13 Htc Corporation Method for data transmission and corresponding electronic device
JP5800249B2 (ja) * 2013-06-21 2015-10-28 カシオ計算機株式会社 撮像装置、撮影条件設定方法、及びプログラム
KR102081131B1 (ko) * 2013-12-30 2020-02-25 엘지디스플레이 주식회사 저속 구동이 가능한 표시장치
JP2016086245A (ja) * 2014-10-23 2016-05-19 キヤノン株式会社 画像処理装置、画像処理システム、画像処理装置の制御方法およびプログラム
JP6481225B2 (ja) * 2015-02-24 2019-03-13 オリンパス株式会社 情報端末装置、情報支援方法及び情報支援プログラム
USD801945S1 (en) 2015-03-06 2017-11-07 Samsung Display Co., Ltd. Mobile phone
WO2016148102A1 (ja) * 2015-03-16 2016-09-22 オリンパス株式会社 通信装置、通信システム及び通信方法
US10564921B2 (en) * 2016-03-09 2020-02-18 Ricoh Company, Ltd. Display device, display method, and display system for determining image display size
CN107124559B (zh) * 2017-06-19 2019-08-13 成都优孚达信息技术有限公司 一种通信数据压缩方法
US20220414234A1 (en) * 2021-06-23 2022-12-29 Palantir Technologies Inc. Approaches of performing data processing while maintaining security of encrypted data

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1098642A (ja) * 1996-09-20 1998-04-14 Fuji Photo Film Co Ltd ディジタルカメラ
US5832300A (en) 1996-06-20 1998-11-03 Intel Corporation System for maintaining a minimum level of digitized data signal quality while allowing bandwidth dependent quality enhancement with additional enhancement data packets
US5841472A (en) 1994-11-23 1998-11-24 Lg Electronics Inc. MPEG2 transport decoder
JP2001036655A (ja) 1999-07-22 2001-02-09 Fuji Photo Film Co Ltd 画像送信装置およびその制御方法
JP2001148802A (ja) * 1999-11-19 2001-05-29 Ricoh Co Ltd デジタルカメラおよびデジタルカメラシステム
JP2002033947A (ja) * 2000-07-17 2002-01-31 Ricoh Co Ltd デジタルカメラ、画像データ送信方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002099393A (ja) 2000-09-22 2002-04-05 Minolta Co Ltd データ送信装置、データ送信方法、およびデータ送信プログラムを記録したコンピュータ読取可能な記録媒体
JP2003069988A (ja) * 2001-08-23 2003-03-07 Ricoh Co Ltd デジタルカメラ及びこの制御方法
JP2003169284A (ja) * 2001-12-04 2003-06-13 Fuji Photo Film Co Ltd 画像変換装置並びに画像変換プログラム
JP2003274049A (ja) * 2002-03-19 2003-09-26 Fuji Photo Film Co Ltd 通信装置

Family Cites Families (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3803326A1 (de) * 1987-02-04 1988-08-25 Toshiba Kawasaki Kk Ortszonennetz fuer nachrichtenuebermittlung
JPH02249333A (ja) 1989-03-22 1990-10-05 Sharp Corp 秘話装置
US5170466A (en) * 1989-10-10 1992-12-08 Unisys Corporation Storage/retrieval system for document
US5195136A (en) * 1991-09-30 1993-03-16 Motorola, Inc. Method and apparatus for data encryption or decryption
US5893037A (en) * 1994-12-09 1999-04-06 Eastman Kodak Company Combined electronic/silver-halide image capture system with cellular transmission capability
EP0824820B1 (de) * 1995-05-03 2003-11-05 Siemens Aktiengesellschaft Tragbares funkkommunikations gerät mit integrierter kamera und bildanzeigevorrichtung
JP3533756B2 (ja) * 1995-06-01 2004-05-31 ミノルタ株式会社 画像入力装置
JP3372714B2 (ja) * 1995-06-15 2003-02-04 キヤノン株式会社 撮像装置
US5786746A (en) * 1995-10-03 1998-07-28 Allegro Supercare Centers, Inc. Child care communication and surveillance system
EP0776130A3 (en) * 1995-11-27 1998-03-04 Canon Kabushiki Kaisha Camera control system with variable frame rate
AU2448297A (en) * 1996-04-23 1997-11-12 Silicon Vision, Inc. A digital video camera system
JPH08340314A (ja) 1996-05-20 1996-12-24 Canon Inc 通信装置
JP4229481B2 (ja) * 1996-07-31 2009-02-25 オリンパス株式会社 撮像表示システム
US6337928B1 (en) * 1996-08-26 2002-01-08 Canon Kabushiki Kaisha Image transmission apparatus and method therefor
US5969750A (en) * 1996-09-04 1999-10-19 Winbcnd Electronics Corporation Moving picture camera with universal serial bus interface
US5841471A (en) * 1996-09-12 1998-11-24 Eastman Kodak Company Timing control for a digitally interfaced camera using variable line readout intervals
US6169789B1 (en) * 1996-12-16 2001-01-02 Sanjay K. Rao Intelligent keyboard system
US6091767A (en) * 1997-02-03 2000-07-18 Westerman; Larry Alan System for improving efficiency of video encoders
KR19980076702A (ko) * 1997-04-12 1998-11-16 윤종용 화상정보 저장 및 자동접속 기능을 갖는 화상통신시스템 및 그 방법
JP3466434B2 (ja) * 1997-09-11 2003-11-10 シャープ株式会社 印刷制御方法及び印刷システム
US6091777A (en) * 1997-09-18 2000-07-18 Cubic Video Technologies, Inc. Continuously adaptive digital video compression system and method for a web streamer
US6512541B2 (en) * 1997-12-08 2003-01-28 Intel Corporation Increasing image field of view and frame rate in an imaging apparatus
US5983263A (en) * 1998-01-02 1999-11-09 Intel Corporation Method and apparatus for transmitting images during a multimedia teleconference
US6636748B2 (en) * 1998-01-12 2003-10-21 David A. Monroe Method and apparatus for image capture, compression and transmission of a visual image over telephone or radio transmission system
AU2223799A (en) * 1998-01-12 1999-07-26 David A. Monroe Apparatus and method for selection of circuit in multi-circuit communications device
US6204874B1 (en) * 1998-05-07 2001-03-20 Creo Products Inc. Thermal platesetter and color proofer
GB2338141B (en) * 1998-05-08 2002-11-27 Orange Personal Comm Serv Ltd Mobile communications
US6522352B1 (en) * 1998-06-22 2003-02-18 Motorola, Inc. Self-contained wireless camera device, wireless camera system and method
DE69942005D1 (de) * 1998-12-28 2010-03-25 Sanyo Electric Co Bildaufnahmegerät und digitale Kamera
JP3498627B2 (ja) * 1999-04-07 2004-02-16 三菱電機株式会社 撮像装置及びその露出制御方法
US6633231B1 (en) * 1999-06-07 2003-10-14 Horiba, Ltd. Communication device and auxiliary device for communication
JP3583667B2 (ja) * 1999-09-30 2004-11-04 株式会社東芝 無線端末装置並びにデータ転送方法及び制御情報通知方法
GB0005337D0 (en) * 2000-03-07 2000-04-26 Hewlett Packard Co Image transfer over mobile radio network
JP2001346173A (ja) * 2000-05-31 2001-12-14 Sony Corp 画像データ通信システム及び方法、並びに撮像装置及び画像データ処理方法
US6809759B1 (en) * 2000-06-19 2004-10-26 Benq Corporation Remote control unit with previewing device for an image-capturing device
US7450156B2 (en) * 2000-09-13 2008-11-11 Fujifilm Corporation Communication device, communication system, communication method and communication terminal apparatus
AU2002213714A1 (en) * 2000-10-24 2002-05-06 Eyeball Networks Inc. Three-dimensional wavelet-based scalable video compression
KR100404885B1 (ko) * 2001-02-16 2003-11-10 삼성전자주식회사 휴대용 동화상 폰을 이용한 원격감시 장치
JP4190157B2 (ja) * 2001-02-26 2008-12-03 三洋電機株式会社 画像データ送信装置および画像データ受信装置
US7433710B2 (en) * 2001-04-20 2008-10-07 Lightsurf Technologies, Inc. System and methodology for automated provisioning of new user accounts
US20020158991A1 (en) * 2001-04-27 2002-10-31 Hisakazu Kobayashi Wireless moving image and audio transmitting system
US7369160B2 (en) * 2001-06-15 2008-05-06 Yokogawa Electric Corporation Camera system for transferring both image data and an image processing program to transfer the image data to an external device
US7441005B2 (en) * 2001-06-22 2008-10-21 Ipex Co., Ltd. Information supply system using communication line
US20030058934A1 (en) * 2001-09-25 2003-03-27 Haruhiro Koto Compressed video image transmission method and apparatus using the same
US7305114B2 (en) * 2001-12-26 2007-12-04 Cognex Technology And Investment Corporation Human/machine interface for a machine vision sensor and method for installing and operating the same
US20030126279A1 (en) * 2001-12-27 2003-07-03 Jiani Hu Picture archiving and communication system (PACS) with a distributed architecture
US20030169813A1 (en) * 2002-03-08 2003-09-11 Van Der Schaar Mihaela Method and apparatus to execute a smooth transition between FGS encoded structures
US7171479B2 (en) * 2002-04-26 2007-01-30 International Business Machines Corporation Efficient delivery of boot code images from a network server
US7236960B2 (en) * 2002-06-25 2007-06-26 Eastman Kodak Company Software and system for customizing a presentation of digital images
JP2004040548A (ja) 2002-07-04 2004-02-05 Minolta Co Ltd 撮像装置
JP2004086738A (ja) * 2002-08-28 2004-03-18 Fuji Photo Film Co Ltd 無線lan通信装置、プリント処理システムおよびネットワークプリントシステム
JP2004112360A (ja) 2002-09-19 2004-04-08 Ricoh Co Ltd デジタルカメラ

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5841472A (en) 1994-11-23 1998-11-24 Lg Electronics Inc. MPEG2 transport decoder
US5832300A (en) 1996-06-20 1998-11-03 Intel Corporation System for maintaining a minimum level of digitized data signal quality while allowing bandwidth dependent quality enhancement with additional enhancement data packets
JPH1098642A (ja) * 1996-09-20 1998-04-14 Fuji Photo Film Co Ltd ディジタルカメラ
JP2001036655A (ja) 1999-07-22 2001-02-09 Fuji Photo Film Co Ltd 画像送信装置およびその制御方法
JP2001148802A (ja) * 1999-11-19 2001-05-29 Ricoh Co Ltd デジタルカメラおよびデジタルカメラシステム
JP2002033947A (ja) * 2000-07-17 2002-01-31 Ricoh Co Ltd デジタルカメラ、画像データ送信方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002099393A (ja) 2000-09-22 2002-04-05 Minolta Co Ltd データ送信装置、データ送信方法、およびデータ送信プログラムを記録したコンピュータ読取可能な記録媒体
JP2003069988A (ja) * 2001-08-23 2003-03-07 Ricoh Co Ltd デジタルカメラ及びこの制御方法
JP2003169284A (ja) * 2001-12-04 2003-06-13 Fuji Photo Film Co Ltd 画像変換装置並びに画像変換プログラム
JP2003274049A (ja) * 2002-03-19 2003-09-26 Fuji Photo Film Co Ltd 通信装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1549053A4

Also Published As

Publication number Publication date
EP1549053A4 (en) 2009-09-16
US10375297B2 (en) 2019-08-06
US20140043494A1 (en) 2014-02-13
US20190313015A1 (en) 2019-10-10
KR100933590B1 (ko) 2009-12-23
US8736687B2 (en) 2014-05-27
EP3435656A1 (en) 2019-01-30
CN1953514B (zh) 2010-06-02
US9374523B2 (en) 2016-06-21
JP2004120201A (ja) 2004-04-15
US20050146608A1 (en) 2005-07-07
EP1549053B1 (en) 2018-11-07
US20140226031A1 (en) 2014-08-14
US20170332011A1 (en) 2017-11-16
US20090073269A1 (en) 2009-03-19
EP1549053A1 (en) 2005-06-29
JP3944726B2 (ja) 2007-07-18
CN100502470C (zh) 2009-06-17
CN1953514A (zh) 2007-04-25
US8054334B2 (en) 2011-11-08
KR20050046653A (ko) 2005-05-18
US10091413B2 (en) 2018-10-02
CN1596538A (zh) 2005-03-16

Similar Documents

Publication Publication Date Title
JP3944726B2 (ja) 撮像装置および方法
US8436928B2 (en) Image sensing apparatus and method with drive control variation of each of the plurality of output fields
US7705896B2 (en) Imaging apparatus which adds a first number of R and B pixels, and adds a second number of G pixels
US8169511B2 (en) Imaging apparatus and photographing control method
JP2007096633A (ja) 映像信号処理装置およびデジタルカメラ
WO2011010747A1 (en) Imaging apparatus and imaging method
JP4055018B2 (ja) 撮像装置および方法
JP5515968B2 (ja) 送信装置及び方法、並びにプログラム
JP2010056768A (ja) 撮影システム並びに当該撮影システムを構成する撮影装置及び操作装置
JP5550333B2 (ja) 撮像装置、現像方法及びプログラム
JP4716182B2 (ja) 撮像装置及び撮像制御プログラム
JP2008147780A (ja) 通信装置及びその制御方法
US20240195936A1 (en) Imaging system, imaging terminal, and server
KR20110109906A (ko) 송신 장치 및 방법과 프로그램
JP4542958B2 (ja) 撮影装置
JP2011041309A (ja) 撮像装置及び撮像制御プログラム
JP2002152663A (ja) 電子カメラ、携帯電話、及び電子カメラシステム

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): CN KR US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR

WWE Wipo information: entry into national phase

Ref document number: 2003798370

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 20038015994

Country of ref document: CN

Ref document number: 1020047007859

Country of ref document: KR

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 10496890

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 2003798370

Country of ref document: EP