[go: up one dir, main page]

WO2021152961A1 - 表示方法 - Google Patents

表示方法 Download PDF

Info

Publication number
WO2021152961A1
WO2021152961A1 PCT/JP2020/042617 JP2020042617W WO2021152961A1 WO 2021152961 A1 WO2021152961 A1 WO 2021152961A1 JP 2020042617 W JP2020042617 W JP 2020042617W WO 2021152961 A1 WO2021152961 A1 WO 2021152961A1
Authority
WO
WIPO (PCT)
Prior art keywords
area
setting
image
display
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2020/042617
Other languages
English (en)
French (fr)
Inventor
潤也 北川
智行 河合
田中　康一
祐也 西尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2021574473A priority Critical patent/JP7394151B2/ja
Priority to CN202080094877.5A priority patent/CN115023942B/zh
Publication of WO2021152961A1 publication Critical patent/WO2021152961A1/ja
Priority to US17/874,244 priority patent/US20220360724A1/en
Anticipated expiration legal-status Critical
Priority to JP2023199704A priority patent/JP7721619B2/ja
Priority to US18/915,371 priority patent/US20250039327A1/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/18—Signals indicating condition of a camera member or suitability of light
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634—Warning indications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Definitions

  • One embodiment of the present invention relates to a method of displaying an image.
  • a technique for cutting out and storing an image of one of a plurality of subjects in the image from an image taken by one photographing device has already been developed.
  • the technique described in Patent Document 1 can be mentioned.
  • a plurality of different video regions are set in the shooting range of the shooting device, and the video in one of the video regions is recorded.
  • the area of the image to be recorded can be changed (switched) among a plurality of areas. Thereby, for example, it is possible to obtain a zoomed-in image for each of a plurality of subjects in the photographed image while the photographing device is fixed.
  • One embodiment of the present invention has been made in view of the above circumstances, and provides a more useful method as a method for displaying an image in which a part of a captured image can be cut out and the cut-out image can be switched.
  • the purpose is.
  • one embodiment of the present invention is a display method for displaying an image captured by a photographing device, and a plurality of setting areas are included in a reference area which is an imaging area of a reference image.
  • a setting process that automatically sets candidates for the setting area, a selection process that selects a recording area that is an area of recorded video from a plurality of setting areas, and a recording area after the selection process is performed.
  • a display method including a switching step of switching the recording area by reselecting from a plurality of setting areas.
  • the setting process includes a first setting process for automatically setting candidates in the reference area and a second setting for setting the setting area at the position where the candidates are set according to the operation for the user's candidate. It may have a process.
  • a feature portion where a visual change occurs in the reference image may be detected, and a setting area or a candidate may be automatically set at the position of the detected feature portion in the reference region.
  • the shooting scene of the reference image may be recognized based on the reference image, and the setting area or the candidate may be automatically set at the position corresponding to the recognized shooting scene in the reference area.
  • the setting area may be automatically set at a position in the reference image where the feature for determining the shooting condition of the shooting device satisfies the reference.
  • the shooting condition may be at least one of the focusing position, the exposure amount, and the white balance in the reference image.
  • the setting area or the candidate may be automatically set based on the position information of the setting area stored in advance.
  • the position information may include at least one of the position information of the setting area set in the setting process performed in the past and the position information of the setting area determined based on the operation of the user. good.
  • an adjustment step of adjusting at least one of the position and size of the set area when the size or position of the reference area changes may be further provided.
  • one embodiment of the present invention is a display method for displaying an image captured by a photographing device, which comprises a setting step of setting a plurality of setting areas in a reference area which is an imaging area of a reference image.
  • the recording area which is the area of the recorded video to be recorded, is selected from a plurality of setting areas, and after the selection process is performed, the recording area is reselected from the plurality of setting areas to switch the recording area.
  • the recording process for recording the moving image of the recorded image, the display process for displaying the set image which is the image of the setting area, and the recording process the change process for changing the display number of the set image is executed. It is a display method including a change process to be performed.
  • the change process may include a process of increasing the number of displays by adding a setting area according to an increase in the number of subjects in the reference image. Further, the change process may include a process of stopping the display of the set image of the setting area satisfying the stop condition and reducing the number of displays.
  • the canceled area which is the set area where the display of the set image is stopped, may be stored while the recording process is performed.
  • the change process may include a process of redisplaying the stored set image of the stop area based on the user's redisplay instruction.
  • the change process may include a process of outputting proposal information regarding the change of the display number.
  • the change process related to the decrease in the number of displays may be executed in the change step.
  • the present embodiment relates to a method of displaying an image using the photographing apparatus 10 shown in FIGS. 1 to 3.
  • the embodiments described below are merely examples for facilitating the understanding of the present invention, and do not limit the present invention. That is, the present invention may be modified or improved from the embodiments described below as long as it does not deviate from the gist thereof. Further, the present invention includes an equivalent thereof.
  • the photographing device 10 is, for example, a digital camera that photographs an image.
  • the “video” means a live video (live view image), that is, a video shot in real time, unless otherwise specified.
  • the moving image in the present embodiment is mainly a moving image. That is, the photographing device 10 photographs a moving image at a predetermined frame rate.
  • the photographing device 10 is, for example, an interchangeable lens model, and includes a photographing device main body 12 and a photographing lens 14 as shown in FIGS. 1 and 2.
  • the photographing lens 14 is interchangeably attached to the mount 13 of the photographing apparatus main body 12.
  • the present invention is not limited to this, and the photographing device 10 may be a model with an integrated lens.
  • the photographing lens 14 includes an optical unit 17, an aperture 20, a zoom drive unit 21, a focus drive unit 22, and an aperture drive unit 23.
  • the optical unit 17 includes an optical device 18 for zooming (for example, a zoom lens).
  • zooming for example, a zoom lens
  • the photographing device 10 of the present embodiment includes an optical zoom function and an electronic zoom (digital zoom) function for enlarging a subject in an image by electronic processing.
  • the optical unit 17 includes an optical device 19 for focusing (for example, a focus lens).
  • an optical device 19 for focusing for example, a focus lens
  • the focus drive unit 22 operates to move the optical device 19.
  • the focusing position is automatically adjusted so as to focus on a predetermined portion in the image.
  • the optical unit 17 includes a wide-angle lens, an ultra-wide-angle lens, a 360-degree lens, an anamorphic lens, and the like.
  • the photographing device 10 can photograph an image with a wide angle of view in the lateral direction (horizontal width direction) of the photographing device 10.
  • the angle of view of the photographing device 10 changes with the execution of the optical zoom and the like.
  • the maximum angle of view (total angle of view) of the photographing device 10 is determined according to the design specifications of the optical unit 17 and the image sensor 40 described later.
  • the optical unit 17 provided in the photographing device 10 is not limited to one, and a plurality of optical units 17 having different angles of view may be provided.
  • the diaphragm 20 has a variable opening shape, and the aperture shape is adjusted by the diaphragm drive unit 23. By adjusting the aperture shape, the amount of aperture for the incident light on the photographing lens 14 changes and the amount of exposure is adjusted.
  • the photographing apparatus main body 12 includes an operation unit including an operation button 30. Further, a release button 26, which is one of the operation units, is arranged on the upper surface of the photographing apparatus main body 12. When the release button 26 is pressed, recording of the image taken by the photographing device 10 or the image cut out from the image (strictly speaking, the recorded image described later) is started.
  • the photographing area of the photographing device 10 that is, the range within the angle of view of the photographing device 10, is determined when the user's recording start instruction is received. Further, the photographing area changes according to, for example, turning on / off of electronic image stabilization. When the electronic image stabilization is turned off at the time of accepting the recording start instruction, the shooting area is generally a full-size (full angle of view) shooting area.
  • the user's operation related to the video recording start instruction is not limited to pressing the release button 26, and may be an operation of touching a predetermined position on the rear display 28 described later.
  • the image captured by the photographing device 10 at the angle of view at that time will be referred to as a "reference image”. Further, the shooting area of the reference image is referred to as a "reference area”.
  • a display shown in FIG. 2 (hereinafter, also referred to as a rear display 28) is provided on the back surface of the photographing device main body 12.
  • the display 28 on the back is composed of, for example, an LCD (Liquid Crystal Display), an organic EL (Organic Electroluminescence) display, an LED (Light Emitting Diode) display, electronic paper, or the like.
  • LCD Liquid Crystal Display
  • organic EL Organic Electroluminescence
  • LED Light Emitting Diode
  • the display 28 on the back displays a reference image, a recorded image described later, and the like.
  • the photographing device 10 having a display has a video display function, it will be used as a video display device.
  • the display 28 on the back can display information other than video, and displays, for example, advice or proposal information regarding shooting (see FIG. 18).
  • the photographing apparatus main body 12 of the present embodiment includes an electronic viewfinder (denoted as EVF in FIG. 3) 29 as a sub-display.
  • EVF electronic viewfinder
  • the same image can be displayed on the rear display 28 and the electronic viewfinder 29, or different images can be displayed on each other.
  • the photographing apparatus does not have to include the electronic viewfinder 29. Further, it is not necessary to display the image on the electronic viewfinder 29 and not to display the image on the display 28 on the rear surface.
  • a touch panel 36 for detecting a user operation is provided inside the display 28 on the back surface or on the exposed surface of the display 28. For example, when the user touches a predetermined position on the display 28 on the back surface, the touch panel 36 detects the touch position and outputs the detection result to the control unit 46 described later.
  • the photographing apparatus main body 12 is further provided with a shutter 38, an image sensor 40, an analog signal processing circuit 44, a control unit 46, an internal memory 50, a card slot 52, and a buffer memory 56.
  • the image sensor 40 is an image sensor, receives light that has passed through the photographing lens 14, converts the received image into an electric signal (video signal), and outputs the light.
  • a solid-state image sensor such as a CCD (Charged Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor Image Sensor) can be used.
  • the control unit 46 controls each unit of the photographing device 10 and executes various processes related to image capture, display, recording, and the like.
  • the control unit 46 includes a controller 47 and a video processing unit 48 as shown in FIG.
  • the control unit 46 has one or a plurality of processors, and the control unit 46 is configured by the cooperation of the processors and the control program.
  • the processor is, for example, a CPU (Central Processing Unit), an FPGA (Field Programmable Gate Array), a DSP (Digital Signal Processor), an ASIC (Application Specific Integrated Circuit), a GPU (Graphics Processing Unit), or another IC (Integrated Circuit). It may be composed of. Alternatively, a processor may be configured by combining these. Further, as represented by SoC (System on Chip) or the like, the processor may configure the functions of the entire control unit 46 including the controller 47 and the video processing unit 48 with one IC (Integrated Circuit) chip.
  • SoC System on Chip
  • the processor may configure the functions of the entire control unit 46 including the controller 47 and the video processing unit 48 with one IC (Integrated Circuit) chip.
  • the hardware configuration of each processor described above may be realized by an electric circuit (Circuitry) in which circuit elements such as semiconductor elements are combined.
  • the controller 47 controls each part of the photographing device 10 based on a user operation or according to a predetermined control program. For example, the controller 47 controls the image sensor 40 and the analog signal processing circuit 44 so as to capture an image at a predetermined frame rate.
  • the controller 47 controls each drive unit 21 to 23, an image sensor 40, an analog signal processing circuit 44, and the like so that the shooting conditions become desired conditions.
  • the shooting conditions include focus, exposure amount, white balance, and the like. That is, the controller 47 realizes the autofocus (AF) function, the autoexposure (AE) function, and the auto white balance (AWB) function, which are the automatic adjustment functions of the photographing device 10.
  • controller 47 controls the video processing unit 48 so as to start recording the video when the user receives the recording start instruction.
  • the video processing unit 48 converts the analog video signal sent from the analog signal processing circuit 44 into digital video data, and performs gamma correction, white balance correction, and the like on the digital video data.
  • the processed digital video data is compressed in a compression format conforming to a predetermined standard.
  • the video processing unit 48 generates compressed digital image data at a predetermined frame rate during shooting, and acquires a video (strictly speaking, a frame image) from the data.
  • the image acquired at this time corresponds to the reference image captured in the reference area.
  • the video processing unit 48 cuts out the recorded video from the reference video under the control of the controller 47.
  • the recorded image is an image having an angle of view smaller than the angle of view of the reference image, and is an image of a part of the reference area.
  • the recorded video is generated at the same frame rate as the reference video and is displayed on, for example, the rear display 28 or the electronic viewfinder 29.
  • the recorded video is recorded on a recording medium.
  • a video file of the recorded video is created.
  • the resolution (number of pixels) and aspect ratio of the recorded video are determined according to the recording format (moving image format) of the recorded video.
  • the recording format is not particularly limited and can be freely determined.
  • the image processing unit 48 extracts an extracted image whose size is slightly smaller than that of the uncorrected image taken at all angles of view while the electronic image stabilization is enabled (ON). Is extracted. Then, when the extracted image is displaced due to vibration or the like, the image processing unit 48 executes electronic image stabilization and shifts the position of the extracted region in the image before correction (for example, shifts from the position of the solid line to the position of the broken line in FIG. 4). .. While the electronic image stabilization is on, the extracted video serves as the reference video.
  • the internal memory 50 built in the photographing apparatus main body 12 and the memory card 54 that can be attached to and detached from the card slot 52 are recording media, and for example, a recorded image is recorded.
  • the internal memory 50 and the memory card 54 may be provided in a device (external) different from the photographing apparatus main body 12. In that case, the control unit 46 may record the recorded video on an external recording medium by wire or wirelessly.
  • the buffer memory 56 functions as a work memory of the control unit 46.
  • the photographing device 10 records a recorded image cut out from the reference image on a recording medium. Further, the photographing device 10 can switch (switch) the recorded image by changing the cutout area in the reference image. Such a function will be described with reference to FIG. Note that in FIG. 5, for convenience of explanation, the illustration of the subject in the video is omitted.
  • the reference image is displayed on the display (for example, the display 28 on the back).
  • the image of the entire angle of view is the reference image
  • the area surrounded by the outermost edge in FIG. 5 is the reference area As.
  • the extracted video extracted from the video at all angles of view serves as the reference video
  • the region surrounded by the broken line frame in FIG. 5 serves as the reference region At.
  • the control unit 46 sets the setting area Ar in the reference areas As and At.
  • the setting area Ar is a part of the reference areas As and At.
  • the subject in the reference image is reflected in the setting area Ar (see FIG. 6).
  • the position and size of the setting area Ar can be adjusted automatically or based on the user operation.
  • the user can change the position and size of the setting area Ar on which the subject is projected, for example, according to the position and size of the subject in the reference image by performing a predetermined operation or the like on the screen.
  • the aspect ratio of the setting area Ar is determined to be a value according to the recording format (moving image format) of the recorded video. Therefore, when changing the size of the setting area Ar, the size is changed while the aspect ratio of the setting area Ar remains constant.
  • the aspect ratio of the setting area Ar may be determined without depending on the recording format of the recorded video, and in that case, the size of the setting area Ar may be changed while changing the aspect ratio.
  • the sign f is displayed in the reference image displayed on the display at that time.
  • the sign f indicates the position of the set area Ar in the reference image, and includes the boundary of the set area Ar.
  • the boundary of the setting area Ar is set to distinguish (distinguish) the setting area Ar from its surroundings.
  • Examples of the marker f including the boundary include a frame surrounding the setting area Ar and a graphic object such as a pointer indicating a representative position of the setting area Ar.
  • differences in brightness, chromaticity, shading, etc. between the set area Ar and its surroundings also correspond to the marker f.
  • the setting area Ar and its surroundings can be distinguished, it can be included in the category of the marker f.
  • a sign f composed of a colored rectangular frame will be described as an example.
  • a plurality of setting areas Ar can be set in the reference image.
  • the sign f is displayed for each setting area Ar.
  • the identification information (the number displayed on the upper right of the sign f in FIG. 5) is displayed for each sign f.
  • the identification information is information that is individually assigned to each sign f by the control unit 46 according to a predetermined assignment rule. By displaying the identification information together with the sign f, the user can distinguish each sign f.
  • the identification information is not particularly limited, and may be a number, a character, or a symbol, or may be a display color of the sign f divided for each sign f. When the number is used as the identification information, it is desirable that the number is a serial number.
  • the user selects the recording area Ap, which is the area of the recorded video, from the plurality of set setting areas Ar.
  • the control unit 46 selects the recording area Ap from the plurality of setting areas Ar according to the user selection operation. As a result, the setting area Ar in which the video in the area is recorded, that is, the recording area Ap is determined.
  • the control unit 46 When the recording area Ap is determined, the control unit 46 indicates the positions of the sign f indicating the position of the recording area Ap and the positions of the other set areas Ar among the signs f for each set area Ar displayed in the reference image.
  • the label f is displayed in a manner different from each other.
  • the display mode of the sign f includes the color, brightness, density (shading degree), shape, edge line thickness and line type of the sign f, and the presence / absence of blinking display. In the case shown in FIG. 5, the display color and thickness of the sign f indicating the position of the recording area Ap are different from those of the other signs f.
  • the recording of the video in the recording area Ap (hereinafter referred to as the recorded video) is started.
  • the reference region that is, the orientation and angle of view of the photographing apparatus 10.
  • the reference area is determined once means that the reference area is determined once when the recording start instruction is received. Further, even after the reference area is determined, the user can freely change the reference area. Incidentally, when the user changes the reference area, it is preferable to change the position of the set area according to the position of the subject, as will be described later.
  • a zoom image of a portion of interest in the reference image can be recorded.
  • the recorded image is an image having an angle of view smaller than the angle of view of the reference image, but if the reference image has a high image quality (for example, if the number of pixels is 10 million or more), the image has a sufficiently high image quality. It becomes.
  • the number of pixels of the reference image is not particularly limited, but the lower limit thereof is preferably 10 million or more, and more preferably 60 million or more. Further, the upper limit of the number of pixels is preferably 1 billion or less, and more preferably 500 million or less. When the number of pixels is larger than the above lower limit, the visibility of the recorded image is guaranteed. Further, when the number of pixels is smaller than the above upper limit, the amount of data of the reference video is reduced, and the processing speed by the control unit 46 can be increased.
  • the recording area Ap after selecting one setting area Ar determined as the recording area Ap from the plurality of setting areas Ar, the recording area Ap can be switched to another setting area Ar during video recording. As a result, the video of the recording area Ap before switching and the video of the recording area Ap after switching can be recorded respectively. This will be described in detail with reference to FIG.
  • the photographing device 10 photographs a plurality of subjects (people) in a certain scene (place) and sets a setting area Ar for each subject as shown in FIG.
  • one setting area Ar selected by the user from the plurality of setting areas Ar becomes the recording area Ap.
  • four setting areas Ar are set, and the setting area Ar surrounded by the sign f of the identification information “1” is the recording area Ap.
  • the image of the setting area Ar which is the recording area Ap at that time is recorded.
  • the recording area Ap is reselected.
  • the recorded video is switched.
  • the recorded video can be switched by reselecting the recording area Ap during the video recording.
  • the control unit 46 When the recorded video is switched, the control unit 46 records the recorded video before the switching and the recorded video after the switching, and combines these videos into one moving image. As a result, as shown in FIG. 7, a moving image file (video file) in which the subject in the video changes as the recorded video is switched is acquired.
  • video file video file
  • the present invention is not limited to this, and the recorded video before switching and the recorded video after switching may be recorded as separate file data without being combined. Further, the reference video and the standby area described later may also be recorded as separate file data.
  • a sign f indicating a position in the reference image is displayed for each of the plurality of setting areas Ar including the recording area Ap.
  • the display method of the present embodiment has improved convenience (ease of use) from the viewpoint of making it easier to grasp the position of the setting area Ar.
  • Such an effect is particularly effective in a configuration in which the recording area Ap can be switched in the plurality of setting areas Ar. That is, by displaying the sign f for each setting area Ar, it is possible to easily grasp which image in the reference image the recorded image after switching is.
  • the number of setting areas Ar (setting number) is automatically changed according to the change or based on the user operation. Can be done. For example, as shown in FIG. 8, when a new subject enters the reference image, a new setting area Ar can be added at the position of the subject. On the contrary, when the subject in the reference image moves to the outside of the reference image, the setting area Ar which is the image area of the subject can be automatically deleted.
  • the setting area Ar is made to follow the movement of the subject. Can be displaced.
  • the tracking of the subject can be realized by a known subject detection technique by video analysis.
  • the setting area Ar for tracking the moving subject is the recording area Ap, the image of the moving subject can be recorded.
  • the moving area Am is not limited to the area that moves following the moving subject, and may be an area that moves at a constant speed or an irregular speed in a predetermined direction.
  • Video display flow The processing flow (hereinafter, video display flow) executed by the control unit 46 of the photographing device 10 will be described with reference to FIG.
  • the image display flow is started.
  • the user makes an initial adjustment of the photographing device 10.
  • the resolution (number of pixels) and aspect ratio of the recorded video are adjusted by designating the recording method.
  • Such adjustment is performed, for example, when the photographing device 10 is started for the first time, and the adjustment contents are retained thereafter.
  • the above adjustment may be performed by the device manufacturer before the photographing device 10 is shipped.
  • the user can readjust these values after starting the photographing device 10 in order to review the resolution, aspect ratio, and the like once adjusted.
  • the control unit 46 first starts the shooting process (S001).
  • This shooting step is a step of shooting a reference image in the reference region at that time. It is preferable that the real-time reference image is displayed as a live view image on the display 28 or the like on the back surface with the start of shooting. The shooting process is continued until the user instructs the end of shooting or the power of the shooting device 10 is turned off.
  • the setting step is a step of automatically setting a plurality of setting areas Ar in the shooting area of the reference image.
  • the setting process the initial position and initial size of each setting area Ar are set, and then the position and size of each setting area Ar are automatically changed based on the user operation or according to a predetermined rule. It is possible.
  • the selection step is a step of selecting the recording area Ap from the plurality of setting areas Ar set in the setting step based on the user's selection operation.
  • the control unit 46 may display each image of the plurality of setting areas Ar (hereinafter, referred to as “setting image”) on the display. In this case, the user can check the setting video for each of the plurality of setting areas Ar.
  • the recording step is a step of recording a recorded image, which is an image of the selected recording area Ap, on a recording medium.
  • the recorded video is recorded according to a predetermined recording format (moving image format). Further, as described above, the reference area is determined at the time of receiving the recording start instruction that triggers the start of the recording process.
  • the control unit 46 executes the display process (S006).
  • the display step is a step of displaying a plurality of set images including a recorded image, a reference image at that time, and a sign f in the reference image on a display. The user can see these images, confirm the position of each setting area Ar in the reference image, and grasp which setting area Ar is the recording area Ap.
  • control unit 46 executes the control process (S007).
  • the control step is a step of executing the control process relating to the change of the reference region determined at the time of receiving the recording start instruction.
  • the control process includes a process for suppressing a change in the reference region, and is, for example, a control process related to zoom (optical zoom) by the optical device 19.
  • the switching step is a step of switching the recording area Ap by reselecting the recording area Ap from the plurality of setting areas Ar according to the reselection instruction by the user after performing the selection step.
  • the switching step is carried out, in the subsequent recording step, the video (recorded video) of the recording area after the switching is recorded.
  • the control unit 46 reads out the position information of the setting area Ar stored in advance in the photographing device 10. Then, the setting area Ar is automatically set at the position indicated by the read position information. At this time, for the purpose of making the sign f easier for the user to see, it is more preferable to highlight the image in the sign f in the reference image. For example, in the reference image, the brightness other than the image in the sign f (that is, in the boundary of the setting area Ar) may be lowered or grayed out (see FIG. 18) may be displayed.
  • the second UI screen 102 is displayed on the rear display 28 as shown in FIG.
  • the user selects one of a plurality of recording patterns prepared in advance, and presses a button indicating the selected pattern among the buttons Bt3, Bt4, and Bt5 on the second UI screen 102.
  • the recording pattern for example, a "previously used pattern", a "preset pattern”, and a "user input pattern” can be selected.
  • the control unit 46 automatically sets the setting area Ar at a predetermined position in the reference image based on the reference image being photographed.
  • the third UI screen 103 is displayed as shown in FIG. The user selects one of a plurality of automatic setting patterns prepared in advance, and presses a button indicating the selected pattern among the buttons Bt6, Bt7, and Bt8 on the third UI screen 103.
  • the automatic setting pattern for example, a "scene recognition pattern”, a "subject detection pattern”, and an "AF position identification pattern" can be selected.
  • the sign f it is preferable to display the sign f in a state where the setting regions Ar do not overlap each other and do not overlap each other at the start of the setting process. This makes it easier to identify the plurality of markers f, and makes it easier to set the setting area Ar in the setting step.
  • the control unit 46 reads out the position information of the setting area Ar set in the setting process in the previous (immediately before) video display flow.
  • This position information indicates the position of each of the plurality of setting areas Ar set in the setting step of the previous video display flow, and is stored in, for example, the internal memory 50 of the photographing device 10. It is preferable that the stored position information is retained even after the power of the photographing apparatus 10 is turned off.
  • the size information of the setting area Ar may be stored together with the position information of the setting area Ar. In that case, when the previously used pattern is selected, the position information and the size information may be read together.
  • the control unit 46 automatically sets the setting area Ar at the position indicated by the read position information, that is, at the same position as the setting position in the previous video display flow.
  • Such a previously used pattern is effective when shooting an image with the same composition as the previous image display flow (for example, when shooting an image at the same place and at the same angle).
  • the read position information indicates the position of the setting area Ar set in the previous (immediately before) video display flow, but the present invention is not limited to this.
  • the position information of the setting area Ar set in the setting steps for several times performed in the past may be stored respectively. In that case, it is preferable to set the current setting area Ar at the position of the setting area Ar set in the setting process of the times specified by the user in the stored position information.
  • the control unit 46 reads out the position information of the setting area Ar arranged in the predetermined fixed arrangement pattern.
  • the standard arrangement pattern is pre-registered in the photographing apparatus 10, or is newly registered when the program is updated after purchase.
  • the fourth UI screen 104 shown in FIG. 13 is displayed on the rear display 28.
  • a plurality of types of patterns are displayed on the fourth UI screen 104 so as to be selectable, and the user selects one of the preset patterns.
  • the control unit 46 automatically sets the setting area Ar at a position corresponding to the preset pattern selected by the user.
  • Such a preset pattern is effective when there is a pattern corresponding to the composition when shooting an image with a predetermined composition (for example, when shooting an image at a specific place).
  • the number of types of preset patterns, the number of setting areas Ar in each preset pattern, and the arrangement position are not particularly limited and can be arbitrarily determined.
  • the control unit 46 reads out the position information of the setting area Ar determined based on the user's operation.
  • the user's operation here is an input operation for registering the position of the setting area Ar, and is performed in a stage prior to the setting process (for example, a stage of initial registration regarding the pattern).
  • the above input operation is performed, for example, through the input screen 105 for pattern registration shown in FIG.
  • the user touches and drags the inner area of the area setting indicator fx displayed on the input screen 105.
  • the display position of the marker fx after dragging is registered as the position of the setting area Ar.
  • the control unit 46 automatically sets the setting area Ar at the position indicated by the read position information, that is, the setting position determined based on the input operation of the user. Since such a user input pattern cannot be handled by the preset pattern described above, it is effective when a pattern is prepared based on the user's input.
  • the size of the setting area Ar may also be registered. That is, information indicating the position and size of the setting area Ar determined based on the input operation of the user may be stored. In that case, each of the plurality of setting areas Ar will be set at the position and size registered as the user input pattern.
  • the control unit 46 recognizes the shooting scene of the reference image based on the reference image.
  • the shooting scene of the reference image is, for example, a landscape, an event, a type of subject, a scene (for example, a daytime view or a night view), a situation (for example, weather, etc.), etc., which are shot as a reference image. be.
  • a known scene recognition technique can be used as a method for recognizing a shooting scene based on a reference image. For example, a method of determining whether or not the brightness or tint of an image in a predetermined region is within a preset range can be mentioned. Further, machine learning may be performed using the correct answer label indicating the shooting scene of the video and the video data as a learning data set, and the shooting scene of the reference video may be recognized by the scene recognition model obtained as a result of the learning. ..
  • the control unit 46 detects the subject in the reference image and automatically sets the setting area Ar at the position of the detected subject.
  • the subject in the reference image is a subject other than the landscape in the reference image, which can be detected by the control unit 46, and includes, for example, a person, an animal, a vehicle, and the like.
  • a known template matching technique may be applied.
  • the image of the subject may be stored in advance as a template image, the template image may be collated with each portion in the reference image, and an image similar to the template image may be detected as the subject.
  • a model for recognizing a subject in an image may be constructed by machine learning, and the model may be used to detect a subject in a reference image.
  • a known algorithm such as YOLO (You Only Look Once) or R-CNN (Region with Convolution Neural Network) can be used.
  • control unit 46 can set one setting area Ar for each of the detected subjects. At this time, the entire corresponding subject may be accommodated in each setting area Ar, or a part of the corresponding subject (for example, the upper body portion including the face) may be accommodated. ..
  • the setting area Ar can be automatically set for the subject in the reference image without the user's trouble.
  • the subject detection pattern is effective when recording the image of the subject in the reference image.
  • the control unit 46 identifies a position in the reference image in which the feature for determining the focus of the photographing device 10 satisfies the reference, and the setting area Ar is set at the specified position. Is set automatically.
  • the feature for determining the focus is, for example, a feature for determining the in-focus position in the reference image.
  • the autofocus is a phase difference AF (Auto Focus) method
  • the phase difference corresponds to the above characteristics.
  • the autofocus is a contrast AF method
  • the contrast between a plurality of pixels corresponds to the above-mentioned feature.
  • the AF method may be an AF method using directional light, or an AF method using DFD (Depth from defocus).
  • the position that satisfies the reference is the position where the above-mentioned features (for example, phase difference or contrast) are the features at the time of focusing.
  • the control unit 46 identifies a focused position by the AF function as a position satisfying the reference in the reference image. Then, as shown in FIG. 15, the setting area Ar is automatically set for the specified position (the focused position and the hatched position in FIG. 15). At this time, for example, the size of the setting area Ar may be automatically set according to the area of the focused portion in the reference image.
  • the image of the part that is in focus by the AF function is often recorded. Based on this point, by setting the setting area Ar at the in-focus position, it is possible to easily record the in-focus image, which improves convenience for the user.
  • another setting area Ar is automatically set accordingly.
  • another setting area Ar is set at a symmetrical position (for example, a position symmetrical with respect to the center of the reference image) at the focused position.
  • a plurality of setting areas Ar can be automatically set in the reference area.
  • the position where another setting area Ar is set is not limited to the above position.
  • the entire reference area when the entire reference image is in focus in the AF position specifying pattern, the entire reference area may be set as one setting area Ar. Further, when the subject is not detected in the reference image and an appropriate setting position of the setting area Ar cannot be found in the reference image, the setting area Ar may be set near the center of the reference image.
  • the in-focus position in the reference image is taken as an example of the shooting conditions, and the feature for determining the in-focus position in the reference image is set to a position satisfying the reference (that is, a focused position). It was decided to set the area Ar.
  • the shooting conditions may be other than the in-focus position, and examples thereof include an exposure amount and a white balance.
  • the shutter speed and ISO sensitivity are excluded from the shooting conditions referred to here.
  • the setting area Ar is set at a position in the reference image where the feature for determining the exposure amount (for example, the pixel value or the brightness) satisfies the reference. Can be done.
  • the setting area Ar may be set at a position where the exposure amount is adjusted to an appropriate value by the AE (Automatic Exposure) function.
  • the setting area Ar may be set at a position where the exposure amount is relatively low and a position where the exposure amount is relatively high in the reference image.
  • the setting area Ar can be set at a position in the reference image where the feature for determining the white balance (for example, chromaticity) satisfies the reference.
  • the setting area Ar may be set at a position where the white balance is adjusted to an appropriate value by the AWB (Auto White Balance) function.
  • AWB Auto White Balance
  • the user selects an arbitrary pattern from the plurality of arrangement patterns explained above.
  • the setting area Ar is set reflecting the intention or preference of the user.
  • the setting area Ar is automatically set, so that the user does not have to take time (setting work). That is, the display method of the present embodiment has improved convenience (ease of use) from the viewpoint of saving the user's trouble and setting the setting area Ar in the reference area by reflecting the user's intention and the like. It is a thing.
  • the arrangement pattern may be an arrangement pattern in which a plurality of arrangement patterns shown in FIG. 11 are combined. For example, a scene recognition pattern and an AF position specifying pattern may be adopted at the same time to set a plurality of setting areas Ar.
  • the above-mentioned pattern is merely an example, and an arrangement pattern other than the above-mentioned pattern may be added, and conversely, some of the above-mentioned patterns may be omitted.
  • the candidate Ac of the setting region is automatically set at the position of the feature portion in the reference region. Is set. Then, when the user performs a predetermined operation on the set candidate Ac, the setting area Ar is set at the position of the set candidate Ac.
  • the procedure for setting the candidate Ac in the setting process will be described.
  • the control unit 46 determines whether or not a feature portion exists in the reference video based on the characteristics (for example, pixel values) of each pixel of the reference video.
  • the featured part is a part where a visual change occurs in the reference image (excluding the part detected as a subject), for example, a part where there is movement in the background image, a color, a brightness, and the like.
  • the illuminations appearing in the upper left portion of the figure correspond to the featured portion.
  • the control unit 46 carries out the first setting step.
  • the first setting step is a step of automatically setting the candidate Ac of the setting area at the position of the featured portion in the reference image.
  • a sign indicating the position of the candidate Ac in the reference image (hereinafter, referred to as a candidate sign K) is displayed.
  • the candidate sign K is displayed in a mode different from that of the sign f indicating the position of the setting area Ar.
  • the candidate marker K in FIG. 16 is a substantially L-shaped graphic object representing a square in a rectangular area surrounding a feature portion.
  • the type and shape of the candidate sign K are not particularly limited, and may be, for example, a pointer in the shape of an arrow or a finger, or a graphic object consisting of a symbol such as a circle or a star.
  • the shade difference (difference in brightness) between the candidate Ac in the reference image and its surroundings may be used as the candidate marker K.
  • the second setting step is a step in which the control unit 46 sets the setting area Ar at the setting position of the candidate Ac in which the operation is performed according to the operation (for example, tap operation) for the candidate Ac of the user.
  • the operation for example, tap operation
  • the candidate Ac of the setting area can be automatically set for the feature portion in the reference image that is not recognized as a subject but has a visual change. Further, by displaying the candidate sign K indicating the position of the set candidate Ac in the reference video, the user can easily confirm the candidate Ac. Further, when the user performs a predetermined operation on the candidate Ac, the setting area Ar is set at the position of the candidate Ac. As a result, the setting area Ar can be set for the feature portion that the user is interested in in the reference video. Furthermore, if the setting area Ar thus set is selected as the recording area, it is possible to record the image of the featured portion.
  • the display step is a step of displaying a recorded image, a reference image, and a sign f indicating each position of a plurality of setting areas Ar in the reference image on a display.
  • the sign f is displayed for each set area Ar in the reference image.
  • each image of the setting area Ar other than the recording area Ap (hereinafter, referred to as a standby image) can be displayed.
  • the candidate sign K indicating the position of the feature points is displayed together with the sign f in the reference image.
  • the recorded image, the reference image, and the standby image can be simultaneously displayed on the screen of the rear display 28 (hereinafter referred to as a display screen).
  • a display screen For example, as shown in FIG. 18, the display screen is divided into a main screen G1, a sub screen G2, and an information display screen G3.
  • the standby video can be displayed on the sub screen G2.
  • the main screen G1 occupies a relatively wide range (for example, more than half of the display screen) on the display screen and displays a reference image.
  • the aspect ratio of the main screen G1 is preferably set to the same value as the aspect ratio of the reference image.
  • the sub screen G2 is a screen smaller than the main screen G1 and is arranged in a row along the vertical direction or the horizontal direction of the display screen.
  • Each sub screen G2 displays a recorded video or one standby video. It is preferable that the aspect ratio of each sub screen G2 is set to the same value as each aspect ratio of the recorded video and the standby video.
  • the information display screen G3 is a screen for displaying character information other than video, and for example, as shown in FIG. 18, advice regarding video recording is displayed.
  • the layout of the display screen (for example, the size and arrangement position of each of the main screen G1 and the sub screen G2) is not limited to the form shown in FIG. 18, and can be freely arranged according to the specifications of the device or the preference of the user. Can be designed.
  • a sign f is displayed for each of the plurality of setting areas Ar set in the setting step together with the reference image.
  • the number of signs f (display number) displayed on the main screen G1 in the display process is variable, and the maximum number of signs f that can be displayed (display upper limit number) can be displayed at the same time.
  • the sign f indicating the position of the recording area Ap and the sign f indicating the position of the other setting area Ar are displayed in different modes from each other.
  • the sign f indicating the position of the recording area Ap is preferably highlighted.
  • the border color may be a relatively conspicuous color such as red or fluorescent color, the border may be thicker, or the border may be thicker. It is good to blink it.
  • the image (that is, the recorded image) itself in the recording area Ap may be highlighted.
  • the moving area Am set for the subject moves following the subject.
  • the sign f indicating the position of the moving area Am is displayed in a manner different from the sign f indicating the position of the setting area Ar other than the moving area Am.
  • the control unit 46 uses the electronic zoom function to change the size of the moving area Am according to the change in the subject ratio, and adjusts so that the subject ratio is kept constant.
  • the moving area Am may move to the vicinity of the edge of the reference area (that is, the outer edge of the angle of view), or may extend beyond the reference area.
  • the control unit 46 displays a warning message on the information display screen G3 or outputs a warning sound to notify the user of the above situation.
  • the control unit 46 calculates the amount of deviation of the reference image by the electronic image stabilization, and adjusts the position of each setting area Ar based on the calculated amount of deviation. As a result, the position of each setting area Ar with respect to the reference area is maintained before and after the electronic image stabilization is performed. It is preferable that the function of adjusting the position of the setting area Ar along with the electronic image stabilization can be freely switched on and off according to the user's operation.
  • the identification information of the sign f is displayed for each sign f.
  • the identification information of each sign f is fixed during the display step, and even if the number of signs f displayed changes during the display step, it is maintained unchanged before and after that. For example, in FIG. 18, when the display of the sign f whose identification number is “3” is stopped, the identification numbers of the other signs f (that is, “1”, “2”, “4”) do not change. ..
  • By fixing the identification number of each sign f during the execution of the display step in this way it is possible to easily grasp which setting area Ar exists where even if the number of signs f displayed changes, for example.
  • a plurality of setting images including a recorded image and a standby image are displayed on the plurality of sub screens G2. Specifically, one corresponding setting image is displayed on each of the plurality of sub screens G2.
  • the aspect ratio of each sub-screen G2 is the same as the aspect ratio of the corresponding set image, the set image can be displayed well on the screen.
  • the recorded image is preferably highlighted.
  • the color of the screen frame, the thickness or line type of the frame line, the presence or absence of lighting, etc. are different between the sub screen G2 on which the recorded image is displayed and the sub screen G2 on which other setting images are displayed. It is preferable to do so. As a result, the user who sees a plurality of set images on the display can easily distinguish which image is the recorded image.
  • a plurality of execution modes of the display process are prepared, and the image display method in the display process changes for each mode. That is, the display process is performed according to the mode specified by the user. For example, when the user specifies the first mode, the first display process is performed as the display process. In the first display step, as shown in FIG. 18, the reference image and the sign f for each setting area Ar are displayed on the main screen G1, and the recorded image and the standby image are displayed on the sub screen G2. On the other hand, when the user specifies the second mode, the second display process is performed as the display process. In the second display step, as shown in FIG. 19, the recorded image and the standby image are displayed, and the reference image and the sign f for each setting area Ar are not displayed.
  • the recorded image, the standby image, the reference image, and the sign f for each setting area Ar do not necessarily have to be displayed on the same display (for example, the display 28 on the back surface). That is, as shown in FIG. 20, the image displayed on the main screen G1 and the image displayed on the sub screen G2 may be displayed on different displays. To give a specific example, the image displayed on the main screen G1 is displayed on the rear display 28, and the image displayed on the sub screen G2 is displayed on the electronic viewfinder 29 or an external monitor (not shown) connected to the photographing device 10. You may.
  • the display process includes the first display process and the second display process, and one of these two display processes specified by the user is carried out.
  • the displayed image can be switched according to the needs of the user.
  • the first display step may be performed to display the reference image and the sign f.
  • the second display step it is preferable to carry out the second display step to display only the recorded video and the standby video.
  • the execution mode of the display process that is, which of the first display process and the second display process is to be executed, can be freely switched according to the switching operation by the user during the execution of the display process.
  • the user can switch which display process is adopted through the touch panel 36 or the operation button 30 shown in FIG.
  • the recorded image and other set images may be displayed on the same display.
  • the recorded video may be displayed on the main screen G1 in the display screen, and the standby video may be displayed on the sub screen G2.
  • the recorded video and other set video may be displayed on different displays.
  • the recorded image may be displayed on the rear display 28, and other set images may be displayed on the electronic viewfinder 29 or an external monitor (not shown) connected to the photographing device 10.
  • the proposal information described later is displayed on the information display screen G3, for example, the proposal information described later is displayed.
  • the information display screen G3 can display advice for shooting, a warning message, and the like for the user. For example, if it is necessary to adjust the exposure amount, ISO sensitivity, or the like during the recording process, that fact may be displayed. Further, information other than the above can be displayed on the information display screen G3. For example, the current values regarding the shooting mode, resolution, ISO sensitivity, and other shooting conditions currently adopted, and the on / off of various functions such as electronic zoom may be displayed.
  • the number of sub-screens G2 is determined according to at least one item (hereinafter, simply referred to as "at least one item") of the resolution and aspect ratio of the recorded video. That is, the number of set images displayed on the sub screen G2 is determined according to at least one item. Similarly, the size of each sub screen G2 is also determined according to at least one item. That is, the display size of the set image is the size corresponding to at least one item.
  • the display number (strictly speaking, the maximum display number) and the display size of the set video in the display process are the number and size according to the recording format of the recorded video.
  • the number of set images to be displayed and the display size are determined according to at least one item, so that each of the plurality of set images including the recorded image can be displayed satisfactorily.
  • each set image can be displayed well on the sub screen G2 at an appropriate resolution.
  • the aspect ratio of the recorded video is determined according to the recording format of the recorded video, but the aspect ratio of the recorded video may be arbitrarily set without depending on the recording format. In that case, as the aspect ratio of the recorded video is adjusted, the number and size of the sub screens G2 are changed according to the adjusted aspect ratio.
  • both the display number and the display size (that is, the number and size of the sub screen G2) of the set video displayed in the display process are determined according to at least one item.
  • the present invention is not limited to this, and either the number of displayed images or the display size of the set video may be determined according to at least one item.
  • the number of displayed images set in the display process does not have to be determined according to at least one item.
  • the user may set or change the number of displays.
  • the number of displayed images set in the display process is determined according to the resolution and aspect ratio of the recorded image as described above.
  • one of the displayed setting images is a recorded image, and the rest is a standby image. Therefore, the set value regarding the display number of the standby video, that is, the maximum display number is determined according to the resolution and the aspect ratio of the recorded video, and is specifically one less than the number of the sub screen G2. In the case shown in FIG. 21, the maximum number of standby images displayed is three.
  • the number of setting areas Ar in the reference area changes according to the subject or the like in the reference image, and the number of setting areas Ar other than the recording area Ap, that is, the number of a plurality of standby areas changes accordingly.
  • the number of standby areas is six.
  • the control unit 46 carries out the display process according to the flow shown in FIG. Explaining the flow of the display process shown in FIG. 22, the control unit 46 executes the determination process when the number of the plurality of standby areas reaches the maximum number of display of the standby image (S021).
  • the control unit 46 determines the priority for each of the plurality of standby areas.
  • the control unit 46 detects a subject in the standby image for each of the plurality of standby images (S101).
  • the control unit 46 acquires information about the subject in the detected standby video (S102).
  • the control unit 46 may acquire the actual information as the recording area, which will be described later, instead of the information about the subject in the standby video.
  • Examples of the information about the subject include the time or number of times the subject is shown in the reference image during the shooting period, and the size (display size) of the subject in the reference image. This information can be acquired by the control unit 46 analyzing, measuring, or counting the reference image during the shooting period.
  • the face of the person may be recognized by a technique such as pattern matching, the importance of the person whose face is recognized may be specified, and the specific result may be used as information about the subject.
  • the importance of a person for example, the attributes of the person whose face is recognized (for example, family, relatives, acquaintances or others) can be determined, and the importance can be obtained from the determination result.
  • the priority may be determined according to the subject category (for example, person, animal, object, landscape, etc.). Further, the priority may be determined by giving priority to the subject whose detection timing is earlier. As for the information about the subject, of course, other than the above can be considered. It is desirable that the user can freely select what kind of information is used as information about the subject in the determination process.
  • the subject category for example, person, animal, object, landscape, etc.
  • the priority may be determined by giving priority to the subject whose detection timing is earlier.
  • the information about the subject of course, other than the above can be considered. It is desirable that the user can freely select what kind of information is used as information about the subject in the determination process.
  • control unit 46 determines the priority of each of the plurality of standby areas according to the information regarding the detected subject (S103).
  • the control unit 46 selects N standby areas from the plurality of standby areas based on the priority (S022).
  • the number N of the standby areas selected is the maximum number of standby images to be displayed, and is a number determined according to the number of sub screens G2 (for example, a number that is one less than the number of sub screens G2).
  • the control unit 46 selects N standby areas in order from the one with the highest priority.
  • the control unit 46 displays the images (standby images) of the selected N standby areas on the sub screen G2 (S023).
  • the sub-screens G2 are arranged in the vertical direction of the display screen as shown in FIG. 21, it is desirable to display the standby image in the standby area having a higher priority on the higher sub-screen G2.
  • N standby images selected according to the priority are displayed. As a result, it is possible to appropriately display the standby video having a high priority while complying with the restrictions on the screen display.
  • the method of determining the priority is not limited to the method of determining the priority based on the information about the subject in the standby image.
  • the priority may be determined according to the actual information as the recording area. More specifically, for each of the plurality of standby areas, the number of times the recording area is selected from the start of shooting to the present time, the time of the recording area, or the time when the recording area is selected immediately before. Specify the elapsed time, etc. These pieces of information correspond to information about the achievements selected as the recording area in the past. Then, the priority of each of the plurality of standby areas may be determined based on the above-mentioned information on the actual results. For example, when the information on the actual results is the number of times or time selected as the recording area, the higher the number of times or time, the higher the priority may be given.
  • N standby areas are selected based on the priority, and only the video of the selected standby areas is displayed, but the present invention is not limited to this.
  • the upper N standby areas and the lower standby areas may be selected in descending order of priority.
  • the standby images of the upper N standby areas may be displayed first, and the standby images of the lower standby areas may be displayed by scrolling or switching the display screen as shown in FIG. 23. ..
  • each of the plurality of standby images may be displayed in a size according to the priority. For example, as shown in FIG. 24, the standby image in the standby area having a high priority is displayed on the sub screen G2 of the normal size, and the standby image in the standby area having a low priority is displayed on the sub screen G2x of the reduced size. You may. In this way, each of the plurality of standby images can be displayed, and the standby area having a high priority can be displayed more easily.
  • the control step is a step of executing a control process for suppressing a change in the reference region, and is performed at least after the reference region is determined. That is, the control process is a process for suppressing a change in the reference area after the time when the user's recording start instruction is received.
  • the control unit 46 locks the zoom drive unit 21 to stop the movement of the zoom optical device 18.
  • the optical zoom function is limited during the recording process, the reference region is fixed, and the angle of view at that time is maintained.
  • the control process executed to suppress the change of the reference area is not limited to the above process, and may be, for example, a process for notifying the proposal information regarding the change of the reference area.
  • a message prohibiting optical zoom may be displayed on the information display screen G3, or may be reproduced by voice or the like.
  • a message prohibiting the operation of moving the photographing device 10 for example, a panning operation
  • a message recommending fixing the photographing device 10 using a pan head such as a tripod is displayed. You may.
  • control step may be carried out before the determination of the reference region (that is, before the reception of the recording start instruction), or may be carried out, for example, during the setting step. In this case, it is possible to prevent the reference area from changing while a plurality of setting areas Ar are set in the reference area.
  • the change step is a step of executing a change process relating to a change in the number of displayed images of the set area Ar (that is, the set image).
  • the control unit 46 executes the change process.
  • the change step is a step of executing a change process relating to a change in the number of displayed images of the set area Ar (that is, the set image).
  • the number of displayed images can be dynamically increased or decreased during the recording process.
  • control unit 46 monitors the reference image and determines whether or not the number of subjects in the reference image has increased (S031). When the number of subjects in the reference image increases, the control unit 46 executes a change step (S032). In such a change process, a change process for increasing the number of displayed set images is executed.
  • the setting area Ar is added according to the increase of the subjects in the reference image, and the setting image of the added setting area Ar is newly displayed on the display.
  • the number of displayed set images increases. For example, as shown in FIGS. 26 and 27, when the number of subjects in the reference image increases from 3 to 4, the number of displayed images (that is, the number of images displayed on the sub screen G2) starts from 3. Increase to four.
  • the number of signs f in the reference image displayed on the main screen G1 is linked to the number of the added setting area Ar. It increases by the amount (see FIG. 27).
  • the setting area Ar is set at the position of a new subject in the reference image, but the present invention is not limited to this.
  • the candidate Ac of the setting area may be set instead of the setting area Ar.
  • a sign indicating the position of the candidate Ac (specifically, the above-mentioned candidate sign K) is displayed in the reference video.
  • the setting area Ar is added to the position of the candidate Ac by using this as a trigger.
  • the set image of the added setting area Ar is newly displayed, and the number of displayed setting images increases.
  • the proposal information regarding the addition of the setting area Ar may be output. ..
  • a message proposing to add a setting area Ar to a new subject position to increase the number of displayed set images may be displayed on the information display screen G3, or may be reproduced by voice or the like. In this way, as the change process, a process of outputting proposal information regarding the change of the display number of the set video may be executed.
  • the control unit 46 monitors the reference image during the execution of the recording process, and determines whether the moving area Am in the reference area overlaps with another setting area Ar (S033). Then, when the moving area Am overlaps with another setting area Ar as shown in FIG. 28, or when it is just before overlapping, the control unit 46 outputs a warning message or a warning sound (S034). This is because, in a situation where the moving area Am overlaps with the other setting area Ar, the subject in one area may not appear behind the subject in the other area.
  • the control unit 46 executes the change process (S036). In such a change process, a change process for reducing the number of displayed set images is executed.
  • step S036 the overlapping moving area Am and the other setting area Ar are updated to one setting area Ar, and the updated setting image of the setting area Ar is displayed on the display.
  • the image of the moving area Am and the image of the other setting area Ar displayed separately as shown in FIG. 28 are integrated into one image including the subject of each of these two images as shown in FIG. 29. NS.
  • the number of set areas Ar is reduced by one, and the number of displayed set images is also reduced by one.
  • the size and position of the updated setting area Ar are set so that the subjects of the above two images can be accommodated.
  • the identification information of the sign f indicating the set area Ar after the update may be inherited from the identification information of the sign f indicating one of the two areas before the update (that is, the moving area Am and the other set area Ar). good.
  • a new identification number may be assigned to the updated setting area Ar.
  • the control unit 46 periodically determines whether or not each of the plurality of setting areas Ar satisfies the stop condition during the execution of the recording process (S037).
  • the cancellation condition is a standard for determining whether or not to stop displaying the image (setting image) of the setting area Ar, and examples thereof include the following conditions (1) to (3).
  • Cancellation condition (1) At least a part of the set area Ar is out of the reference area due to optical zoom or the like.
  • Cancellation condition (2) There is no change in the set image of the setting area Ar for a certain period of time, or there is no subject in the set image.
  • Cancellation condition (3) The setting area Ar has not been selected as the recording area for a certain period of time or longer.
  • the discontinuation condition is not limited to the above conditions (1) to (3), and conditions other than the above may be included in the discontinuation condition.
  • the control unit 46 executes the change step (S038). In such a change process, a change process for reducing the number of displayed set images is executed.
  • step S0308 the display of the set image of the setting area Ar that satisfies the stop condition is stopped.
  • the display of the setting image of the setting area Ar is stopped as shown in FIG. 30 (sub). It disappears from the screen G2).
  • the number of displayed set images is reduced by one.
  • the setting area Ar hereinafter referred to as a stop area
  • the display of the sign f indicating the position of the stop area is also stopped on the main screen G1 as shown in FIG. ..
  • the proposal information regarding the stop of the display of the set image may be output.
  • a message recommending that the display of the set image of the setting area Ar that satisfies the cancellation condition be stopped may be displayed on the information display screen G3, or may be reproduced by voice or the like.
  • another image an image different from the set image
  • the stopped area is stored in the internal memory 50 or the like in the photographing device 10 while the recording process is performed.
  • the period in which the stop area is stored may be until the end of shooting or until the power of the shooting device 10 is turned off.
  • an operation icon such as the return button Bt9 is displayed on the main screen G1.
  • the user can give a redisplay instruction for the set image of the stop area by, for example, tapping the return button Bt9.
  • the control unit 46 executes the change process (S040). In such a change step, a change process for redisplaying the stored set image of the stop area is executed based on the user's redisplay instruction.
  • the image of the canceled area is displayed on the sub screen G2 again, and the number of displayed set images returns to the number before the display of the set image of the stopped area is stopped.
  • the set image of the stop area that can be redisplayed is not limited to the image of the immediately preceding stop area (the setting area in which the display of the set image was stopped most recently). For example, it may be possible to redisplay the images of the canceled areas for the past several times during the current shooting period. In that case, the stop area for the past several times is stored in the photographing device 10, and the user specifies which stop area the set image is to be redisplayed and instructs the user to redisplay the image.
  • the control unit 46 monitors the reference image during the execution of the recording process, and determines whether the number of subjects in the reference area exceeds the upper limit of the number of the set area Ar (S041). .. Then, when the number of subjects exceeds the upper limit of the number of set areas Ar, the control unit 46 executes the changing step (S042). In such a change process, a change process relating to a decrease in the number of displayed set images is executed. In the change process in step S042, a message recommending that the number of subjects exceeds the upper limit of the number of set areas Ar and that the number of displayed images to be reduced is reduced is displayed on the information display screen G3, or voice or the like. Play with.
  • the user reviews the setting of the setting area Ar with this as an opportunity, and deletes unnecessary setting area Ar such as the setting area Ar that is not selected as the recording area for the longest period. As a result, the number of displayed set images is reduced by the number of set areas Ar deleted by the user.
  • the series of steps S031 to S042 described above are repeatedly performed during the execution of the recording process, and end at the end of the recording process (S043).
  • the change process is carried out with the change in the reference image (for example, addition of a subject, etc.) and the establishment of the cancellation condition as an opportunity, and the number of displayed images is changed as appropriate.
  • the user can easily confirm the number of set images according to the situation at that time, and can omit the confirmation of the images such as the set area Ar which is unlikely to be the recording area.
  • convenience for the user is improved.
  • the photographing device 10 displays various images as a display device, but the present invention is not limited to this.
  • the display device may be configured by a photographing device 10, a camera controller connected to the photographing device 10 by wire or wirelessly, an external external display, or the like.
  • the camera controller takes on the function of the control unit 46, causes the photographing device 10 to capture a reference image, and causes the external display to display various images.
  • the camera controller may set the setting area Ar, select and reselect (switch) the recording area, record the recorded image, and the like.
  • the present invention is not limited to this, and as a control process relating to the change of the reference area, a process for prompting the change of the reference area may be executed.
  • the reference region can be adjusted according to changes in the reference image (for example, movement of the subject in the reference image).
  • the recorded image is zoomed up by electronic zoom in the recording process.
  • the zoom magnification exceeds a predetermined value, the resolution of the recorded image becomes a certain value or less, and there is a possibility that it becomes difficult to obtain the desired image quality.
  • information prompting the change of the reference region may be displayed on the information display screen G3 by performing optical zoom instead of electronic zoom.
  • the control unit 46 may move the zoom drive unit to forcibly perform optical zoom so that the resolution becomes equal to or higher than a predetermined value, and the reference region may be automatically changed.
  • the relative position of each setting region Ar with respect to the reference region changes.
  • control unit 46 calculates the amount of change in the reference region and adjusts the position and size of each setting area Ar based on the calculated amount of change. As a result, the relative position of each setting area Ar with respect to the reference area is maintained before and after the zooming is performed.
  • the moving region Am may follow the movement of the subject to reach the vicinity of the edge of the reference region, or at least a part of the moving region may protrude from the reference region.
  • information prompting the moving of the photographing device 10 that is, changing the reference image
  • a known detection sensor such as a gyro sensor provided in the photographing device 10 moves the photographing device 10 (for example, the amount of displacement). Should be detected.
  • each setting area Ar it is preferable to adjust the position and size of each setting area Ar based on the movement of the photographing device 10 detected by the control unit 46. As a result, the relative position of each setting area Ar with respect to the reference area is adjusted according to the changed reference area. At this time, the setting area Ar that goes out of the reference area due to the change of the reference area may be automatically deleted.
  • the recorded video is a moving image, that is, a set of a plurality of frame images continuously shot at a constant frame rate.
  • the recorded video is not limited to a moving image and may be a still image.
  • the control unit 46 displays the reference image as a live view image on the main screen G1 and sets a plurality of setting areas Ar in the reference area. The user selects the recording area Ap from the plurality of setting areas Ar, and the control unit 46 displays the plurality of setting images including the recorded image on the sub screen G2. Then, when the user gives a recording instruction by operating the release button 26 or the like, the control unit 46 may record the recorded image as a still image on the recording medium.
  • the setting area Ar when a subject in the reference image is detected, the setting area Ar is automatically set at the position of the detected subject.
  • the case is not limited to the case where the setting area Ar is immediately set at the position of the detected subject, and the candidate Ac of the setting area may be set first at the position of the detected subject.
  • the candidate sign K may be displayed at the position of the candidate Ac, and when the user performs a predetermined operation on the candidate sign K, the setting area Ar may be set at the position of the candidate Ac.
  • the display of the setting image is stopped, while the setting area Ar is stored in the photographing device 10 during the recording process.
  • the present invention is not limited to this, and the setting area Ar that satisfies the cancellation condition may be deleted, and the video in that area may not be stored.
  • a screen (not shown) for selecting whether to delete the setting area Ar is displayed separately, and after confirming the user's intention regarding the necessity of deletion, the setting area Ar that satisfies the cancellation condition is deleted. It is good to do.
  • the photographing device is a digital camera, but it may be a mobile terminal such as a video camera, a mobile phone with an imaging optical system, a smartphone, or a tablet terminal.
  • the image pickup lens may be a lens unit externally attached to the image pickup optical system of the mobile terminal.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Adjustment Of Camera Lenses (AREA)

Abstract

撮影映像中の一部を切り出し、且つ、切り出し映像を切り替えられる映像の表示方法として、より有用な方法を提供する。　撮影装置によって撮影した映像を表示する表示方法が、基準映像の撮影領域である基準領域の中に、複数の設定領域、又は設定領域の候補を自動的に設定する設定工程と、記録される記録映像の領域である記録領域を、複数の設定領域の中から選択する選択工程と、選択工程の実施後に、記録領域を複数の設定領域の中から再選択して記録領域を切り替える切り替え工程と、を備える。

Description

表示方法
　本発明の一つの実施形態は、映像の表示方法に関する。
　一台の撮影装置によって撮影された映像から、その映像中の複数の被写体のうち、いずれかの被写体の映像を切り出して記憶する技術は、既に開発されている。その一例としては、例えば、特許文献１に記載の技術が挙げられる。
　特許文献１に記載の技術では、撮影装置の撮影範囲中に、互いに異なる複数の映像領域を設定し、その中の一つの領域の映像を記録する。また、特許文献１に記載の技術では、記録する映像の領域を複数の領域の中で変更する（切り替える）ことができる。これにより、例えば、撮影装置を固定した状態のままで、撮影映像中の複数の被写体の各々についてズームアップした映像を得ることができる。
特開２０１６－９２４６７号公報
　本発明の一つの実施形態は、上記の事情に鑑みてなされたものであり、撮影映像中の一部を切り出し、且つ、切り出し映像を切り替えられる映像の表示方法として、より有用な方法を提供することを目的とする。
　上記の目的を達成するために、本発明の一つの実施形態は、撮影装置によって撮影した映像を表示する表示方法であって、基準映像の撮影領域である基準領域の中に、複数の設定領域、又は設定領域の候補を自動的に設定する設定工程と、記録される記録映像の領域である記録領域を、複数の設定領域の中から選択する選択工程と、選択工程の実施後に、記録領域を複数の設定領域の中から再選択して記録領域を切り替える切り替え工程と、を備える表示方法である。
　また、設定工程は、基準領域の中に、候補を自動的に設定する第１設定工程と、ユーザの候補に対する操作に応じて、候補が設定された位置に、設定領域を設定する第２設定工程と、を有してもよい。
　また、設定工程では、基準映像において視覚的変化が生じている特徴箇所を検出し、基準領域において、検出された特徴箇所の位置に、設定領域又は候補を自動的に設定してもよい。
　また、設定工程では、基準映像の撮影シーンを基準映像に基づいて認識し、基準領域において、認識された撮影シーンと対応する位置に設定領域又は候補を自動的に設定してもよい。
　また、設定工程では、基準映像において、撮影装置の撮影条件を決めるための特徴が基準を満たす位置に設定領域を自動的に設定してもよい。
　ここで、撮影条件は、基準映像内の合焦位置、露光量、及びホワイトバランスのうちの少なくとも一つであってもよい。
　また、設定工程では、予め記憶された設定領域の位置情報に基づいて設定領域又は候補を自動的に設定してもよい。
　ここで、位置情報は、過去に実施された設定工程にて設定された設定領域の位置情報、及び、ユーザの操作に基づいて決められた設定領域の位置情報のうちの少なくとも一つを含んでもよい。
　また、基準領域のサイズ又は位置が変化した場合に、設定領域の位置及びサイズの少なくとも一方を調整する調整工程をさらに備えてもよい。
　また、本発明の一つの実施形態は、撮影装置によって撮影した映像を表示する表示方法であって、基準映像の撮影領域である基準領域の中に、複数の設定領域を設定する設定工程と、記録される記録映像の領域である記録領域を、複数の設定領域の中から選択する選択工程と、選択工程の実施後に、記録領域を複数の設定領域の中から再選択して記録領域を切り替える切り替え工程と、記録映像の動画像を記録する記録工程と、設定領域の映像である設定映像を表示する表示工程と、記録工程の実施中に、設定映像の表示数の変更に関する変更処理を実行する変更工程と、を備える表示方法である。
　また、変更処理は、基準映像中の被写体の増加に応じて設定領域を追加して表示数を増やす処理を含んでもよい。
　さらに、変更処理は、中止条件を満たす設定領域の設定映像の表示を中止して表示数を減らす処理を含んでもよい。
　また、設定映像の表示が中止された設定領域である中止領域は、記録工程が実施される間に記憶されてもよい。この場合、変更処理は、ユーザの再表示指示に基づき、記憶された中止領域の設定映像を再表示する処理を含んでもよい。
　また、変更処理は、表示数の変更に関する提案情報を出力する処理を含んでもよい。
　また、基準映像中の被写体の数が設定領域の数の上限値を超えた場合、変更工程において、表示数の減少に関する変更処理を実行してもよい。
本発明の一実施形態に係る撮影装置の外観の一例を示す斜視図である。 本発明の一実施形態に係る撮影装置の背面側を示す背面図である。 本発明の一実施形態に係る撮影装置の構成を示すブロック図である。 電子手振れ補正についての説明図である。 基準領域と設定領域との関係を示す図である。 基準映像と記録映像との位置関係を示す図である。 記録映像を示す動画像のうち、切り替え前後の記録映像を示す図である。 撮影領域内に新たな被写体が入り込んだときの基準映像を示す図である。 移動する被写体に移動領域が追従する様子を示す図である。 映像表示フローの流れを示す図である。 設定工程におけるＵＩ画面の遷移を示す図である。 前回使用パターンを選択した場合に設定領域を設定する様子を示す図である。 プリセットパターンの選択画面を示す図である。 設定領域の位置に関するユーザ操作の説明図である。 ＡＦ位置特定パターンに基づいて設定される設定領域を示す図である。 基準映像中の特徴箇所を示す図である。 特徴箇所に設定領域が設定された様子を示す図である。 表示工程を実施した際の表示画面の一例を示す図である。 第２表示工程を実施した際の表示画面の一例を示す図である。 第２表示工程を実施した際の表示画面の変形例を示す図である。 待機領域の数が待機映像の最大表示数に達した場合の画面例を示す図である（その１）。 待機領域の数が待機映像の最大表示数に達した場合の表示工程の流れを示す図である。 待機領域の数が待機映像の最大表示数に達した場合の画面例を示す図である（その２）。 待機領域の数が待機映像の最大表示数に達した場合の画面の変形例を示す図である。 記録工程の実施中における処理の流れを示す図である。 変更工程実施前の画面例を示す図である。 変更工程により設定映像の表示数が増えた場合の画面例を示す図である。 移動領域が他の設定領域と重なった場合の画面例を示す図である。 重なった移動領域と他の設定領域とが１つの設定領域に統合された場合の画面例を示す図である。 ある設定領域の設定映像の表示が中止された場合の画面例を示す図である。 基準領域の変更を促す提案情報が表示された画面例を示す図である。
　本発明の好適な一実施形態（以下、本実施形態という。）について、添付の図面を参照しながら詳細に説明する。
　本実施形態は、図１～図３に示す撮影装置１０を用いた映像の表示方法に関する。ただし、以下に説明する実施形態は、本発明の理解を容易にするために挙げた一例に過ぎず、本発明を限定するものではない。すなわち、本発明は、その趣旨を逸脱しない限りにおいて、以下に説明する実施形態から変更又は改良され得る。また、本発明には、その等価物が含まれる。
　［撮影装置の基本構成］
　撮影装置１０は、例えば、映像を撮影するデジタルカメラである。
　ここで、「映像」とは、特に断る場合を除き、ライブ映像（ライブビュー画像）、すなわちリアルタイムで撮影される映像を意味する。また、本実施形態における映像は、主として動画像である。すなわち、撮影装置１０は、所定のフレームレートで動画像を撮影する。
　撮影装置１０は、例えばレンズ交換式の機種であり、図１及び図２に示すように撮影装置本体１２と撮影レンズ１４とを備える。撮影レンズ１４は、撮影装置本体１２のマウント１３に対して交換可能に装着される。ただし、これに限定されず、撮影装置１０は、レンズ一体式の機種でもよい。
　（撮影レンズ）
　撮影レンズ１４は、図３に示すように、光学ユニット１７、絞り２０、ズーム用駆動部２１、フォーカス用駆動部２２、及び絞り駆動部２３を含む。
　光学ユニット１７は、ズーム用の光学機器１８（例えば、ズームレンズ）を含む。光学機器１８を光軸Ｌ１の方向に動かすことにより、撮影装置１０の撮影領域が拡大又は縮小してズームが変わる。つまり、撮影装置１０は、光学機器１８による光学ズーム機能を備える。
　なお、本実施形態の撮影装置１０は、光学ズーム機能とともに、映像中の被写体を電子処理にて拡大する電子ズーム（デジタルズーム）機能を備える。
　また、光学ユニット１７は、フォーカス用の光学機器１９（例えば、フォーカスレンズ）を含む。光学機器１９を光軸Ｌ１の方向に動かすことにより、撮影レンズ１４の合焦位置が変化してピントが調整される。
　なお、本実施形態の撮影装置１０は、オートフォーカス（ＡＦ）機能を備える。すなわち、映像撮影中、ユーザが所定の操作（例えば、映像記録開始の指示操作）を行うと、フォーカス用駆動部２２が作動して光学機器１９を動かす。この結果、映像中の所定部分に合焦するように合焦位置が自動調整される。
　また、光学ユニット１７は、広角レンズ、超広角レンズ、３６０度レンズ、又はアナモフィックレンズ等を含んでいる。この結果、撮影装置１０は、撮影装置１０の横方向（横幅方向）に広い画角で映像を撮影することができる。撮影装置１０の画角は、光学ズームの実行等に伴って変化する。また、撮影装置１０の最大画角（全画角）は、光学ユニット１７及び後述の撮像素子４０の設計仕様等に応じて決まる。
　ちなみに、撮影装置１０に設けられる光学ユニット１７は、１つに限定されず、互いに画角が異なる複数の光学ユニット１７が備えられてもよい。
　絞り２０は、可変に構成された開口形状を有し、開口形状は、絞り駆動部２３によって調整される。開口形状の調整により、撮影レンズ１４への入射光に対する絞り量が変化して露光量が調整される。
　（撮影装置本体）
　撮影装置本体１２は、図１及び図２に示すように、操作ボタン３０を含む操作部を備える。また、撮影装置本体１２の上面には、操作部の１つであるレリーズボタン２６が配置されている。レリーズボタン２６が押されると、撮影装置１０が撮影する映像、あるいは、その中から切り出された映像（厳密には、後述の記録映像）の記録が開始される。
　ここで、撮影装置１０の撮影領域、すなわち撮影装置１０の画角に入る範囲は、ユーザの記録開始指示が受け付けられた時点で決定される。また、撮影領域は、例えば、電子手振れ補正のオンオフ等に応じて変化する。記録開始指示の受け付け時点で電子手振れ補正がオフであるとき、撮影領域は、一般的に、フルサイズ（全画角）の撮影領域となる。
　なお、映像の記録開始指示にかかるユーザの操作は、レリーズボタン２６の押下げに限定されず、後述する背面のディスプレイ２８において所定位置をタッチする操作でもよい。
　以降、撮影装置１０がその時点での画角で撮影する映像を「基準映像」と呼ぶこととする。また、基準映像の撮影領域を「基準領域」と呼ぶこととする。
　撮影装置本体１２の背面には、図２に示すディスプレイ（以下、背面のディスプレイ２８とも呼ぶ。）が設けられている。背面のディスプレイ２８は、例えば、ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）、有機ＥＬ（Organic Electroluminescence）ディスプレイ、ＬＥＤ（Light Emitting Diode）ディスプレイ、又は電子ペーパー等で構成されている。
　背面のディスプレイ２８は、基準映像及び後述する記録映像等を表示する。このように、ディスプレイを有する撮影装置１０は、映像の表示機能を備えるため、映像表示装置として利用されることになる。
　また、背面のディスプレイ２８は、映像以外の情報を表示することができ、例えば撮影に関するアドバイス又は提案情報等を表示する（図１８参照）。
　なお、本実施形態の撮影装置本体１２は、図２及び図３に示すように、サブディスプレイとしての電子ビューファインダ（図３ではＥＶＦと表記）２９を備える。背面のディスプレイ２８と電子ビューファインダ２９には、同一の映像を表示することもできるし、互いに異なる映像を表示することもできる。ちなみに、撮影装置は、電子ビューファインダ２９を備えなくてもよい。また、電子ビューファインダ２９に映像を表示し、背面のディスプレイ２８に映像を表示しなくてもよい。
　また、背面のディスプレイ２８の内部、又はディスプレイ２８の露出面には、ユーザ操作を検知するタッチパネル３６が設けられている。例えば、背面のディスプレイ２８の所定位置をユーザがタッチすると、タッチパネル３６がタッチ位置を検知し、その検知結果を後述の制御部４６に出力する。
　図３に示すように、撮影装置本体１２には、さらにシャッタ３８、撮像素子４０、アナログ信号処理回路４４、制御部４６、内部メモリ５０、カードスロット５２、及びバッファメモリ５６が設けられている。
　撮像素子４０は、イメージセンサであり、撮影レンズ１４を通過した光を受光し、その受光像を電気信号（映像信号）に変換して出力する。撮像素子４０としては、ＣＣＤ（Charged Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor Image Sensor）等の固体撮像素子が利用可能である。
　制御部４６は、撮影装置１０の各部を制御し、映像の撮影、表示及び記録等に関する各種の処理を実行する。制御部４６は、図３に示すようにコントローラ４７及び映像処理部４８を含む。
　制御部４６は、１つ又は複数のプロセッサを有し、プロセッサと制御プログラムとの協働によって制御部４６が構成されている。プロセッサは、例えば、ＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＧＰＵ（Graphics Processing Unit）、又はその他のＩＣ（Integrated Circuit）によって構成されてもよい。あるいは、これらを組み合わせてプロセッサが構成されてもよい。
　また、プロセッサは、ＳｏＣ（System on Chip）等に代表されるように、コントローラ４７及び映像処理部４８を含む制御部４６全体の機能を１つのＩＣ（Integrated Circuit）チップで構成してもよい。
　以上に挙げた各プロセッサのハードウェア構成は、半導体素子などの回路素子を組み合わせた電気回路（Circuitry）で実現してもよい。
　コントローラ４７は、ユーザ操作に基づいて、又は所定の制御プログラムに従って撮影装置１０の各部を制御する。例えば、コントローラ４７は、所定のフレームレートで映像を撮影するように撮像素子４０及びアナログ信号処理回路４４を制御する。
　コントローラ４７は、撮影条件が所望の条件となるように各駆動部２１～２３、撮像素子４０、及びアナログ信号処理回路４４等を制御する。撮影条件には、フォーカス（ピント）、露光量及びホワイトバランス等が含まれる。すなわち、コントローラ４７により、撮影装置１０の自動調整機能であるオートフォーカス（ＡＦ）機能、オート露出（ＡＥ）機能、及びオートホワイトバランス（ＡＷＢ）機能が実現される。
　さらに、コントローラ４７は、ユーザの記録開始指示を受け付けると、映像の記録を開始するように映像処理部４８を制御する。
　映像処理部４８は、アナログ信号処理回路４４から送られてくるアナログの映像信号をデジタル映像データに変換し、デジタル映像データに対してガンマ補正及びホワイトバランス補正等を行う。処理後のデジタル映像データは、所定の規格に準拠した圧縮形式にて圧縮される。
　映像処理部４８は、撮影中、所定のフレームレートにて圧縮デジタル画像データを生成し、そのデータから映像（厳密には、フレーム画像）を取得する。このときに取得される映像が、基準領域にて撮影される基準映像に相当する。
　また、映像処理部４８は、コントローラ４７による制御の下、基準映像の中から記録映像を切り出す。記録映像は、基準映像の画角よりも小さい画角の映像であり、基準領域における一部分の領域の映像である。記録映像は、基準映像と同じフレームレートにて生成され、例えば背面のディスプレイ２８又は電子ビューファインダ２９に表示される。
　また、記録映像は、記録媒体に記録される。この結果、記録映像の映像ファイルが作成される。このとき、記録映像の解像度（画素数）及びアスペクト比は、記録映像の記録形式（動画フォーマット）に応じて決まる。
　なお、記録形式は、特に限定されず、自由に決めることができる。
　さらに、映像処理部４８は、電子手振れ補正が有効（オン）である間、図４に示すように、全画角で撮影された補正前映像から、その補正前映像よりサイズが若干小さい抽出映像を抽出する。そして、振動等によって抽出映像がずれると、映像処理部４８が電子手振れ補正を実行し、補正前映像における抽出領域の位置をずらす（例えば、図４中、実線の位置から破線の位置にずらす）。
　なお、電子手振れ補正オンである間は、抽出映像が基準映像となる。
　以降では、特に断る場合を除き、コントローラ４７及び映像処理部４８の各々の動作及び処理を、制御部４６の動作及び処理として説明することとする。
　撮影装置本体１２に内蔵された内部メモリ５０、及び、カードスロット５２に対して着脱可能なメモリカード５４は、記録媒体であり、例えば記録映像が記録される。
　なお、内部メモリ５０及びメモリカード５４は、撮影装置本体１２とは別の機器（外部）に備えられてもよい。その場合、制御部４６は、有線又は無線によって外部の記録媒体に対して記録映像を記録してもよい。
　バッファメモリ５６は、制御部４６のワークメモリとして機能する。
　［記録映像の記録及び切り替えについて］
　撮影装置１０は、基準映像から切り出される記録映像を記録媒体に記録する。また、撮影装置１０は、基準映像における切り出し領域を変えることで記録映像を切り替える（スイッチする）ことができる。このような機能に関して、図５を参照しながら説明する。
　なお、図５では、説明の便宜上、映像中の被写体の図示を省略している。
　撮影装置１０が撮影を開始すると、基準映像がディスプレイ（例えば、背面のディスプレイ２８）に表示される。このとき、通常では全画角の映像が基準映像となり、図５における最外縁によって囲まれる領域が基準領域Ａｓとなる。また、電子手振れ補正オンである間は、全画角の映像から抽出された抽出映像が基準映像となり、図５における破線枠によって囲まれる領域が基準領域Ａｔとなる。
　撮影開始前又は撮影開始中にユーザが所定の操作を行うと、制御部４６が、基準領域Ａｓ、Ａｔの中に設定領域Ａｒを設定する。設定領域Ａｒは、基準領域Ａｓ、Ａｔ中の一部分であり、例えば設定領域Ａｒ内には基準映像中の被写体が映り込む（図６参照）。
　また、設定領域Ａｒの位置及びサイズは、自動的に、あるいはユーザ操作に基づいて調整可能である。ユーザは、画面上で所定操作等を行うことにより、例えば基準映像中の被写体の位置及び大きさに応じて、その被写体が映る設定領域Ａｒの位置及びサイズを変更することができる。
　ここで、本実施形態では、設定領域Ａｒのアスペクト比が、記録映像の記録形式（動画フォーマット）に応じた値に決められる。そのため、設定領域Ａｒのサイズを変える際には、設定領域Ａｒのアスペクト比が一定のままサイズを変えることになる。ただし、記録映像の記録形式に依拠せずに設定領域Ａｒのアスペクト比を決めてもよく、その場合には、アスペクト比を変えながら設定領域Ａｒのサイズを変えてもよい。
　設定領域Ａｒが設定されると、図５に示すように、その時点でディスプレイに表示される基準映像中に標識ｆが表示される。
　標識ｆは、基準映像中における設定領域Ａｒの位置を示し、設定領域Ａｒの境界を含んでいる。設定領域Ａｒの境界は、設定領域Ａｒとその周辺とを識別する（見分ける）ために設定される。
　境界を含む標識ｆとしては、例えば、設定領域Ａｒを囲む枠、及び、設定領域Ａｒの代表位置を示すポインタ等の図形オブジェクトが挙げられる。また、設定領域Ａｒとその周辺との間の明るさ、色度、及び濃淡等の差異も標識ｆに該当する。その他、設定領域Ａｒとその周辺とを見分けられるものであれば、標識ｆの範疇に含まれ得る。
　以下では、有色の矩形枠からなる標識ｆを例に挙げて説明することとする。
　設定領域Ａｒは、図５に示すように基準映像中に複数設定することができる。その場合、それぞれの設定領域Ａｒに対して標識ｆが表示される。また、各標識ｆに対して、識別情報（図５中、標識ｆの右上に表示された番号）が表示される。
　識別情報は、制御部４６が所定の付与ルールに則って個々の標識ｆに対して個別に付与される情報である。識別情報が標識ｆと共に表示されることにより、ユーザは、各標識ｆを見分けることができる。
　なお、識別情報は、特に限定されず、番号、文字又は記号でもよく、あるいは標識ｆ毎に分けられた標識ｆの表示色でもよい。番号を識別情報とする場合には連番であることが望ましい。
　設定領域Ａｒの設定が完了すると、ユーザは、設定された複数の設定領域Ａｒの中から、記録映像の領域である記録領域Ａｐを選定する。制御部４６は、ユーザの選定操作に従って、記録領域Ａｐを複数の設定領域Ａｒから選択する。これにより、領域内の映像が記録される設定領域Ａｒ、すなわち記録領域Ａｐが決まる。
　記録領域Ａｐが決まると、制御部４６は、基準映像中に表示される設定領域Ａｒ毎の標識ｆのうち、記録領域Ａｐの位置を示す標識ｆと、それ以外の設定領域Ａｒの位置を示す標識ｆとを、互いに異なる態様にて表示する。例えば、標識ｆの表示態様としては、標識ｆの色、明るさ、濃度（濃淡度合い）、形状、縁線の太さ及び線種、並びに点滅表示の有無等が挙げられる。
　図５に示すケースでは、記録領域Ａｐの位置を示す標識ｆの表示色及び太さが、それ以外の標識ｆとは異なっている。
　記録領域Ａｐの決定後にユーザが記録開始指示を行うと、記録領域Ａｐの映像（以下、記録映像という。）の記録が開始される。その時点で基準領域（すなわち、撮影装置１０の向き及び画角）が決まる。
　なお、基準領域が決まるとは、記録開始指示の受け付け時点で基準領域が一度決まることを意味している。また、基準領域が決まった後でも、ユーザは自由に基準領域を変更することが可能である。ちなみに、ユーザが基準領域を変更した際は、後述するように、設定領域の位置を被写体の位置に応じて変更させることが好ましい。
　以上のように基準映像の一部を記録映像として記録することで、例えば基準映像中、注目する部分のズーム映像を記録することができる。
　なお、記録映像は、基準映像の画角よりも小さい画角の映像ではあるが、基準映像が高画質であれば（例えば、画素数が１０００万以上であれば）、十分に高画質な映像となる。
　基準映像の画素数は、特に限定されないが、その下限は、１０００万以上であるのがよく、６０００万以上であるのがより好ましい。また、画素数の上限は、１０億以下であるのがよく、５億以下であるのがより好ましい。画素数が上記の下限より大きいと、記録映像の視認性が担保される。また、画素数が上記の上限より小さいと、基準映像のデータ量が低減し、制御部４６による処理の高速化が図られる。
　また、本実施形態では、複数の設定領域Ａｒのうち、記録領域Ａｐとして決められる１つの設定領域Ａｒを選んだ後、映像記録中に記録領域Ａｐを別の設定領域Ａｒに切り替えることができる。この結果、切り替え前の記録領域Ａｐの映像と、切り替え後の記録領域Ａｐの映像をそれぞれ記録することができる。このことを、図６を参照しながら詳しく説明する。
　撮影装置１０が、あるシーン（場所）にて複数の被写体（人物）を撮影し、図６に示すようにそれぞれの被写体に対して設定領域Ａｒを設定したとする。この場合、ユーザが複数の設定領域Ａｒから選んだ1つの設定領域Ａｒが、記録領域Ａｐになる。図６に示すケースでは、４つの設定領域Ａｒが設定され、識別情報「１」の標識ｆによって囲まれた設定領域Ａｒが、記録領域Ａｐである。
　上記の状況下でユーザが記録開始指示を行うと、その時点で記録領域Ａｐである設定領域Ａｒの映像が記録される。
　そして、映像記録中にユーザが記録領域Ａｐを別の設定領域Ａｒ（例えば、識別情報「２」の標識ｆによって囲まれた設定領域Ａｒ）に変更する指示を行うと、記録領域Ａｐが再選択されて記録映像が切り替わる。
　このように本実施形態では、映像記録中に、記録領域Ａｐの再選択によって記録映像を切り替えることができる。これにより、複数存在する被写体のそれぞれに対して個々のカメラを設置する必要なく、各被写体のズーム映像を撮影することができる。
　また、記録映像を切り替えた場合には、制御部４６が、切り替え前の記録映像と、切り替え後の記録映像とをそれぞれ記録し、これらの映像を結合して１つの動画像とする。これにより、図７に示すように記録映像の切り替えに伴って映像中の被写体が変わる動画像のファイル（映像ファイル）が取得される。
　ただし、これに限定されず、切り替え前の記録映像と、切り替え後の記録映像とを結合せずに、それぞれ別ファイルデータとして記録してもよい。また、基準映像及び後述の待機領域も別ファイルデータとして記録してもよい。
　本実施形態では、図５及び６に示すように、記録領域Ａｐを含む複数の設定領域Ａｒの各々について、基準映像中の位置を示す標識ｆが表示される。これにより、ユーザは、撮影中、それぞれの設定領域Ａｒの位置を把握することができる。つまり、本実施形態の表示方法は、設定領域Ａｒの位置を把握し易くするという観点で利便性（使い易さ）を向上させたものである。こうした効果は、複数の設定領域Ａｒの中で記録領域Ａｐを切り替えることが可能な構成において特に有効である。つまり、各設定領域Ａｒに対して標識ｆが表示されることで、切り替え後の記録映像が、基準映像中のどこの映像であるかを容易に把握することができる。
　設定領域Ａｒについて補足すると、設定領域Ａｒの数（設定数）は、例えば基準映像中の被写体の数が変化した場合に、その変化に応じて自動的に、あるいはユーザ操作に基づいて変更することができる。例えば、図８に示すように、基準映像中に新たな被写体が入り込んだ場合には、その被写体の位置に新たな設定領域Ａｒを追加することができる。反対に、基準映像中の被写体が基準映像の外まで移動した場合には、その被写体の映像領域であった設定領域Ａｒを自動的に削除することができる。
　また、ある設定領域Ａｒ（例えば、図８中、識別情報「５」の標識ｆによって囲まれた設定領域Ａｒ）内の被写体が移動した場合には、その設定領域Ａｒを被写体の移動に追従させて変位させることができる。これにより、基準映像において移動している被写体を追尾することができる。ここで、被写体の追尾は、映像解析による公知の被写体検出技術によって実現可能である。
　また、移動している被写体を追尾する設定領域Ａｒが記録領域Ａｐである場合には、移動している被写体の映像を記録することができる。
　以下、移動中の被写体を追尾する設定領域Ａｒを移動領域Ａｍと呼ぶこととする。なお、移動領域Ａｍは、移動する被写体に追従して動く領域に限定されず、所定方向に一定速度又は不規則な速度で動く領域であってもよい。
　［映像表示フロー］
　撮影装置１０の制御部４６が実行する処理フロー（以下、映像表示フロー）について、図１０を参照しながら説明する。
　ユーザが撮影装置１０の電源をオンすると、映像表示フローが開始される。映像表示フローの開始に際して、ユーザは、撮影装置１０の初期調整を行う。初期調整では、例えば、記録方式を指定する等して、記録映像の解像度（画素数）及びアスペクト比等を調整する。かかる調整は、例えば撮影装置１０の初回起動時に行われ、以降は、その調整内容が保持される。
　なお、上記の調整は、撮影装置１０の出荷前に装置メーカー側で行われてもよい。また、ユーザは、一度調整した解像度及びアスペクト比等を見直すために、これらの値を撮影装置１０の起動後に再調整することが可能である。
　映像表示フローでは、先ず、制御部４６が撮影工程を開始する（Ｓ００１）。この撮影工程は、その時点での基準領域で基準映像を撮影する工程である。撮影開始に伴い、リアルタイムの基準映像がライブビュー映像として背面のディスプレイ２８等に表示されると好ましい。撮影工程は、ユーザが撮影終了を指示する、又は撮影装置１０の電源をオフにするまで続けられる。
　その後、制御部４６は、設定工程を実施する（Ｓ００２）。設定工程は、基準映像の撮影領域中に複数の設定領域Ａｒを自動的に設定する工程である。設定工程では、各設定領域Ａｒの初期位置及び初期サイズを設定することになっており、その後にユーザ操作に基づいて、あるいは所定のルールに従って自動的に各設定領域Ａｒの位置及びサイズを変更することは可能である。
　設定工程の終了後、制御部４６は、選択工程を実施する（Ｓ００３）。選択工程は、ユーザの選定操作に基づき、設定工程にて設定された複数の設定領域Ａｒの中から記録領域Ａｐを選択する工程である。
　選択工程の実施に際して、制御部４６は、複数の設定領域Ａｒのそれぞれの映像（以下、「設定映像」という。）をディスプレイに表示するとよい。この場合、ユーザは、複数の設定領域Ａｒのそれぞれについて、設定映像を確認することができる。
　その後、ユーザが記録開始指示を行うと（Ｓ００４）、制御部４６が、記録工程を開始する（Ｓ００５）。記録工程は、選択された記録領域Ａｐの映像である記録映像を記録媒体に記録する工程である。記録映像は、所定の記録形式（動画フォーマット）に従って記録される。
　また、前述のように、記録工程の開始の契機となる記録開始指示の受け付け時点で基準領域が決定する。
　また、記録工程の実施中、制御部４６は、表示工程を実施する（Ｓ００６）。表示工程は、記録映像を含む複数の設定映像と、その時点での基準映像と、基準映像中の標識ｆとをディスプレイに表示する工程である。ユーザは、これらの映像を見て、基準映像中における各設定領域Ａｒの位置を確認し、どの設定領域Ａｒが記録領域Ａｐであるかを把握することができる。
　また、記録工程の実施中、制御部４６は、制御工程を実施する（Ｓ００７）。制御工程は、記録開始指示の受け付け時点で決定された基準領域の変更に関する制御処理を実行する工程である。本実施形態において、制御処理は、基準領域の変更を抑制するための処理を含み、例えば、光学機器１９によるズーム（光学ズーム）に関する制御処理である。
　また、記録工程の実施中、ユーザが記録領域Ａｐの再選択を指示すると（Ｓ００８）、制御部４６が切り替え工程を実施する（Ｓ００９）。切り替え工程は、選択工程の実施後に、ユーザによる再選択指示に従って、記録領域Ａｐを複数の設定領域Ａｒの中から再選択して記録領域Ａｐを切り替える工程である。切り替え工程が実施された場合、その後の記録工程では、切り替え後の記録領域の映像（記録映像）が記録されるようになる。
　そして、記録工程からの一連の工程（すなわち、Ｓ００５～Ｓ００９）は、ユーザが映像記録終了を指示するまで繰り返し実施される（Ｓ０１０）。他方、映像記録終了の指示があると、その時点で記録工程が終了する。
　その後に撮影終了指示があるか、又は撮影装置１０の電源がオフになると（Ｓ０１１）、その時点で映像表示フローが終了する。
　［設定工程について］
　映像表示フロー中の設定工程について説明する。
　本実施形態では、設定工程の実行に際して、図１１に示す第１のＵＩ（User Interface）画面１０１が背面のディスプレイ２８が表示される。ユーザは、設定領域Ａｒの設定パターンとして「記録パターン」又は「自動設定パターン」のいずれかを選択し、ＵＩ画面１０１上のボタンＢｔ１、Ｂｔ２のうち、選択したパターンを示すボタンを押す。
　記録パターンが選択された場合の設定工程では、制御部４６が、撮影装置１０に予め記憶された設定領域Ａｒの位置情報を読み出す。そして、読み出された位置情報が示す位置に設定領域Ａｒが自動的に設定される。このとき、ユーザにとって標識ｆを見え易くする目的から、基準映像中、標識ｆ内の映像を強調表示すると、より好ましい。例えば、基準映像中、標識ｆ内（すなわち、設定領域Ａｒの境界内）の映像以外の明度を下げたり、グレーアウト表示（図１８参照）させたりしてもよい。
　本実施形態では、記録パターンが選択されると、図１１に示すように第２のＵＩ画面１０２が背面のディスプレイ２８に表示される。ユーザは、予め用意された複数の記録パターンのいずれかを選択し、第２のＵＩ画面１０２上のボタンＢｔ３、Ｂｔ４、Ｂｔ５のうち、選択したパターンを示すボタンを押す。記録パターンとしては、例えば、「前回使用パターン」、「プリセットパターン」及び「ユーザ入力パターン」が選択可能である。
　他方、自動設定パターンが選択された場合の設定工程では、制御部４６が、撮影中の基準映像に基づき、基準映像中の所定位置に設定領域Ａｒを自動的に設定する。
　本実施形態では、自動設定パターンが選択されると、図１１に示すように第３のＵＩ画面１０３が表示される。ユーザは、予め用意された複数の自動設定パターンのいずれかを選択し、第３のＵＩ画面１０３上のボタンＢｔ６、Ｂｔ７、Ｂｔ８のうち、選択したパターンを示すボタンを押す。自動設定パターンとしては、例えば、「シーン認識パターン」、「被写体検出パターン」及び「ＡＦ位置特定パターン」が選択可能である。なお、自動設定パターンの場合、設定工程の開始時点では、各々の設定領域Ａｒ同士が重ならず、互いに重畳しない状態で標識ｆを表示するのが好ましい。これにより、複数の標識ｆを識別し易くなり、設定工程における設定領域Ａｒの設定が容易になる。
　以下、複数の記録パターン、及び、複数の自動設定パターンのそれぞれについて説明する。
　（前回使用パターン）
　前回使用パターンが選択された場合、制御部４６は、前回（直前）の映像表示フローにおける設定工程で設定された設定領域Ａｒの位置情報を読み出す。この位置情報は、前回の映像表示フローの設定工程で設定された複数の設定領域Ａｒのそれぞれの位置を示しており、例えば撮影装置１０の内部メモリ５０に記憶される。記憶された位置情報は、撮影装置１０の電源オフ後にも保持されると好ましい。
　なお、設定領域Ａｒの位置情報とともに、設定領域Ａｒのサイズ情報が併せて記憶されてもよい。その場合、前回使用パターンが選択された際には、位置情報とサイズ情報とが併せて読み出されるとよい。
　そして、制御部４６は、図１２に示すように、読み出された位置情報が示す位置、すなわち前回の映像表示フローでの設定位置と同じ位置に設定領域Ａｒを自動的に設定する。このような前回使用パターンは、前回の映像表示フローと同じ構図で映像を撮影する場合（例えば、同じ場所で同じアングルにて映像を撮影する場合）に有効である。
　なお、上記の実施形態では、読み出される位置情報が、前回（直前）の映像表示フローで設定された設定領域Ａｒの位置を示しているが、これに限定されるものではない。例えば、過去に実施された数回分の設定工程にて設定された設定領域Ａｒの位置情報を、それぞれ記憶してもよい。その場合には、記憶された位置情報のうち、ユーザが指定した回の設定工程において設定された設定領域Ａｒの位置に、今回の設定領域Ａｒを設定するとよい。
　（プリセットパターン）
　プリセットパターンが選択された場合、制御部４６は、予め定められた定型の配置パターンで配置される設定領域Ａｒの位置情報を読み出す。定型の配置パターンは、撮影装置１０に事前登録されている、又は購入後のプログラム更新時等にて新規に登録される。
　定型の配置パターン（プリセットパターン）に係る位置情報が読み出されると、図１３に示す第４のＵＩ画面１０４が背面のディスプレイ２８に表示される。第４のＵＩ画面１０４には、複数種類のパターン（図１３中のパターンＡ～Ｄ）が選択可能に表示され、ユーザは、いずれかの種類のプリセットパターンを選択する。制御部４６は、ユーザが選択したプリセットパターンに応じた位置に設定領域Ａｒを自動的に設定する。このようなプリセットパターンは、決められた構図で映像を撮影するとき（例えば、特定の場所で映像を撮影するとき）に、その構図と対応するパターンが有る場合に有効である。
　なお、プリセットパターンの種類数、及び各プリセットパターンにおける設定領域Ａｒの個数及び配置位置は、特に限定されず任意に決められる。
　（ユーザ入力パターン）
　ユーザ入力パターンが選択された場合、制御部４６は、ユーザの操作に基づいて決められた設定領域Ａｒの位置情報を読み出す。ここでのユーザの操作は、設定領域Ａｒの位置を登録するための入力操作であり、設定工程の前段階（例えば、パターンに関する初期登録の段階）で行われる。上記の入力操作は、例えば、図１４に示すパターン登録用の入力画面１０５を通じて行われる。ユーザは、入力画面１０５に表示された領域設定用の標識ｆｘの内側領域をタッチアンドドラッグする。これにより、ドラッグ後の標識ｆｘの表示位置が設定領域Ａｒの位置として登録される。
　制御部４６は、読み出された位置情報が示す位置、すなわちユーザの入力操作に基づいて決められた設定位置に設定領域Ａｒを自動的に設定する。このようなユーザ入力パターンは、前述のプリセットパターンでは対応できないのでユーザの入力に基づいてパターンを準備しておく場合に有効である。
　なお、設定領域Ａｒの位置が登録される際に、その設定領域Ａｒのサイズが併せて登録されてもよい。つまり、ユーザの入力操作に基づいて決められた設定領域Ａｒの位置及びサイズを示す情報を記憶してもよい。その場合、複数の設定領域Ａｒのそれぞれが、ユーザ入力パターンとして登録された位置及びサイズにて設定されることになる。
　（シーン認識パターン）
　シーン認識パターンが選択された場合の設定工程では、制御部４６は、基準映像に基づいて基準映像の撮影シーンを認識する。基準映像の撮影シーンは、例えば基準映像として撮影される風景、イベント、被写体の種類、場面（例えば、日中の景色であるか夜景であるか）、及び、状況（例えば、天気など）等である。
　なお、基準映像に基づいて撮影シーンを認識する手法としては、公知のシーン認識技術が利用可能である。例えば、所定領域の映像の輝度又は色味が予め設定された範囲内であるか否かを判断する手法等が挙げられる。また、映像の撮影シーンを示す正解ラベルと映像のデータとを学習データセットとして用いた機械学習を実施し、学習の結果として得られるシーン認識モデルによって、基準映像の撮影シーンを認識してもよい。
　（被写体検出パターン）
　被写体検出パターンが選択された場合の設定工程では、制御部４６が、基準映像中の被写体を検出し、検出された被写体の位置に設定領域Ａｒを自動的に設定する。基準映像中の被写体は、基準映像中における風景以外の被写体であって、制御部４６が検出可能なものであり、例えば人、動物及び乗物等が含まれる。
　被写体を検出する場合には、公知のテンプレートマッチング技術を適用してもよい。例えば、被写体の画像をテンプレート画像として予め記憶し、テンプレート画像と基準映像中の各部分とを照合し、テンプレート画像と類似する映像を被写体として検出してもよい。あるいは、機械学習によって映像中の被写体を認識させるモデルを構築し、そのモデルを利用して基準映像中の被写体を検出してもよい。被写体認識モデルのアルゴリズムとしては、ＹＯＬＯ（You Only Look Once）又はＲ－ＣＮＮ（Region with Convolution Neural Network）等の公知のアルゴリズムが利用可能である。
　被写体検出パターンにおいて、制御部４６は、図６に示すように、検出された被写体それぞれに対して、設定領域Ａｒを１つずつ設定することができる。このとき、それぞれの設定領域Ａｒ内に、対応する被写体の全体が収まるようにしてもよいし、あるいは、対応する被写体のうちの一部分（例えば、顔を含む上半身部分）が収まるようにしてもよい。
　以上のような被写体検出パターンによれば、ユーザの手間を要さず、基準映像中の被写体に対して設定領域Ａｒを自動的に設定することができる。本実施形態では、複数の設定領域Ａｒの中から選択される記録領域Ａｐの映像を記録するため、基準映像中の被写体の映像を記録する場合には被写体検出パターンが有効となる。
　（ＡＦ位置特定パターン）
　ＡＦ位置特定パターンが選択された場合の設定工程では、制御部４６が、基準映像中、撮影装置１０のフォーカスを決めるための特徴が基準を満たす位置を特定し、特定された位置に設定領域Ａｒを自動的に設定する。フォーカスを決めるための特徴とは、例えば、基準映像内の合焦位置を決めるための特徴である。具体例を挙げると、オートフォーカスが位相差ＡＦ（Auto Focus）方式である場合には、位相差が上記の特徴に該当する。また、オートフォーカスがコントラストＡＦ方式である場合には、複数の画素間のコントラストが上記の特徴に該当する。なお、ＡＦ方式は、指向性光を用いたＡＦ方式でもよいし、あるいは、ＤＦＤ（Depth from defocus）を用いたＡＦ方式でもよい。
　また、基準を満たす位置とは、上記の特徴（例えば、位相差又はコントラスト等）が合焦時の特徴となった位置である。分かり易くいうと、制御部４６は、基準映像において、基準を満たす位置として、ＡＦ機能によってフォーカスが合った位置を特定する。そして、図１５に示すように、特定された位置（フォーカスが合った位置であり、図１５中、ハッチングが付けられた位置）に対して、設定領域Ａｒが自動的に設定される。このとき、例えば、基準映像においてフォーカスが合っている部分の面積等に応じて設定領域Ａｒのサイズも自動的に設定されるとよい。
　ＡＦ機能によってフォーカスが合っている部分の映像は、一般的に記録対象となることが多い。この点を踏まえ、フォーカスが合った位置に設定領域Ａｒを設定することで、フォーカスが合っている映像を容易に記録することができるので、ユーザにとって利便性が向上する。
　ＡＦ位置特定パターンにおいて、制御部４６は、フォーカスが合った位置に設定領域Ａｒを設定すると、それに伴って、別の設定領域Ａｒを自動的に設定する。例えば、図１５に示すように、フォーカスが合った位置の対称位置（例えば、基準映像の中央から見て点対称の位置）に別の設定領域Ａｒを設定する。これにより、ＡＦ位置特定パターンが選択された場合に、基準領域の中で複数の設定領域Ａｒを自動的に設定することができる。ただし、別の設定領域Ａｒが設定される位置は、上記の位置に限定されるものではない。
　また、ＡＦ位置特定パターンにおいて基準映像全体でフォーカスが合っている場合には、基準領域全体を１つの設定領域Ａｒとして設定してもよい。
　また、基準映像中に被写体が検出されず、基準映像内に適切な設定領域Ａｒの設定位置が見つからない場合、基準映像の中央付近に設定領域Ａｒを設定してもよい。
　なお、本実施形態では、撮影条件の一例として基準映像内の合焦位置を挙げ、基準映像中、合焦位置を決めるための特徴が基準を満たす位置（すなわち、フォーカスが合った位置）に設定領域Ａｒを設定することとした。ここで、撮影条件は、合焦位置以外でもよく、例えば露光量及びホワイトバランスも挙げられる。なお、ここでいう撮影条件には、シャッタースピード及びＩＳＯ感度が除外される。
　ここで、撮影条件の一つである露光量を例に挙げると、基準映像中、露光量を決めるための特徴（例えば、画素値又は輝度）が基準を満たす位置に設定領域Ａｒを設定することができる。例えば、基準映像中、ＡＥ（Automatic Exposure）機能により露光量が適正値に調整された位置に設定領域Ａｒを設定するとよい。あるいは、基準映像中、露光量が相対的に低い位置、及び露光量が相対的に高い位置のそれぞれに設定領域Ａｒを設定してもよい。
　また、撮影条件の一つであるホワイトバランスを例に挙げると、基準映像中、ホワイトバランスを決めるための特徴（例えば、色度）が基準を満たす位置に設定領域Ａｒを設定することができる。例えば、基準映像中、ＡＷＢ（Auto White Balance）機能によりホワイトバランスが適正値に調整された位置に設定領域Ａｒを設定するとよい。具体例を挙げると、照明及び太陽のような複数の光源の各々から光が照射される領域が基準映像中に存在する場合、光源毎の照射領域に対して、それぞれ設定領域Ａｒを設定してもよい。
　ユーザは、以上までに説明してきた複数の配置パターンの中から任意のパターンを選択する。これにより、設定工程では、設定領域Ａｒがユーザの意思又は好みを反映して設定される。また、設定工程では、設定領域Ａｒが自動的に設定されるため、ユーザの手間（設定作業）を要さない。つまり、本実施形態の表示方法は、ユーザの手間を省き、且つ、ユーザの意思等を反映して基準領域中に設定領域Ａｒを設定するという観点で利便性（使い易さ）を向上させたものである。なお、配置パターンは、図１１に示した配置パターンを複数組み合わせた配置パターンでもよい。例えば、シーン認識パターンとＡＦ位置特定パターンを同時に採用して、設定領域Ａｒを複数設定してもよい。
　なお、上述したパターンは、あくまでも一例であり、上述したパターン以外の配置パターンが加えられてもよく、反対に、上述したパターンのうち、一部のパターンが省略されてもよい。
　また、本実施形態の設定工程では、選択されたパターンの種類に関わらず、基準映像に後述する特徴箇所が存在する場合には、基準領域中、特徴箇所の位置に設定領域の候補Ａｃが自動的に設定される。そして、設定された候補Ａｃに対してユーザが所定の操作を行うと、設定された候補Ａｃの位置に設定領域Ａｒが設定される。
　以下、設定工程における候補Ａｃの設定手順について説明する。
　（候補の設定について）
　設定工程において、制御部４６は、基準映像の各画素の特徴（例えば、画素値）に基づいて、基準映像に特徴箇所が存在するか否かを判定する。特徴箇所とは、基準映像の中で視覚的変化が生じている箇所（被写体として検出されるものを除く）であり、例えば、背景映像の中で動きがある箇所、並びに、色及び明るさ等が変化する箇所である。具体例としては、滝のような流れがある箇所、イルミネーションのような光が点灯又は点滅する箇所、及び、電光掲示板のように表示される文字及び画像等が切り替わる箇所等が挙げられる。
　なお、図１６に示す基準映像では、例えば、図中の左上部分に現れている電飾が特徴箇所に該当する。
　基準映像に特徴箇所が存在する場合、制御部４６は、第１設定工程を実施する。第１設定工程は、基準映像中の特徴箇所の位置に、設定領域の候補Ａｃを自動的に設定する工程である。
　第１設定工程が実施された場合、その後に実施される表示工程では、図１６に示すように、基準映像内における候補Ａｃの位置を示す標識（以下、候補標識Ｋと呼ぶ。）が表示される。候補標識Ｋは、設定領域Ａｒの位置を示す標識ｆとは異なる態様にて表示される。例えば、図１６における候補標識Ｋは、特徴箇所を囲む矩形領域の四角を表す略Ｌ字形の図形オブジェクトである。候補標識Ｋの種類及び形状等については、特に限定されず、例えば、矢印若しくは指の形状をなすポインタでもよく、または円若しくは星形等の記号からなる図形オブジェクトでもよい。あるいは、基準映像中の候補Ａｃとその周辺との間の濃淡差（明るさの差）を候補標識Ｋとしてもよい。
　表示工程の実施中にユーザが候補標識Ｋをタップする等の操作を行うと、これをトリガーとして第２設定工程が実施される。第２設定工程は、制御部４６が、ユーザの候補Ａｃに対する操作（例えば、タップ操作等）に応じて、その操作がなされた候補Ａｃの設定位置に設定領域Ａｒを設定する工程である。第２設定工程の実施により、図１７に示すように、特徴箇所の映像の領域に新たな設定領域Ａｒが設定される。
　以上のように本実施形態では、基準映像中、被写体としては認識されないが視覚的変化が生じている特徴箇所に対して、設定領域の候補Ａｃを自動的に設定することができる。また、設定された候補Ａｃの位置を示す候補標識Ｋを基準映像中に表示することで、ユーザは、候補Ａｃを容易に確認することができる。さらに、ユーザが候補Ａｃに対して所定の操作を行うことで、候補Ａｃの位置に設定領域Ａｒが設定される。これにより、基準映像中、ユーザが関心を示す特徴箇所に対して設定領域Ａｒを設定することができる。さらにまた、そのように設定された設定領域Ａｒを記録領域として選択すれば、特徴箇所の映像を記録することが可能となる。
　［表示工程について］
　映像表示フロー中の表示工程について以下に詳しく説明する。
　設定工程にて設定領域Ａｒが設定されると、制御部４６が表示工程を開始する。その後、制御部４６は、記録工程が終了するまで（厳密には、撮影が終了するまで）、表示工程を続行する。
　表示工程は、記録映像と、基準映像と、基準映像内における複数の設定領域Ａｒの各々の位置を示す標識ｆとをディスプレイに表示する工程である。表示工程において、標識ｆは、図１８に示すように、基準映像中において設定領域Ａｒ毎に表示される。これにより、ユーザは、基準映像における各設定領域Ａｒの位置を的確に把握することができる。
　また、表示工程では、図１８に示すように、複数の設定領域Ａｒのうち、記録領域Ａｐ以外の設定領域Ａｒの各々の映像（以下、待機映像という。）を表示することができる。
　さらに、基準映像中に前述の特徴箇所が存在する場合の表示工程では、特徴箇所の位置を示す候補標識Ｋが、基準映像中に標識ｆと共に表示される。
　表示工程の一例について説明すると、記録映像、基準映像、及び待機映像を同時に背面のディスプレイ２８の画面（以下、表示画面という。）に表示することができる。例えば、図１８に示すように、表示画面をメイン画面Ｇ１、サブ画面Ｇ２及び情報表示画面Ｇ３に分割するとする。この場合において、待機映像をサブ画面Ｇ２に表示することができる。
　メイン画面Ｇ１は、表示画面において比較的広い範囲（例えば、表示画面の半分以上）を占め、基準映像を表示する。メイン画面Ｇ１のアスペクト比は、基準映像のアスペクト比と同じ値に設定されていると好ましい。
　サブ画面Ｇ２は、メイン画面Ｇ１と比べて小さい画面であり、表示画面の縦方向又は横方向に沿って列状に並んでいる。各サブ画面Ｇ２は、記録映像又は一つの待機映像を表示する。各サブ画面Ｇ２のアスペクト比は、記録映像及び待機映像の各々のアスペクト比と同じ値に設定されていると好ましい。
　情報表示画面Ｇ３は、映像以外の文字情報を表示する画面であり、例えば、図１８に示すように、映像記録に関するアドバイスを表示する。
　なお、表示画面のレイアウト（例えば、メイン画面Ｇ１及びサブ画面Ｇ２の各々のサイズ及び配置位置等）は、図１８に示す形態に限定されず、機器の仕様又はユーザの好み等に応じて自由に設計することができる。
　また、メイン画面Ｇ１には、基準映像とともに、設定工程にて設定された複数の設定領域Ａｒの各々について標識ｆが表示される。表示工程においてメイン画面Ｇ１に表示される標識ｆの数（表示数）は、可変であり、表示可能な最大数（表示上限数）の標識ｆを同時に表示することができる。
　また、ユーザにとって標識ｆを見え易くする目的から、基準映像中、標識ｆ内の映像を強調表示すると、より好ましい。例えば、図１８に示すように、基準映像中、標識ｆ内（すなわち、設定領域Ａｒの境界内）の映像以外の明度を下げたりグレーアウト表示させたりしてもよい。
　また、表示工程では、記録領域Ａｐの位置を示す標識ｆと、それ以外の設定領域Ａｒ（以下、待機領域ともいう。）の位置を示す標識ｆとを互いに異なる態様にて表示する。このとき、記録領域Ａｐの位置を示す標識ｆは、強調表示されると好ましく、例えば、枠線の色を赤色及び蛍光色等の比較的目立つ色にしたり、枠線をより太くしたり、あるいは点滅表示したりするとよい。また、記録領域Ａｐ内の映像（すなわち、記録映像）自体を強調表示してもよい。
　また、基準映像において移動する被写体が存在する場合、その被写体に対して設定される移動領域Ａｍは、被写体に追従して動く。表示工程では、移動領域Ａｍの位置を示す標識ｆを、図９に示すように、移動領域Ａｍ以外の設定領域Ａｒの位置を示す標識ｆとは異なる態様にて表示する。これにより、移動領域Ａｍとそれ以外の設定領域Ａｒとを容易に区別し、基準映像内で移動領域Ａｍの位置を簡単に見つけることができる。
　なお、移動領域Ａｍ内の被写体が奥行き方向（つまり、撮影装置１０に対して近接及び離間する方向）に移動すると、基準映像における被写体の大きさが変化する。これに伴い、移動領域Ａｍのサイズに対する上記被写体の大きさの比率（以下、被写体比率と呼ぶ。）が変化する。その場合、制御部４６は、電子ズーム機能を利用して、被写体比率の変化に応じて移動領域Ａｍのサイズを変更し、被写体比率を一定に保つように調整する。
　また、被写体の移動に伴って移動領域Ａｍが基準領域の端（すなわち、画角の外縁）付近まで移動したり、あるいは基準領域からはみ出たりすることがある。その場合には、制御部４６が情報表示画面Ｇ３に警告メッセージを表示したり又は警告音を出力して、上記の状況をユーザに報知するのが好ましい。
　また、電子手振れ補正によって基準映像（すなわち、全画角の映像から抽出された抽出映像）が変わると、基準領域に対する各設定領域Ａｒの相対位置が変化する（図４参照）。その場合、制御部４６は、電子手振れ補正による基準映像のずれ量を算出し、算出されたずれ量に基づき、各設定領域Ａｒの位置を調整する。これにより、基準領域に対する各設定領域Ａｒの位置が、電子手振れ補正の実施前後で維持されるようになる。
　なお、電子手振れ補正に伴って設定領域Ａｒの位置を調整する機能については、ユーザの操作に応じてオンオフを自由に切り替えられると好ましい。
　また、表示工程では、図１８に示すように、標識ｆの識別情報を各々の標識ｆ毎に表示する。各標識ｆの識別情報は、表示工程の実施中は固定され、表示工程中に標識ｆの表示数が変わった場合でも、その前後で変化せずに維持される。例えば、図１８中、識別番号が「３」である標識ｆの表示が中止された場合、それ以外の標識ｆの識別番号（すなわち、「１」、「２」、「４」）は変化しない。このように表示工程の実施中に各標識ｆの識別番号を固定することで、例えば標識ｆの表示数が変わっても、どの設定領域Ａｒがどこに存在するのかを容易に把握することができる。
　複数のサブ画面Ｇ２には、記録映像及び待機映像を含む複数の設定映像が表示される。詳しくは、複数のサブ画面Ｇ２のそれぞれに、対応する設定映像が１つずつ表示される。ここで、各サブ画面Ｇ２のアスペクト比が、対応する設定映像のアスペクト比と同値であれば、当該設定映像を画面に収まりよく表示することができる。
　また、表示される複数の設定映像のうち、記録映像は、強調表示されるのが好ましい。例えば、記録映像が表示されるサブ画面Ｇ２と、その他の設定映像が表示されるサブ画面Ｇ２との間で、画面枠の色、枠線の太さ若しくは線種、又は点灯の有無等が相違していると好ましい。これにより、ディスプレイにて複数の設定映像を見るユーザは、どの映像が記録映像であるのかを容易に見分けることができる。
　また、図１８に示すように、移動領域Ａｍの映像を表示するサブ画面Ｇ２（図１８では、上から二番目のサブ画面）に対しては、移動領域Ａｍの映像である旨の情報（例えば、「移動中」という文字情報等）を表示するとよい。
　本実施形態では、表示工程の実施モードが複数用意されており、表示工程における映像の表示方法が、モード毎に変化する。つまり、ユーザによって指定されたモードに従って表示工程が実施される。
　例えば、ユーザが第１モードを指定すると、表示工程として、第１表示工程が実施される。第１表示工程では、図１８に示すように、基準映像及び設定領域Ａｒ毎の標識ｆがメイン画面Ｇ１に表示され、記録映像及び待機映像がサブ画面Ｇ２に表示される。他方、ユーザが第２モードを指定すると、表示工程として、第２表示工程が実施される。第２表示工程では、図１９に示すように、記録映像及び待機映像を表示し、且つ基準映像及び設定領域Ａｒ毎の標識ｆを表示しない。
　なお、第１表示工程にて、記録映像、待機映像、基準映像及び設定領域Ａｒ毎の標識ｆは、必ずしも同一のディスプレイ（例えば、背面のディスプレイ２８）に表示されなくてもよい。つまり、図２０のように、メイン画面Ｇ１に表示される映像と、サブ画面Ｇ２に表示される映像と、を互いに異なるディスプレイに表示してもよい。具体例を挙げると、メイン画面Ｇ１に表示する映像を背面のディスプレイ２８に表示し、サブ画面Ｇ２に表示する映像を電子ビューファインダ２９又は撮影装置１０に接続された外部モニタ（不図示）に表示してもよい。
　このように本実施形態では、表示工程が第１表示工程及び第２表示工程を含み、これら２つの表示工程のうち、ユーザにより指定された一方の工程を実施する。これにより、ユーザのニーズに合わせて表示映像を切り替えることができる。例えば、ユーザが基準映像及び標識ｆを確認しようとする場合には、第１表示工程を実施して基準映像及び標識ｆを表示するとよい。他方、ユーザが記録映像及び待機映像（つまり、設定映像）のみを確認しようとする場合には、第２表示工程を実施して記録映像及び待機映像のみを表示するとよい。
　また、表示工程の実施モード、すなわち、第１表示工程及び第２表示工程のうちのいずれの工程を実施するかは、表示工程の実施中、ユーザによる切り替え操作に応じて自由に切り替えられることが好ましい。例えば、図２に示すタッチパネル３６又は操作ボタン３０を通じて、ユーザがどちらの表示工程を採用するかを切り替えられると好ましい。
　なお、第２表示工程では、記録映像と、その他の設定映像とを同じディスプレイに表示してもよい。例えば、図１９に示すように、記録映像を表示画面中のメイン画面Ｇ１に表示し、待機映像をサブ画面Ｇ２に表示してもよい。
　あるいは、第２表示工程において記録映像と、その他の設定映像とを互いに異なるディスプレイに表示してもよい。例えば、図２０に示すように、記録映像を背面のディスプレイ２８に表示し、その他の設定映像を電子ビューファインダ２９又は撮影装置１０に接続された外部モニタ（不図示）に表示してもよい。
　情報表示画面Ｇ３には、例えば後述の提案情報が表示される。
　また、情報表示画面Ｇ３には、ユーザに対する撮影用のアドバイス、及び警告メッセージ等を表示することができる。例えば、記録工程中に露光量又はＩＳＯ感度等の調整が必要となった場合には、その旨を表示してもよい。
　さらに、情報表示画面Ｇ３には、上記以外の情報を表示することができる。例えば、現時点で採用されている撮影モード、解像度及びＩＳＯ感度等の撮影条件に関する現在値、並びに電子ズーム等の各種機能のオンオフ等を表示してもよい。
　（優先度に基づく設定映像の表示について）
　表示工程において、サブ画面Ｇ２の数は、記録映像の解像度及びアスペクト比のうちの少なくとも一方の項目（以下、単に「少なくとも一方の項目」と呼ぶ）に応じて決められる。つまり、サブ画面Ｇ２に表示される設定映像の表示数は、少なくとも一方の項目に応じて決められる。
　同様に、各サブ画面Ｇ２のサイズについても、少なくとも一方の項目に応じて決められる。つまり、設定映像の表示サイズは、少なくとも一方の項目に応じたサイズとなる。
　ここで、少なくとも一方の項目は、記録映像の記録形式（動画フォーマット）に応じて調整される。したがって、表示工程における設定映像の表示数（厳密には、最大表示数）及び表示サイズは、記録映像の記録形式に応じた数及びサイズとなる。
　本実施形態では、設定映像の表示数及び表示サイズが少なくとも一方の項目に応じて決められることで、記録映像を含む複数の設定映像の各々を良好に表示することができる。例えば、それぞれの設定映像を、適切な解像度にて、サブ画面Ｇ２に収まりよく表示することができる。
　なお、本実施形態では、記録映像のアスペクト比が記録映像の記録形式に応じて決まるが、記録映像のアスペクト比を記録形式に依拠せずに任意に設定してもよい。その場合、記録映像のアスペクト比の調整に伴い、サブ画面Ｇ２の数及びサイズが調整後のアスペクト比に応じて変えられることになる。
　また、本実施形態では、表示工程にて表示される設定映像の表示数及び表示サイズ（すなわち、サブ画面Ｇ２の数及びサイズ）の両方が、少なくとも一方の項目に応じて決められることとした。ただし、これに限定されず、設定映像の表示数又は表示サイズのいずれか一方が、少なくとも一方の項目に応じて決められてもよい。
　なお、表示工程における設定映像の表示数は、少なくとも一方の項目に応じて決められなくてもよい。例えば、ユーザが表示数を設定又は変更してもよい。
　本実施形態において、表示工程における設定映像の表示数は、前述のように、記録映像の解像度及びアスペクト比に応じて決められる。ここで、第１表示工程の場合は、表示される設定映像のうち、１つは、記録映像であり、残りが待機映像である。したがって、待機映像の表示数に関する設定値、すなわち最大表示数は、記録映像の解像度及びアスペクト比に応じて決まり、具体的にはサブ画面Ｇ２の数より１少ない数である。
　なお、図２１に示すケースでは、待機映像の最大表示数が３個である。
　一方、基準領域における設定領域Ａｒの数は、基準映像中の被写体等に応じて変化し、それに伴って、記録領域Ａｐ以外の設定領域Ａｒ、すなわち複数の待機領域の数が変化する。
　なお、図２１に示すケースでは、待機領域の数が６個である。
　制御部４６は、複数の待機領域の数が待機映像の最大表示数に達した（厳密には、超えた）場合には、図２２に示す流れにて表示工程を実施する。図２２に示す表示工程の流れについて説明すると、制御部４６は、複数の待機領域の数が待機映像の最大表示数に達した場合に決定工程を実施する（Ｓ０２１）。
　決定工程では、制御部４６が複数の待機領域の各々に対して優先度を決定する。その手順を説明すると、制御部４６は、先ず、複数の待機映像のそれぞれについて、待機映像中の被写体を検出する（Ｓ１０１）。次に、制御部４６は、検出された待機映像中の被写体に関する情報を取得する（Ｓ１０２）。なお、このとき、制御部４６は、待機映像中の被写体に関する情報の代わりに、後述する記録領域としての実績情報を取得してもよい。
　被写体に関する情報としては、例えば、撮影期間において被写体が基準映像中に映っている時間又は回数、並びに、基準映像における被写体の大きさ（表示サイズ）が挙げられる。これらの情報は、撮影期間中に制御部４６が基準映像を解析して計測又は計数することで取得可能である。
　また、被写体が人物である場合には、パターンマッチング等の技術により人物の顔を認識し、顔が認識された人物の重要度を特定し、その特定結果を被写体に関する情報としてもよい。人物の重要度については、例えば、顔が認識された人物の属性（例えば、家族、親戚、知人又は他人）等を判定し、その判定結果から求めることができる。また、検出された被写体が複数ある場合は、被写体のカテゴリ（例えば、人、動物、物又は風景等）によって優先度を決定してもよい。さらに、検出されたタイミングが早い被写体から優先して、優先度を決定してもよい。
　なお、被写体に関する情報については、当然ながら、上記以外にも考えられ得る。決定工程において、どのような情報を被写体に関する情報として利用するかについては、ユーザが自由に選べるのが望ましい。
　その後、制御部４６は、決定工程において、検出された被写体に関する情報に応じて、複数の待機領域の各々の優先度を決定する（Ｓ１０３）。
　決定工程の実施後、制御部４６は、複数の待機領域のうち、優先度に基づいてＮ個の待機領域を選定する（Ｓ０２２）。ここで、選定される待機領域の数Ｎは、待機映像の最大表示数であり、サブ画面Ｇ２の数に応じて決まる数（例えば、サブ画面Ｇ２の数から1だけ少ない数）である。制御部４６は、ステップＳ０２２において、優先度が高い方から順にＮ個の待機領域を選定する。
　そして、制御部４６は、選定されたＮ個の待機領域の映像（待機映像）をサブ画面Ｇ２に表示する（Ｓ０２３）。ここで、サブ画面Ｇ２が図２１に示すように表示画面の縦方向に並んでいる場合には、優先度がより高い待機領域の待機映像をより上方のサブ画面Ｇ２に表示するのが望ましい。
　以上のように本実施形態では、複数の待機領域の数が待機映像の最大表示数に達した（超えた）場合、優先度に応じて選定されたＮ個の待機映像を表示する。これにより、画面表示における制約に応じつつも、優先度の高い待機映像を適切に表示することができる。
　なお、優先度の決め方については、待機映像中の被写体に関する情報に基づいて決める方法に限られない。例えば、記録領域としての実績情報に応じて優先度を決定してもよい。より詳しく説明すると、複数の待機領域の各々について、撮影開始時から現時点までの間に記録領域として選択された回数、記録領域であった時間、又は、直前に記録領域として選択された時点からの経過時間等を特定する。これらの情報は、過去に記録領域として選択された実績に関する情報に相当する。
　そして、上記の実績に関する情報に基づいて、複数の待機領域の各々の優先度を決定してもよい。例えば、実績に関する情報が、記録領域として選択された回数又は時間である場合、その回数又は時間が多いほど、高い優先度を付与するとよい。
　また、図２２に示す表示工程の流れでは、優先度に基づいてＮ個の待機領域選定し、選定された待機領域の映像のみを表示することとしたが、これに限定されるものではない。例えば、優先度が高い順で上位Ｎ個の待機領域と、それより下位の待機領域とをそれぞれ選定してもよい。その場合、上位Ｎ個の待機領域の待機映像を先ず表示し、それより下位の待機領域の待機映像を、図２３に示すように表示画面のスクロール又は切り替え等によって表示されるようにしてもよい。
　また、複数の待機映像の各々を優先度に応じたサイズで表示してもよい。例えば、図２４に示すように、優先度が高い待機領域の待機映像は、通常サイズのサブ画面Ｇ２に表示し、優先度が低い待機領域の待機映像は、縮小サイズのサブ画面Ｇ２ｘに表示してもよい。このようにすれば、複数の待機映像の各々を表示することができ、且つ、優先度が高い待機領域は、より見やすく表示することができる。
　［制御工程について］
　映像表示フロー中の制御工程について説明する。制御工程は、基準領域の変更を抑制するための制御処理を実行する工程であり、少なくとも基準領域の決定後に実施される。つまり、制御処理は、ユーザの記録開始指示の受け付け時点後の基準領域の変更を抑制するための処理である。
　制御処理において、制御部４６は、ズーム用駆動部２１をロックしてズーム用の光学機器１８の移動を停止する。これにより、記録工程中、光学ズーム機能が制限され、基準領域が固定されて、その時点での画角が維持される。
　上記の制御処理を実行すれば、記録工程の実施中、基準領域に対する各設定領域Ａｒの相対位置が変化するのを防ぐことができる。その結果、各設定領域Ａｒが基準領域から外れて記録映像等の各設定映像が適切に撮影されなくなる状況を回避することができる。
　なお、基準領域の変更を抑制するために実施される制御処理は、上記の処理に限定されず、例えば、基準領域の変更に関する提案情報を通知するための処理であってもよい。具体例を挙げると、光学ズームを禁止するメッセージを情報表示画面Ｇ３に表示してもよく、あるいは音声等で再生してもよい。その他、図１８に示すように撮影装置１０を動かす動作（例えば、パニング動作）を禁止するメッセージ、又は、三脚等の雲台を用いて撮影装置１０を固定することを推奨するメッセージを表示等してもよい。
　また、制御工程が、基準領域の決定前（つまり、記録開始指示の受け付け前）の時点に実施されてもよく、例えば設定工程の中に実施されてもよい。この場合には、基準領域中に複数の設定領域Ａｒを設定している間において基準領域が変わってしまうのを抑えることができる。
　［変更工程について］
　記録工程の実施中、所定の条件が満たされると、制御部４６が変更工程を実施する。変更工程は、設定領域Ａｒの映像（すなわち、設定映像）の表示数の変更に関する変更処理を実行する工程である。変更処理の実行により、記録工程の実施中に設定映像の表示数を動的に増やす、又は減らすことができる。
　以下、図２５に示すフローを参照しながら、記録工程の実施中における処理の流れについて説明する。ちなみに、以降の説明で参照する図２６～３１では、図示の便宜上、標識ｆ内の映像以外の映像のグレーアウト表示を省略している。
　記録工程の実施中、制御部４６は、基準映像を監視し、基準映像中の被写体が増加したかどうかを判定する（Ｓ０３１）。基準映像中の被写体が増えた場合、制御部４６は変更工程を実施する（Ｓ０３２）。かかる変更工程では、設定映像の表示数を増やす変更処理が実行される。
　ステップＳ０３２における変更処理では、基準映像中の被写体の増加に応じて設定領域Ａｒを追加し、追加された設定領域Ａｒの設定映像を新たにディスプレイに表示する。この結果、設定映像の表示数が増える。例えば、図２６及び２７に示すように、基準映像中の被写体が３人から４人に増えた場合、設定映像の表示数（つまり、サブ画面Ｇ２に表示される映像の数）が３つから４つに増える。
　なお、基準映像中の被写体の増加に伴って設定領域Ａｒを追加した場合、それと連動する形で、メイン画面Ｇ１に表示される基準映像中の標識ｆの数が、追加された設定領域Ａｒの分だけ増える（図２７参照）。
　また、上記の実施形態では、基準映像中の新たな被写体の位置に設定領域Ａｒを設定することとしたが、これに限定されるものではない。例えば、設定領域Ａｒの代わりに設定領域の候補Ａｃを設定してもよい。その場合、基準映像中に、候補Ａｃの位置を示す標識（詳しくは、前述の候補標識Ｋ）を表示する。そして、候補標識Ｋに対してユーザがタップ等の操作を行うと、これをトリガーとして候補Ａｃの位置に設定領域Ａｒが追加される。この結果、追加された設定領域Ａｒの設定映像が新たに表示され、設定映像の表示数が増える。
　また、基準映像中の新たな被写体の位置に設定領域Ａｒ又はその候補Ａｃを設定する代わりに、設定領域Ａｒの追加（つまり、設定映像の表示数の変更）に関する提案情報を出力してもよい。例えば、新たな被写体の位置に設定領域Ａｒを追加して設定映像の表示数を増やすことを提案するメッセージを、情報表示画面Ｇ３に表示し、又は音声等で再生してもよい。このように、変更処理として、設定映像の表示数の変更に関する提案情報を出力する処理を実行してもよい。
　図２５に示すフローにおいて、制御部４６は、記録工程の実施中、基準映像を監視し、基準領域中の移動領域Ａｍが他の設定領域Ａｒと重なっているかを判定する（Ｓ０３３）。そして、移動領域Ａｍが図２８に示すように他の設定領域Ａｒと重なっている場合、若しくは重なる直前である場合には、制御部４６が警告メッセージ又は警告音を出力する（Ｓ０３４）。これは、移動領域Ａｍが他の設定領域Ａｒと重なる状況では、一方の領域内の被写体が他方の領域内の被写体の背後に来て映らない場合があるためである。
　警告メッセージ等の出力により、移動領域Ａｍが他の設定領域Ａｒと重なっている又は重なる直前である状況をユーザに知らせることができる。警告を受け取ったユーザは、適切な対策（例えば、設定領域Ａｒの再設定等）を講じることができる。その１つの策としてユーザが画面操作等を通じて変更要求を行うと（Ｓ０３５）、制御部４６が変更工程を実施する（Ｓ０３６）。かかる変更工程では、設定映像の表示数を減らす変更処理が実行される。
　ステップＳ０３６における変更処理では、重なり合った移動領域Ａｍ及び他の設定領域Ａｒを１つの設定領域Ａｒに更新し、更新後の設定領域Ａｒの設定映像をディスプレイに表示する。例えば、図２８のように別々に表示された移動領域Ａｍの映像と他の設定領域Ａｒの映像とが、図２９のように、これら２つの映像のそれぞれの被写体を含む１つの映像に統合される。この結果、設定領域Ａｒの数が１つ減り、設定映像の表示数も１つ減少する。
　なお、更新後の設定領域Ａｒのサイズ及び位置は、上記２つの映像の被写体が収まるように設定されると好ましい。また、更新後の設定領域Ａｒを示す標識ｆの識別情報は、更新前の２つの領域（すなわち、移動領域Ａｍ及び他の設定領域Ａｒ）のいずれか一方を示す標識ｆの識別情報を引き継いでもよい。あるいは、更新後の設定領域Ａｒに対して新規の識別番号が付与されてもよい。
　図２５に示すフローにおいて、制御部４６は、記録工程の実施中、複数の設定領域Ａｒの各々が中止条件を満たすか否かを定期的に判定する（Ｓ０３７）。中止条件とは、設定領域Ａｒの映像（設定映像）の表示を中止すべきか否かを判断する際の基準であり、例えば下記の条件（１）～（３）が挙げられる。
　中止条件（１）：光学ズーム等によって設定領域Ａｒの少なくとも一部が基準領域からはみ出していること。
　中止条件（２）：一定時間以上、設定領域Ａｒの設定映像に変化がない、又は設定映像中に被写体が存在しないこと。
　中止条件（３）：一定時間以上、記録領域として選択されていない設定領域Ａｒであること。
　なお、中止条件は、上記の条件（１）～（３）に限られず、上記以外の条件が中止条件に含まれてもよい。
　そして、上記の中止条件（１）～（３）のいずれかを満たす設定領域Ａｒが存在する場合、制御部４６が変更工程を実施する（Ｓ０３８）。かかる変更工程では、設定映像の表示数を減らす変更処理が実行される。
　ステップＳ０３８における変更処理では、中止条件を満たす設定領域Ａｒの設定映像の表示を中止する。例えば、図２６中、標識ｆの識別情報が「２」である設定領域Ａｒが中止条件を満たす場合には、図３０のように、その設定領域Ａｒの設定映像の表示が中止される（サブ画面Ｇ２から消える）。この結果、設定映像の表示数が１つ減少する。
　なお、設定映像の表示が中止された設定領域Ａｒ（以下、中止領域という。）に関しては、図３０に示すように、メイン画面Ｇ１において、中止領域の位置を示す標識ｆの表示も中止される。
　ちなみに、中止条件を満たす設定領域Ａｒの設定映像の表示を直ちに中止するのではなく、設定映像の表示中止（換言すると、設定映像の表示数の変更）に関する提案情報を出力してもよい。例えば、中止条件を満たす設定領域Ａｒの設定映像の表示中止を推奨するメッセージを情報表示画面Ｇ３に表示し、又は音声等で再生してもよい。その間、サブ画面Ｇ２には、中止条件を満たす設定領域Ａｒの設定映像の代わりに、別の映像（設定映像とは異なる映像）を表示してもよい。
　中止映像の設定映像の表示が中止されると、中止領域は、記録工程が実施される間、撮影装置１０内の内部メモリ５０等に記憶される。中止領域が記憶される期間は、撮影終了まででもよく、あるいは撮影装置１０の電源がオフになるまででもよい。
　また、中止領域の設定映像の表示が中止されると、図３０に示すように、メイン画面Ｇ１には、戻しボタンＢｔ９等の操作用アイコンが表示される。ユーザは、例えば戻しボタンＢｔ９をタップ等することにより、中止領域の設定映像について再表示指示を行うことができる。ユーザの再表示指示があると（Ｓ０３９）、制御部４６が変更工程を実施する（Ｓ０４０）。かかる変更工程では、ユーザの再表示指示に基づき、記憶されている中止領域の設定映像を再表示する変更処理が実行される。
　ステップＳ０４０における変更処理により、中止領域の映像が再びサブ画面Ｇ２に表示され、設定映像の表示数が、中止領域の設定映像の表示が中止される前の数に戻る。
　なお、再表示可能な中止領域の設定映像は、直前の中止領域（直近で設定映像の表示が中止された設定領域）の映像に限られない。例えば、今回の撮影期間中における過去数回分の中止領域の映像を再表示可能としてもよい。その場合、撮影装置１０には過去数回分の中止領域が記憶され、ユーザは、どの中止領域の設定映像を再表示するかを指定して映像の再表示を指示する。
　図２５に示すフローにおいて、制御部４６は、記録工程の実施中、基準映像を監視し、基準領域中の被写体の数が設定領域Ａｒの数の上限値を超えているかを判定する（Ｓ０４１）。そして、被写体の数が設定領域Ａｒの数の上限値を超えた場合、制御部４６が変更工程を実施する（Ｓ０４２）。かかる変更工程では、設定映像の表示数の減少に関する変更処理が実行される。
　ステップＳ０４２における変更処理では、被写体の数が設定領域Ａｒの数の上限値を超えた旨、及び、設定映像の表示数を減らすことを推奨するメッセージを情報表示画面Ｇ３に表示し、又は音声等で再生する。ユーザは、これを契機として設定領域Ａｒの設定を見直し、例えば、記録領域として選択されない期間が最も長い設定領域Ａｒ等、不要な設定領域Ａｒを削除する。この結果、設定映像の表示数が、ユーザが削除した設定領域Ａｒの数だけ減少する。
　以上までに説明してきた一連のステップＳ０３１～Ｓ０４２は、記録工程の実施中、繰り返し実施され、記録工程の終了時点で終了する（Ｓ０４３）。
　以上のように本実施形態では、基準映像中の変化（例えば、被写体の追加等）及び中止条件の成立等を契機として変更工程を実施し、設定映像の表示数を適宜変更する。これにより、ユーザは、その時の状況に応じた数の設定映像を容易に確認し、且つ、記録領域となる可能性が低い設定領域Ａｒ等の映像の確認を省略することができる。この結果、ユーザにとっての利便性が向上する。
＜＜その他の実施形態＞＞
　以上までに説明してきた実施形態は、本発明の表示方法を分かり易く説明するために挙げた具体例であり、あくまでも一例に過ぎず、その他の実施形態も考えられ得る。
　上述した実施形態では、撮影装置１０が表示装置として各種の映像を表示することとしたが、これに限定されるものではない。例えば、撮影装置１０、撮影装置１０と有線又は無線にて接続されたカメラコントローラ、及び外付け型の外部ディスプレイ等によって表示装置が構成されてもよい。その場合には、カメラコントローラが、制御部４６としての機能を担い、撮影装置１０に基準映像を撮影させ、外部ディスプレイに各種の映像を表示させる。また、カメラコントローラは、設定領域Ａｒの設定、記録領域の選択及び再選択（切り替え）、並びに記録映像の記録等を行ってもよい。
　また、上記の実施形態では、映像表示フロー中の制御工程において、基準領域の変更を抑制するための制御処理を実行することとした。但し、これに限定されず、基準領域の変更に関する制御処理として、基準領域の変更を促すための処理が実行されてもよい。この場合、基準映像における変化（例えば、基準映像中の被写体の移動等）に応じて基準領域を調整することができる。
　より詳しく説明すると、例えば、記録工程において電子ズームにより記録映像をズームアップするとする。その際に、ズーム倍率が所定値を超えてしまうと、記録映像の解像度が一定値以下となり所望の画質が得られ難くなる虞がある。その場合には、図３１に示すように、電子ズームの代わりに光学ズームを行って基準領域の変更を促す情報を情報表示画面Ｇ３に表示してもよい。あるいは、例えば解像度が所定値以上になるように、制御部４６がズーム用駆動部を動かして光学ズームを強制的に行って基準領域を自動的に変更してもよい。
　光学ズームによって基準領域が変わると、基準領域に対する各設定領域Ａｒの相対位置が変化する。その場合、制御部４６が基準領域の変化量を算出し、算出された変化量に基づき、各設定領域Ａｒの位置及びサイズを調整すると好ましい。これにより、基準領域に対する各設定領域Ａｒの相対位置が、ズームの実施前後で維持されるようになる。
　また、記録工程の実施中、移動領域Ａｍが被写体の移動に追従して基準領域の端付近に至る、又は移動領域の少なくとも一部が基準領域からはみ出ることがある。その場合には、移動後の移動領域Ａｍが基準領域中に収まるように撮影装置１０を動かすこと（すなわち、基準映像の変更）を促す情報を情報表示画面Ｇ３に表示してもよい。
　ここで、記録工程中にユーザが撮影装置１０を動かすことで基準領域を変更した場合、撮影装置１０に備えられたジャイロセンサ等の公知の検出センサが撮影装置１０の動き（例えば、変位量）を検出するとよい。そして、制御部４６が検出された撮影装置１０の動きに基づき、各設定領域Ａｒの位置及びサイズを調整すると好ましい。これにより、基準領域に対する各設定領域Ａｒの相対位置が、変更後の基準領域に応じて調整されるようになる。この際、基準領域の変更により基準領域の外に出た設定領域Ａｒは、自動削除されてもよい。
　また、上記の実施形態では、記録される映像が動画、すなわち、一定のフレームレートにて連続的に撮影される複数のフレーム画像の集合であることとした。ただし、記録される映像は、動画に限られず、静止画であってもよい。
　例えば、制御部４６は、基準映像をライブビュー画像としてメイン画面Ｇ１に表示し、基準領域の中で複数の設定領域Ａｒを設定する。ユーザが複数の設定領域Ａｒの中から記録領域Ａｐを選択し、制御部４６が、記録映像を含む複数の設定映像をサブ画面Ｇ２に表示する。そして、ユーザがレリーズボタン２６を操作する等して記録指示を行うと、制御部４６が、記録映像を静止画像として記録媒体に記録してもよい。
　また、上記の実施形態では、基準映像中の被写体を検出すると、検出された被写体の位置に自動的に設定領域Ａｒを設定することとした。ただし、検出された被写体の位置に直ちに設定領域Ａｒを設定するケースに限られず、検出された被写体の位置に、先ず設定領域の候補Ａｃを設定してもよい。その場合、候補Ａｃの位置に候補標識Ｋを表示し、その候補標識Ｋに対してユーザが所定の操作を行った場合に、候補Ａｃの位置に設定領域Ａｒを設定するとよい。
　また、上記の実施形態では、中止条件を満たす設定領域Ａｒについては、設定映像の表示が中止される一方で、記録工程の実施中には撮影装置１０に記憶されることとした。ただし、これに限定されず、中止条件を満たす設定領域Ａｒを削除し、その領域の映像が記憶されなくてもよい。その場合、中止条件を満たす設定領域Ａｒを削除する前の段階で、当該設定領域Ａｒの削除に関する提案情報を情報表示画面Ｇ３に表示するのが好ましい。その上で、設定領域Ａｒの削除の要否を選択するための画面（不図示）を別途表示し、削除の要否に関するユーザの意思を確認してから、中止条件を満たす設定領域Ａｒを削除するとよい。
　また、上述した実施形態では、撮影装置がデジタルカメラであったが、ビデオカメラ、撮像光学系付きの携帯電話、スマートフォン及びタブレット型端末等の携帯端末であってもよい。また、撮像レンズは、携帯端末の撮像光学系に外付けされるようなレンズユニットであってもよい。
　１０　撮影装置
　１２　撮影装置本体
　１３　マウント
　１４　撮影レンズ
　１７　光学ユニット
　１８，１９　光学機器
　２０　絞り
　２１　ズーム用駆動部
　２２　フォーカス用駆動部
　２３　絞り駆動部
　２６　レリーズボタン
　２８　ディスプレイ
　２９　電子ビューファインダ
　３０　操作ボタン
　３６　タッチパネル
　３８　シャッタ
　４０　撮像素子
　４２　画素
　４４　アナログ信号処理回路
　４６　制御部
　４７　コントローラ
　４８　映像処理部
　５０　内部メモリ
　５２　カードスロット
　５４　メモリカード
　５６　バッファメモリ
　６１　カメラコントローラ
　６２　外部ディスプレイ
　１０１　第１のＵＩ画面
　１０２　第２のＵＩ画面
　１０３　第３のＵＩ画面
　１０４　第４のＵＩ画面
　１０５　入力画面
　Ａｃ　候補
　Ａｍ　移動領域
　Ａｐ　記録領域
　Ａｒ　設定領域
　Ａｓ，Ａｔ　撮影領域
　Ｂｔ１～Ｂｔ８　ボタン
　Ｂｔ９　戻しボタン
　ｆ，ｆｘ　標識
　Ｇ１　メイン画面
　Ｇ２，Ｇ２ｘ　サブ画面
　Ｇ３　情報表示画面
　Ｋ　候補標識
　Ｌ１　光軸
　Ｔ　テーブルデータ

Claims (15)

  1. 　撮影装置によって撮影した映像を表示する表示方法であって、
    　基準映像の撮影領域である基準領域の中に、複数の設定領域、又は前記設定領域の候補を自動的に設定する設定工程と、
    　記録される記録映像の領域である記録領域を、前記複数の設定領域の中から選択する選択工程と、
    　前記選択工程の実施後に、前記記録領域を前記複数の設定領域の中から再選択して前記記録領域を切り替える切り替え工程と、
    　を備える表示方法。
  2. 　前記設定工程は、
    　前記基準領域の中に、前記候補を自動的に設定する第１設定工程と、
    　ユーザの前記候補に対する操作に応じて、前記候補が設定された位置に、前記設定領域を設定する第２設定工程と、を有する請求項１に記載の表示方法。
  3. 　前記設定工程では、前記基準映像において視覚的変化が生じている特徴箇所を検出し、前記基準領域において、検出された前記特徴箇所の位置に、前記設定領域又は前記候補を自動的に設定する請求項１又は２に記載の表示方法。
  4. 　前記設定工程では、前記基準映像の撮影シーンを前記基準映像に基づいて認識し、前記基準領域において、認識された前記撮影シーンと対応する位置に前記設定領域又は前記候補を自動的に設定する請求項１乃至３のいずれか一項に記載の表示方法。
  5. 　前記設定工程では、前記基準映像において、前記撮影装置の撮影条件を決めるための特徴が基準を満たす位置に前記設定領域を自動的に設定する請求項１乃至４のいずれか一項に記載の表示方法。
  6. 　前記撮影条件は、前記基準映像内の合焦位置、露光量、及びホワイトバランスのうちの少なくとも一つである、請求項５に記載の表示方法。
  7. 　前記設定工程では、予め記憶された前記設定領域の位置情報に基づいて前記設定領域又は前記候補を自動的に設定する請求項１乃至６のいずれか一項に記載の表示方法。
  8. 　前記位置情報は、過去に実施された前記設定工程にて設定された前記設定領域の前記位置情報、及び、ユーザの操作に基づいて決められた前記設定領域の前記位置情報のうちの少なくとも一つを含む請求項７に記載の表示方法。
  9. 　前記基準領域のサイズ又は位置が変化した場合に、前記設定領域の位置及びサイズの少なくとも一方を調整する調整工程をさらに備える請求項１乃至８のいずれか一項に記載の表示方法。
  10. 　撮影装置によって撮影した映像を表示する表示方法であって、
    　基準映像の撮影領域である基準領域の中に、複数の設定領域を設定する設定工程と、
    　記録される記録映像の領域である記録領域を、前記複数の設定領域の中から選択する選択工程と、
    　前記選択工程の実施後に、前記記録領域を前記複数の設定領域の中から再選択して前記記録領域を切り替える切り替え工程と、
    　前記記録映像の動画像を記録する記録工程と、
    　前記設定領域の映像である設定映像を表示する表示工程と、
    　前記記録工程の実施中に、前記設定映像の表示数の変更に関する変更処理を実行する変更工程と、
    　を備える表示方法。
  11. 　前記変更処理は、前記基準映像中の被写体の増加に応じて前記設定領域を追加して前記表示数を増やす処理を含む請求項１０に記載の表示方法。
  12. 　前記変更処理は、中止条件を満たす前記設定領域の前記設定映像の表示を中止して前記表示数を減らす処理を含む請求項１０又は１１に記載の表示方法。
  13. 　前記設定映像の表示が中止された前記設定領域である中止領域は、前記記録工程が実施される間に記憶され、
    　前記変更処理は、ユーザの再表示指示に基づき、記憶された前記中止領域の前記設定映像を再表示する処理を含む請求項１０乃至１２のいずれか一項に記載の表示方法。
  14. 　前記変更処理は、前記表示数の変更に関する提案情報を出力する処理を含む請求項１０乃至１３のいずれか一項に記載の表示方法。
  15. 　前記基準映像中の被写体の数が前記設定領域の数の上限値を超えた場合、前記変更工程において、前記表示数の減少に関する前記変更処理を実行する請求項１０乃至１４のいずれか一項に記載の表示方法。
PCT/JP2020/042617 2020-01-30 2020-11-16 表示方法 Ceased WO2021152961A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2021574473A JP7394151B2 (ja) 2020-01-30 2020-11-16 表示方法
CN202080094877.5A CN115023942B (zh) 2020-01-30 2020-11-16 显示方法
US17/874,244 US20220360724A1 (en) 2020-01-30 2022-07-26 Display method
JP2023199704A JP7721619B2 (ja) 2020-01-30 2023-11-27 表示方法
US18/915,371 US20250039327A1 (en) 2020-01-30 2024-10-15 Display method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020013193 2020-01-30
JP2020-013193 2020-01-30

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/874,244 Continuation US20220360724A1 (en) 2020-01-30 2022-07-26 Display method

Publications (1)

Publication Number Publication Date
WO2021152961A1 true WO2021152961A1 (ja) 2021-08-05

Family

ID=77078185

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/042617 Ceased WO2021152961A1 (ja) 2020-01-30 2020-11-16 表示方法

Country Status (4)

Country Link
US (2) US20220360724A1 (ja)
JP (2) JP7394151B2 (ja)
CN (1) CN115023942B (ja)
WO (1) WO2021152961A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021023320A (ja) * 2019-07-31 2021-02-22 株式会社三洋物産 遊技機
JP2021023319A (ja) * 2019-07-31 2021-02-22 株式会社三洋物産 遊技機

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003256836A (ja) * 2001-07-10 2003-09-12 Hewlett Packard Co <Hp> 知的特徴選択およびパンズーム制御
JP2011217307A (ja) * 2010-04-02 2011-10-27 Seiko Epson Corp 監視画像表示制御装置及び監視システム
JP2012103859A (ja) * 2010-11-09 2012-05-31 Olympus Corp 画像処理装置、画像処理方法及び画像処理プログラム
JP2014042357A (ja) * 2008-09-12 2014-03-06 Sanyo Electric Co Ltd 撮像装置および画像処理装置
JP2014207662A (ja) * 2013-03-19 2014-10-30 キヤノン株式会社 映像処理装置、映像処理装置の制御方法およびプログラム
JP2016201756A (ja) * 2015-04-14 2016-12-01 ソニー株式会社 画像処理装置、画像処理方法、および画像処理システム
JP2019028536A (ja) * 2017-07-26 2019-02-21 キヤノン株式会社 画像処理装置及びその制御方法、表示装置、プログラム
WO2019111659A1 (ja) * 2017-12-07 2019-06-13 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法、およびプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002305683A (ja) * 2001-04-04 2002-10-18 Olympus Optical Co Ltd 撮像装置および撮像プログラムを記録した記録媒体
US6895181B2 (en) * 2002-08-27 2005-05-17 Olympus Corporation Camera and distance measuring method thereof
JP4171501B2 (ja) * 2006-04-25 2008-10-22 本田技研工業株式会社 車両の周辺監視装置
KR101362765B1 (ko) * 2007-11-07 2014-02-13 삼성전자주식회사 촬영 장치 및 그 제어 방법
KR101427660B1 (ko) * 2008-05-19 2014-08-07 삼성전자주식회사 디지털 영상 처리 장치에서 영상의 배경흐림 효과 처리장치 및 방법
KR20100091846A (ko) * 2009-02-11 2010-08-19 삼성전자주식회사 촬상 장치 및 촬상 방법
JP5624809B2 (ja) * 2010-06-24 2014-11-12 株式会社 日立産業制御ソリューションズ 画像信号処理装置
JP5907738B2 (ja) * 2012-01-23 2016-04-26 オリンパス株式会社 撮像装置、表示方法、プログラム
CN103458177B (zh) * 2012-05-23 2018-12-11 杭州阿尔法红外检测技术有限公司 影像记录装置和影像记录方法
CN104755981B (zh) * 2012-11-14 2017-04-12 富士胶片株式会社 图像处理装置、摄像装置及图像处理方法
JP5859061B2 (ja) * 2013-06-11 2016-02-10 キヤノン株式会社 撮像装置、画像処理装置、および、これらの制御方法
JP6512810B2 (ja) * 2014-12-11 2019-05-15 キヤノン株式会社 撮像装置および制御方法とプログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003256836A (ja) * 2001-07-10 2003-09-12 Hewlett Packard Co <Hp> 知的特徴選択およびパンズーム制御
JP2014042357A (ja) * 2008-09-12 2014-03-06 Sanyo Electric Co Ltd 撮像装置および画像処理装置
JP2011217307A (ja) * 2010-04-02 2011-10-27 Seiko Epson Corp 監視画像表示制御装置及び監視システム
JP2012103859A (ja) * 2010-11-09 2012-05-31 Olympus Corp 画像処理装置、画像処理方法及び画像処理プログラム
JP2014207662A (ja) * 2013-03-19 2014-10-30 キヤノン株式会社 映像処理装置、映像処理装置の制御方法およびプログラム
JP2016201756A (ja) * 2015-04-14 2016-12-01 ソニー株式会社 画像処理装置、画像処理方法、および画像処理システム
JP2019028536A (ja) * 2017-07-26 2019-02-21 キヤノン株式会社 画像処理装置及びその制御方法、表示装置、プログラム
WO2019111659A1 (ja) * 2017-12-07 2019-06-13 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法、およびプログラム

Also Published As

Publication number Publication date
JP7394151B2 (ja) 2023-12-07
US20220360724A1 (en) 2022-11-10
US20250039327A1 (en) 2025-01-30
JP7721619B2 (ja) 2025-08-12
JP2024019216A (ja) 2024-02-08
CN115023942A (zh) 2022-09-06
JPWO2021152961A1 (ja) 2021-08-05
CN115023942B (zh) 2025-04-11

Similar Documents

Publication Publication Date Title
CN108886576B (zh) 数码相机及数码相机的显示方法
US9830947B2 (en) Image-capturing device
JP4671133B2 (ja) 画像処理装置
US8780200B2 (en) Imaging apparatus and image capturing method which combine a first image with a second image having a wider view
US20050134719A1 (en) Display device with automatic area of importance display
JP7675894B2 (ja) 表示方法
US9131138B2 (en) Photographing apparatus
US20250039327A1 (en) Display method
US20200120269A1 (en) Double-selfie system for photographic device having at least two cameras
JP2013009189A (ja) 撮影装置および撮像方法
JP2023164919A (ja) 映像作成方法
JP2014161066A (ja) 撮像装置および撮像装置におけるモード切換え方法
CN118044215B (zh) 微距拍摄方法、电子设备和计算机可读存储介质
JP2007233170A (ja) 焦点検出装置およびカメラ
JP2009288945A (ja) 画像表示装置及び画像表示方法
WO2022201819A1 (ja) 撮像装置、および撮像装置制御方法、並びにプログラム
JP5015121B2 (ja) 撮像装置
KR20100093955A (ko) 디지털 영상신호 처리장치에서 이미지확대표시방법
JP7418083B2 (ja) 表示制御装置およびその制御方法およびそのプログラム
US20250088749A1 (en) Capture control apparatus, capture control method, and image capture system
JP5704501B2 (ja) 撮像装置及びプログラム
WO2024225009A1 (ja) 撮像装置、表示制御方法、プログラム
JP2014135609A (ja) 撮影機器
CN120676250A (zh) 构图方法、电子设备、芯片系统、存储介质以及产品
JP2012182620A (ja) 撮像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20916618

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021574473

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20916618

Country of ref document: EP

Kind code of ref document: A1

WWG Wipo information: grant in national office

Ref document number: 202080094877.5

Country of ref document: CN