[go: up one dir, main page]

WO2016156287A1 - Verfahren zur berechnung von hologrammen zur holographischen rekonstruktion von zweidimensionalen und/oder dreidimensionalen szenen - Google Patents

Verfahren zur berechnung von hologrammen zur holographischen rekonstruktion von zweidimensionalen und/oder dreidimensionalen szenen Download PDF

Info

Publication number
WO2016156287A1
WO2016156287A1 PCT/EP2016/056761 EP2016056761W WO2016156287A1 WO 2016156287 A1 WO2016156287 A1 WO 2016156287A1 EP 2016056761 W EP2016056761 W EP 2016056761W WO 2016156287 A1 WO2016156287 A1 WO 2016156287A1
Authority
WO
WIPO (PCT)
Prior art keywords
spatial light
light modulation
modulation device
sub
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/EP2016/056761
Other languages
English (en)
French (fr)
Inventor
Bo Kroll
Norbert Leister
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SeeReal Technologies SA
Original Assignee
SeeReal Technologies SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SeeReal Technologies SA filed Critical SeeReal Technologies SA
Priority to JP2017550816A priority Critical patent/JP6893880B2/ja
Priority to CN201680032235.6A priority patent/CN107710080B/zh
Priority to US15/563,016 priority patent/US11460809B2/en
Priority to KR1020177031624A priority patent/KR102647998B1/ko
Publication of WO2016156287A1 publication Critical patent/WO2016156287A1/de
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/26Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/26Processes or apparatus specially adapted to produce multiple sub- holograms or to obtain images from them, e.g. multicolour technique
    • G03H1/268Holographic stereogram
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • G03H2001/0825Numerical processing in hologram space, e.g. combination of the CGH [computer generated hologram] with a numerical optical element
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/303D object
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/40Synthetic representation, i.e. digital or optical object decomposition
    • G03H2210/44Digital representation
    • G03H2210/441Numerical processing applied to the object data other than numerical propagation
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/40Synthetic representation, i.e. digital or optical object decomposition
    • G03H2210/45Representation of the decomposed object
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2210/00Object characteristics
    • G03H2210/40Synthetic representation, i.e. digital or optical object decomposition
    • G03H2210/45Representation of the decomposed object
    • G03H2210/452Representation of the decomposed object into points

Definitions

  • the invention relates to a method for calculating holograms for holographic reconstruction of two-dimensional and / or three-dimensional scenes in a display device, wherein the scene to be reconstructed is decomposed into object points and the object points are coded as sub-holograms in at least one spatial light modulation device of the display device, wherein a reconstructed Scene is viewed from a visibility area.
  • the invention also relates to a display device, in particular a holographic display device for displaying two-dimensional and / or three-dimensional scenes, comprising a spatial light modulation device, wherein the light modulation device is adapted to perform the method.
  • a method in which the calculation of holograms for a holographic display or a holographic display device is described is known, for example, from WO 2006/066919 A1, the disclosure content of which is to be fully incorporated here.
  • a virtual observer window in a viewer plane is included, through which a viewer can observe a reconstructed scene when the virtual observer window coincides with the location of the observer's eye pupil.
  • the method enables the holographic reconstruction of much larger three-dimensional scenes, which are encoded in the form of holograms in a light modulator (SLM) of a display device, wherein the resolution of the light modulator much lower requirements than in the conventional holography.
  • SLM light modulator
  • Another advantage is that the effort to calculate the corresponding Hologram is also lower. This results inter alia from the fact that the information about an object point of the three-dimensional scene only has to be encoded in a region of the display device that results from the projection of the observer window onto the display device or the light modulator via an object point to be displayed and which designates it as a sub-hologram becomes.
  • the calculation and coding of the observer-window-related holograms can still follow in another way.
  • the three-dimensional scene is also mathematically decomposed into object points.
  • Subholograms in the form of lens functions are then calculated for the individual object points and displayed directly on the light modulator and added up.
  • the size and position of the sub-holograms on the light modulator results from a projection of the viewer window over the respective object point toward the light modulator.
  • the computing effort increases approximately linearly with the number of cutting planes used.
  • the choice of cutting planes is, to a degree, arbitrary.
  • the distances of the cutting planes are therefore to be chosen so small that the eye can not resolve the difference between adjacent planes. This requires a minimum number of cutting planes for a given three-dimensional scene.
  • the computational effort increases with the number of object points, whose density, however, also has to be selected such that a continuous impression of the reconstructed scene arises.
  • the method according to WO 2008/025839 A1 is more favorable in terms of the computational complexity.
  • the method according to US Pat. No. 7,969,633 can be advantageous.
  • the computational effort also depends heavily on the position of the three-dimensional scene relative to the position of the light modulator and the observer window, since this has an influence, in particular, on the size of the sub-holograms for the individual object points.
  • Holographic displays with a virtual viewer window have also been described, for example in WO 2006/1 19760 A2, in which a light modulator is not directly viewed by the viewer but instead the enlarged image of the light modulator on a screen.
  • the computational effort for calculating the hologram depends on the position of the three-dimensional scene relative to the image of the light modulator.
  • Holo-HMD holographic head mounted display
  • the viewer would see an enlarged image of a light modulator, and the computational effort in this case also relates to the position of the three-dimensional scene relative to the image of the light modulator.
  • Head-mounted displays are display devices that are worn, for example, on the head of a viewer / user similar to a helmet or a helmet (helmet mounted display). They can be designed for one observer eye (monocular HMD) or for both observer eyes (binocular HMD).
  • stationary or transportable display devices can be designed in which the viewer can view the magnified display of at least one display or the enlarged reconstruction of a three-dimensional scene reconstructed by a display device via optical magnification means located near the eye (eyepiece).
  • a hocular holographic display device designed as an electronic peep box
  • the magnitude of the complex value in a preferred embodiment is approximately constant over the extent of the sub-hologram and depends in its height on the axial distance of the object point to the light modulator or screen and on the intensity of the object point.
  • a constant amplitude over the extent of the sub-hologram, but also includes other possibilities.
  • the phase distribution of the complex values in the region of the sub-hologram corresponds approximately to the function of a lens whose focal length may also depend on the combination with other focusing elements contained in the display device, such as a field lens.
  • the focal length of the lens function of the sub-hologram is preferably selected such that a focus (focal point) lies in the respective object point.
  • a focus focal point
  • what is described below should not be limited to specific lens functions, but may also include other phase values in the sub-hologram.
  • the amplitude 0 (zero) would have to be written for this object point in the light modulator. Only the pixels of the light modulator within the sub-hologram would thereby contribute with its full transmission to the reconstruction of the single object point.
  • a computation-intensive step in the hologram computation is the conversion of the phase of a lens function of a sub-hologram into real and imaginary parts for the purpose of summing up a plurality of sub-holograms. For medium-sized sub-holograms, this calculation step must be performed more frequently. In principle, a reproduction of the same three-dimensional scene could take place in holographic display devices with different parameters, such as the size of the display device or the distance of the display device from the viewer.
  • the size can be roughly the same viewer window or area and the same frustrum (cone extending from the edges of the viewer window / Visibility area to the edges of the light modulator and extending behind) as generated by a larger size light modulator with the same number of larger modulation elements farther away from a viewer.
  • a 20 inch display (display device) with a distance of 2 meters to a viewer and a pixel pitch (pitch of the modulation element) of 90 ⁇ m with respect to the viewer window / visibility area size and thus generated frustrum would be approximately equivalent to a 4 inch display ) with 40 cm distance to a viewer and a pixel pitch of 18 ⁇ .
  • the pixel pitch to about 10.5 mm. This is optionally horizontal or vertical, since the size of the visibility area is generally two-dimensional.
  • the size of the visibility area or of the virtual viewer window can also be made smaller. In the general case would be
  • a factor a ⁇ 1.
  • the factor a would additionally occur in this case.
  • the factor a is omitted in the following illustration. The following description is also applicable to cases with a ⁇ 1.
  • the distance of the display device to a viewer influences the calculation of the hologram to be encoded into the light modulator.
  • the size of a sub-hologram in a preferred embodiment would be determined by means of the beam set.
  • Zpoint is the distance of an object point to the observer window / visibility area, and zim as already described, the distance of the light modulator to Observer window / visibility range, the size of the sub-hologram would be in the form of a spatial extent x sh
  • FIGS. 1 and 2 a three-dimensional scene, which is indicated here by only two object points, is shown schematically in a frustrum in a fixed position and at a distance to a viewer.
  • FIGS. 1 and 2 show schematically only the light modulator or the light modulation device.
  • the holographic display device generally includes other components such as a backlight and a field lens.
  • the light modulation device has a large distance from a viewer.
  • small sub-holograms arise in this example in absolute terms in size in this example. Due to the comparatively large pixel pitch of the light modulation device, these sub-holograms therefore only extend over a few modulation devices (pixels) of the light modulation device. This is particularly advantageous in terms of the computational effort for the calculation and the coherent addition of the sub-holograms.
  • FIG. 2 with reference to FIG. 1, a smaller-sized display device with smaller modulation elements is shown, which is located closer to the eye of an observer.
  • the sub-holograms are absolutely larger in size. Since the light modulation device here also has smaller modulation elements than in FIG. 1, the sub-holograms extend clearly over a larger number of modulation elements than in FIG. 1. The effort for the calculation of the hologram from the preferably three-dimensional scene is therefore greater in FIG.
  • a display device usually the distance of a display device to the viewer depends on the application and not freely selectable. For example, a tablet or notebook display would typically be closer to a viewer than a television.
  • the computational effort for different positions of the light modulation device is to be reduced to a viewer and the scene to be reconstructed. This should especially without or only with a lot small restrictions in the visible lateral resolution and in the visible depth resolution of the reconstructed scene can be achieved.
  • the method according to the invention is used to calculate holograms for the holographic reconstruction of two-dimensional and / or three-dimensional scenes in a display device (display).
  • the scene to be reconstructed is decomposed into object points, wherein the object points are coded as sub-holograms in at least one spatial light modulation device of the display device.
  • the reconstructed scene can then be viewed from a visibility area.
  • At least one virtual plane of the at least one spatial light modulation device is determined on the basis of a real plane of the spatial light modulation device. Subsequently, a calculation of sub-holograms in the at least one virtual plane of the at least one spatial light modulation device is performed.
  • spatial light modulation device level or “spatial light modulation device position” shall be understood to mean that the plane or position of the physically present spatial light modulation device in a direct view display or also the plane or position of a visible to a viewer real or virtual image of the spatial light modulation device in a projection display, a head mounted display (HMD) or a hokular can include or should.
  • HMD head mounted display
  • spatial light modulating device virtual plane is used so as not to coincide with the plane or position of a physically existing spatial light modulator or a viewer's view of a spatial light modulator, in other words, " virtual level of the spatial light modulation device "shall be understood to mean a physically non-existent or an imaginary or apparent plane of the spatial light modulation device or a plane of the spatial light modulation device that is virtually shifted to a predetermined location.
  • a method is proposed in which a calculation of sub-holograms in a virtual, physically non-existing or imaginary plane of a spatial light modulation device in analogy to a single parallax coding (single-parallax coding) or to a full parallax coding (full-parallax Coding). Subsequently, in each case an integral transformation in a visibility area and from there into the real plane of the spatial light modulation device.
  • the integral transformation is preferably a Fresnel transformation. However, depending on the application, a Fourier transformation can also be used.
  • Such a calculation method is of particular advantage since holograms can thus be calculated in a simple manner, regardless of the size of the individual sub-holograms, which vary from the position of the object points and the position of the virtual plane of the spatial light modulation device.
  • a hologram is obtained which approximately corresponds to the hologram which would be generated in a direct calculation according to the prior art, ie without the path proposed according to the invention preferably via coding in at least one virtual plane of the at least one spatial light modulation device and optionally subsequent transformations into the visibility region and from there into the real plane of the at least one light modulation device.
  • the resulting hologram is then written into the real spatial light modulator.
  • the method according to the invention could require two additional integral transformations for each virtual plane of the spatial light modulation device.
  • the savings in calculating and adding up the individual sub-holograms can be more significant than the two additional integral transformations, which are performed only once for the entire hologram.
  • the method according to the invention can be further developed by calculating the object points of the scene to be reconstructed as sub-holograms in the at least one virtual plane of the at least one spatial light modulator, the calculated sub-holograms from the at least one virtual plane of the at least one spatial light modulator be transformed by means of an integral transformation in the visibility area and summed up there, and the accumulated sub-holograms are transformed by means of another integral transformation of the visibility area in the real plane of the at least one spatial light modulation device and written as a hologram.
  • the method according to the invention can be developed further by calculating the object points of the scene to be reconstructed as sub-holograms in the at least one virtual plane of the at least one spatial light modulator and summing up the sub-holograms in the at least one virtual plane, the summed sub-holograms of the at least one virtual plane of the at least one spatial light modulation device is transformed into the visibility region by means of an integral transformation, and transformed by means of a further integral transformation from the visibility region into the real plane of the at least one spatial light modulation device and written as a hologram.
  • the second alternative of the method according to the invention can be further developed such that when at least two virtual planes of the at least one spatial light modulation device are assigned to the object points of the scene to be reconstructed, one of these virtual planes is assigned to the object points as sub-holograms in them In each virtual level, the sub-holograms of the associated object points are summed up, the summed sub-holograms are transformed from the at least two virtual planes into the visibility region by means of an integral transformation, the transforms of the at least two virtual planes are summed up in the visibility region, and Overall result of the summed transform by means of a further integral transformation of the visibility range in the real level of at least one spatial n light modulation device is transformed and written as a hologram.
  • the second alternative such that when at least two virtual planes of the at least one spatial light modulation device are assigned to the object points of the scene to be reconstructed one of these virtual planes is calculated and the object points are calculated as sub-holograms in their associated virtual plane and in each virtual level the sub-holograms of the object points assigned to them are summed up, the summed sub-holograms are transformed from the at least two virtual planes into the visibility region by means of an integral transformation, for each of the at least two virtual planes the associated transform is transformed from the visibility region into the first by means of a further integral transformation real level of the at least one spatial light modulator device is transformed, in the real plane of the at least one spatial light modulator Tran Formed the summed at least two virtual levels and the overall result of the summed transform is written as a hologram.
  • the sub-holograms can be written into the spatial light modulation device as a complex-valued hologram or in the form of a hologram coding. Accordingly, it can be provided in an advantageous manner that the position of the virtual plane of the spatial light modulation device is selected such that the resulting sub-holograms have a small or minimum size, as will be explained in more detail below.
  • the position of the virtual plane of the spatial light modulation device can be chosen so that the sub-holograms to be calculated on average become smaller in size - i. have a smaller area than the actual position of the real plane of the spatial light modulator. This advantage outweighs the expense of additional transformations, especially in the presence of multiple virtual levels of the spatial light modulation device.
  • the sub-hologram of an object point is not calculated and coded in the form of a two-dimensional spherical lens (full-parallax) but in the form of a cylindrical lens.
  • sub-holograms consist of only one line for horizontal coding or one column for vertical coding.
  • the lens function of the sub-holograms is then calculated so that only in one dimension (horizontal or vertical) light is focused to the position of the object point.
  • Single parallax coding has the advantage that when reconstructed in one dimension (horizontal or vertical), a sharp focus (focal point) of the object point is created in accordance with the parallax information that the brain receives from both eyes of an observer. In contrast to a stereoscopic display device or display, therefore, eliminates the conflict between parallax information and focus information (accommodation-vergence conflict).
  • Single parallax coding also has advantages over full parax coding holograms in terms of computational complexity and hardware requirements, such as size and number of modulating elements on a display device.
  • holograms with single parallax encoding over holograms with full parax coding have the disadvantage that the visible resolution in the direction perpendicular to the holographic coding can be reduced, in particular for object points far away from the plane of the spatial light modulator, because in this direction There is no sharp focus on the object plane, but a possibly noticeable smearing of the object point during reconstruction can occur.
  • the depth range in which a two-dimensional and / or three-dimensional scene with maximum resolution is visible can therefore be limited. In particular, this effect becomes more apparent as the distance between the display device and a viewer becomes small.
  • the term "visibility area" is to be understood here as meaning preferably an area in the observer plane that is virtually present and defines a type of observer window Viewer in the visibility area, so the viewer can observe the reconstructed scene.
  • a single parallax coding is advantageously used for the calculation of the sub-holograms.
  • a possible integral transformation into a visibility region and from there into the real plane of the spatial light modulation device is carried out as a two-dimensional transformation.
  • the position of the at least one virtual plane of the spatial light modulation device within the depth range of the scene to be reconstructed is selected, wherein the depth range of the scene to be reconstructed by the object point with the smallest distance to the visibility area and the object point with is limited to the largest distance to the visibility range.
  • the position of the at least one virtual plane is selected such that the visible resolution during reconstruction of the scene does not fall below a predetermined value.
  • the location of the virtual plane of the spatial light modulator with respect to the depth range of the scene to be reconstructed is set such that there are little, if any, degradation in the visible resolution of the scene.
  • this method is advantageously usable for a real spatial light modulation device (SLM), which is located at a smaller distance to a viewer and a virtual plane of the spatial light modulation device, which has a greater distance to the viewer than the real spatial light modulation device, since the usable depth range at full resolution for single parallax encoding increases with the distance of the spatial light modulator to the viewer.
  • SLM real spatial light modulation device
  • the real spatial light modulator is 65 cm away from a viewer and the scene to be reconstructed is between 1.5 m and 17 m from the viewer.
  • the virtual plane of the spatial light modulation device for example, a distance of 2.5 m from the viewer is selected.
  • the scene to be reconstructed is decomposed into at least two depth region sections, wherein the at least two depth region sections are each assigned a virtual plane of the spatial light modulation device. This means that the scene to be reconstructed, in addition to the above-mentioned procedure, can also be calculated by decomposing it into several depth area sections which are each assigned to a virtual level.
  • the number of virtual planes is set such that there is little, if any, degradation in the visible resolution of the reconstructed scene for the entire depth range to be displayed.
  • the depth range of the scene to be reconstructed is so large in size that it is not possible to find a single appropriate virtual plane of the spatial light modulator for which a three-dimensional (3D) scene can be displayed without deterioration of the visible resolution it is advantageous and convenient to provide and use multiple virtual levels.
  • the scene to be reconstructed is decomposed into a plurality, that is to say at least two, depth range sections, which are respectively assigned to one of these virtual levels of the spatial light modulator device.
  • sub-holograms for the respective virtual planes of the spatial light modulator device are calculated in the individual depth region sections.
  • a virtual plane of the virtual planes of the spatial light modulation device assigned to the at least two depth region sections can also coincide with the real plane of the spatial light modulation device.
  • the sub-holograms calculated in the individual depth region sections in the virtual plane assigned to the respective depth region section could be transformed into the observer plane or into the visibility region, added there, and be transformed from the observer level or the visibility range in the real plane of the light modulation device.
  • the sub-holograms of the individual depth region sections could also be added up before the transformation into the visibility region.
  • the summing up of the sub-holograms calculated for the real plane of the light modulation device can advantageously take place either in this real plane or in the observer plane or in the plane of the visibility region.
  • the sub-hologram from the depth range section calculated directly in the real plane of the light modulation device can be added to the further calculated sub-holograms, either in the real plane or also in the observer plane or in the plane of the visibility region.
  • the real level of the light modulation device may be at a distance of 65 cm from a viewer, with a three-dimensional scene to be reconstructed at a distance between 0.5 m and 17 m from the viewer.
  • the scene to be reconstructed is decomposed into object points, with three depth range sections being defined here, for example.
  • a first depth range section extends at a distance of 1, 5 m to 17 m from the viewer. All object points lying in this depth area section are assigned to a first generated virtual plane of the spatial light modulation device at a distance of 2.5 m from the viewer.
  • a second depth range section should extend to the viewer at a distance of 0.8 m to 1.5 m.
  • All object points located in this depth region section are thereby assigned to a second generated virtual plane of the spatial light modulation device, which is set at a distance of 1.0 m from the viewer.
  • a third depth range section should extend to the viewer at a distance of 0.5 to 0.8 m. All object points located in this depth region section are here assigned to the real plane of the spatial light modulation device at a distance of 0.65 m from the observer. However, it is also possible for the object points located in this depth region section to be assigned to a further generated virtual plane of the spatial light modulation device, for example a virtual plane at 0.60 m.
  • a pixel pitch (pitch of the modulation element) for the virtual planes of the spatial light modulation device is advantageously selected such that the same size of the visibility region results in the transformation of the sub-holograms into the observer plane or into the plane of the visibility region as in the case of a pixel pitch for the real one Plane of the light modulation device.
  • the quotient of pixel pitch in the virtual plane then behaves by pixel pitch in the real plane of the spatial light modulator as the quotient distance of the virtual plane by removing the real level of the spatial light modulator to the visibility area / virtual viewer window.
  • the individual object points of the scene to be reconstructed in the form of sub-holograms on the real plane of the spatial light modulation device are encoded as a lens element with different focal lengths in the horizontal and vertical directions. That is, the coding of the sub-holograms for the object points of the scene to be reconstructed on the real plane of the light modulation device corresponds to a lens with different focal lengths in the horizontal and vertical directions.
  • an object point on the real plane of the spatial light modulator is not a spherical lens but a lens coded with different focal lengths in the horizontal and vertical directions.
  • the focus lies in the actual object plane, in the direction perpendicular thereto in the plane of the virtual plane of the spatial light modulation device. If a viewer with his eye pupil is in the visibility region, he or she can observe the reconstructed two-dimensional and / or three-dimensional scene as if it had been calculated with a single parallax coding in the virtual plane of the spatial light modulation device.
  • the lower computational effort by using a single parallax coding can also be used without the limitations of the visible resolution of the reconstructed scene or the depth range.
  • the optical reconstruction of the hologram constructed from the sub-holograms is carried out as usual with full parallax coding.
  • the structure of the holographic display device itself thus differs from a display device with full parallax coding not or only slightly.
  • the calculation of the sub-holograms in the at least one virtual plane of the spatial light modulation device can advantageously take place either by means of a two-dimensional full parallax coding or by means of a one-dimensional single parallax coding.
  • the two-dimensional full parallax coding is then used in at least one virtual plane with a smaller distance to the visibility region and the one-dimensional single parallax coding in at least one plane at a greater distance to the visibility region.
  • the summing up of the sub-holograms calculated for the real plane of the light modulation device can, as in the previously described embodiment, advantageously take place either in this real plane or in the observer plane or in the plane of the visibility region.
  • the scene to be reconstructed is decomposed into object points and depth range sections are defined.
  • the object points in a depth region section are each assigned to a virtual plane of the spatial light modulation device.
  • For this virtual level of the spatial light modulation device then takes place a calculation of sub-holograms.
  • the calculation is more complicated than in the previously described method embodiments.
  • the result of the overall hologram then corresponds without restrictions to that of a continuous full parallax coding.
  • the choice of the number and position of the virtual planes of the spatial light modulation device is no longer based on the criterion of avoiding restrictions on the visible resolution, since such restrictions do not occur, but thereafter to limit the computational effort by reducing the size of the sub-holograms.
  • the choice of the number and position of the virtual planes is not made according to the criterion of avoiding restrictions of the visible resolution.
  • the choice of the number and position of the virtual planes of the spatial light modulation device is in turn thereafter to limit the computational effort by reducing the size of the sub-holograms.
  • the number of virtual planes of the spatial light modulation device and the distance of these virtual planes of the spatial light modulation device to the visibility region in dependence on the depth range of the scene to be reconstructed such that the size in the form of a number of modulation elements of for the scene to be reconstructed subholograms to be calculated does not exceed a predetermined value.
  • the distance between the at least one virtual plane of the spatial light modulation device and the scene to be reconstructed is selected so that the size in the form of a number of modulation elements of the sub-holograms to be calculated for the scene to be reconstructed is a predetermined value does not exceed.
  • the distance between the at least one virtual plane of the spatial light modulation device and the scene to be reconstructed is thus expediently selected such that the size of the sub-holograms to be calculated for this virtual plane does not exceed a predetermined numerical value.
  • the size in the form of a number of modulation elements of the sub-holograms N sh is then obtained by dividing the extent by the pixel pitch and then rounding to an integer
  • N sh should always represent a rounded integer value. This expression can be transformed mathematically (using the visibility range extension or virtual viewer window given above)
  • N sh (1 / Zpoint - 1 / Z
  • the size thus depends on a number of modulation elements of the sub-holograms of
  • the depth range of a three-dimensional scene can be characterized by the distance z p0 int_min of the object point or points of the scene to be reconstructed with the smallest distance to the visibility range and Zp 0int _ max of those object points of the scene to be reconstructed with the greatest distance to the visibility range.
  • Either the object points with the smallest distance Zp 0in t_ m in or the object points with the greatest distance Zp 0int _ max to the visibility region also have the largest sub-holograms in the extent.
  • the procedure is such that
  • the virtual plane of the spatial light modulation device is thus positioned within the depth range of the three-dimensional scene such that for the object points with the smallest distance to the visibility region, the size of the sub-hologram in the form of a number of modulation elements with the size of the sub-hologram for the object points with the greatest distance to the visibility area.
  • the maximum size of the sub-holograms in the form of a number of modulation elements would be most favorable if the virtual plane the spatial light modulation device would be positioned in 1 m (ie 2 x 50 cm) distance from the visibility range.
  • the virtual plane of spatial light modulation would be positioned at approximately 2.76 m, ie 2 x 1 / (1/1, 5 + 1 / 17) m.
  • the pixel pitch of the virtual plane of the spatial light modulation device would then be about 45 ⁇ .
  • a sub-hologram of an object point at a distance of 50 cm from the visibility region as well as a sub-hologram of an object point at infinity would then each have a size in the form of a number of 234 in the example
  • Modulation elements in one dimension for example, horizontal.
  • Modulation elements would then be a total of 234x234 modulation elements.
  • the scene to be computed sub-holograms would thus in this case not exceed the value of 234 in the entire depth range.
  • the procedure is as follows:
  • the depth range of the three-dimensional scene is divided into two sub-ranges or depth-range segments.
  • the size z P oi n t_med is intended to represent the boundary between the two areas or sections.
  • the subholograms are placed in a first virtual plane Z
  • the sub-holograms are calculated in a second virtual plane Zi m _ V irt2.
  • the boundary between the depth region sections z p0 i n t_med is determined such that a sub-hologram from an object point at this distance from the visibility region has the same size in the form of a number of modulation elements in both virtual planes of the spatial light modulator, and in addition a sub-hologram of e.g.
  • poin t_ m in in the first virtual plane of the spatial light modulation device and a sub-hologram of z p0 i n t_max in the second virtual plane of the spatial light modulation device also have the same size in the form of a number of modulation elements as a sub-hologram of z p0 i n t_med in both virtual levels:
  • sub-holograms are calculated in the first virtual plane of the spatial light modulation device.
  • sub-holograms are calculated in the second virtual plane of the spatial light modulation device.
  • a sub-hologram of an object point at 0.5 m distance from the visibility region has a size in the first virtual plane of the spatial light modulation device in the form of a number of 1 17 modulation elements in one dimension.
  • a sub-hologram of an object point at 1 m distance from the visibility region in both virtual planes of the spatial light modulation device has this size in the form of a number of 1 17 modulation elements in one dimension and a sub-hologram of an object point at infinity in the second virtual plane of the spatial light modulation device Form a number of 1 17 modulation elements.
  • the maximum number of modulation elements in a sub-hologram can be halved in one dimension, in this example from 234 to 1 17.
  • One of the virtual planes of the spatial light modulation device can also coincide with a real plane of the spatial light modulation device.
  • a first virtual plane of the spatial light modulator at 67 cm could coincide with the real plane of the spatial light modulator. Then, only for a second virtual plane of the spatial light modulation device at 2 m, an integral transformation is necessary.
  • a second virtual plane of the spatial light modulator at 2 m could coincide with the real plane of the spatial light modulator.
  • the number of virtual levels of the spatial light modulation device can advantageously be limited to a predefinable value in order to minimize the cost of possible additional transformations.
  • the maximum number of modulation elements of a sub-hologram would halve for two virtual planes of the spatial light modulation device compared to a single virtual plane, compared to three virtual planes of the spatial light modulation device verdritteln to a virtual level and quadruple at four virtual levels of the spatial light modulation device compared to a virtual level.
  • the improvement achieved with additional virtual layers thus continues to decrease.
  • the further improvement from a quarter to a fifth using a fifth virtual level of the spatial light modulation device is then comparatively small, for example.
  • the number of integral transformations increases by the number 2.
  • the number of virtual levels of the spatial light modulation device would normally be limited to a few, for example 2 or 4. However, the present invention is not limited to a certain maximum number of virtual planes of the spatial light modulation device.
  • the determination of the number of virtual levels of spatial Light modulation device also in dependence on the object point number done so that are used for a three-dimensional scene with many object points more virtual planes of the spatial light modulation device and for a three-dimensional Scene with few object points also less virtual planes of the spatial light modulation device.
  • the maximum size of the sub-holograms is not restricted in the form of a number of modulation elements, but instead minimizes the average size of the sub-holograms in the form of a number of modulation elements.
  • the distance of the at least one virtual plane of the spatial light modulation device to the visibility region can be selected as a function of the position of all object points of the scene to be reconstructed such that the average size, preferably averaged over all object points, in the form of a number of modulation elements of the the scene to be reconstructed occupies a minimum of sub-holograms to be calculated.
  • the size of the sub-holograms in the form of a number of modulation elements in one dimension is proportional to the amount 11 / z p0 int- / zim virtl ⁇
  • the total number of modulation elements in a sub-hologram is proportional to this amount.
  • the total number of modulation elements in a sub-hologram is given by multiplying the vertical and horizontal modulation elements and is therefore proportional to (1 / z p0 int- / zm m virt ) 2 .
  • the position of a virtual plane of the spatial light modulation device is determined by the sum of either the expression
  • the virtual plane of the spatial light modulator would be chosen to be arbitrary in the range between 0.66 m and 0.95 m, so that z point ⁇ and z p0 i nt 2 are in front of the virtual plane and z p0 i nt 3 and z point 4 are behind it.
  • virtual planes of the spatial light modulation device are preferably used, which are arranged at a greater distance away from a viewer than the real plane of the spatial light modulation device.
  • these virtual planes are also closer to the viewer at a distance than the real plane of the spatial light modulation device.
  • the position of the at least one virtual plane of the spatial light modulation device is adapted to the new depth range when the depth range of the scene to be reconstructed changes with time.
  • content displayed sequentially on the holographic display device can switch between a preferably three-dimensional scene with object points close to the visibility region and temporally following a preferably three-dimensional scene with object points far away from the visibility region or a virtual viewer window.
  • the depth range of the scene to be reconstructed would then be determined for each individual frame, for example the object points z p0 int_min with the minimum distance and z p0 int_max with the maximum distance to the visibility range and from this the position (s) of the at least one virtual plane of the spatial light modulation device.
  • the number and position of the at least one virtual plane of the spatial light modulator device may be in line with the new position of the reconstructed scene when tracking the visibility region in the axial and / or lateral direction in accordance with a detected position of an observer Visibility range is adjusted.
  • the distance, detected by means of a device for detecting the viewer position, of an observer to the real plane of the spatial light modulation device to which the visibility region is tracked is used to determine the number / and / or position of the at least one virtual plane of the spatial light modulation device becomes.
  • a mean or typical (depending on the application, such as notebook or television) distance of a viewer to the real plane of the spatial light modulation device may be used.
  • a position in the frustrum which lies within the scene to be reconstructed in such a way that a number viewed from a viewer in a viewer plane can be selected the object points are located in front of and a number of the object points behind the virtual plane of the spatial light modulation device, wherein the object points closest to the viewer should not be more than half the virtual viewer distance in front of the virtual plane of the spatial light modulation device.
  • the method is not limited to a specific determination of the position of the virtual plane of the spatial light modulation device.
  • this criterion can consist in that the visible resolution of the three-dimensional scene thus calculated is at most 20% worse than the resolution of a hologram of the same scene calculated directly in the real plane of the spatial light modulation device.
  • a display device for displaying two-dimensional and / or three-dimensional scenes in which an image plane of the at least one spatial light modulation device is generated, which acts as a real plane of the spatial light modulation device, such as a head Mounted display or Hokular, depending on the content of a scene to be reconstructed at least one virtual level of the at least one spatial light modulation device is determined according to one of the above-described inventive possibilities, for example, so that the maximum or the average size of the sub-holograms is minimized Image plane of the spatial light modulation device is moved so that it coincides with the virtual plane of the spatial light modulation device, the object points of the scene to be reconstructed as a sub-hologram calculated and summed up and inscribed as a hologram.
  • a head-mounted display or hokular could also be used.
  • the head-mounted display or hocular has an imaging system or a focusing system such that an enlarged image of the spatial light modulation device is visible from the visibility area.
  • the imaging system or focusing system can be designed such that the position of the image plane of the spatial light modulation device can be varied.
  • the imaging system or focusing system can have at least one element whose focal length is configured variably, ie can be variably varied. In this way it is possible to shift an image plane of the at least one spatial light modulation device.
  • At least one virtual plane of the spatial light modulation device is determined or determined, which is determined in such a way that the sub-holograms of the object points of the scene are designed to be small in area, and thus their calculation is cost-effective Seen is favorable.
  • the image / image plane of spatial light modulation illumination corresponding to the real plane of the spatial light modulation device in a display device formed as a direct view display may then be shifted to coincide with the virtual plane of the spatial light modulation device or matches. In this case, in the presence of only one virtual plane of the spatial light modulation device, the integral transformation would be completely eliminated.
  • the image plane of the at least one spatial light modulation device could also be shifted by slightly changing the real plane of the spatial light modulation device.
  • the image of the spatial light modulation device could also be shifted so that it coincides temporally one after the other with a different one of the virtual planes.
  • variable focal length which may be formed, for example, as a diffractive or refractive system and thus, for example, at least one lens or at least a mirror could have, for example, an electrowetting lens whose focal length is variable by adjusting an electrical voltage, or a membrane mirror, whose radius of curvature is variable, or even a system of several lenses, in which the focal length of the system is changed by changing the distance of the lenses, thus an image of the spatial light modulator is shifted so that for a two and / or three-dimensional scene with a predetermined Depth range (thus content-dependent) the sub-hologram size can be set favorably in relation to the computational effort.
  • the inventive method is applicable by means of a light modulation device, in particular in a display device, preferably in a holographic Display device for displaying two-dimensional and / or three-dimensional scenes, comprising a spatial light modulation device, wherein the light modulation device is adapted to carry out the method according to the invention.
  • a light modulation device in particular in a display device, preferably in a holographic Display device for displaying two-dimensional and / or three-dimensional scenes, comprising a spatial light modulation device, wherein the light modulation device is adapted to carry out the method according to the invention.
  • 1 a, 1 b, 1 c various possible embodiments of a display device for the holographic reconstruction of two-dimensional and / or three-dimensional scenes according to the prior art
  • Fig. 2 a scene to be reconstructed schematically to be reconstructed in a frustrum at a defined distance to a viewer and to a spatial
  • Fig. 3 a schematically illustrated scene to be reconstructed according to FIG. 1 at
  • FIG. 5 shows schematically the extension of sub-holograms of a preferably three-dimensional scene with an extended depth range in a real plane and in two virtual planes of the spatial light modulator device
  • Fig. 6 shows a graphic representation of an exemplary embodiment for the extension of sub-holograms for different spacings of the plane of the spatial light modulation device from a visibility region;
  • Fig. 7 a schematically illustrated as a head-mounted display display device, and
  • Fig. 8 the display device of Figure 6, wherein the image plane of the spatial
  • Light modulation device is shifted.
  • FIG. 1 a schematically and by way of example illustrates a display device for the holographic reconstruction of two-dimensional and / or three-dimensional scenes according to the prior art.
  • the display device has a light source LQ, a field lens FL and a spatial light modulation device 1.
  • the light source LQ and the field lens FL are arranged such that, unless a hologram is inscribed in the spatial Lichtmodulationseinnchtung 1, the outgoing light from the light source LQ by the field lens FL in a viewer plane 2 at a distance Z ⁇ m of the spatial light modulator 1 is focused. If a scene to be reconstructed (not shown here) is decomposed into object points in a suitable manner and if the object points are coded as sub-holograms in the spatial light modulation device 1 of the display device, then a visibility region 3 or a spatial visibility is formed at this distance Z m from the spatial light modulation device 1 created virtual viewer window.
  • the distance of the field lens FL from the spatial light modulation device 1 is small, that is substantially smaller than the distance Z
  • a field lens is shown with a fixed focal length.
  • the field lens can also be designed with a variable focal length or the display device can have variable focusing elements in addition to the field lens with which the distance Z
  • the display device may further comprise deflection elements which track the visibility region 3 of a laterally changed position of a viewer.
  • the display device illustrated in FIG. 1a is also referred to as a holographic direct-view display.
  • Fig. 1 b shows in comparison to Fig. 1 a, a display device also according to the prior art, which is referred to as a holographic projection display.
  • a plurality of optical elements L shown here as lenses, arranged in the display device such that initially, usually enlarged real image rB a spatial light modulation device 1 is generated.
  • a field lens FL which is arranged very close to the real image rB of the spatial light modulation device 1, light from a light source LQ is also focused into a viewer plane 2.
  • FIG. 1 c shows a display device in which a field lens FL also focuses light from a light source LQ into a viewer plane 2.
  • a spatial light modulation device 1 is in this embodiment of a display device in a position such that the distance between the spatial light modulation device 1 and the field lens FL is similar to the distance between the field lens FL and the observer plane. 2
  • the distance between the field lens FL and the observer plane 2 corresponds for example to the focal length of the field lens FL.
  • the distance between the spatial light modulator 1 and the field lens FL is about the same but smaller than the focal length of the field lens.
  • the decomposition of a scene to be reconstructed into object points and the coding of the object points as sub-holograms in the spatial light modulation device 1 of the display device can in turn then take place as if actually a physically existing spatial light modulation device 1 were located at the location of the virtual image vB of the spatial light modulation device 1 ,
  • Such a display device may be formed, for example, as a head-mounted display, in which a field lens small focal length and a small in size spatial light modulation device are close to the eye of a viewer - be worn for example in the form of glasses or as a hokular.
  • FIG. 2 schematically shows a spatial light modulation device 1 according to the present invention.
  • the spatial light modulation device 1 is provided in a holographic display device, wherein the structure of the holographic display device for the presentation of the method according to the invention is not essential.
  • the holographic display device as explained with reference to the preceding Figures 1 a to 1 c, at least one spatial light modulation device in conjunction with a lighting device (backlight) and other components, such as a field lens, deflectors, etc., on.
  • a lighting device backlight
  • other components such as a field lens, deflectors, etc.
  • the spatial light modulation device 1 also referred to as an SLM (spatial light modulator) according to FIGS. 2 to 6, can be designed as an amplitude + phase light modulation device, it being understood that other embodiments of the light modulation device are also possible.
  • the embodiment of the spatial light modulation device 1 is of subordinate importance and plays no essential role in the description of the method
  • a complex value of a hologram is not written in a single modulation element (pixel) of an amplitude + phase light modulation device, but instead by means of several modulation elements (pixels) of a phase modulation or amplitude modulating light modulation device, the terms pixel pixel and number are as previously mentioned Modulation elements (pixels) to be understood so that a modulation element and a pixel pitch each for a plurality of modulation elements (pixels) of such a light modulation device, in which a total of a complex value is written.
  • the spatial light modulation device 1 can be embodied as an amplitude + phase light modulation device in the form of a sandwich arrangement.
  • the Amplitude light modulation means then has, for example, a small distance (typically ⁇ 2 mm) from the phase light modulation means.
  • the term "real plane of the spatial light modulation device" is preferably used such that a middle plane in the sandwich arrangement is selected.
  • a visibility level 3 is generated in a viewer plane 2, by means of which a viewer has a reconstructed two-dimensional and / or three-dimensional view Scene can observe, if the viewer is in the viewer level 2 and at least one eye 5 approximately coincident with the location of the visibility area 3.
  • the visibility area 3 can be designed as a virtual viewer window. For purposes of illustration, in Figures 2 and 3, the eye 5 of the observer behind the visibility area 3 has been shown.
  • a scene 4 to be reconstructed shown here only schematically by dashed lines and represented by two object points P1 and P2, is to be displayed in a frustrum 6 (truncated cone-shaped cone which extends from the visibility region 3 to the spatial light modulation device 1 and beyond).
  • the scene 4 to be reconstructed has a defined position and a defined distance to a viewer.
  • the spatial light modulation device 1 shown in FIG. 2 is slightly larger in size and has a greater distance from the visibility region 3 than in FIG. 3. By forming rays starting from the edges of the visibility region 3 through an object point to be reconstructed.
  • P2 to the plane of the spatial light modulation device 1, a region, referring to P2, a region S2, are generated on the light modulation device 1, which is referred to as sub-hologram.
  • the corresponding object point is defined, so that only a defined region S2 must be calculated for this object point, which is then coded into the spatial light modulation device 1.
  • the object point P1 which is defined by an area S1 designated as a sub-hologram on the spatial light modulation device 1.
  • small sub-holograms S1 and S2 are formed in absolute terms on the spatial light modulation device. Because of the comparatively large pixel pitch of the spatial light modulation device 1 presented in this exemplary embodiment, these sub-holograms only extend over a few modulation elements 7, also referred to as pixels (as already explained above), of the spatial light modulation device 1. This is particularly advantageous in terms of the computational outlay for calculating sub-holograms and for the complex-valued addition of the sub-holograms in the visibility range, as will be explained below.
  • FIG. 3 shows a spatial light modulation device 10 which is smaller in size and has smaller modulation elements 70 in size, the spatial light modulation device 10 being arranged closer to the visibility region 3 with respect to the distance.
  • sub-holograms S10 and S20 arising in this exemplary embodiment with respect to the spatial light modulator device 10 become larger in absolute terms. Since the spatial light modulation device 10 also has smaller modulation elements 70 (pixels) and thus a smaller pixel pitch than the spatial light modulation device 10 according to FIG. 1, the sub-holograms S10 and S20 here extend over a significantly larger number of modulation elements 70 Calculation of the total hologram from the scene 4 to be reconstructed would therefore be greater in this case.
  • the method according to the invention introduces a virtual plane of the spatial light modulation device located at a real location in order to minimize the computational effort.
  • a virtual plane of the spatial light modulation device located at a real location in order to minimize the computational effort.
  • a subhologram is first calculated in such a way as if the virtual plane of the spatial light modulation device according to FIGS. 2 and 3 were in a real plane of the spatial light modulation device 1 and FIG 10 and is calculated from the real plane of the spatial light modulator. Subsequently, by means of two integral transformations, for example by means of two Fresnel transformations, this sub-hologram is transformed into the real plane of the spatial light modulation device, ie into the actually existing plane of the spatial light modulation device, or depending on the design of the holographic display device in the image of the spatial light modulation device, for example a screen.
  • FIGS. 2 and 3 the procedure according to the invention would now proceed as follows.
  • a configuration of the display device is as shown in FIG. 3, in which the spatial light modulation device 10 has a defined number N of modulation elements 70 at a viewer distance D.
  • a position relative to the scene 4 to be reconstructed is selected for the virtual plane of the spatial light modulation device 1, 10, which lies within the scene 4 to be reconstructed, so that a part of the object points P1 to P n seen by a viewer in the observer plane 2 seen in the propagation direction of the light emitted by a lighting device of the display device before and a part of the object points P1 to P n behind the virtual plane of the spatial light modulation device 1, 10, wherein the observer plane nearest the object points 2 not more than half the virtual viewer distance before the virtual plane of the spatial light modulation device 1, 10 should lie.
  • the method is not limited to a particular determination of the position of the virtual plane of the spatial light modulation device.
  • the position of the virtual plane of the spatial light modulation device can also be dynamically shifted dynamically with the content of the scene to be displayed in order, for example, to optimally calculate scenes with changing depth range.
  • the virtual size of the modulation elements 7, 70 of the spatial light modulation device 1, 10 results, according to the set of rays, from the ratio of the viewer distances of the virtual plane and the real plane of the spatial plane Light modulator multiplied by the pixel pitch of the spatial light modulator.
  • a sub-hologram or a hologram is calculated in such a way as according to the prior art, for example according to WO 2008/025839 A1, if a spatial light modulation device were actually located in this plane. This can be done in such a way that for each object point P1 to Pn a sub-hologram in the form of a lens function is determined, and the individual sub-holograms are then added together coherently.
  • a one-time computational (two-dimensional) integral transformation for example a Fresnel transformation
  • a Fresnel transformation of the overall hologram, which corresponds to the optical light propagation from the virtual plane of the spatial light modulation device to the visibility region 3.
  • another computational (two-dimensional) integral transformation for example a Fresnel transformation which corresponds to the propagation of light from the visibility region 3 back to the real plane of the spatial light propagation device 1, 10.
  • FIGS. 2 and 3 require two additional integral transformations.
  • the savings in calculating and adding up the individual sub-holograms may be more significant than the two integral transforms that are performed only once for the entire hologram.
  • FIGS. 4 to 6 show further variants of the method according to the invention.
  • FIG. 4 schematically shows the extent of sub-holograms of a preferably three-dimensional scene 4 to be illustrated in analogy to a single parallax coding in a real plane 100 of the spatial light modulation device 100 and a virtual plane 100 'of the spatial light modulation device 100.
  • the depth range of the scene to be reconstructed is 4 schematically through the oval boundary shown.
  • the scene to be reconstructed 4 is also divided here into object points P 1 to P n, where in Fig. 4 only one object point P is shown. (Single-parallax coding) n for the object points P 1 to P, for example, sub-holograms calculated in analogy to a Einzelparallaxe encoding.
  • the one-dimensional sub-hologram S1 calculated in the virtual plane 100 'of the spatial light modulation device 100 is subsequently transformed into the real-world plane 100 of the spatial light modulation device 100 by means of an integral transformation, for example by means of a Fresnel transformation or a Fourier transformation, into the visibility region 3 and from there There it is like a sub-hologram extended in two dimensions.
  • an integral transformation for example by means of a Fresnel transformation or a Fourier transformation
  • the focal lengths of the lens function of the sub-hologram on the real plane 100 of the spatial light modulator 100 are not equal in both directions (orthogonal to each other).
  • the focal point (focus) of the lens function is in the plane of the object point, in the direction perpendicular thereto the focal point of the lens function lies on the virtual plane 100 'of the spatial light modulation device 100.
  • This variant of the method can be used particularly advantageously for a spatial light modulation device which is located at a smaller distance from the viewer plane 2 and in which the virtual plane of the spatial light modulation device has a greater distance from the viewer plane 2 than the real plane of the spatial light modulation device according to FIG. 4th
  • FIG. 5 schematically shows the extent of sub-holograms of a three-dimensional scene 4, preferably to be displayed, with an extended depth range in a real plane 100 of the spatial light modulation device 100 and in two virtual planes 100 'and 100 "of the spatial light modulation device 100.
  • FIG. 5 schematically shows the extent of sub-holograms S1, S2 and S3 of a scene 4 to be reconstructed to be reconstructed with an extended depth range, which is represented by the oval boundary of the scene 4 to be reconstructed, in a real plane 100 of the spatial light modulation device 100 and in two virtual planes 100 'and 100 "of the spatial light modulation device 100.
  • the scene 4 to be reconstructed is divided into three depth-domain sections TA1, TA2 and TA3.
  • Each depth area section TA1, TA2 and TA3 is assigned to one of the two virtual planes 100 ', 100 "of the spatial light modulation device 100 or the real plane 100 of the spatial light modulation device 100.
  • the depth region section TA1 of the virtual plane 100 'the spatial Lichtmodulationseinnchtung 100, the depth area section TA2 of the virtual plane 100 "of the spatial light modulation device 100 and the depth range section TA3 of the real level 100 of the spatial light modulation device 100 is assigned.
  • all object points lying in the depth area portion TA1 are associated with the virtual plane 100 'of the spatial light modulator 100, and by means of which the sub-holograms for the respective object points in that depth area portion TA1 are calculated.
  • All object points which lie in the depth area section TA2, such as the object point P2 are assigned to the virtual plane 100 "of the spatial light modulation device 100, which differs from the virtual plane 100 'of the spatial light modulation device 100 in its position or in place and is here more closely spaced at the observer plane 3.
  • the depth region section TA3 are then all remaining object points, such as the object point P3, associated with these object points of the real level 100 of the spatial light modulation device 100.
  • the individual sub-holograms such as S1, S2 and S3 to S n , to the respective object points, such as P1, P2 and P3 to P n , calculated.
  • the sub-holograms S1 to S n can be calculated as single-parallax sub-holograms or else as full parallax sub-holograms.
  • the division into virtual planes of the spatial light modulation device and the subdivision of the scene 4 to be reconstructed into a plurality of depth region sections TA1, TA2 and TA3 is performed such that a viewer the reconstructed two-dimensional and / or three-dimensional scene with little or no loss of resolution able to see.
  • the division into virtual levels of the spatial light modulation device and the subdivision of the depth range of the scene 4 to be reconstructed into sections is made such that a maximum size of the sub-holograms is not exceeded, as already explained in detail before the description of the figures.
  • the calculated sub-holograms S1, S2 and S3 or S1 to S n of the depth-domain sections TA1, TA2 and TA3 are then transformed into the observer plane 2 or into the visibility region 3 and summed up there. Thereafter, the accumulated sub-holograms and the total hologram are transformed into the real plane of the spatial light modulation device 100.
  • the sub-holograms S1 and S2 for the corresponding object points P1 and P2 of the scene 4 to be reconstructed in the two virtual planes 100 'and 100 "of the spatial light modulation device 100 are smaller in size than they are directly in the real plane 100 of the spatial light modulation device 100 would have been calculated.
  • FIG. 6 shows in a graphical representation a numerical example for the extension of sub-holograms for different distances of the (virtual and real) plane 100, 100 ', 100 "of the spatial light modulation device 100 from the visibility region 3 in the observer plane 2.
  • the abscissa of the illustrated diagram is the object point distance from the visibility region and the ordinate is the size of the sub-hologram or the number of the modulation elements (pixels) described by the sub-hologram, so that the sizes of the sub-holograms (in modulation elements (pixels) per sub-hologram) as a function of the object point distance from the visibility region for different spacings of the spatial light modulation device from the visibility region
  • the example shown in the diagram is intended to be exemplary only.
  • An object point of a scene to be reconstructed which is 2 m away from a viewer, for example, generates a sub-hologram with a size of about 200 ⁇ 1 modulation element (pixels) in a single parallax coding (single parallax coding) or a sub-hologram with one size of about 200 x 200 modulation elements in full parallax encoding on a spatial light modulator (SLM) located 0.7 m from the visibility plane in the observer plane.
  • SLM spatial light modulator
  • the sub-hologram of the same object point in expansion is only a few modulation elements (pixels) large, for example, ⁇ 10x1 modulation elements in a single parallax coding or ⁇ 10x10 modulation elements in a full parallax coding.
  • pixels modulation elements
  • the dashed lines in the diagram according to FIG. 6 schematically show a subdivision of a scene to be reconstructed into four depth range sections.
  • the real plane of the spatial light modulation device may be positioned at a distance of 0.7 m to the visibility region and the virtual planes of the spatial light modulation device at a distance to the visibility region of 1 m, 2.2 m and at infinity.
  • the real level of the spatial light modulation device can also be at a distance of 2.2 m and a virtual plane of the spatial light modulation device at a distance of 0.7 m from the visibility region.
  • This subdivision of the depth range into depth range sections ensures that all sub-holograms for object points at a distance> about 62 cm to infinity from the visibility range remain smaller than 70 ⁇ 1 modulation elements for a single parallax coding or 70 ⁇ 70 modulation elements for a full parallax coding.
  • the sub-holograms would achieve an expansion of up to 300x300 modulation elements in full parax coding, which would require increased computational effort.
  • FIG. 7 shows a display device for the holographic reconstruction of two-dimensional and / or three-dimensional scenes, as can be used, for example, as a head-mounted display (HMD) or hocular.
  • HMD head-mounted display
  • a magnified image of a spatial light modulation device is usually generated, which arises virtually.
  • the physical, ie real, level of the spatial light modulation device in the sense of the invention can also be understood as the image plane of the spatial light modulation device.
  • a light source and a collimation element, here in the form of a lens, as shown for example in Fig. 1 c, for illuminating a spatial light modulator means 1 10 are not shown in Fig. 7.
  • the spatial Light modulation device 1 10 is here arranged at a position in the display device such that the distance between the spatial light modulation device 1 10 and a field lens FL is similar to the distance between the field lens FL and a viewer plane 2.
  • the distance between the field lens FL and the observer plane 2 of the focal length of the field lens FL and the distance between the spatial light modulator 1 10 and the field lens FL is slightly smaller than the focal length of the field lens FL, so from the visibility area 3 an enlarged virtual image of the spatial light modulator 1 10 can be seen , The more the distance between the spatial light modulator 1 10 and the field lens FL would approach the focal length of the field lens FL, the farther away and larger the virtual image would be.
  • other arrangements are possible.
  • the field lens FL which is simplified here as a single lens, may also be a composite system of several lenses.
  • the information on distances of the field lens FL to the visibility region 3 and to the spatial light modulation device 110 would apply, for example, to the main planes of the lens system.
  • light beams are shown which emanate from a modulation element (pixel) of the spatial light modulation device 110 and are directed into the center and to the edges of a viewer window 3.
  • the light rays are thereby deflected by the field lens FL as if they come from an enlarged image 1 1 OB the spatial light modulation device 1 10 at a greater distance or are emitted.
  • an imaging system or a focusing AS is provided, which is advantageously designed here with variable focal length.
  • the focal length of the imaging system AS can thus be controllably varied.
  • the imaging system AS can also be arranged at another suitable position in the display device.
  • variable focal length imaging system AS can also be part of the field lens FL or the field lens FL itself can be embodied as an imaging system or focusing system AS with a variable focal length.
  • the variable focal length imaging system or focusing system AS may also be formed as a multi-lens system in which the pitch of the individual lenses relative to each other can be varied, thereby changing the focal length of the overall system.
  • FIG. 7 shows a three-dimensional scene 4 to be reconstructed, which is shown only by way of example and which, in this exemplary embodiment, is located at a relatively large distance behind an image 1 1 OB the spatial light modulation device 1 10 is located.
  • the image of the spatial light modulation device 110 is located at a distance of 0.7 m from the visibility region 3.
  • the three-dimensional scene 4 is, however, further away than 2.5 m from the visibility region 3.
  • the scene 4 to be reconstructed is decomposed into individual object points P1-Pn for the calculation of holograms to be coded into the spatial light modulation device 110.
  • a virtual plane 1 10 'of the spatial light modulation device 1 10 is determined in dependence on the content of the scene 4 to be reconstructed and then set in the display device at a position such that a size which is favorable for the calculation the sub-holograms is created or achieved.
  • the virtual level 1 10 ' may be set to minimize either the maximum or the average size of the sub-holograms.
  • the virtual plane 1 10 ' is arranged or fixed within the scene 4 to be reconstructed in such a way that a part of the object points P1-Pn lies ahead of and a part of the object points P1-Pn lies behind the virtual plane 1 10'.
  • Fig. 7 shows the imaging system AS variable focal length in the non-driven or variable or switched off mode.
  • Fig. 8 the display device of FIG. 7 is shown, in which the imaging system AS variable focal length is controlled such that the image plane 1 1 OB of the spatial light modulation device 1 10 was shifted so that this image plane 1 1 OB with the virtual Level 1 10 'of the spatial light modulation device 1 10 coincides.
  • this plane 1 1 OB or 1 10 'of the spatial light modulator 1 10 then the sub-holograms of the individual object points P1 - Pn are calculated, summed and encoded in the spatial light modulator 1 10.
  • a virtual plane of the spatial light modulator it is also possible to create and specify not only a virtual plane of the spatial light modulator, but a plurality of them, ie, at least two virtual planes.
  • the image of the spatial light modulation device can then be moved into a suitable virtual plane, wherein the calculation and coding of the sub-holograms in the spatial light modulation device can be made according to one of the many previously described inventive methods.
  • the shift of the image 1 1 OB of the spatial light modulation device 1 10 to the respective virtual plane 1 10 'of the spatial light modulation device 1 10 to the respective depth region of the scene be adapted to the displayed frame.
  • the use of virtual levels of the spatial light modulator and proper positioning of these virtual levels reduces the overall computational burden.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Holo Graphy (AREA)

Abstract

Die Erfindung betrifft Verfahren zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen in einer Anzeigevorrichtung, wobei eine zu rekonstruierende Szene (4) in Objektpunkte (P, P1 – Pn) zerlegt wird und die Objektpunkte (P, P1 – Pn) als Subhologramme (S1 - Sn) in wenigstens eine räumliche Lichtmodulationseinrichtung (1, 10, 100) der Anzeigevorrichtung kodiert werden. Eine rekonstruierte Szene wird von einem Sichtbarkeitsbereich (3) aus betrachtet. Wenigstens eine virtuelle Ebene (100', 100'') der wenigstens einen räumlichen Lichtmodulationseinrichtung (1, 10, 100) wird ausgehend von einer realen Ebene (100) der räumlichen Lichtmodulationseinrichtung (1, 10, 100) festgelegt. Eine Berechnung von Subhologrammen (S1 - Sn) wird in der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung durchgeführt.

Description

Verfahren zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen
Die Erfindung betrifft ein Verfahren zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen in einer Anzeigevorrichtung, wobei die zu rekonstruierende Szene in Objektpunkte zerlegt wird und die Objektpunkte als Subhologramme in wenigstens eine räumliche Lichtmodulationseinrichtung der Anzeigevorrichtung kodiert werden, wobei eine rekonstruierte Szene von einem Sichtbarkeitsbereich aus betrachtet wird.
Die Erfindung betrifft außerdem eine Anzeigevorrichtung, insbesondere eine holographische Anzeigevorrichtung zur Darstellung von zweidimensionalen und/oder dreidimensionalen Szenen, aufweisend eine räumliche Lichtmodulationseinrichtung, wobei die Lichtmodulationseinrichtung geeignet ist, das Verfahren durchzuführen.
Ein Verfahren, in der die Berechnung von Hologrammen für ein holographisches Display bzw. eine holographische Anzeigevorrichtung beschrieben ist, ist beispielsweise aus der WO 2006/066919 A1 bekannt, deren Offenbarungsgehalt vollumfänglich hier einbezogen sein soll. In diesem Verfahren wird für die Berechnung von Hologrammen ein virtuelles Betrachterfenster in einer Betrachterebene einbezogen, durch das ein Betrachter eine rekonstruierte Szene beobachten kann, wenn das virtuelle Betrachterfenster mit dem Ort der Augenpupille des Betrachters zusammenfällt. Im Unterschied zur herkömmlichen Holographie, bei der die Rekonstruktion von vorzugsweise dreidimensionalen (3D) Szenen in einem Sichtbarkeitsbereich erfolgt, der mindestens die beiden Augen eines Betrachters umfasst, wird bei dieser Technik das Wellenfeld, das die Information über die rekonstruierte Szene enthält, auf die Augenpupillen eines Betrachters in einer Betrachterebene begrenzt. Der Betrachter sieht dann die rekonstruierte Szene in einem Rekonstruktionsraum, der durch das bzw. die Betrachterfenster und die Anzeigevorrichtung aufgespannt wird und der sich auch hinter die Anzeigevorrichtung (wird häufig auch als Display bezeichnet) erstrecken kann. Dieses Verfahren ist beispielsweise in der US 2008/252950 A1 offenbart und beschrieben, deren Offenbarungsgehalt hier ebenfalls vollumfänglich einbezogen sein soll.
Das Verfahren ermöglicht die holographische Rekonstruktion wesentlich größerer dreidimensionaler Szenen, die in Form von Hologrammen in einem Lichtmodulator (SLM) einer Anzeigevorrichtung (Display) kodiert sind, wobei an die Auflösung des Lichtmodulators wesentlich geringere Anforderungen gestellt werden als bei der herkömmlichen Holographie. Ein weiterer Vorteil besteht darin, dass der Aufwand zur Berechnung des entsprechenden Hologramms ebenfalls geringer ist. Das ergibt sich unter anderem daraus, dass die Information über einen Objektpunkt der dreidimensionalen Szene nur in einem Bereich der Anzeigevorrichtung kodiert werden muss, der sich aus der Projektion des Betrachterfensters über einen darzustellenden Objektpunkt auf die Anzeigevorrichtung bzw. den Lichtmodulator ergibt und der als Subhologramm bezeichnet wird.
Ein Verfahren zur Berechnung derartiger betrachterfensterbezogener Hologramme ist in der US 7,969,633 dargestellt, deren Offenbarungsgehalt hier ebenfalls vollumfänglich einbezogen sein soll. Das Verfahren erfolgt im Wesentlichen derart, dass eine dreidimensionale Szene in Schnittebenen mit hinreichend geringen Abständen zerlegt wird, in denen die Objektpunkte ebenfalls mit hinreichender Auflösung angeordnet sind. Die Schnittebenen werden dann mit einer ersten Integraltransformation in ein virtuelles Betrachterfenster in einer Referenzebene transformiert und im Bereich des virtuellen Betrachterfensters aufsummiert. Dieses im Allgemeinen komplexwertige Wellenfeld wird anschließend mit einer zweiten Integraltransformation in die Ebene des Lichtmodulators transformiert und in Form eines im Allgemeinen ebenfalls komplexwertigen Hologramms darin kodiert. Der Vorteil dieses Verfahrens besteht darin, dass nur die Information im Hologramm kodiert wird, die aus dem Bereich des Betrachterfensters stammt und bei der Rekonstruktion des Hologramms auch nur in dieses gelangen muss.
Die Berechnung und Kodierung der betrachterfensterbezogenen Hologramme kann aber noch auf eine weitere Weise verfolgen. Bei dem folgenden Verfahren wird die dreidimensionale Szene ebenfalls rechnerisch in Objektpunkte zerlegt. Für die einzelnen Objektpunkte werden dann Subhologramme in Form von Linsenfunktionen berechnet und direkt auf dem Lichtmodulator dargestellt und aufaddiert. Die Größe und Lage der Subhologramme auf dem Lichtmodulator ergibt sich dabei aus einer Projektion des Bertachterfensters über den betreffenden Objektpunkt hin auf den Lichtmodulator. Dieses Verfahren ist beispielsweise in der WO 2008/025839 A1 beschrieben, deren Offenbarungsgehalt ebenfalls vollumfänglich hier einbezogen sein soll.
Je nach Zahl der Schnittebenen und Zahl der Objektpunkte variiert der Rechenaufwand für das eine oder das andere oben aufgeführte Verfahren.
Für das Verfahren nach der US 7,969,633 steigt der Rechenaufwand näherungsweise linear mit der Anzahl der verwendeten Schnittebenen an. Die Wahl der Schnittebenen ist bis zu einem gewissen Grade willkürlich. Jedoch ist es in der Regel erwünscht, dass ein Betrachter im Betrachterfenster einen kontinuierlichen Tiefeneindruck der vorzugsweise dreidimensionalen Szene erhält. Die Abstände der Schnittebenen sind deshalb so klein zu wählen, dass das Auge den Unterschied zwischen benachbarten Ebenen nicht auflösen kann. Dies erfordert für eine gegebene dreidimensionale Szene eine Mindestanzahl von Schnittebenen.
Für das Verfahren nach der WO 2008/025839 A1 steigt der Rechenaufwand mit der Zahl der Objektpunkte, deren Dichte aber ebenfalls so zu wählen ist, dass ein kontinuierlicher Eindruck der rekonstruierten Szene entsteht. Insbesondere für eine dreidimensionale Szene, die sich über einen größeren Tiefenbereich erstreckt und nach dem Verfahren gemäß der US 7,969,633 viele Schnittebenen erfordern würde, ist das Verfahren gemäß der WO 2008/025839 A1 in Bezug auf den Rechenaufwand günstiger. Für eine große Zahl von Objektpunkten, die nur über sehr wenige Schnittebenen verteilt sind, kann hingegen das Verfahren gemäß der US 7,969,633 vorteilhaft sein.
Für das Verfahren gemäß der WO 2008/025839 A1 hängt der Rechenaufwand aber außerdem stark von der Lage der dreidimensionalen Szene relativ zur Position des Lichtmodulators und des Betrachterfensters ab, da dies Einfluss insbesondere auf die Größe der Subhologramme für die einzelnen Objektpunkte hat.
Es wurden auch, zum Beispiel in der WO 2006/1 19760 A2, bereits holographische Displays (Anzeigevorrichtungen) mit einem virtuellen Betrachterfenster beschrieben, bei denen ein Lichtmodulator nicht direkt vom Betrachter gesehen wird sondern stattdessen die vergrößerte Abbildung des Lichtmodulators auf einem Schirm. In diesem Fall hängt der Rechenaufwand zur Berechnung des Hologramms von der Lage der dreidimensionalen Szene relativ zum Bild des Lichtmodulators ab. Auch in einem holographischen Head Mounted Display (Holo-HMD) würde der Betrachter eine vergrößerte Abbildung eines Lichtmodulators sehen, und der Rechenaufwand bezieht sich auch in diesem Fall auf die Lage der dreidimensionalen Szene relativ zum Bild des Lichtmodulators.
Head-Mounted Displays (HMD) sind Display-Einrichtungen, die beispielsweise am Kopf eines Betrachters/Benutzers ähnlich einer Brille oder eines Helms (Helmet Mounted Display) getragen werden. Sie können für ein Betrachterauge (monokulares HMD) oder für beide Betrachteraugen (binokulares HMD) ausgelegt sein. In ähnlicher Weise können auch ortsfeste oder transportable Displayeinrichtungen ausgelegt sein, bei denen der Betrachter über optische Vergrößerungsmittel, welche sich in Augennähe befinden (Okular), die vergrößerte Darstellung mindestens eines Display bzw. die vergrößerte Rekonstruktion einer durch eine Displayeinrichtung rekonstruierten dreidimensionalen Szene betrachten kann. Ein solches als elektronischer Guckkasten ausgebildetes holographisches Anzeigegerät soll im Folgenden als Hokular bezeichnet werden.
Im Allgemeinen, wenn beispielsweise eine aus nur einem einzelnen Objektpunkt bestehende dreidimensionale Szene vollständig rekonstruiert werden soll, müssten in den Lichtmodulator am Ort des Subhologramms für diesen Objektpunkt komplexe Werte eingeschrieben werden. Der Betrag des komplexen Wertes, also die Amplitude, ist in einer bevorzugten Ausführungsform über die Ausdehnung des Subhologramms ungefähr konstant und hängt in seiner Höhe von der axialen Entfernung des Objektpunktes zum Lichtmodulator bzw. zum Bildschirm und von der Intensität des Objektpunktes ab. Das im Folgenden Beschriebene ist aber nicht auf den Fall einer über die Ausdehnung des Subhologramms konstanten Amplitude beschränkt, sondern bezieht auch andere Möglichkeiten mit ein. Die Phasenverteilung der komplexen Werte im Bereich des Subhologramms entspricht ungefähr der Funktion einer Linse, deren Brennweite auch von der Kombination mit anderen in der Anzeigevorrichtung enthaltenen Fokussierelementen, wie beispielsweise einer Feldlinse abhängen kann. Die Brennweite der Linsenfunktion des Subhologramms wird bevorzugt derart gewählt, dass ein Fokus (Brennpunkt) in dem jeweiligen Objektpunkt liegt. Das im Folgenden Beschriebene soll aber nicht auf bestimmte Linsenfunktionen beschränkt sein, sondern kann auch andere Phasenwerte im Subhologramm umfassen. Außerhalb des Subhologramms wäre für diesen Objektpunkt im Lichtmodulator die Amplitude 0 (Null) einzuschreiben. Nur die Pixel des Lichtmodulators innerhalb des Subhologramms würden dadurch mit ihrer vollen Transmission zur Rekonstruktion des einzelnen Objektpunkts beitragen. Ein rechenaufwendiger Schritt bei der Hologrammberechnung ist die Umrechung der Phase einer Linsenfunktion eines Subhologramms in Real- und Imaginärteil zum Zweck des Aufsummierens mehrerer Subhologramme. Bei im Mittel größeren Subhologrammen muss dieser Rechenschritt häufiger durchgeführt werden. Eine Wiedergabe derselben dreidimensionalen Szene könnte prinzipiell in holographischen Anzeigevorrichtungen mit unterschiedlichen Parametern wie Größe der Anzeigevorrichtung oder Abstand der Anzeigevorrichtung zum Betrachter erfolgen.
Mit einem Lichtmodulator kleiner Größe mit kleinen Modulationselementen (Pixeln) und mit einem geringen Abstand zu einem Betrachter lässt sich in der Größe ungefähr das gleiche Betrachterfenster bzw. der gleiche Sichtbarkeitsbereich und in der Größe das gleiche Frustrum (Kegel, der sich von den Rändern des Betrachterfensters/Sichtbarkeitsbereichs hin zu den Rändern des Lichtmodulators und dahinter erstreckt) erzeugen wie durch einen Lichtmodulator größerer Größe mit der gleichen Anzahl größerer Modulationselemente in größerer Entfernung zu einem Betrachter. Beispielsweise wäre ein 20 Zoll Display (Anzeigevorrichtung) mit einem Abstand von 2 Metern zu einem Betrachter und einem Pixelpitch (Pitch des Modulationselements) von 90 μηη bezüglich der Größe des Betrachterfensters/Sichtbarkeitsbereichs und dem somit erzeugten Frustrum ungefähr gleichwertig zu einem 4 Zoll Display (Anzeigevorrichtung) mit 40 cm Abstand zu einem Betrachter und einem Pixelpitch von 18 μηη. Die maximal mögliche Größe xvw eines Sichtbarkeitsbereichs/virtuellen Betrachterfensters ergibt sich zum Beispiel für blaues Licht der Wellenlänge λ= 475 nm in beiden Fällen (20 Zoll Display und 4 Zoll Display) gemäß der Formel
Figure imgf000007_0001
mit zim dem Abstand des Lichtmodulators zum Sichtbarkeitsbereich/virtuellen Betrachterfenster und pim, dem Pixelpitch zu ungefähr 10,5 mm. Dies gilt wahlweise horizontal oder vertikal, da die Größe des Sichtbarkeitsbereichs im Allgemeinen zweidimensional ist.
Die Größe des Sichtbarkeitsbereichs bzw. des virtuellen Betrachterfensters kann auch kleiner gewählt werden. Im allgemeinen Fall wäre
Figure imgf000007_0002
mit einem Faktor a <=1 . In den nachfolgend genannten Gleichungen würde in diesem Fall der Faktor a zusätzlich auftreten. Zur besseren Übersicht wird der Faktor a in der folgenden Darstellung weggelassen. Die nachfolgende Beschreibung ist aber auch auf Fälle mit a < 1 übertragbar. In der Regel wird aber für eine holographische Anzeigeeinrichtung mit einer Detektion der Augenposition wenigstens eines Betrachters und Nachführung des Sichtbarkeitsbereichs/virtuellen Betrachterfensters zur Augenposition zum Ausgleich von Ungenauigkeiten der Augenpositionserfassung und zeitlichen Verzögerungen in der Nachführung des Sichtbarkeitsbereichs/ virtuellen Betrachterfensters eine Größe des Sichtbarkeitsbereichs/virtuellen Betrachterfensters von 10 mm oder mehr benötigt.
Der Abstand der Anzeigevorrichtung zu einem Betrachter beeinflusst jedoch die Berechnung des in den Lichtmodulator einzukodierenden Hologramms.
Gemäß der WO 2008/025839 A1 würde die Größe eines Subhologramms in einer bevorzugten Ausführungsform mittels des Strahlensatzes bestimmt.
Ist Zpoint der Abstand eines Objektpunktes zum Betrachterfenster/ Sichtbarkeitsbereich, und zim wie bereits beschrieben der Abstand des Lichtmodulators zum Betrachterfenster/Sichtbarkeitsbereich, so würde sich die Größe des Subhologramms in Form einer räumlichen Ausdehnung xsh ergeben zu
Xsh I Xvw ( Z|m— Zpoint)/ Zpoint | In den Figuren 1 und 2 ist schematisch eine dreidimensionale Szene, die hier durch nur zwei Objektpunkte angedeutet ist, in einem Frustrum in fester Lage und Abstand zu einem Betrachter dargestellt. In den Figuren 1 und 2 ist schematisch nur der Lichtmodulator bzw. die Lichtmodulationseinrichtung dargestellt. Die holographische Anzeigevorrichtung weist jedoch im Allgemeinen weitere Komponenten wie beispielsweise eine Beleuchtungseinrichtung (Backlight) und eine Feldlinse auf.
In der Figur 1 weist die Lichtmodulationseinrichtung (SLM) einen großen Abstand von einem Betrachter auf. Wie ersichtlich, entstehen in diesem Beispiel absolut gesehen in der Größe kleine Subhologramme. Aufgrund des vergleichsweise großen Pixelpitch der Lichtmodulationseinrichtung erstrecken sich diese Subhologramme daher nur über wenige Modulationseinrichtung (Pixel) der Lichtmodulationseinrichtung. Dies ist besonders vorteilhaft hinsichtlich des Rechenaufwands zur Berechnung und zur kohärenten Addition der Subhologramme. In Figur 2 ist bezüglich Figur 1 eine in der Größe kleinere Anzeigevorrichtung mit kleineren Modulationselementen dargestellt, die sich näher am Auge eines Betrachters befindet. Für die gleichen Objektpunkte werden in diesem Beispiel die Subhologramme absolut gesehen in ihrer Größe größer. Da die Lichtmodulationseinrichtung hier zudem kleinere Modulationselemente aufweist als in Figur 1 , erstrecken sich die Subhologramme hier deutlich über eine größere Anzahl von Modulationselementen als in Figur 1 . Der Aufwand für die Berechnung des Hologramms aus der vorzugsweise dreidimensionalen Szene ist daher in Figur 2 größer.
In praktischen Fällen ist aber in der Regel der Abstand einer Anzeigevorrichtung zum Betrachter von der Anwendung abhängig und nicht frei wählbar. Ein Tablet oder ein Notebook-Display würden beispielsweise in der Regel einen geringeren Abstand zu einem Betrachter aufweisen als ein Fernseher.
Es ist daher Aufgabe der vorliegenden Erfindung, ein Verfahren zu schaffen, mit welchem der Rechenaufwand zur Berechnung von Hologrammen einer zweidimensionalen und/oder dreidimensionalen Szene reduziert werden kann. Insbesondere soll der Rechenaufwand für verschiedene Positionen der Lichtmodulationseinrichtung zu einem Betrachter und zur zu rekonstruierenden Szene reduziert werden. Dies soll insbesondere ohne oder nur mit sehr geringen Einschränkungen in der sichtbaren lateralen Auflösung und in der sichtbaren Tiefenauflösung der rekonstruierten Szene erreicht werden.
Diese Aufgabe wird erfindungsgemäß durch ein Verfahren nach dem Anspruch 1 gelöst. Das erfindungsgemäße Verfahren dient zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen in einer Anzeigevorrichtung (Display). Die zu rekonstruierende Szene wird in Objektpunkte zerlegt, wobei die Objektpunkte als Subhologramme in wenigstens eine räumliche Lichtmodulationseinrichtung der Anzeigevorrichtung kodiert werden. Die rekonstruierte Szene kann dann von einem Sichtbarkeitsbereich aus betrachtet werden. Wenigstens eine virtuelle Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung wird ausgehend von einer realen Ebene der räumlichen Lichtmodulationseinrichtung festgelegt. Anschließend wird eine Berechnung von Subhologrammen in der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung durchgeführt.
Bezogen auf die vorliegende Erfindung soll die Bezeichnung „Ebene der räumlichen Lichtmodulationseinrichtung" oder„Position der räumlichen Lichtmodulationseinrichtung" so allgemein verstanden werden, dass die Ebene oder Position der physisch vorhandenen räumlichen Lichtmodulationseinrichtung in einem Direktsichtdisplay oder auch die Ebene oder Position eines für einen Betrachter sichtbaren reellen oder virtuellen Bildes der räumlichen Lichtmodulationseinrichtung in einem Projektionsdisplay, einem Head Mounted Display (HMD) oder einem Hokular umfassen kann bzw. soll. Im Gegensatz dazu wird die Bezeichnung „virtuelle Ebene der räumlichen Lichtmodulationseinrichtung" so verwendet, dass sie nicht mit der Ebene oder Position einer physisch vorhandenen räumlichen Lichtmodulationseinrichtung oder eines für einen Betrachter sichtbaren Bildes einer räumlichen Lichtmodulationseinrichtung übereinstimmen muss. Mit anderen Worten, unter der Bezeichnung „virtuelle Ebene der räumlichen Lichtmodulationseinrichtung" soll eine physisch nicht vorhandene bzw. eine gedachte oder scheinbare Ebene der räumlichen Lichtmodulationseinrichtung oder virtuell an einen vorbestimmten Ort verschobene Ebene der räumlichen Lichtmodulationseinrichtung verstanden werden.
Erfindungsgemäß wird ein Verfahren vorgeschlagen, bei dem eine Berechnung von Subhologrammen in einer virtuellen, physisch nicht vorhandenen bzw. gedachten Ebene einer räumlichen Lichtmodulationseinrichtung in Analogie zu einer Einzelparallaxe-Kodierung (single-parallax Kodierung) oder auch zu einer Vollparallaxe-Kodierung (full-parallax Kodierung) durchgeführt wird. Anschließend könnte jeweils eine Integraltransformation in einen Sichtbarkeitsbereich und von diesem aus in die reale Ebene der räumlichen Lichtmodulationseinrichtung erfolgen.
Dabei werden folgende Ausführungsformen unterschieden:
· eine eindimensionale Integraltransformation im Fall einer Einzelparallaxe-Kodierung
• eine zweidimensionale Integraltransformation im Fall einer Einzelparallaxe-Kodierung
• eine zweidimensionale Integraltransformation im Fall einer Vollparallaxe-Kodierung
Die Integraltransformation ist vorzugsweise eine Fresneltransformation. Es kann aber auch, je nach Anwendung, eine Fouriertransformation verwendet werden.
Ein derartiges Berechnungsverfahren ist von besonderem Vorteil, da somit auf einfache Weise Hologramme berechnet werden können unabhängig von der Größe der einzelnen Subhologramme, die von der Lage der Objektpunkte und der Position der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung variieren.
Mit dem erfindungsgemäßen Verfahren wird ein Hologramm erhalten, das näherungsweise mit demjenigen Hologramm übereinstimmt, das nach dem Stand der Technik bei einer direkten Berechnung erzeugt werden würde, also ohne den erfindungsgemäß vorgeschlagenen Weg vorzugsweise über eine Kodierung in wenigstens einer virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung und gegebenenfalls daran anschließende Transformationen in den Sichtbarkeitsbereich und von dort aus in die reale Ebene der wenigstens einen Lichtmodulationseinrichtung. Das resultierende Hologramm wird danach in die reale räumliche Lichtmodulationseinrichtung eingeschrieben bzw. kodiert.
Im Vergleich zur herkömmlichen Berechnung von computergenerierten Hologrammen nach dem Stand der Technik könnte das erfindungsgemäße Verfahren zwar für jede virtuelle Ebene der räumlichen Lichtmodulationseinrichtung zwei zusätzliche Integraltransformationen erfordern. Andererseits kann für eine große Zahl von Objektpunkten die Ersparnis beim Berechnen und Aufaddieren der einzelnen Subhologramme mehr ins Gewicht fallen als die beiden zusätzlichen Integraltransformationen, die nur für das gesamte Hologramm einmalig durchgeführt werden. Im Folgenden werden verschiedene Alternativen angegeben, mit denen das erfindungsgemäße Verfahren vorteilhafterweise weiterentwickelt werden kann. In einer vorteilhaften ersten Alternative kann das erfindungsgemäße Verfahren dadurch weiterentwickelt werden, dass in der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung die Objektpunkte der zu rekonstruierenden Szene als Subhologramme berechnet werden, die berechneten Subhologramme von der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert und dort aufsummiert werden, und die aufsummierten Subhologramme mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung transformiert und als Hologramm eingeschrieben werden.
In einer vorteilhaften zweiten Alternative kann das erfindungsgemäße Verfahren dadurch weiterentwickelt werden, dass in der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung die Objektpunkte der zu rekonstruierenden Szene als Subhologramme berechnet und in der wenigstens einen virtuellen Ebene die Subhologramme aufsummiert werden, die aufsummierten Subhologramme von der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert werden, und mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung transformiert und als Hologramm eingeschrieben werden.
In einer vorteilhaften weiteren Ausführungsform kann die zweite Alternative des erfindungsgemäßen Verfahren derart weiterentwickelt werden, dass bei Festlegung von wenigstens zwei virtuellen Ebenen der wenigstens einen räumlichen Lichtmodulationseinrichtung den Objektpunkten der zu rekonstruierenden Szene jeweils eine dieser virtuellen Ebenen zugeordnet wird und die Objektpunkte als Subhologramme in der ihnen zugeordneten virtuellen Ebene berechnet und in jeder virtuellen Ebene die Subhologramme der ihr zugeordneten Objektpunkte aufsummiert werden, die aufsummierten Subhologramme von den wenigstens zwei virtuellen Ebenen mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert werden, im Sichtbarkeitsbereich die Transformierten der wenigstens zwei virtuellen Ebenen aufsummiert werden, und das Gesamtergebnis der aufsummierten Transformierten mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung transformiert und als Hologramm eingeschrieben wird. Es ist auch möglich, die zweite Alternative vorteilhaft derart weiterzuentwickeln, dass bei Festlegung von wenigstens zwei virtuellen Ebenen der wenigstens einen räumlichen Lichtmodulationseinrichtung den Objektpunkten der zu rekonstruierenden Szene jeweils eine dieser virtuellen Ebenen zugeordnet wird und die Objektpunkte als Subhologramme in der ihnen zugeordneten virtuellen Ebene berechnet und in jeder virtuellen Ebene die Subhologramme der ihr zugeordneten Objektpunkte aufsummiert werden, die aufsummierten Subhologramme von den wenigstens zwei virtuellen Ebenen mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert werden, für jede der wenigstens zwei virtuellen Ebenen die zugehörige Transformierte mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung transformiert wird, in der realen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung die Transformierten der wenigstens zwei virtuellen Ebenen aufsummiert werden und das Gesamtergebnis der aufsummierten Transformierten als Hologramm eingeschrieben wird.
Bei allen offenbarten Alternativen des erfindungsgemäßen Verfahrens können die Subhologramme dabei in die räumliche Lichtmodulationseinrichtung als komplexwertiges Hologramm oder in Form einer Hologrammkodierung eingeschrieben werden. Dementsprechend kann in vorteilhafter Weise vorgesehen sein, dass die Position der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung derart gewählt wird, dass die resultierenden Subhologramme eine geringe bzw. minimale Größe aufweisen, wie weiter hinten eingehender erläutert wird. Für eine vorbestimmte zu rekonstruierende vorzugsweise dreidimensionale Szene kann die Lage der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung derart gewählt werden, dass die zu berechnenden Subhologramme im Mittel in ihrer Größe kleiner werden - d.h. eine kleinere Fläche aufweisen - als für die tatsächliche Position der realen Ebene der räumlichen Lichtmodulationseinrichtung. Dieser Vorteil überwiegt den Aufwand der zusätzlichen Transformationen insbesondere bei Vorliegen von mehreren virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung.
Neben einer Vollparallaxe-Berechnung der Subhologramme bzw. der Hologramme gibt es auch die Möglichkeit einer Einzelparallaxe-Berechnung. Hierbei wird beispielsweise das Subhologramm eines Objektpunktes nicht in Form einer zweidimensionalen sphärischen Linse (full-parallax) sondern in Form einer Zylinderlinse berechnet und kodiert. Für das in der US 7,969,633 beschriebene Verfahren bedeutet dies, dass die Zerlegung der Szene in Objektpunkte und die Aufteilung in Schnittebenen in der gleichen Weise erfolgen wie bei einer Vollparallaxe-Kodierung, aber im Unterschied zu dieser eine mögliche Transformation in eine Betrachterebene bzw. in einen Sichtbarkeitsbereich und in eine Objektebene in Form einer eindimensionalen Integraltransformation, z.B. einer eindimensionalen Fouriertransformation, erfolgen kann.
Für das Verfahren gemäß der WO 2008/025839 A1 , das Subhologramme für die Objektpunkte direkt berechnet, bedeutet dies, dass Subhologramme nur aus einer Zeile bei horizontaler Kodierung oder einer Spalte bei vertikaler Kodierung bestehen.
Die Linsenfunktion der Subhologramme wird dann so berechnet, dass nur in einer Dimension (horizontal oder vertikal) Licht zur Position des Objektpunktes fokussiert wird.
Die Einzelparallaxe-Kodierung weist den Vorteil auf, dass bei der Rekonstruktion in einer Dimension (horizontal oder vertikal) ein scharfer Fokus (Brennpunkt) des Objektpunktes in Übereinstimmung mit der Parallaxe-Information, die das Gehirn von beiden Augen eines Betrachters erhält, entsteht. Im Gegensatz zu einer stereoskopischen Anzeigevorrichtung bzw. Display entfällt demnach der Konflikt zwischen Parallaxeinformation und Fokusinformation (accommodation-vergence conflict). Die Einzelparallaxe-Kodierung weist weiterhin Vorteile gegenüber Hologrammen mit Vollparallaxe-Kodierung im Hinblick auf die Anforderungen an Rechenaufwand und Hardware, wie beispielsweise Größe und Anzahl der Modulationselemente auf einer Anzeigevorrichtung, auf.
Andererseits haben Hologramme mit einer Einzelparallaxe-Kodierung gegenüber Hologrammen mit einer Vollparallaxe-Kodierung den Nachteil, dass die sichtbare Auflösung in der Richtung senkrecht zur holographischen Kodierung reduziert sein kann, insbesondere für weit von der Ebene der räumlichen Lichtmodulationseinrichtung entfernte Objektpunkte, da in dieser Richtung in der Objektebene kein scharfer Fokus vorliegt, sondern eine unter Umständen wahrnehmbare Verschmierung des Objektpunktes bei der Rekonstruktion entstehen kann. Der Tiefenbereich, in der eine zweidimensionale und/oder dreidimensionale Szene mit maximaler Auflösung sichtbar ist, kann daher eingeschränkt sein. Dieser Effekt tritt insbesondere deutlicher zutage, wenn der Abstand zwischen der Anzeigevorrichtung und einem Betrachter klein wird. Unter dem Begriff „Sichtbarkeitsbereich" soll hier vorzugsweise ein Bereich in der Betrachterebene verstanden werden, der virtuell vorhanden ist und eine Art Betrachterfenster definiert. Befinden sich Augen, also wenigstens ein Auge, eines Betrachters im Sichtbarkeitsbereich, so kann der Betrachter die rekonstruierte Szene beobachten.
Weitere vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den Unteransprüchen.
In einer besonderen Ausführungsform der Erfindung wird vorteilhaft eine Einzelparallaxe- Kodierung für die Berechnung der Subhologramme verwendet. Eine mögliche Integraltransformation in einen Sichtbarkeitsbereich und von diesem aus in die reale Ebene der räumlichen Lichtmodulationseinrichtung wird aber als zweidimensionale Transformation ausgeführt.
In dieser Ausgestaltung der Erfindung kann vorgesehen sein, dass die Lage der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung innerhalb des Tiefenbereichs der zu rekonstruierenden Szene gewählt wird, wobei der Tiefenbereich der zu rekonstruierenden Szene durch den Objektpunkt mit dem kleinsten Abstand zum Sichtbarkeitsbereich und den Objektpunkt mit dem größten Abstand zum Sichtbarkeitsbereich begrenzt wird.
Dabei wird die Lage der wenigstens einen virtuellen Ebene derart gewählt, dass die sichtbare Auflösung bei der Rekonstruktion der Szene einen vorgegebenen Wert nicht unterschreitet. Mit anderen Worten, die Lage der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung im Bezug zum Tiefenbereich der zu rekonstruierenden Szene wird derart eingestellt bzw. festgelegt, dass sich nur geringe, wenn überhaupt, Verschlechterungen in der sichtbaren Auflösung der Szene ergeben.
Insbesondere ist dieses Verfahren vorteilhaft einsetzbar für eine reale räumliche Lichtmodulationseinrichtung (SLM), die sich in einem kleineren Abstand zu einem Betrachter befindet und eine virtuelle Ebene der räumlichen Lichtmodulationseinrichtung, die einen größeren Abstand zum Betrachter aufweist als die reale räumliche Lichtmodulationseinrichtung, da der nutzbare Tiefenbereich mit voller Auflösung für eine Einzelparallaxe-Kodierung mit dem Abstand der räumlichen Lichtmodulationseinrichtung zum Betrachter zunimmt.
Beispielsweise ist die reale räumliche Lichtmodulationseinrichtung 65 cm von einem Betrachter entfernt, und die zu rekonstruierende Szene erstreckt sich zwischen 1 ,5 m und 17 m vom Betrachter. Für die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung wird dann beispielsweise ein Abstand von 2,5 m vom Betrachter aus gewählt. Ferner kann vorteilhaft vorgesehen sein, dass die zu rekonstruierende Szene in wenigstens zwei Tiefenbereichsabschnitte zerlegt wird, wobei den wenigstens zwei Tiefenbereichsabschnitten jeweils eine virtuelle Ebene der räumlichen Lichtmodulationseinrichtung zugeordnet wird. Das bedeutet, dass die zu rekonstruierende Szene neben der oben erwähnten Vorgehensweise auch durch Zerlegen in mehrere Tiefenbereichsabschnitte berechnet werden kann, die jeweils einer virtuellen Ebene zugeordnet werden.
Auch die Anzahl der virtuellen Ebenen wird derart festgelegt, dass für den gesamten darzustellenden Tiefenbereich sich nur geringe, wenn überhaupt, Verschlechterungen in der sichtbaren Auflösung der rekonstruierten Szene ergeben.
Bei dieser Vorgehensweise, wenn der Tiefenbereich der zu rekonstruierenden Szene derart groß in seiner Größe ist, dass sich nicht eine einzelne geeignete virtuelle Ebene der räumlichen Lichtmodulationseinrichtung finden lässt, für die eine dreidimensionale (3D) Szene ohne Verschlechterung der sichtbaren Auflösung dargestellt werden kann, ist es vorteilhaft und zweckmäßig, mehrere virtuelle Ebenen vorzusehen und zu verwenden. Dabei wird die zu rekonstruierende Szene in mehrere, also wenigstens zwei, Tiefenbereichsabschnitte zerlegt, die jeweils einer dieser virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung zugeordnet werden. Jeweils in Analogie zu einer Einzelparallaxe-Kodierung werden in den einzelnen Tiefenbereichsabschnitten Subhologramme für die jeweiligen virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung berechnet.
Dabei kann eine virtuelle Ebene der den wenigstens zwei Tiefenbereichsabschnitten zugeordneten virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung auch mit der realen Ebene der räumlichen Lichtmodulationseinrichtung zusammenfallen.
Anschließend könnten in einer möglichen Vorgehensweise die zu den in den einzelnen Tiefenbereichsabschnitten befindlichen Objektpunkten in der dem jeweiligen Tiefenbereichsabschnitt zugeordneten virtuellen Ebene berechneten Subhologramme, jedoch nicht die Subhologramme der realen Ebene der räumlichen Lichtmodulationseinrichtung, in die Betrachterebene bzw. in den Sichtbarkeitsbereich transformiert, dort aufaddiert und von der Betrachterebene bzw. dem Sichtbarkeitsbereich aus in die reale Ebene der Lichtmodulationseinrichtung transformiert werden. Alternativ könnten die Subhologramme der einzelnen Tiefenbereichsabschnitte auch vor der Transformation in den Sichtbarkeitsbereich aufsummiert werden. Das Aufsummieren der für die reale Ebene der Lichtmodulationseinrichtung berechneten Subhologramme kann dabei vorteilhafterweise entweder in dieser realen Ebene oder in der Betrachterebene bzw. in der Ebene des Sichtbarkeitsbereichs erfolgen. Mit anderen Worten, das Subhologramm aus dem Tiefenbereichsabschnitt, das direkt in der realen Ebene der Lichtmodulationseinrichtung berechnet wurde, kann wahlweise in der realen Ebene oder ebenfalls in der Betrachterebene bzw. in der Ebene des Sichtbarkeitsbereichs zu den weiteren berechneten Subhologrammen aufaddiert werden.
Als Beispiel für eine Vorgehensweise des erfindungsgemäßen Verfahrens kann die reale Ebene der Lichtmodulationseinrichtung in einem Abstand von 65 cm von einem Betrachter entfernt sein, wobei eine zu rekonstruierende dreidimensionale Szene sich dabei in einem Abstand zwischen 0,5 m und 17 m vom Betrachter erstrecken soll. Die zu rekonstruierende Szene wird dabei in Objektpunkte zerlegt, wobei hier beispielsweise drei Tiefenbereichsabschnitte festgelegt werden. Ein erster Tiefenbereichsabschnitt erstreckt sich dabei in einem Abstand von 1 ,5 m bis 17 m vom Betrachter. Alle in diesem Tiefenbereichsabschnitt liegenden Objektpunkte werden einer ersten erzeugten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung in einem Abstand von 2,5 m zum Betrachter zugeordnet. Ein zweiter Tiefenbereichsabschnitt soll sich in einem Abstand von 0,8 m bis 1 ,5 m zum Betrachter erstrecken. Alle in diesem Tiefenbereichsabschnitt befindlichen Objektpunkte werden dabei einer zweiten erzeugten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung, die in einem Abstand von 1 ,0 m zum Betrachter festgelegt wird, zugeordnet. Ein dritter Tiefenbereichsabschnitt soll sich in einem Abstand von 0,5 bis 0,8 m zum Betrachter erstrecken. Alle sich in diesem Tiefenbereichsabschnitt befindlichen Objektpunkte werden hier nun der realen Ebene der räumlichen Lichtmodulationseinrichtung bei einem Abstand von 0,65 m vom Betrachter zugeordnet. Es ist aber auch möglich, dass die in diesem Tiefenbereichsabschnitt befindlichen Objektpunkte einer weiteren erzeugten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zugeordnet werden, zum Beispiel einer virtuellen Ebene bei 0,60 m.
Ein Pixelpitch (Pitch des Modulationselements) für die virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung wird vorteilhaft derart gewählt, dass sich bei der Transformation der Subhologramme in die Betrachterebene bzw. in die Ebene des Sichtbarkeitsbereichs jeweils die gleiche Größe des Sichtbarkeitsbereichs ergibt wie bei einem Pixelpitch für die reale Ebene der Lichtmodulationseinrichtung. Nach dem Strahlensatz verhält sich dann der Quotient aus Pixelpitch in der virtuellen Ebene durch Pixelpitch in der realen Ebene der räumlichen Lichtmodulationseinrichtung wie der Quotient Entfernung der virtuellen Ebene durch Entfernung der realen Ebene der räumlichen Lichtmodulationseinrichtung zum Sichtbarkeitsbereich/virtuellen Betrachterfenster. In einer weiteren vorteilhaften Ausgestaltung der Erfindung kann vorgesehen sein, dass die einzelnen Objektpunkte der zu rekonstruierenden Szene in Form von Subhologrammen auf der realen Ebene der räumlichen Lichtmodulationseinrichtung als ein Linsenelement mit unterschiedlichen Brennweiten in horizontaler und vertikaler Richtung kodiert werden. Das heißt, die Kodierung der Subhologramme für die Objektpunkte der zu rekonstruierenden Szene auf der realen Ebene der Lichtmodulationseinrichtung entspricht dabei einer Linse mit unterschiedlichen Brennweiten in horizontaler und vertikaler Richtung. Durch die Wahl der virtuellen Ebene(n) der räumlichen Lichtmodulationseinrichtung und die Berechnung der Subhologramme in Analogie zu einer eindimensionalen Einzelparallaxe- Kodierung (single-parallax Kodierung) ist ein Objektpunkt auf der realen Ebene der räumlichen Lichtmodulationseinrichtung nicht als eine sphärische Linse sondern als eine Linse mit unterschiedlichen Brennweiten in horizontaler und vertikaler Richtung kodiert. In der einen Richtung liegt der Fokus (Brennpunkt) in der tatsächlichen Objektebene, in der dazu senkrechten Richtung in der Ebene der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung. Befindet sich ein Betrachter mit seiner Augenpupille im Sichtbarkeitsbereich, kann dieser die rekonstruierte zweidimensionale und/oder dreidimensionale Szene derart beobachten als ob diese mit einer Einzelparallaxe-Kodierung in der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung berechnet worden wäre.
Vorteilhafterweise ist somit der geringere Rechenaufwand durch Verwendung einer Einzelparallaxe-Kodierung (single-parallax Kodierung) auch nutzbar ohne die Einschränkungen der sichtbaren Auflösung der rekonstruierten Szene oder des Tiefenbereiches. Die optische Rekonstruktion des aus den Subhologrammen aufgebauten Hologramms erfolgt aber dabei wie bei einer Vollparallaxe-Kodierung (full-parallax Kodierung) üblich. Der Aufbau der holographischen Anzeigevorrichtung selbst unterscheidet sich also zu einer Anzeigevorrichtung mit Vollparallaxe-Kodierung nicht oder nur unwesentlich.
Die Berechnung der Subhologramme in der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung kann vorteilhaft entweder mittels einer zweidimensionalen Vollparallaxe-Kodierung oder mittels einer eindimensionalen Einzelparallaxe-Kodierung erfolgen.
Bei Verwendung mehrerer virtueller Ebenen wäre es auch möglich, in wenigstens einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung eine zweidimensionale Vollparallaxe-Kodierung und in wenigstens einer anderen virtuellen Ebene eine eindimensionale Einzelparallaxe-Kodierung zu verwenden. Bevorzugt werden dann die zweidimensionale Vollparallaxe-Kodierung in wenigstens einer virtuellen Ebene mit geringerer Entfernung zum Sichtbarkeitsbereich und die eindimensionale Einzelparallaxe- Kodierung in wenigstens einer Ebene mit größerer Entfernung zum Sichbarkeitsbereich verwendet.
Als alternative Vorgehensweise des erfindungsgemäßen Verfahrens ist es auch möglich, eine herkömmliche Subhologrammberechnung mittels Vollparallaxe-Kodierung in wenigstens einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung vorzunehmen. Die Ergebnisse dieser Subhologrammberechnungen werden dann in die Betrachterebene bzw. in den Sichtbarkeitsbereich transformiert und dort zu einem Gesamthologramm aufsummiert. Anschließend wird das Ergebnis des Gesamthologramms in die reale Ebene der räumlichen Lichtmodulationseinrichtung transformiert.
Das Aufsummieren der für die reale Ebene der Lichtmodulationseinrichtung berechneten Subhologramme kann dabei wie auch in der zuvor beschriebenen Ausführungsform vorteilhafterweise entweder in dieser realen Ebene oder in der Betrachterebene bzw. in der Ebene des Sichtbarkeitsbereichs erfolgen.
Auch hier bei dieser Verfahrensalternative wird die zu rekonstruierende Szene in Objektpunkte zerlegt und Tiefenbereichsabschnitte festgelegt. Die Objektpunkte in einem Tiefenbereichsabschnitt werden jeweils einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zugeordnet. Für diese virtuelle Ebene der räumlichen Lichtmodulationseinrichtung erfolgt dann eine Berechnung von Subhologrammen. Die Berechnung ist allerdings aufwendiger als in den bisher dargestellten Verfahrensausführungen. Das Ergebnis des Gesamthologramms entspricht dann aber ohne Einschränkungen dem einer durchgängigen Vollparallaxe-Kodierung.
In dieser Ausführungsform erfolgt die Wahl der Anzahl und Position der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung nicht mehr nach dem Kriterium Einschränkungen der sichtbaren Auflösung zu vermeiden, da solche Einschränkungen nicht auftreten, sondern danach, durch Verringerung der Größe der Subhologramme den Rechenaufwand zu begrenzen.
In einer weiteren Ausführungsform des erfindungsgemäßen Verfahrens ist es auch möglich, eine herkömmliche Subhologrammberechnung mittels Einzelparallaxe-Kodierung in wenigstens einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung vorzunehmen und eine mögliche Integraltransformation ebenfalls als eindimensionale Transformation auszugestalten.
In dieser Ausführungsform erfolgt die Wahl der Anzahl und Position der virtuellen Ebenen ebenfalls nicht nach dem Kriterium Einschränkungen der sichtbaren Auflösung zu vermeiden. Es liegen die gleichen Einschränkungen vor wie bei einer herkömmlichen Berechnung von Hologrammen mit Einzelparallaxe-Kodierung. Die Wahl der Anzahl und Position der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung erfolgt wiederum danach, durch Verringerung der Größe der Subhologramme den Rechenaufwand zu begrenzen. Mit anderen Worten kann vorteilhaft vorgesehen sein, dass die Anzahl der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung sowie der Abstand dieser virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung zum Sichtbarkeitsbereich in Abhängigkeit vom Tiefenbereich der zu rekonstruierenden Szene derart gewählt wird, dass die Größe in Form einer Anzahl von Modulationselementen der für die zu rekonstruierende Szene zu berechnenden Subhologramme einen vorgegebenen Wert nicht überschreitet.
In vorteilhafter Ausgestaltung der Erfindung kann ferner vorgesehen sein, dass der Abstand der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zur zu rekonstruierenden Szene derart gewählt wird, dass die Größe in Form einer Anzahl von Modulationselementen der für die zu rekonstruierende Szene zu berechnenden Subhologramme einen vorgegebenen Wert nicht überschreitet. Der Abstand der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zur zu rekonstruierenden Szene wird somit zweckmäßig derart gewählt, dass die Größe der für diese virtuelle Ebene zu berechnenden Subhologramme einen vorgegebenen Zahlenwert nicht überschreitet. Mit anderen Worten, durch die Auswahl einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung im Abstand nahe der zu rekonstruierenden Szene wird die Größe der zu berechnenden Subhologramme vorteilhaft klein gehalten.
Wird aus einer vorgegebenen Größe des Sichtbarkeitsbereiches/virtuellen Betrachterfensters die Größe in Form einer räumlichen Ausdehnung der Subhologramme mittels Strahlensatz ermittelt, so ergibt sich
XSh I Xyw ( Z|m— Zpoint) / Zpoint |■
Die Größe in Form einer Anzahl von Modulationselementen der Subhologramme Nsh ergibt sich dann mittels Dividieren der Ausdehnung durch den Pixelpitch und anschließendes Runden auf eine ganze Zahl
Figure imgf000019_0001
Um die angegebenen Gleichungen zu vereinfachen, wird dieses Runden im Folgenden nicht expilizit hingeschrieben. Nsh soll aber jeweils einen gerundeten ganzzahligen Wert darstellen. Dieser Ausdruck lässt sich (mit der oben angegeben Formel für die Ausdehnung des Sichtbarkeitsbereichs bzw. des virtuellen Betrachterfensters) mathematisch umformen zu
Nsh = (1 /Zpoint - 1 / Z|m) X™,2 / λ . Für eine vorgegebene Größe des Sichtbarkeitsbereichs/virtuellen Betrachterfensters hängt also die Größe in Form einer Anzahl von Modulationselementen der Subhologramme von |1 /Zpoint - 1 zim| ab.
Der Tiefenbereich einer dreidimensionalen Szene kann charakterisiert werden durch den Abstand zp0int_min des oder derjenigen Objektpunkte der zu rekonstruierenden Szene mit dem kleinsten Abstand zum Sichtbarkeitsbereich und Zp0int_max des oder derjenigen Objektpunkte der zu rekonstruierenden Szene mit dem größten Abstand zum Sichtbarkeitsbereich.
Entweder die Objektpunkte mit dem kleinsten Abstand Zp0int_min oder die Objektpunkte mit dem größten Abstand Zp0int_max zum Sichtbarkeitsbereich haben auch die in der Ausdehnung größten Subhologramme.
Für einen vorgegebenen Tiefenbereich bei wählbarer Position - also Abstand zum Sichtbarkeitsbereich - von Z|m_virt einer einzelnen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung wird in einer bevorzugten Ausführungsform, wenn die maximale Größe in Form einer Anzahl von Modulationselementen der Subhologramme begrenzten werden soll so vorgegangen, dass
1/Zpoint_min 1 / Z|m virt 1/ Z|m vjrt- 1/Zp0int_max■
Die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung wird somit innerhalb des Tiefenbereiches der dreidimensionalen Szene positioniert und zwar so, dass für die Objektpunkte mit dem kleinsten Abstand zum Sichtbarkeitsbereich die Größe des Subhologramms in Form einer Anzahl von Modulationselementen übereinstimmt mit der Größe des Subhologramms für die Objektpunkte mit dem größten Abstand zum Sichtbarkeitsbereich.
Es ist dann
Zlm virt 2 / (1/Zp0jnt_mjn+ 1/Zp0int_max)■
Für einen Tiefenbereich einer dreidimensionalen Szene, die sich von 50 cm Abstand vom Sichtbarkeitsbereich bis ins Unendliche (1/zp0int_max = 0) erstreckt, wäre beispielsweise die maximale Größe der Subhologramme in Form einer Anzahl von Modulationselementen dann am günstigsten, wenn die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung in 1 m (also 2 x 50 cm) Abstand vom Sichtbarkeitsbereich positioniert wäre. Erstreckt sich beispielsweise die dreidimensionale Szene aber stattdessen von 1 ,5 m bis 17 m Abstand vom Sichtbarkeitsbereich, so würde die virtuelle Ebene der räumlichen Lichtmodulationseinnchtung bei ungefähr 2,76 m positioniert, also in 2 x 1/(1/1 ,5 + 1/17) m. In dem Beispiel mit dem Tiefenbereich 0,5 m bis unendlich und mit dem Beispiel für die blaue Wellenlänge von 475 nm und der Größe des Sichtbarkeitsbereiches von 10,5 mm wäre der Pixelpitch der virtuellen Ebene der räumlichen Lichtmodulationseinnchtung dann bei ca. 45 μηη.
Ein Subhologramm eines Objektpunktes im Abstand von 50 cm von dem Sichtbarkeitsbereich wie auch ein Subhologramm eines Objektpunktes im Unendlichen hätten dann in dem Beispiel jeweils eine Größe in Form einer Anzahl von 234
Modulationselementen in einer Dimension (beispielsweise horizontal).
Bei einer Vollparallaxe-Kodierung und im Fall von rechteckig/quadratisch ausgebildeten
Modulationselementen wären das dann insgesamt 234x234 Modulationselemente.
Die Größe in Form einer Anzahl von Modulationselementen der für die zu rekonstruierende
Szene zu berechnenden Subhologramme würde somit in dem gesamten Tiefenbereich in diesem Fall den Wert von 234 nicht überschreiten.
Bei der Verwendung von zwei virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung wird in einer bevorzugten Ausführungsform wie folgt vorgegangen:
Der Tiefenbereich der dreidimensionalen Szene wird in zwei Unterbereiche bzw. Tiefenbereichsabschnitte unterteilt. Die Größe zPoint_med soll die Grenze zwischen beiden Bereichen bzw. Abschnitten darstellen.
Für alle Objektpunkte zwischen zp0int_min und zp0int_med werden die Subhologramme in einer ersten virtuellen Ebene Z|m_virti berechnet, für alle Punkte zwischen zp0int_med und
z 0int_max werden die Subhologramme in einer zweiten virtuellen Ebene Zim_Virt2 berechnet. Die Grenze zwischen den Tiefenbereichsabschnitten zp0int_med wird derart bestimmt, dass ein Subhologramm von einem Objektpunkt in diesem Abstand vom Sichtbarkeitsbereich die gleiche Größe in Form einer Anzahl von Modulationselementen in beiden virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung aufweist, und dass außerdem ein Subhologramm von zpoint_min in der ersten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung und ein Subhologramm von zp0int_max in der zweiten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung ebenfalls die gleiche Größe in Form einer Anzahl von Modulationselementen haben wie ein Subhologramm von zp0int_med in beiden virtuellen Ebenen:
1/Zpoint_min 1 / Z|m virtl 1/ Z|m vjrti - 1/Zpoint_med 1/Zpoint_med 1 / Z|m vjrt2
1/ Z|m vjrt2- 1/Zpoint_max ■ In dem Beispiel mit einem Tiefenbereich zwischen 0,5 m und unendlich und einem Sichtbarkeitsbereich bzw. Betrachterfenster von 10,5 mm Größe ergibt sich, dass eine erste virtuelle Ebene der räumlichen Lichtmodulationseinrichtung mit einem Pixelpitch von 30 μηη bei Z|m Virti = 0,67 m und eine zweite virtuelle Ebene der räumlichen Lichtmodulationseinrichtung mit einem Pixelpitch von 90 μηη bei Z|m_virt2 = 2,0 m liegt. Für zPoint_med ergibt sich dann 1 ,0 m.
Für alle Objektpunkte zwischen 0,5 m und 1 ,0 m Abstand vom Sichtbarkeitsbereich werden demnach Subhologramme in der ersten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung berechnet. Für alle Objektpunkte zwischen 1 ,0 m und Unendlich werden Subhologramme in der zweiten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung berechnet. Ein Subhologramm eines Objektpunktes bei 0,5 m Abstand vom Sichtbarkeitsbereich hat in der ersten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung eine Größe in Form einer Anzahl von 1 17 Modulationselementen in einer Dimension. Ebenso hat ein Subhologramm eines Objektpunktes bei 1 m Abstand vom Sichtbarkeitsbereich in beiden virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung diese Größe in Form einer Anzahl von 1 17 Modulationselementen in einer Dimension und ein Subhologramm eines Objektpunktes im Unendlichen in der zweiten virtuellen Ebene der räumlichen Lichtmodulationseinrichtung diese Größe in Form einer Anzahl von 1 17 Modulationselementen.
Im Vergleich zur Verwendung einer einzelnen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung kann somit die maximale Anzahl von Modulationselementen in einem Subhologramm in einer Dimension halbiert werden, in diesem Beispiel von 234 auf 1 17.
Eine der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung kann auch mit einer realen Ebene der räumlichen Lichtmodulationseinrichtung zusammenfallen.
Beispielweise könnte für einen Computermonitor, dessen Betrachterabstände typischerweise im Bereich von 60-70 cm liegen, eine erste virtuelle Ebene der räumlichen Lichtmodulationseinrichtung bei 67 cm mit der realen Ebene der räumlichen Lichtmodulationseinrichtung zusammenfallen. Dann ist nur für eine zweite virtuelle Ebene der räumlichen Lichtmodulationseinrichtung bei 2 m eine Integraltransformation nötig.
Umgekehrt könnte für einen Fernseher eine zweite virtuelle Ebene der räumlichen Lichtmodulationseinrichtung bei 2 m mit der realen Ebene der räumlichen Lichtmodulationseinrichtung zusammenfallen. Alternativ könnte auch so vorgegangen werden, dass eine maximale Größe in Form einer Anzahl von Modulationselementen festgelegt wird und daraus die Anzahl der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung bestimmt wird, die nötig sind, um diese Größe zu erreichen.
In dem obigen Beispiel ergibt sich, dass ein vorgegebener Wert von maximal 100 Modulationselementen mit 1 oder 2 virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung noch überschritten wird, so dass eine dritte virtuelle Ebene der räumlichen Lichtmodulationseinrichtung benötigt wird. In einer weiteren erfindungsgemäßen Ausgestaltung der Erfindung kann vorteilhaft die Anzahl der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung auf einen vorgebbaren Wert beschränkt sein, um den Aufwand für mögliche zusätzliche Transformationen möglichst gering zu halten.
In der oben beschriebenen Vorgehensweise würde sich dann beispielsweise bei der gleichen dreidimensionalen Szene mit einem bestimmten Tiefenbereich die maximale Anzahl von Modulationselementen eines Subhologramms bei zwei virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung im Vergleich zu einer einzelnen virtuellen Ebene halbieren, bei drei virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung im Vergleich zu einer virtuellen Ebene verdritteln und bei vier virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung im Vergleich zu einer virtuellen Ebene vervierteln. Die Verbesserung, die mit zusätzlichen virtuellen Ebenen erzielt wird, nimmt somit immer weiter ab. Die weitere Verbesserung von einem Viertel auf ein Fünftel bei Verwendung einer fünften virtuellen Ebene der räumlichen Lichtmodulationseinrichtung ist dann zum Beispiel vergleichsweise gering.
Für jede weitere virtuelle Ebene der räumlichen Lichtmodulationseinrichtung erhöht sich aber die Zahl der Integraltransformationen um die Zahl 2. Die Anzahl der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung würde im Normalfall auf wenige, zum Beispiel 2 oder 4, begrenzt. Die vorliegende Erfindung ist aber nicht auf eine bestimmte maximale Zahl von virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung beschränkt.
Da der Aufwand für die Berechnung von Subhologrammen außerdem mit der Anzahl der Objektpunkte, in die eine vorzugsweise dreidimensionale Szene zerlegt wird, ansteigt, der Aufwand für eine Integraltransformation aber unabhängig von der Anzahl der Objektpunkte ist, kann die Festlegung der Zahl der virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung auch in Abhängigkeit von der Objektpunktzahl so erfolgen, dass für eine dreidimensionale Szene mit sehr vielen Objektpunkten mehr virtuelle Ebenen der räumlichen Lichtmodulationseinrichtung verwendet werden und für eine dreidimensionale Szene mit wenigen Objektpunkten auch weniger virtuelle Ebenen der räumlichen Lichtmodulationseinrichtung.
In einer anderen bzw. alternativen Ausgestaltung der Erfindung wird nicht die maximale Größe der Subhologramme in Form einer Anzahl von Modulationselementen eingeschränkt, sondern stattdessen die mittlere Größe der Subhologramme in Form einer Anzahl von Modulationselementen minimiert. Das heißt, der Abstand der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zum Sichtbarkeitsbereich kann in Abhängigkeit von der Position aller Objektpunkte der zu rekonstruierenden Szene derart gewählt werden, dass die mittlere, vorzugsweise über alle Objektpunkte gemittelte, Größe in Form einer Anzahl von Modulationselementen der für die zu rekonstruierende Szene zu berechnenden Subhologramme ein Minimum einnimmt.
Wie bereits erwähnt, ist für einen einzelnen Objektpunkt die Größe der Subhologramme in Form einer Anzahl von Modulationselementen in einer Dimension (horizontal oder vertikal) proportional zu dem Betrag 11 /zp0int— / zim virtl ■
Im Fall einer Einzelparallaxe-Kodierung (single-parallax Kodierung) ist die Gesamtzahl von Modulationselementen in einem Subhologramm proportional zu diesem Betrag.
Im Fall einer Vollparallaxe-Kodierung (full-parallax Kodierung) ergibt sich die Gesamtzahl der Modulationselemente in einem Subhologramm durch Multiplikation der vertikalen und horizontalen Modulationselemente und ist daher proportional zu (1/zp0int— / zim virt) 2.
Für eine dreidimensionale Szene, die in N Objektpunkte zerlegt wird, wird in diesem Ausführungsbeispiel die Position einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung bestimmt, indem die Summe entweder des Ausdrucks
11 Zpoint i - 1 / zim virtl bei einer Einzelparallaxe-Kodierung oder von (1/zp0int ι - / Z|m virt) 2 bei einer Vollparallaxe-Kodierung über alle Punkte zp0int i minimiert wird, also in diesem Fall auf Null gesetzt wird Σ i=1..N |1/zpoint i - 1 / Z|m virt| = 0 .
Daraus ergibt sich £ i=1 --N |1/ζρ0ιηΜ = N / zim virt . Eine Minimierung wird in beiden Fällen durchgeführt, indem die Ableitung der jeweiligen Summe nach z]m virt gebildet und gleich 0 gesetzt wird. Für die Vollparallaxe-Kodierung wird berechnet £ i= 1 - - N (1/zpoint i - 1 / Z|m virt) 2 = Min. Daraus ergibt sich £ i= - - N 11 /zp0int = N / z]m virt. In einem Beispiel für eine zu rekonstruierende Szene, die nur aus drei Objektpunkten besteht und in Abständen zum Sichtbarkeitsbereich von zp0int 1 = 0,5 m , zp0int 2 = 0,66 m und zp0int 3 = 2,0 m liegt, würde sich (2 + 1 ,5 + 0,5) / Meter = 3 / Z|m virt ergeben und daraus der Abstand der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zum Sichtbarkeitsbereich von Z|m virt = 0,75 m.
Für die Einzelparallaxe-Kodierung wird berechnet £ i=1 ..N 11 /zp0int i— 1 zim virtl = Min. Das Minimum wird errreicht, wenn Z|m virt so gewählt wird, dass die Hälfte der Objektpunkte vom Sichtbarkeitsbereich aus gesehen vor der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung und die andere Hälfte der Objektpunkte dahinter liegt. Bei dem Beispiel mit den 3 Objektpunkten würde für eine Einzelparallaxe-Kodierung die Lage der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung derart gewählt, dass sie mit dem mittleren Punkt zp0int 2 = 0,66 m zusammenfällt.
Im Fall einer geraden Zahl von Objektpunkten, zum Beispiel mit 4 Objektpunkten und zp0int 4 = 0,95 m zusätzlich zu den oben genannten Objektpunkten, würde die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung, derart gewählt, dass sie beliebig im Bereich zwischen 0.66 m und 0.95 m liegt, so dass zpoint ^ und zp0int 2 vor der virtuellen Ebene liegen und zp0int 3 und zpoint 4 dahinter.
Das Beispiel mit 3 oder 4 Objektpunkten soll in diesem Fall nur veranschaulichen, wie dieser Abstand gewählt wird. Im praktischen Fall würde dieses Verfahren wohl eher auf dreidimensionale Szenen mit sehr vielen Objektpunkten - einige 1000 bis zu vielen Millionen - angewandt.
Diese Art der Minimierung der mittleren Größe der Subhologramme in Form einer Anzahl von Modulationselementen erfordert einen zusätzlichen Rechenschritt, bei dem die Position aller Objektpunkte der dreidimensionalen Szene berücksichtigt werden muss.
In einem weiteren Ausführungsbeispiel wird daher nur der Tiefenbereich in Form des minimalen Abstands zp0int_min und des maximalen Abstands zp0int_max verwendet und das Integral von zpoint_min bis zpoint_max über |1/zpoint - 1 / z,m virt | dzpoint im Fall einer Einzelparallaxe- Kodierung minimiert, oder das Integral von zpoint_min bis zpoint_max über (1/zpoint - 1 / z,m virt)2 dzPoint im Fall einer Vollparallaxe-Kodierung minimiert.
Der Rechenaufwand für die Transformation entspricht dem in dem gemäß der US 7,969,633 beschriebenen Verfahren, wenn dieses auf eine zu rekonstruierende vorzugsweise dreidimensionale Szene mit wenigen Tiefenebenen angewendet wird. Es kann aber vorteilhaft trotzdem ein großer Tiefenbereich mit beliebig feiner Tiefenauflösung verwendet werden.
Zwar werden bei der Variante des erfindungsgemäßen Verfahrens mit mehreren virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung bevorzugt virtuelle Ebenen der räumlichen Lichtmodulationseinrichtung verwendet, die in einem größeren Abstand von einem Betrachter entfernt angeordnet sind als die reale Ebene der räumlichen Lichtmodulationseinrichtung. Allgemein gesehen können aber bei dieser Variante bzw. Alternative und insbesondere auch bei der Variante/Alternative mit einer Vollparallaxe- Kodierung in den virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung diese virtuellen Ebenen im Abstand auch näher am Betrachter liegen als die reale Ebene der räumlichen Lichtmodulationseinrichtung.
In einer bevorzugten Ausgestaltung der Erfindung kann weiterhin vorgesehen sein, dass die Lage der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung bei einer zeitlichen Änderung des Tiefenbereichs der zu rekonstruierenden Szene dem neuen Tiefenbereich angepasst wird.
Beispielsweise können zeitlich nacheinander auf der holographischen Anzeigevorrichtung angezeigte Inhalte (etwa nach Art einer Filmsequenz) zwischen einer vorzugsweise dreidimensionalen Szene mit Objektpunkten nah beim Sichtbarkeitsbereich und zeitlich darauf folgend einer vorzugsweise dreidimensionalen Szene mit Objektpunkten weit weg vom Sichtbarkeitsbereich bzw. einem virtuellen Betrachterfenster wechseln.
Für jedes Einzelbild würde dann der Tiefenbereich der zu rekonstruierenden Szene bestimmt, beispielsweise die Objektpunkte zp0int_min mit der minimalen und zp0int_max mit der maximalen Entfernung zum Sichtbarkeitsbereich und daraus die Position(en) der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung berechnet. Ferner kann vorteilhaft in einer weiteren Ausgestaltung der Erfindung vorgesehen sein, dass bei Nachführung des Sichtbarkeitsbereiches in axialer und/oder dazu lateraler Richtung entsprechend einer detektierten Position eines Betrachters der rekonstruierten Szene die Anzahl und Lage der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung der neuen Position des Sichtbarkeitsbereiches angepasst wird.
Es kann vorgesehen sein, dass der mittels einer Vorrichtung zur Erfassung der Betrachterposition detektierte Abstand eines Betrachters zur realen Ebene der räumlichen Lichtmodulationseinrichtung, auf den der Sichtbarkeitsbereich nachgeführt wird, zur Bestimmung der Anzahl/und/oder Position der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung verwendet wird.
Alternativ kann auch ein mittlerer oder typischer (hängt von der Anwendung ab, beispielsweise Notebook oder Fernseher) Abstand eines Betrachters zur realen Ebene der räumlichen Lichtmodulationseinrichtung verwendet werden. Vorteilhafterweise kann für die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung eine Position im Frustrum gewählt werden, die derart innerhalb der zu rekonstruierenden Szene liegt, dass von einem Betrachter in einer Betrachterebene aus gesehen eine Anzahl der Objektpunkte vor und eine Anzahl der Objektpunkte hinter der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung liegt, wobei die dem Betrachter am nächsten liegenden Objektpunkte nicht mehr als den halben virtuellen Betrachterabstand vor der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung liegen sollten. Das Verfahren ist aber nicht auf eine bestimmte Festlegung der Position der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung beschränkt.
Ferner kann vorteilhaft vorgesehen sein, insbesondere für die Ausführung der Erfindung mit einer Einzelparallaxe-Kodierung und einer zweidimensionalen Integraltransformation, dass die Abweichung des berechneten Hologramms der zu rekonstruierenden Szene mittels der wenigstens einen virtuellen Ebene der räumlichen Lichtmodulationseinrichtung von einem direkt in der realen Ebene der räumlichen Lichtmodulationseinrichtung berechneten Hologramm für die gleiche Szene ein definiertes Kriterium nicht überschreitet. Beispielsweise kann dieses Kriterium darin bestehen, dass die sichtbare Auflösung der so berechneten dreidimensionalen Szene maximal um 20 % schlechter ist als die Auflösung eines direkt in der realen Ebene der räumlichen Lichtmodulationseinrichtung berechneten Hologramms der gleichen Szene.
In einer weiteren vorteilhaften Ausgestaltung der Erfindung kann vorgesehen sein, dass bei Verwendung einer Anzeigevorrichtung zur Darstellung von zweidimensionalen und/oder dreidimensionalen Szenen, bei der eine Bildebene der wenigstens einen räumlichen Lichtmodulationseinrichtung erzeugt wird, die als reale Ebene der räumlichen Lichtmodulationseinrichtung wirkt, beispielsweise eines Head-Mounted-Display oder Hokular, in Abhängigkeit vom Inhalt einer zu rekonstruierenden Szene wenigstens eine virtuelle Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung nach einer der oben beschriebenen erfindungsgemäßen Möglichkeiten festgelegt wird, beispielsweise so, dass die maximale oder die mittlere Größe der Subhologramme minimiert wird, die Bildebene der räumlichen Lichtmodulationseinrichtung derart verschoben wird, dass diese mit der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zusammenfällt, die Objektpunkte der zu rekonstruierenden Szene als Subhologramme berechnet und aufsummiert werden und als Hologramm eingeschrieben werden.
Zur Darstellung von zwei- und/oder dreidimensionalen Szenen könnte auch ein Head- Mounted-Display oder Hokular eingesetzt werden. Das Head-Mounted-Display oder Hokular weist ein Abbildungssystem bzw. ein Fokussiersystem derart auf, dass vom Sichtbarkeitsbereich aus ein vergrößertes Bild der räumlichen Lichtmodulationseinrichtung sichtbar ist. Das Abbildungssystem bzw. Fokussiersystem kann dabei so ausgestaltet sein, dass die Lage der Bildebene der räumlichen Lichtmodulationseinrichtung variierbar ist. Das Abbildungssystem bzw. Fokussiersystem kann beispielsweise wenigstens ein Element aufweisen, dessen Brennweite variabel ausgestaltet ist, d.h. steuerbar variiert werden kann. Auf diese Weise ist es möglich, eine Bildebene der wenigstens einen räumlichen Lichtmodulationseinrichtung zu verschieben. Das bedeutet, dass in Abhängigkeit vom Inhalt einer darzustellen Szene wenigstens eine virtuelle Ebene der räumlichen Lichtmodulationseinrichtung bestimmt bzw. festgelegt wird, die derart bestimmt wird, dass die Subhologramme der Objektpunkte der Szene möglichst in ihrer Fläche klein ausgestaltet sind und somit deren Berechnung vom Aufwand her gesehen günstig ist. Das Bild/Bildebene der räumlichen Lichtmodulationseinnchtung, das/die bei einer Anzeigevorrichtung, die als Direktsicht-Display ausgebildet ist, der realen Ebene der räumlichen Lichtmodulationseinrichtung entspricht, kann daraufhin derart verschoben werden, das diese(s) mit der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung zusammenfällt bzw. übereinstimmt. In diesem Fall würde bei Vorhandensein von nur einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung die Integraltransformation komplett eingespart werden können.
Alternativ könnte die Bildebene der wenigstens einen räumlichen Lichtmodulationseinrichtung auch verschoben werden, indem die reale Ebene der räumlichen Lichtmodulationseinrichtung geringfügig verändert wird. Möglich wäre natürlich auch das Vorsehen von mehreren virtuellen Ebenen der räumlichen Lichtmodulationseinnchtung, bei denen das Bild der räumlichen Lichtmodulationseinrichtung derart verschoben wird, dass es mit einer dieser virtuellen Ebenen zusammenfällt. Das Bild der räumlichen Lichtmodulationseinrichtung könnte auch so verschoben werden, dass es zeitlich nacheinander mit jeweils einer anderen der virtuellen Ebenen zusammenfällt. Mittels des Abbildungssystems variabler Brennweite, das beispielsweise als diffraktives oder refraktives System ausgebildet sein kann und somit beispielsweise wenigstens eine Linse oder auch wenigstens einen Spiegel aufweisen könnte, beispielsweise eine Electrowetting- Linse, deren Brennweite durch Einstellen einer elektrischen Spannung variierbar ist, oder einen Membranspiegel, dessen Krümmungsradius variierbar ist, oder auch ein System aus mehreren Linsen, bei dem durch Änderung des Abstands der Linsen die Brennweite des Systems geändert wird, wird somit ein Bild der räumlichen Lichtmodulationseinrichtung derart verschoben, dass für eine zwei- und/oder dreidimensionale Szene mit vorgegebenem Tiefenbereich (somit inhaltsabhängig) die Subhologrammgröße günstig in Bezug auf den Rechenaufwand eingestellt werden kann.
Das erfindungsgemäße Verfahren ist anwendbar mittels einer Lichtmodulationseinrichtung, insbesondere in einer Anzeigevorrichtung, bevorzugt in einer holographischen Anzeigevorrichtung zur Darstellung von zweidimensionalen und/oder dreidimensionalen Szenen, aufweisend eine räumliche Lichtmodulationseinrichtung, wobei die Lichtmodulationseinrichtung geeignet ist, das erfindungsgemäße Verfahren durchzuführen. Weitere Ausgestaltungen der Erfindung ergeben sich aus den restlichen Unteransprüchen. Im nachfolgenden wird die Erfindung anhand von mittels der Figuren näher beschriebener Ausführungsbeispiele prinzipmäßig erläutert. Dabei wird das Prinzip der Erfindung anhand einer holographischen Rekonstruktion mit kohärentem Licht beschrieben. Die Figuren zeigen:
Fig. 1 a, 1 b, 1 c: verschiedene mögliche Ausgestaltungen einer Anzeigevorrichtung zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen nach dem Stand der Technik,
Fig. 2: eine schematisch dargestellte zu rekonstruierende Szene in einem Frustrum in einem definierten Abstand zu einem Betrachter und zu einer räumlichen
Lichtmodulationseinrichtung,
Fig. 3: eine schematisch dargestellte zu rekonstruierende Szene gemäß Fig. 1 bei
Verwendung von einer in der Größe kleineren räumlichen Lichtmodulationseinrichtung,
Fig. 4: schematisch die Ausdehnung von Subhologrammen einer vorzugsweise dreidimensionalen Szene in Analogie zu einer Einzelparallaxe-Kodierung in einer realen Ebene und einer virtuellen Ebene der räumlichen Lichtmodulationseinrichtung,
Fig. 5: schematisch die Ausdehnung von Subhologrammen einer vorzugsweise dreidimensionalen Szene mit einem ausgedehnten Tiefenbereich in einer realen Ebene und in zwei virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung,
Fig. 6: eine graphische Darstellung eines Ausführungsbeispiels für die Ausdehnung von Subhologrammen für verschiedene Abstände der Ebene der räumlichen Lichtmodulationseinrichtung von einem Sichtbarkeitsbereich, Fig. 7: eine schematisch dargestellte als Head-Mounted-Display ausgebildete Anzeigevorrichtung, und
Fig. 8: die Anzeigevorrichtung nach Figur 6, bei der die Bildebene der räumlichen
Lichtmodulationseinrichtung verschoben ist.
Es soll kurz erwähnt werden, dass gleiche Elemente/Bauteile/Komponenten auch die gleichen Bezugszeichen in den Figuren aufweisen.
In Fig. 1 a ist schematisch und beispielhaft eine Anzeigevorrichtung zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen nach dem Stand der Technik dargestellt.
Die Anzeigevorrichtung weist in diesem Beispiel eine Lichtquelle LQ, eine Feldlinse FL und eine räumliche Lichtmodulationseinrichtung 1 auf. Die Lichtquelle LQ und die Feldlinse FL sind dabei derart angeordnet, dass, sofern in der räumlichen Lichtmodulationseinnchtung 1 kein Hologramm eingeschrieben ist, das von der Lichtquelle LQ ausgehende Licht mittels der Feldlinse FL in eine Betrachterebene 2 in einem Abstand Z\m von der räumlichen Lichtmodulationseinrichtung 1 fokussiert wird. Wird in geeigneter Weise eine zu rekonstruierende Szene (hier nicht dargestellt) in Objektpunkte zerlegt und werden die Objektpunkte als Subhologramme in die räumliche Lichtmodulationseinrichtung 1 der Anzeigevorrichtung kodiert, so wird damit in diesem Abstand Z m von der räumlichen Lichtmodulationseinrichtung 1 ein Sichtbarkeitsbereich 3 bzw. ein virtuelles Betrachterfenster erzeugt.
In der dargestellten Anzeigevorrichtung ist der Abstand der Feldlinse FL von der räumlichen Lichtmodulationseinrichtung 1 klein, das heißt wesentlich kleiner als der Abstand Z|m von der räumlichen Lichtmodulationseinrichtung 1 zum Sichtbarkeitsbereich 3.
In Fig. 1 a ist eine Feldlinse mit fester Brennweite gezeigt. Insbesondere kann im allgemeinen Fall die Feldlinse auch mit variabler Brennweite ausgestaltet sein oder die Anzeigevorrichtung zusätzlich zur Feldlinse variable Fokussierelemente aufweisen, mit denen der Abstand Z|m an eine veränderte Position eines Betrachters dynamisch angepasst werden kann. Die Anzeigevorrichtung kann weiterhin Ablenkelemente aufweisen, die den Sichtbarkeitsbereich 3 einer lateral veränderten Position eines Betrachters nachführen.
Die in Fig. 1 a dargestellte Anzeigevorrichtung wird auch als holographisches Direktsichtdisplay bezeichnet. Fig. 1 b zeigt im Vergleich zur Fig. 1 a eine Anzeigevorrichtung ebenfalls nach dem Stand der Technik, die jedoch als holographisches Projektionsdisplay bezeichnet wird.
In Fig. 1 b sind mehrere optische Elemente L, hier als Linsen dargestellt, derart in der Anzeigevorrichtung angeordnet, dass zunächst ein, in der Regel vergrößertes reelles Bild rB einer räumlichen Lichtmodulationseinrichtung 1 erzeugt wird.
Mit einer Feldlinse FL, die sehr nah bei dem reellen Bild rB der räumlichen Lichtmodulationseinrichtung 1 angeordnet ist, wird außerdem Licht einer Lichtquelle LQ in eine Betrachterebene 2 fokussiert.
Die Zerlegung einer zu rekonstruierenden Szene in Objektpunkte und das Kodieren der Objektpunkte als Subhologramme in die räumliche Lichtmodulationseinrichtung 1 der Anzeigevorrichtung kann dann derart erfolgen, als ob sich am Ort des reellen Bildes rB der räumlichen Lichtmodulationseinrichtung 1 tatsächlich eine dinglich vorhandene räumliche Lichtmodulationseinrichtung befinden würde. In der Fig. 1 c ist eine Anzeigevorrichtung dargestellt, bei der ebenfalls eine Feldlinse FL Licht einer Lichtquelle LQ in eine Betrachterebene 2 fokussiert.
Eine räumliche Lichtmodulationseinrichtung 1 befindet sich in diesem Ausführungsbeispiel einer Anzeigevorrichtung an einer Position derart, dass der Abstand zwischen der räumlichen Lichtmodulationseinrichtung 1 und der Feldlinse FL ähnlich groß ist, wie der Abstand zwischen der Feldlinse FL und der Betrachterebene 2.
Der Abstand zwischen der Feldlinse FL und der Betrachterebene 2 entspricht beispielsweise der Brennweite der Feldlinse FL. Der Abstand zwischen der räumlichen Lichtmodulationseinrichtung 1 und der Feldlinse FL ist ungefähr genauso groß aber kleiner als die Brennweite der Feldlinse.
In diesem Fall entsteht ein in der Regel vergrößertes virtuelles Bild vB der räumlichen Lichtmodulationseinrichtung 1 .
Die Zerlegung einer zu rekonstruierenden Szene in Objektpunkte und das Kodieren der Objektpunkte als Subhologramme in die räumliche Lichtmodulationseinrichtung 1 der Anzeigevorrichtung kann dann wiederum so erfolgen, als ob sich am Ort des virtuellen Bildes vB der räumlichen Lichtmodulationseinrichtung 1 tatsächlich eine dinglich vorhandene räumliche Lichtmodulationseinrichtung 1 befinden würde.
Eine derartige Anzeigevorrichtung kann beispielsweise als Head-Mounted Display ausgebildet sein, bei dem sich eine Feldlinse kleiner Brennweite und eine in der Größe kleine räumliche Lichtmodulationseinrichtung nah am Auge eines Betrachters befinden - beispielsweise in Form einer Brille getragen werden oder auch als Hokular. Der in der Beschreibung der Erfindung verwendete Ausdruck: reale Ebene der räumlichen Lichtmodulationseinrichtung soll so allgemein gefasst sein, dass er auch Bildebenen einer räumlichen Lichtmodulationseinrichtung in einer Anzeigevorrichtung umfasst, wie zum Beispiel anhand der Figuren 1 b und 1 c erläutert.
In Figur 2 ist schematisch eine räumliche Lichtmodulationseinrichtung 1 gemäß der vorliegenden Erfindung dargestellt. Die räumliche Lichtmodulationseinrichtung 1 ist in einer holographischen Anzeigevorrichtung vorgesehen, wobei der Aufbau der holographischen Anzeigevorrichtung für die Darlegung des erfindungsgemäßen Verfahrens nicht wesentlich ist. Üblicherweise weist die holographische Anzeigevorrichtung, wie anhand der vorangegangenen Figuren 1 a bis 1 c erläutert, wenigstens eine räumliche Lichtmodulationseinrichtung in Verbindung mit einer Beleuchtungseinrichtung (backlight) und weiteren Komponenten, wie beispielsweise eine Feldlinse, Ablenkelementen usw., auf. Zur Beschreibung des erfindungsgemäßen Verfahrens ist es ausreichend, nur die wenigstens eine räumliche Lichtmodulationseinrichtung 1 in Verbindung mit einer Betrachterebene eingehender zu beschreiben und in den Figuren 2 bis 5 darzustellen.
Auf die Beschreibung von weiteren, in der Anzeigevorrichtung vorgesehenen Einrichtungen bzw. Elementen wird daher verzichtet, außer es wird entsprechend darauf hingewiesen. Die räumliche Lichtmodulationseinrichtung 1 , auch als SLM (spatial light modulator) bezeichnet, gemäß den Figuren 2 bis 6 kann als Amplituden + Phasen - Lichtmodulationseinrichtung ausgeführt sein, wobei selbstverständlich auch andere Ausführungen der Lichtmodulationseinrichtung möglich sind. Die Ausführung der räumlichen Lichtmodulationseinrichtung 1 ist jedoch hier von untergeordneter Bedeutung und spielt für die Beschreibung des Verfahrens keine wesentliche Rolle
Wird allerdings ein komplexer Wert eines Hologramms nicht in einem einzelnen Modulationselement (Pixel) einer Amplituden + Phasen - Lichtmodulationseinrichtung eingeschrieben, sondern stattdessen mit Hilfe mehrerer Modulationselemente (Pixel) einer nur Phase oder nur Amplitude modulierenden Lichtmodulationseinrichtung, so sind die zuvor aufgeführten Begriffe Pixelpitch und Anzahl von Modulationselementen (Pixel) so zu verstehen, dass ein Modulationselement und ein Pixelpitch jeweils für mehrere Modulationselemente (Pixel) einer derartigen Lichtmodulationseinrichtung steht, in die insgesamt ein komplexer Wert eingeschrieben wird. Die räumliche Lichtmodulationseinnchtung 1 , kann als Amplituden + Phasen - Lichtmodulationseinrichtung in Form einer Sandwichanordnung ausgeführt sein. Die Amplituden-Lichtmodulationseinrichtung weist dann zum Beispiel einen kleinen Abstand (typischerweise < 2 mm) von der Phasen-Lichtmodulationseinrichtung auf.
In diesem Fall wird der Begriff „reale Ebene der räumlichen Lichtmodulationseinrichtung" bevorzugt derart verwendet, dass eine mittlere Ebene in der Sandwichanordnung gewählt wird.
Wie aus Figur 2 ersichtlich und aus den beschriebenen Dokumenten US 7,969,633, WO 2008/025839 A1 und WO 2006/1 19760 A2 der Anmelderin erkenntlich, wird in einer Betrachterebene 2 ein Sichtbarkeitsbereich 3 erzeugt, durch welchen ein Betrachter eine rekonstruierte zweidimensionale und/oder dreidimensionale Szene beobachten kann, sofern der Betrachter sich in der Betrachterebene 2 befindet und wenigstens ein Auge 5 näherungsweise mit dem Ort des Sichtbarkeitsbereichs 3 zusammenfällt. Der Sichtbarkeitsbereich 3 kann dabei als virtuelles Betrachterfenster ausgebildet sein. Aus Darstellungsgründen wurde in den Figuren 2 und 3 das Auge 5 des Betrachters hinter dem Sichtbarkeitsbereich 3 gezeigt. Eine zu rekonstruierende Szene 4, hier nur schematisch gestrichelt und durch zwei Objektpunkte P1 und P2 dargestellt, soll in einem Frustrum 6 (pyramidenstumpfförmiger Kegel, der sich vom Sichtbarkeitsbereich 3 zur räumlichen Lichtmodulationseinrichtung 1 und darüber hinaus erstreckt) dargestellt werden. Die zu rekonstruierende Szene 4 weist dabei eine definierte Lage und einen definierten Abstand zu einem Betrachter auf.
Die in Figur 2 dargestellte räumliche Lichtmodulationseinrichtung 1 ist in ihrer Größe bzw. Ausdehnung leicht größer und weist einen größeren Abstand vom Sichtbarkeitsbereich 3 auf als in Fig. 3. Durch Bilden von Strahlen, ausgehend von den Rändern des Sichtbarkeitsbereichs 3 durch einen zu rekonstruierenden Objektpunkt, beispielsweise P2, hin zur Ebene der räumlichen Lichtmodulationseinrichtung 1 kann ein Bereich, bezugnehmend auf P2 ein Bereich S2, auf der Lichtmodulationseinrichtung 1 erzeugt werden, der als Subhologramm bezeichnet wird. In diesem Subhologramm ist der entsprechende Objektpunkt definiert, so dass für diesen Objektpunkt nur ein definierter Bereich S2 berechnet werden muss, der dann in die räumliche Lichtmodulationseinrichtung 1 kodiert wird. Gleiches gilt für den Objektpunkt P1 , der durch einen als Subhologramm bezeichneten Bereich S1 auf der räumlichen Lichtmodulationseinrichtung 1 definiert ist.
Hierbei entstehen gemäß Fig. 2 absolut gesehen kleine Subhologramme S1 und S2 auf der räumlichen Lichtmodulationseinrichtung. Aufgrund des vergleichsweise großen Pixelpitch der in diesem Ausführungsbeispiel vorlegenden räumlichen Lichtmodulationseinrichtung 1 erstrecken sich diese Subhologramme nur über wenige Modulationselemente 7, auch als Pixel bezeichnet (wie bereits oben erläutert), der räumlichen Lichtmodulationseinrichtung 1. Dies ist besonders vorteilhaft hinsichtlich des Rechenaufwandes zur Berechnung von Subhologrammen und zur komplexwertigen Addition der Subhologramme im Sichtbarkeitsbereich, wie nachfolgend noch erläutert wird. In Figur 3 ist eine in der Ausdehnung kleinere räumliche Lichtmodulationseinrichtung 10 dargestellt, die in ihrer Größe kleinere Modulationselemente 70 aufweist, wobei die räumliche Lichtmodulationseinrichtung 10 hinsichtlich des Abstandes näher am Sichtbarkeitsbereich 3 angeordnet ist. Für die gleichen Objektpunkte P1 und P2 der zu rekonstruierenden Szene 4 werden in diesem Ausführungsbeispiel bezüglich der räumlichen Lichtmodulationseinrichtung 10 entstehende Subhologramme S10 und S20 absolut gesehen größer. Da die räumliche Lichtmodulationseinrichtung 10 hier zudem kleinere Modulationselemente 70 (Pixel) und somit einen kleineren Pixelpitch aufweist als die räumliche Lichtmodulationseinrichtung 10 gemäß Fig. 1 , erstrecken sich die Subhologramme S10 und S20 hier über eine deutlich größere Anzahl an Modulationselementen 70. Der Aufwand für die Berechnung des Gesamthologramms aus der zu rekonstruierenden Szene 4 wäre daher in diesem Fall größer.
Das erfindungsgemäße Verfahren führt bei der Berechnung von Subhologrammen eine virtuelle Ebene der sich an einem realen Ort befindlichen räumlichen Lichtmodulationseinrichtung ein, um den Rechenaufwand zu minimieren. Damit ist es möglich, schnelle und exakte Rechenergebnisse zu erreichen, unabhängig von der Größe und dem Abstand der räumlichen Lichtmodulationseinrichtung von der Betrachterebene.
Unabhängig von der tatsächlichen Konfiguration der holographischen Anzeigevorrichtung, insbesondere der Lage der räumlichen Lichtmodulationseinrichtung und des optischen Systems, wird zunächst ein Subhologramm derart berechnet als befände sich die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung gemäß den Figuren 2 und 3 in einer realen Ebene der räumlichen Lichtmodulationseinrichtung 1 bzw. 10 und wird ausgehend von der realen Ebene der räumlichen Lichtmodulationseinrichtung berechnet. Anschließend wird mittels zweier Integraltransformationen, beispielsweise mittels zweier Fresneltransformationen, dieses Subhologramm in die reale Ebene der räumlichen Lichtmodulationseinrichtung, also in die tatsächlich vorhandene Ebene der räumlichen Lichtmodulationseinrichtung, transformiert, oder je nach Ausführung der holographischen Anzeigevorrichtung auch in die Abbildung der räumlichen Lichtmodulationseinrichtung, beispielsweise auf einen Schirm. Bezüglich der Figuren 2 und 3 würde bei dem erfindungsgemäßen Verfahren nun wie folgt vorgegangen. Beispielsweise liegt eine Konfiguration der Anzeigevorrichtung vor wie in Fig. 3 dargestellt, in welcher die räumliche Lichtmodulationseinnchtung 10 eine definierte Zahl N von Modulationselementen 70 in einem Betrachterabstand D aufweist. Für eine darzustellende bzw. zu rekonstruierende Szene 4 mit bekannten Koordinaten der Objektpunkte P1 bis Pn bzw. P10 bis Pn' wird für die Berechnung der einzelnen Subhologramme S1 bis Sn bzw. S10 bis Sn' für die einzelnen Objektpunkte bzw. für die Berechnung des Gesamthologramms virtuell die reale Ebene der räumlichen Lichtmodulationseinrichtung 10 derart an eine andere Position bzw. Ort bezüglich der zu rekonstruierenden Szene 4 verlegt, dass die neue scheinbare bzw. nur gedachte Position der realen Ebene der räumlichen Lichtmodulationseinrichtung 10 beispielsweise der Position der realen räumlichen Lichtmodulationseinrichtung 1 gemäß der Fig. 2 entspricht. Es soll darauf hingewiesen werden, dass die Position der realen Ebene der räumlichen Lichtmodulationseinrichtung 1 , 10 fest bzw. fix ist und nicht physisch sondern nur scheinbar bzw. virtuell verschoben wird. Die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung ist somit eine gedachte Größe, die zwar nicht physisch, aber doch in ihrer Funktionalität oder Wirkung vorhanden ist.
Vorteilhafterweise wird für die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung 1 , 10 eine Position bezüglich der zu rekonstruierenden Szene 4 gewählt, die innerhalb der zu rekonstruierenden Szene 4 liegt, so dass von einem Betrachter in der Betrachterebene 2 aus gesehen ein Teil der Objektpunkte P1 bis Pn in Ausbreitungsrichtung des von einer Beleuchtungseinrichtung der Anzeigevorrichtung ausgesandten Lichts gesehen vor und ein Teil der Objektpunkte P1 bis Pn hinter der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung 1 , 10 liegen, wobei die der Betrachterebene 2 am nächsten liegenden Objektpunkte nicht mehr als den halben virtuellen Betrachterabstand vor der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung 1 , 10 liegen sollen.
Das Verfahren ist jedoch nicht auf eine bestimmte Festlegung der Position der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung beschränkt.
Es kann sich auch dynamisch mit dem Inhalt der darzustellenden Szene die Position der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung virtuell verschieben, um beispielsweise Szenen mit wechselndem Tiefenbereich optimal berechnen zu können.
Die virtuelle Größe der Modulationselemente 7, 70 der räumlichen Lichtmodulationseinrichtung 1 , 10 ergibt sich nach dem Strahlensatz aus dem Verhältnis der Betrachterabstände der virtuellen Ebene und der realen Ebene der räumlichen Lichtmodulationseinrichtung multipliziert mit dem Pixelpitch der räumlichen Lichtmodulationseinrichtung.
Für die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung 1 , 10 wird ein Subhologramm bzw. ein Hologramm derart berechnet wie es nach dem Stand der Technik erfolgt, beispielsweise gemäß der WO 2008/025839 A1 , wenn sich tatsächlich eine räumliche Lichtmodulationseinrichtung in dieser Ebene befände. Dies kann so erfolgen, dass für jeden Objektpunkt P1 bis Pn ein Subhologramm in Form einer Linsenfunktion ermittelt wird, und die einzelnen Subhologramme danach kohärent aufaddiert werden.
Anschließend erfolgt eine einmalige rechnerische (zweidimensionale) Integraltransformation, beispielsweise eine Fresneltransformation, des Gesamthologramms, die der optischen Lichtausbreitung von der virtuellen Ebene der räumlichen Lichtmodulationseinrichtung hin zum Sichtbarkeitsbereich 3 entspricht. Danach erfolgt eine weitere rechnerische (zweidimensionale) Integraltransformation, beispielsweise auch hier eine Fresneltransformation, die der Lichtausbreitung vom Sichtbarkeitsbereich 3 zurück zur realen Ebene der räumlichen Lichtausbreitungseinrichtung 1 , 10 entspricht. Somit wird ein Gesamthologramm erhalten, das zumindest näherungsweise mit demjenigen Hologramm übereinstimmt, das nach dem Stand der Technik bei einer direkten Berechnung des Hologramms in der realen Ebene der räumlichen Lichtmodulationseinrichtung 1 , 10 erhalten wird. Das resultierende Hologramm kann dann in die räumliche Lichtmodulationseinrichtung 1 , 10 eingeschrieben bzw. kodiert werden.
Im Vergleich zur herkömmlichen Berechnung erfordert das Verfahren gemäß den Figuren 2 und 3 zwei zusätzliche Integraltransformationen. Andererseits kann für eine große Anzahl von Objektpunkten die Ersparnis im Berechnen und Aufaddieren der einzelnen Subhologramme mehr ins Gewicht fallen als die beiden Integraltransformationen, die nur für das gesamte Hologramm einmalig durchgeführt werden. Die nachfolgenden Ausführungsbeispiele gemäß den Figuren 4 bis 6 zeigen weitere Varianten des erfindungsgemäßen Verfahrens.
Die Figur 4 zeigt schematisch die Ausdehnung von Subhologrammen einer vorzugsweise dreidimensionalen darzustellenden Szene 4 in Analogie zu einer Einzelparallaxe-Kodierung in einer realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 und einer virtuellen Ebene 100' der räumlichen Lichtmodulationseinrichtung 100. Hierbei ist der Tiefenbereich der zu rekonstruierenden Szene 4 schematisch durch die ovale Begrenzung dargestellt. Die zu rekonstruierende Szene 4 wird hier ebenfalls in Objektpunkte P1 bis Pn zerlegt, wobei in Fig. 4 nur ein Objektpunkt P dargestellt ist. Für die Objektpunkte P1 bis Pn werden beispielsweise in Analogie zu einer Einzelparallaxe-Kodierung (single-parallax Kodierung) Subhologramme berechnet. Die durchgezogenen Linien in der Fig. 4 zeigen schematisch den Lichtweg von dem Objektpunkt P zum Sichtbarkeitsbereich 3 in Kodierungsrichtung von eindimensionalen Subhologrammen S1 und S2. Die gestrichelten Linien zeigen schematisch den Verlauf von dem Subhologramm S1 zum Sichtbarkeitsbereich 3 in der dazu senkrechten Richtung, in der das Subhologramm S1 die Ausdehnung von nur einem Modulationselement (Pixel) aufweist. Zur besseren Veranschaulichung ist beides in der Papierebene gezeichnet.
Das in der virtuellen Ebene 100' der räumlichen Lichtmodulationseinrichtung 100 berechnete eindimensionale Subhologramm S1 wird anschließend mittels einer Integraltransformation, beispielsweise mittels einer Fresneltransformation oder einer Fouriertransformation, in den Sichtbarkeitsbereich 3 und von dort aus anschließend in die reale Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 transformiert und verhält sich dort wie ein in zwei Dimensionen ausgedehntes Subhologramm. Jedoch sind die Brennweiten der Linsenfunktion des Subhologramms auf der realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 in beiden Richtungen (orthogonal zueinander) nicht gleich. In der einen Richtung, beispielsweise der Kodierungsrichtung des Subhologramms auf der virtuellen Ebene 100' der räumlichen Lichtmodulationseinrichtung 100, liegt der Brennpunkt (Fokus) der Linsenfunktion in der Ebene des Objektpunktes, in der dazu senkrechten Richtung liegt der Brennpunkt der Linsenfunktion auf der virtuellen Ebene 100' der räumlichen Lichtmodulationseinrichtung 100.
Diese Variante des Verfahrens ist besonders vorteilhaft einsetzbar für eine räumliche Lichtmodulationseinrichtung, die sich in einem kleineren Abstand zur Betrachterebene 2 befindet und bei der die virtuelle Ebene der räumlichen Lichtmodulationseinrichtung einen größeren Abstand zur Betrachterebene 2 aufweist als die reale Ebene der räumlichen Lichtmodulationseinrichtung gemäß der Fig. 4.
In Fig. 5 ist schematisch die Ausdehnung von Subhologrammen einer vorzugsweise darzustellenden dreidimensionalen Szene 4 mit einem ausgedehnten Tiefenbereich in einer realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 und in zwei virtuellen Ebenen 100' und 100" der räumlichen Lichtmodulationseinrichtung 100 dargestellt.
Fig. 5 zeigt somit schematisch die Ausdehnung von Subhologrammen S1 , S2 und S3 einer zu rekonstruierenden darzustellenden Szene 4 mit einem ausgedehnten Tiefenbereich, der auch hier wie in Fig. 4 durch die ovale Begrenzung der zu rekonstruierenden Szene 4 dargestellt ist, in einer realen Ebene 100 der räumlichen Lichtmodulationseinnchtung 100 und in zwei virtuellen Ebenen 100' und 100" der räumlichen Lichtmodulationseinrichtung 100.
Gemäß Fig. 5 wird die zu rekonstruierende Szene 4 in drei Tiefenbereichsabschnitte TA1 , TA2 und TA3 unterteilt. Jeder Tiefenbereichsabschnitt TA1 , TA2 und TA3 wird einem der beiden virtuellen Ebenen 100', 100" der räumlichen Lichtmodulationseinrichtung 100 oder der realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 zugeordnet. Das bedeutet hier gemäß der Fig. 5, dass der Tiefenbereichsabschnitt TA1 der virtuellen Ebene 100' der räumlichen Lichtmodulationseinnchtung 100, der Tiefenbereichsabschnitt TA2 der virtuellen Ebene 100" der räumlichen Lichtmodulationseinrichtung 100 und der Tiefenbereichsabschnitt TA3 der realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 zugeordnet ist. Ferner sind alle Objektpunkte, die in dem Tiefenbereichsabschnitt TA1 liegen, wie beispielsweise der Objektpunkt P1 , der virtuellen Ebene 100' der räumlichen Lichtmodulationseinrichtung 100 zugeordnet und mittels dieser werden dann die Subhologramme für die jeweiligen Objektpunkte in diesem Tiefenbereichsabschnitt TA1 berechnet. Alle Objektpunkte, die in dem Tiefenbereichsabschnitt TA2 liegen, wie beispielsweise der Objektpunkt P2, sind der virtuellen Ebene 100" der räumlichen Lichtmodulationseinrichtung 100 zugeordnet, die sich von der virtuellen Ebene 100' der räumlichen Lichtmodulationseinrichtung 100 in ihrer Position bzw. in ihrem Ort unterscheidet und hier näher im Abstand an der Betrachterebene 3 angeordnet ist. Dem Tiefenbereichsabschnitt TA3 sind dann alle restlichen verbleibenden Objektpunkte, wie beispielsweise der Objektpunkt P3, zugeordnet, wobei diese Objektpunkte der realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 zugeordnet sind. In den jeweiligen Tiefenbereichsabschnitten TA1 , TA2 und TA3 werden dann für die virtuellen Ebenen 100' und 100" der räumlichen Lichtmodulationseinrichtung 100 und der realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 die einzelnen Subhologramme, wie S1 , S2 und S3 bis Sn, zu den jeweiligen Objektpunkten, wie P1 , P2 und P3 bis Pn, berechnet. Die Subhologramme S1 bis Sn können dabei als Einzelparallaxe-Subhologramme oder aber auch als Vollparallaxe-Subhologramme berechnet werden.
Bei einer Einzelparallaxe-Berechnung wird die Aufteilung in virtuelle Ebenen der räumlichen Lichtmodulationseinrichtung und die Unterteilung der zu rekonstruierenden Szene 4 in mehrere Tiefenbereichsabschnitte TA1 , TA2 und TA3 derart vorgenommen, dass ein Betrachter die rekonstruierte zweidimensionale und/oder dreidimensionale Szene mit keinem oder nur geringem Auflösungsverlust sehen kann. Bei einer Vollparallaxe-Berechnung wird die Aufteilung in virtuelle Ebenen der räumlichen Lichtmodulationseinrichtung und die Unterteilung des Tiefenbereiches der zu rekonstruierenden Szene 4 in Abschnitte derart vorgenommen, dass eine maximale Größe der Subhologramme nicht überschritten wird, wie bereits detailliert vor der Figurenbeschreibung erläutert.
Die berechneten Subhologramme S1 , S2 und S3 bzw. S1 bis Sn der Tiefenbereichsabschnitte TA1 , TA2 und TA3 werden anschließend in die Betrachterebene 2 bzw. in den Sichtbarkeitsbereich 3 transformiert und dort aufsummiert. Danach werden die aufsummierten Subhologramme bzw. das Gesamthologramm in die reale Ebene der räumlichen Lichtmodulationseinrichtung 100 transformiert.
Wie aus Fig. 5 erkenntlich ist, sind die Subhologramme S1 und S2 für die entsprechenden Objektpunkte P1 und P2 der zu rekonstruierenden Szene 4 in den beiden virtuellen Ebenen 100' und 100" der räumlichen Lichtmodulationseinrichtung 100 in ihrer Ausdehnung bzw. Größe kleiner als wenn sie direkt in der realen Ebene 100 der räumlichen Lichtmodulationseinrichtung 100 berechnet worden wären.
Die Figur 6 zeigt in einer graphischen Darstellung ein Zahlenbeispiel für die Ausdehnung von Subhologrammen für verschiedene Abstände der (virtuellen und realen) Ebene 100, 100', 100" der räumlichen Lichtmodulationseinrichtung 100 vom Sichtbarkeitsbereich 3 in der Betrachterebene 2. Auf der Abszisse des dargestellten Diagramms ist der Objektpunktabstand vom Sichtbarkeitsbereich und auf der Ordinate ist die Größe des Subhologramms bzw. die Anzahl der durch das Subhologramm beschriebenen Modulationselemente (Pixel) aufgetragen. Für einen ca. 1 1 mm großen Sichtbarkeitsbereich sind somit die Größen der Subhologramme (in Modulationselementen (Pixeln) pro Subhologramm) als Funktion des Objektpunktabstandes vom Sichtbarkeitsbereich für verschiedene Abstände der räumlichen Lichtmodulationseinrichtung vom Sichtbarkeitsbereich angegeben. Das im Diagramm dargestellte Beispiel soll nur beispielhaft gesehen werden.
Ein Objektpunkt einer zu rekonstruierenden Szene, der 2 m von einem Betrachter entfernt liegt, erzeugt beispielsweise ein Subhologramm mit einer Größe von ca. 200 x 1 Modulationselement (Pixel) bei einer Einzelparallaxe-Kodierung (single-parallax Kodierung) oder ein Subhologramm mit einer Größe von ca. 200 x 200 Modulationselemente bei einer Vollparallaxe-Kodierung (full-parallax Kodierung) auf einer räumlichen Lichtmodulationseinrichtung (SLM), die 0,7 m vom Sichtbarkeitsbereich in der Betrachterebene entfernt ist. Auf einer räumlichen Lichtmodulationseinrichtung (SLM), die jedoch 2,2 m vom Sichtbarkeitsbereich in der Betrachterebene entfernt ist, ist aber das Subhologramm desselben Objektpunktes in der Ausdehnung nur wenige Modulationselemente (Pixel) groß, beispielsweise <10x1 Modulationselemente bei einer Einzelparallaxe-Kodierung oder <10x10 Modulationselemente bei einer Vollparallaxe- Kodierung. Umgekehrt verhält es sich für Objektpunkte, die im Abstand näher an einem Betrachter liegen. Diese Objektpunkte sind auf einer im Abstand nahen räumlichen Lichtmodulationseinrichtung in ihrer Ausdehnung bzw. Größe klein, aber auf einer im Abstand entfernteren räumlichen Lichtmodulationseinrichtung in ihrer Ausdehnung größer. Die gestrichelten Linien im Diagramm gemäß der Fig. 6 zeigen schematisch eine Unterteilung einer zu rekonstruierenden Szene in vier Tiefenbereichsabschnitte. Beispielsweise kann die reale Ebene der räumlichen Lichtmodulationseinrichtung in einem Abstand von 0,7 m zum Sichtbarkeitsbereich und die virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung in einem Abstand zum Sichtbarkeitsbereich von 1 m, von 2,2 m und im Unendlichen positioniert sein. Umgekehrt können aber auch die reale Ebene der räumlichen Lichtmodulationseinrichtung beispielsweise in einem Abstand von 2,2 m und eine virtuelle Ebene der räumlichen Lichtmodulationseinrichtung in einem Abstand von 0,7 m zum Sichtbarkeitsbereich liegen. Durch diese Unterteilung des Tiefenbereichs in Tiefenbereichsabschnitte wird erreicht, dass alle Subhologramme für Objektpunkte im Abstand > ca. 62 cm bis Unendlich vom Sichtbarkeitsbereich aus kleiner als 70 x 1 Modulationselemente für eine Einzelparallaxe-Kodierung oder 70 x 70 Modulationselemente für eine Vollparallaxe-Kodierung bleiben. Ohne die Verwendung von virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung würden die Subhologramme zum Beispiel bei einer Vollparallaxe-Kodierung eine Ausdehnung von bis zu 300 x 300 Modulationselemente erreichen, was einen erhöhten Rechenaufwand bedeuten würde.
In Fig. 7 ist eine Anzeigevorrichtung zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen dargestellt, wie sie beispielsweise als Head Mounted Display (HMD) oder Hokular eingesetzt werden kann. Bei einem HMD wird üblicherweise ein vergößertes Bild einer räumlichen Lichtmodulationseinrichtung erzeugt, das virtuell entsteht. Wie bereits erwähnt, kann die physisch vorhandene, also reale, Ebene der räumlichen Lichtmodulationseinrichtung im Sinne der Erfindung auch als Bildebene der räumlichen Lichtmodulationseinrichtung verstanden werden. Zur besseren Übersichtlichkeit sind in Fig. 7 eine Lichtquelle und ein Kollimationselement, hier in Form einer Linse, wie sie beispielsweise in Fig. 1 c gezeigt werden, zur Beleuchtung einer räumlichen Lichtmodulationseinrichtung 1 10 nicht dargestellt. Die räumliche Lichtmodulationseinrichtung 1 10 ist hier an einer Position in der Anzeigevorrichtung derart angeordnet, dass der Abstand zwischen der räumlichen Lichtmodulationseinrichtung 1 10 und einer Feldlinse FL ähnlich groß ist, wie der Abstand zwischen der Feldlinse FL und einer Betrachterebene 2. Entspricht beispielsweise der Abstand zwischen der Feldlinse FL und der Betrachterebene 2 der Brennweite der Feldlinse FL und ist der Abstand zwischen der räumlichen Lichtmodulationseinrichtung 1 10 und der Feldlinse FL geringfügig kleiner als die Brennweite der Feldlinse FL, so ist aus dem Sichtbarkeitsbereich 3 ein vergrößertes virtuelles Bild der räumlichen Lichtmodulationseinrichtung 1 10 zu sehen. Je mehr der Abstand zwischen der räumlichen Lichtmodulationseinrichtung 1 10 und der Feldlinse FL sich der Brennweite der Feldlinse FL annähern würde, desto weiter entfernt und stärker vergrößert wäre das virtuelle Bild. Es sind selbstverständlich auch andere Anordnungen möglich. Inbesondere kann die Feldlinse FL, die hier vereinfachend als einzelne Linse dargestellt ist, auch ein zusammengesetztes System aus mehreren Linsen sein. In diesem Fall würden die Angaben zu Abständen der Feldlinse FL zu Sichtbarkeitsbereich 3 und zu räumlicher Lichtmodulationseinrichtung 1 10 beispielsweise für die Hauptebenen des Linsensystems gelten.
Ferner sind Lichtstrahlen dargestellt, die von einem Modulationselement (Pixel) der räumlichen Lichtmodulationseinrichtung 1 10 ausgehen und in die Mitte und and die Ränder eines Betrachterfensters 3 gerichtet werden. Die Lichtstrahlen werden dabei durch die Feldlinse FL derart abgelenkt als ob sie von einem vergrößerten Bild 1 1 OB der räumlichen Lichtmodulationseinrichtung 1 10 in größerer Entfernung kommen bzw. ausgesandt werden. Zwischen der räumlichen Lichtmodulationseinrichtung 1 10 und der Feldlinse FL ist ein Abbildungssystem bzw. ein Fokussiersystem AS vorgesehen, das hier vorteilhafterweise mit variabler Brennweite ausgeführt ist. Die Brennweite des Abbildungssystem AS kann somit steuerbar variiert werden. Das Abbildungssystem AS kann selbstverständlich auch an einer anderen geeigneten Position in der Anzeigevorrichtung angeordnet sein.
Stellt die Feldlinse FL ein Linsensystem dar, das aus mehreren Linsen zusammengesetzt ist, so kann das Abbildungssystem AS mit variabler Brennweite auch Teil der Feldlinse FL sein beziehungsweise die Feldlinse FL selbst kann als Abbildungssystem bzw. Fokussiersystem AS mit variabler Brennweite ausgebildet sein. Das Abbildungssystem bzw. Fokussiersystem AS mit variabler Brennweite kann beispielsweise auch als ein System aus mehreren Linsen ausgebildet sein, bei denen der Abstand der einzelnen Linsen zueinander variiert werden kann und auf diese Weise die Brennweite des Gesamtsystems verändert wird.
Ferner zeigt Fig. 7 eine zu rekonstruierende dreidimensionale Szene 4, die nur beispielhaft dargestellt ist und die sich in diesem Ausführungsbeispiel in einem relativ großen Abstand hinter einem Bild 1 1 OB der räumlichen Lichtmodulationseinrichtung 1 10 befindet. Beispielsweise befindet sich das Bild der räumlichen Lichtmodulationseinrichtung 1 10 in einem Abstand von 0,7 m zum Sichtbarkeitsbereich 3. Die dreidimensionale Szene 4 ist aber weiter als 2,5 m vom Sichtbarkeitsbereich 3 entfernt. Die zu rekonstruierende Szene 4 wird in einzelne Objektpunkte P1 - Pn zur Berechnung von in die räumliche Lichtmodulationseinrichtung 1 10 zu kodierenden Hologrammen zerlegt.
Zur Berechnung der Hologramme für ein HMD oder Holular wird eine virtuelle Ebene 1 10' der räumlichen Lichtmodulationseinrichtung 1 10 derart in Abhängigkeit vom Inhalt der zu rekonstruierenden Szene 4 bestimmt und dann so in der Anzeigevorrichtung an einer Position festgelegt, dass eine für die Berechnung günstige Größe der Subhologramme entsteht bzw. erzielt wird. Beispielsweise kann, wie oben beschrieben, die virtuelle Ebene 1 10' so festgelegt werden, dass entweder die maximale oder die mittlere Größe der Subhologramme minimiert wird. Gemäß Fig. 7 ist hier die virtuelle Ebene 1 10' innerhalb der zu rekonstruierenden Szene 4 derart angeordnet bzw. festgelegt, dass ein Teil der Objektpunkte P1 - Pn vor und ein Teil der Objektpunkte P1 - Pn hinter der virtuellen Ebene 1 10' liegt. Fig. 7 zeigt das Abbildungssystem AS variabler Brennweite im nicht angesteuerten bzw. variierbaren bzw. ausgeschalteten Modus.
In Fig. 8 ist die Anzeigevorrichtung gemäß Fig. 7 dargestellt, wobei in dieser Ausführung das Abbildungssystem AS variabler Brennweite derart angesteuert wird, dass die Bildebene 1 1 OB der räumlichen Lichtmodulationseinrichtung 1 10 so verschoben wurde, dass diese Bildebene 1 1 OB mit der virtuellen Ebene 1 10' der räumlichen Lichtmodulationseinrichtung 1 10 zusammenfällt. In dieser Ebene 1 1 OB bzw. 1 10' der räumlichen Lichtmodulationseinrichtung 1 10 werden dann die Subhologramme der einzelnen Objektpunkte P1 - Pn berechnet, aufsummiert und in die räumliche Lichtmodulationseinrichtung 1 10 einkodiert.
Es ist auch möglich, nicht nur eine virtuelle Ebene der räumlichen Lichtmodulationseinrichtung zu erzeugen und festzulegen, sondern eine Vielzahl davon, d.h. wenigstens zwei virtuelle Ebenen. Das Bild der räumlichen Lichtmodulationseinrichtung kann dann in eine geeignete virtuelle Ebene verschoben werden, wobei die Berechnung und Kodierung der Subhologramme in die räumliche Lichtmodulationseinrichtung nach einer der vielen vorher beschriebenen erfindungsgemäßen Verfahrensweisen vorgenommen werden kann. Es ist auch möglich, im Fall von wenigstens zwei virtuellen Ebenen zeitlich sequentiell das Bild der räumlichen Lichtmodulationseinrichtung erst in eine virtuelle Ebene und danach in eine andere virtuelle Ebene zu verschieben. Insbesondere kann bei dynamischen Hologramminhalten, bei denen sich der Tiefenbereich der zu rekonstruierenden vorzugsweise dreidimensionalen Szene ändert, die Verschiebung des Bildes 1 1 OB der räumlichen Lichtmodulationseinrichtung 1 10 auf die jeweilige virtuelle Ebene 1 10' der räumlichen Lichtmodulationseinrichtung 1 10 an den jeweiligen Tiefenbereich der Szene des darzustellenden Frames angepasst werden.
Durch die Unterteilung der zu rekonstruierenden und darzustellenden Szene in Tiefenbereichsabschnitte und die Verwendung von virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung wird somit der Aufwand für die Berechnung von Subhologrammen wesentlich reduziert, wodurch sich die Darstellung von rekonstruierten Szenen zeitlich erheblich verbessert.
Demgegenüber steht zwar der zusätzliche Aufwand, die Subhologrammdaten aus mehreren virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung in den Sichtbarkeitsbereich zu transformieren, dort aufzusummieren und danach in die reale Ebene der räumlichen Lichtmodulationseinrichtung zu transformieren. Durch die Verwendung von virtuellen Ebenen der räumlichen Lichtmodulationseinrichtung und geeignete Positionierung dieser virtuellen Ebenen wird der Gesamtrechenaufwand reduziert.
Auf diese Weise können Vorteile der Berechnungsverfahren zu Integraltransformationen und zur direkten Subhologrammberechnung kombiniert werden.
Die Erfindung ist nicht auf die hier dargestellten Ausführungsbeispiele beschränkt und kann zur Minimierung des Rechenaufwands für computergenerierte Hologramme verwendet werden. Abschließend sei ganz besonders darauf hingewiesen, dass die vorstehend beschriebenen Ausführungsbeispiele lediglich zur Beschreibung der beanspruchten Lehre dienen, diese jedoch nicht auf die Ausführungsbeispiele einschränken.

Claims

Patentansprüche
1. Verfahren zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen in einer Anzeigevorrichtung, wobei eine zu rekonstruierende Szene (4) in Objektpunkte (P, P1 - Pn) zerlegt wird und die Objektpunkte (P, P1 - Pn) als Subhologramme (S1 - Sn) in wenigstens eine räumliche Lichtmodulationseinrichtung (1 , 10, 100) der Anzeigevorrichtung kodiert werden, wobei eine rekonstruierte Szene von einem Sichtbarkeitsbereich (3) aus betrachtet wird, wobei
- wenigstens eine virtuelle Ebene (100', 100", 1 10') der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) ausgehend von einer realen Ebene der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) festgelegt wird, und
eine Berechnung von Subhologrammen (S1 - Sn) in der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung durchgeführt wird.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass in der wenigstens einen virtuellen Ebene (100', 100") der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100) die Objektpunkte (P, P1 - Pn) der zu rekonstruierenden Szene (4) als Subhologramme (S1 - Sn) berechnet werden, die berechneten Subhologramme (S1 - Sn) von der wenigstens einen virtuellen Ebene (100', 100") der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100) mittels einer Integraltransformation in den Sichtbarkeitsbereich (3) transformiert und dort aufsummiert werden, und die aufsummierten Subhologramme (S1 - Sn) mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich (3) in die reale Ebene (100) der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) transformiert und als Hologramm eingeschrieben werden.
3. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass in der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) die Objektpunkte der zu rekonstruierenden Szene (4) als Subhologramme (S1 - Sn) berechnet und in der wenigstens einen virtuellen Ebene die Subhologramme aufsummiert werden, die aufsummierten Subhologramme von der wenigstens einen virtuellen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert werden, und mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) transformiert und als Hologramm eingeschrieben werden.
4. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass bei Festlegung von wenigstens zwei virtuellen Ebenen der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) den Objektpunkten der zu rekonstruierenden Szene (4) jeweils eine dieser virtuellen Ebenen zugeordnet wird und die Objektpunkte als Subhologramme (S1 - Sn) in der ihnen zugeordneten virtuellen Ebene berechnet und in jeder virtuellen Ebene die Subhologramme der ihr zugeordneten Objektpunkte aufsummiert werden, die aufsummierten Subhologramme von den wenigstens zwei virtuellen Ebenen mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert werden, im Sichtbarkeitsbereich die Transformierten der wenigstens zwei virtuellen Ebenen aufsummiert werden, und das Gesamtergebnis der aufsummierten Transformierten mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) transformiert und als Hologramm eingeschrieben wird.
5. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass bei Festlegung von wenigstens zwei virtuellen Ebenen der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) den Objektpunkten der zu rekonstruierenden Szene (4) jeweils eine dieser virtuellen Ebenen zugeordnet wird und die Objektpunkte als Subhologramme (S1 - Sn) in der ihnen zugeordneten virtuellen Ebene berechnet und in jeder virtuellen Ebene die Subhologramme der ihr zugeordneten Objektpunkte aufsummiert werden, die aufsummierten Subhologramme von den wenigstens zwei virtuellen Ebenen mittels einer Integraltransformation in den Sichtbarkeitsbereich transformiert werden, für jede der wenigstens zwei virtuellen Ebenen die zugehörige Transformierte mittels einer weiteren Integraltransformation vom Sichtbarkeitsbereich in die reale Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) transformiert wird, in der realen Ebene der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) die Transformierten der wenigstens zwei virtuellen Ebenen aufsummiert werden und das Gesamtergebnis der aufsummierten Transformierten als Hologramm eingeschrieben wird.
6. Verfahren nach einem der vorhergehenden Ansprüche 1 bis 5, dadurch gekennzeichnet, dass die Transformation der Subhologramme (S1 - Sn) oder der aufsummierten Subhologramme von einer virtuellen Ebene in den Sichtbarkeitsbereich (3) oder die weitere Integraltransformation vom Sichtbarkeitsbereich (3) in die reale Ebene (100) der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) mittels einer eindimensionalen Integraltransformation bei einer Einzelparallaxe-Kodierung oder einer zweidimensionalen Integraltransformation bei einer Einzelparallaxe-Kodierung oder Vollparallaxe-Kodierung erfolgt.
7. Verfahren nach einem der vorhergehenden Ansprüche 1 bis 6, dadurch gekennzeichnet, dass die Lage der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) innerhalb des Tiefenbereichs der zu rekonstruierenden Szene (4) gewählt wird, wobei der Tiefenbereich der zu rekonstruierenden Szene (4) durch den Objektpunkt (P, P1 - Pn) mit dem kleinsten Abstand zum Sichtbarkeitsbereich (3) und den Objektpunkt (P, P1 - Pn) mit dem größten Abstand zum Sichtbarkeitsbereich (3) begrenzt wird.
8. Verfahren nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass die Lage der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) in Bezug auf den Tiefenbereich der zu rekonstruierenden Szene (4) derart gewählt wird, dass die sichtbare Auflösung bei der Rekonstruktion der Szene einen vorgegebenen Wert nicht unterschreitet.
9. Verfahren nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass die zu rekonstruierende Szene (4) in wenigstens zwei Tiefenbereichsabschnitte (TA1 , TA2, TA3) zerlegt wird, wobei den wenigstens zwei Tiefenbereichsabschnitten (TA1 , TA2, TA3) jeweils eine virtuelle Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) zugeordnet wird und für alle Objektpunkte (P, P1 - Pn), die innerhalb eines Tiefenbereichsabschnitts (TA1 , TA2, TA3) liegen, die Subhologramme (S1 - Sn) in der dem Tiefenbereichsabschnitt zugeordneten virtuellen Ebene berechnet werden.
10. Verfahren nach Anspruch 9, dadurch gekennzeichnet, dass eine virtuelle Ebene (100', 100", 1 10') der den wenigstens zwei Tiefenbereichsabschnitten (TA1 , TA2, TA3) zugeordneten virtuellen Ebenen (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) mit der realen Ebene (100) der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) zusammenfällt.
1 1. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass das Aufsummieren der für die reale Ebene (100) der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) berechneten Subhologramme (S1 - Sn) entweder in der realen Ebene (100) der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) oder im Sichtbarkeitsbereich (3) erfolgt.
12. Verfahren nach einem der Ansprüche 1 bis 1 1 , dadurch gekennzeichnet, dass die einzelnen Objektpunkte (P, P1 - Pn) der zu rekonstruierenden Szene (4) in Form von Subhologrammen (S1 - Sn) auf der realen Ebene (100) der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) als ein Linsenelement mit unterschiedlichen Brennweiten in horizontaler und vertikaler Richtung kodiert werden.
13. Verfahren nach einem der Ansprüche 1 bis 12, dadurch gekennzeichnet, dass die Berechnung der Subhologramme (S1 - Sn) in der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) mittels einer zweidimensionalen Vollparallaxe-Kodierung oder mittels einer eindimensionalen Einzelparallaxe-Kodierung erfolgt.
14. Verfahren nach einem der Ansprüche 1 bis 13, dadurch gekennzeichnet, dass die Anzahl der virtuellen Ebenen (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) sowie der Abstand dieser virtuellen Ebenen (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) zum Sichtbarkeitsbereich (3) in Abhängigkeit vom Tiefenbereich der zu rekonstruierenden Szene (4) derart gewählt wird, dass die Größe in Form einer Anzahl von Modulationselementen (7, 70) der für die zu rekonstruierende Szene (4) zu berechnenden Subhologramme (S1 - Sn) einen vorgegebenen Wert nicht überschreitet.
15. Verfahren nach einem der Ansprüche 1 bis 13, dadurch gekennzeichnet, dass der Abstand der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) zum Sichtbarkeitsbereich (3) in Abhängigkeit von der Position aller Objektpunkte (P, P1 - Pn) der zu rekonstruierenden Szene (4) derart gewählt wird, dass die mittlere, vorzugsweise über alle Objektpunkte (P, P1 - Pn) gemittelte, Größe in Form einer Anzahl von Modulationselementen (7, 70) der für die zu rekonstruierende Szene (4) zu berechnenden Subhologramme (S1 - Sn) ein Minimum einnimmt.
16 Verfahren nach einem der Ansprüche 1 bis 13, 15, dadurch gekennzeichnet, dass die Anzahl der virtuellen Ebenen (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) auf einen vorgebbaren Wert beschränkt wird.
17. Verfahren nach einem der Ansprüche 1 bis 16, dadurch gekennzeichnet, dass die Lage der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) bei einer zeitlichen Änderung des Tiefenbereichs der zu rekonstruierenden Szene (4) dem neuen Tiefenbereich angepasst wird.
18. Verfahren nach einem der Ansprüche 1 bis 17, dadurch gekennzeichnet, dass bei Nachführung des Sichtbarkeitsbereiches (3) in axialer und/oder dazu lateraler Richtung entsprechend einer detektierten Position eines Betrachters der rekonstruierten Szene die Anzahl und Lage der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) der neuen Position des Sichtbarkeitsbereiches (3) angepasst wird.
19. Verfahren nach einem der Ansprüche 1 bis 18, dadurch gekennzeichnet, dass die Abweichung des berechneten Hologramms der zu rekonstruierenden Szene (4) mittels der wenigstens einen virtuellen Ebene (100', 100", 1 10') der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) von einem direkt in der realen Ebene (100) der räumlichen Lichtmodulationseinrichtung (1 , 10, 100, 1 10) berechneten Hologramm für die gleiche Szene ein definiertes Kriterium nicht überschreitet.
20. Verfahren nach einem der Ansprüche 1 bis 19, dadurch gekennzeichnet, dass bei Verwendung einer Anzeigevorrichtung für zweidimensionale und/oder dreidimensionale Szenen, bei der eine Bildebene der wenigstens einen räumlichen Lichtmodulationseinrichtung erzeugt wird, die als reale Ebene der räumlichen Lichtmodulationseinrichtung (1 10) wirkt, in Abhängigkeit vom Inhalt einer zu rekonstruierenden Szene wenigstens eine virtuelle Ebene (1 10') der wenigstens einen räumlichen Lichtmodulationseinrichtung (1 10) bestimmt wird, und die Bildebene der räumlichen Lichtmodulationseinrichtung (1 10) derart verschoben wird, dass diese mit der virtuellen Ebene (1 10') der räumlichen Lichtmodulationseinrichtung (1 10) zusammenfällt, die Objektpunkte der zu rekonstruierenden Szene (4) als Subhologramme berechnet und aufsummiert werden und als Hologramm eingeschrieben werden.
21. Anzeigevorrichtung, insbesondere eine holographische Anzeigevorrichtung zur Darstellung von zweidimensionalen und/oder dreidimensionalen Szenen, aufweisend eine räumliche Lichtmodulationseinrichtung (1 , 10, 100, 1 10), wobei die Lichtmodulationseinrichtung (1 , 10, 100, 1 10) geeignet ist, das Verfahren nach einem der Ansprüche 1 bis 20 durchzuführen.
22. Anzeigevorrichtung nach Anspruch 21 , dadurch gekennzeichnet, dass die Anzeigevorrichtung eine Bildebene der räumlichen Lichtmodulationseinrichtung (1 10) und ein Abbildungssystem (AS) aufweist, wobei das Abbildungssystem (AS) derart ausgestaltet ist, dass die Lage der Bildebene variierbar ist.
23. Anzeigevorrichtung nach Anspruch 22, dadurch gekennzeichnet, dass das Abbildungssystem (AS) wenigstens ein Element aufweist, dessen Brennweite variabel ausgebildet ist.
24. Anzeigevorrichtung nach einem der Ansprüche 21 bis 23, dadurch gekennzeichnet, dass die Anzeigevorrichtung als Head-Mounted-Display ausgebildet ist.
PCT/EP2016/056761 2015-04-01 2016-03-29 Verfahren zur berechnung von hologrammen zur holographischen rekonstruktion von zweidimensionalen und/oder dreidimensionalen szenen Ceased WO2016156287A1 (de)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017550816A JP6893880B2 (ja) 2015-04-01 2016-03-29 二次元および/または三次元シーンのホログラフィック再構成のホログラム計算のための方法
CN201680032235.6A CN107710080B (zh) 2015-04-01 2016-03-29 用于计算二维和/或三维场景的全息重建的全息图的方法
US15/563,016 US11460809B2 (en) 2015-04-01 2016-03-29 Method for computing holograms for holographic reconstruction of two-dimensional and/or three-dimensional scenes
KR1020177031624A KR102647998B1 (ko) 2015-04-01 2016-03-29 2차원 및/또는 3차원 장면의 홀로그램 재구성을 위한 홀로그램의 계산 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102015205873.5 2015-04-01
DE102015205873.5A DE102015205873A1 (de) 2015-04-01 2015-04-01 Verfahren zur Berechnung von Hologrammen zur holographischen Rekonstruktion von zweidimensionalen und/oder dreidimensionalen Szenen

Publications (1)

Publication Number Publication Date
WO2016156287A1 true WO2016156287A1 (de) 2016-10-06

Family

ID=55646569

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2016/056761 Ceased WO2016156287A1 (de) 2015-04-01 2016-03-29 Verfahren zur berechnung von hologrammen zur holographischen rekonstruktion von zweidimensionalen und/oder dreidimensionalen szenen

Country Status (7)

Country Link
US (1) US11460809B2 (de)
JP (1) JP6893880B2 (de)
KR (1) KR102647998B1 (de)
CN (1) CN107710080B (de)
DE (1) DE102015205873A1 (de)
TW (1) TWI710868B (de)
WO (1) WO2016156287A1 (de)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018146326A2 (de) 2017-02-13 2018-08-16 Seereal Technologies S.A. Lichtleitvorrichtung und anzeigevorrichtung zur darstellung von szenen
JP2018180199A (ja) * 2017-04-11 2018-11-15 国立研究開発法人情報通信研究機構 ホログラム製造方法及びホログラム記録装置
WO2019012028A1 (de) 2017-07-13 2019-01-17 Seereal Technologies S.A. Anzeigevorrichtung zur vergrösserung des sichtfelds
WO2019076963A1 (de) 2017-10-18 2019-04-25 Seereal Technologies S.A. Anzeigevorrichtung und verfahren zur erzeugung eines grossen sichtfeldes
EP4357856A1 (de) * 2022-10-20 2024-04-24 Envisics Ltd. Hologrammberechnung für eine kompakte head-up-anzeige

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10768630B2 (en) * 2017-02-09 2020-09-08 International Business Machines Corporation Human imperceptible signals
EP3590001B1 (de) * 2017-02-28 2023-01-04 CY Vision Inc. Augennahe anzeigevorrichtung mit einem räumlichen lichtmodulator
US11137720B2 (en) 2018-03-21 2021-10-05 Samsung Display Co., Ltd. Holographic display device
KR102566408B1 (ko) * 2018-04-24 2023-08-11 삼성전자주식회사 확장된 시야창을 제공하는 3차원 영상 디스플레이 장치 및 방법
GB2569206B (en) * 2018-05-25 2019-12-04 Dualitas Ltd A method of displaying a hologram on a display device comprising pixels
CN108762033B (zh) * 2018-05-28 2022-12-09 江苏慧光电子科技有限公司 成像方法和光学系统及其存储介质、芯片与组合
CN110361951A (zh) * 2019-06-11 2019-10-22 北京理工大学 一种扩大视场的全息显示方法、装置及系统
CN111578867B (zh) * 2020-04-10 2021-08-24 清华大学深圳国际研究生院 基于多次错位压缩全息重构的三维成像方法及系统
KR102603032B1 (ko) * 2020-06-05 2023-11-16 한국전자통신연구원 축 분할 기반의 홀로그램 생성 방법 및 장치
CN113343268B (zh) * 2021-06-28 2023-05-12 福建师范大学 一种可控放大解密的多三维场景加解密方法
GB2614286B (en) * 2021-12-23 2024-01-17 Envisics Ltd Hologram calculation for compact head-up display
WO2025049975A1 (en) * 2023-09-01 2025-03-06 Swave Bv System and methods for display of 3d multi-media

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006066919A1 (en) 2004-12-23 2006-06-29 Seereal Technologies Gmbh A method of computing a hologram
WO2006119760A2 (de) 2005-05-13 2006-11-16 Seereal Technologies Gmbh Projektionsvorrichtung und verfahren zur holographischen rekonstruktion von szenen
WO2008025839A1 (de) 2006-09-01 2008-03-06 Seereal Technologies S.A. Verfahren zum generieren von videohologrammen in echtzeit mittels subhologrammen
WO2008028829A1 (de) * 2006-09-05 2008-03-13 Seereal Technologies S.A. Vorrichtung und verfahren zum nachführen eines betrachterfensters
US20080252950A1 (en) 2002-11-13 2008-10-16 Seereal Technologies Gmbh Video Hologram and Device for Reconstructing Video Holograms for Large Objects
US20140022239A1 (en) * 2012-07-20 2014-01-23 City University Of Hong Kong Generating full-parallax digital holograms

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3059590B2 (ja) * 1992-09-30 2000-07-04 富士通株式会社 立体表示方法及び装置
DE102006059400B4 (de) * 2006-12-12 2019-12-24 Seereal Technologies S.A. Display-Einrichtung zur Erzeugung von Rekonstruktionen dreidimensionaler Darstellungen
DE102007025069B4 (de) * 2007-05-21 2018-05-24 Seereal Technologies S.A. Holographisches Rekonstruktionssystem
DE102008000589B4 (de) * 2008-03-11 2018-02-01 Seereal Technologies S.A. Verfahren zur Kodierung von computergenerierten Hologrammen in pixelierten Lichtmodulatoren
GB2461894B (en) * 2008-07-16 2010-06-23 Light Blue Optics Ltd Holographic image display systems

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080252950A1 (en) 2002-11-13 2008-10-16 Seereal Technologies Gmbh Video Hologram and Device for Reconstructing Video Holograms for Large Objects
WO2006066919A1 (en) 2004-12-23 2006-06-29 Seereal Technologies Gmbh A method of computing a hologram
US7969633B2 (en) 2004-12-23 2011-06-28 Seereal Technologies Gmbh Method and device for computing computer-generated video holograms
WO2006119760A2 (de) 2005-05-13 2006-11-16 Seereal Technologies Gmbh Projektionsvorrichtung und verfahren zur holographischen rekonstruktion von szenen
WO2008025839A1 (de) 2006-09-01 2008-03-06 Seereal Technologies S.A. Verfahren zum generieren von videohologrammen in echtzeit mittels subhologrammen
WO2008028829A1 (de) * 2006-09-05 2008-03-13 Seereal Technologies S.A. Vorrichtung und verfahren zum nachführen eines betrachterfensters
US20140022239A1 (en) * 2012-07-20 2014-01-23 City University Of Hong Kong Generating full-parallax digital holograms

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MUFFOLETTO ET AL: "NUMERICAL TECHNIQUES FOR FRESNEL DIFFRACTION IN COMPUTATIONAL HOLOGRAPHY", DISSERTATION GRADUATE FACULTY OF THE LOUISIANA STATE UNIVERSITY,, 9 November 2006 (2006-11-09), pages 1 - 64, XP007912174 *
XU S ET AL: "Regular effective hologram regions for computer generated holography", APPLIED OPTICS, OPTICAL SOCIETY OF AMERICA, WASHINGTON, DC; US, vol. 48, no. 34, 1 December 2009 (2009-12-01), pages H196 - H202, XP001550273, ISSN: 0003-6935, DOI: 10.1364/AO.48.00H196 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018146326A2 (de) 2017-02-13 2018-08-16 Seereal Technologies S.A. Lichtleitvorrichtung und anzeigevorrichtung zur darstellung von szenen
JP2018180199A (ja) * 2017-04-11 2018-11-15 国立研究開発法人情報通信研究機構 ホログラム製造方法及びホログラム記録装置
WO2019012028A1 (de) 2017-07-13 2019-01-17 Seereal Technologies S.A. Anzeigevorrichtung zur vergrösserung des sichtfelds
US11340457B2 (en) 2017-07-13 2022-05-24 Seereal Technologies S.A. Display device for enlarging the field of view
WO2019076963A1 (de) 2017-10-18 2019-04-25 Seereal Technologies S.A. Anzeigevorrichtung und verfahren zur erzeugung eines grossen sichtfeldes
US11835721B2 (en) 2017-10-18 2023-12-05 Seereal Technologies S.A. Display device and method for producing a large field of vision
EP4357856A1 (de) * 2022-10-20 2024-04-24 Envisics Ltd. Hologrammberechnung für eine kompakte head-up-anzeige

Also Published As

Publication number Publication date
KR20170132311A (ko) 2017-12-01
JP6893880B2 (ja) 2021-06-23
CN107710080B (zh) 2021-01-26
US11460809B2 (en) 2022-10-04
US20180364643A1 (en) 2018-12-20
TWI710868B (zh) 2020-11-21
TW201702768A (zh) 2017-01-16
DE102015205873A1 (de) 2016-10-06
CN107710080A (zh) 2018-02-16
JP2018517160A (ja) 2018-06-28
KR102647998B1 (ko) 2024-03-14

Similar Documents

Publication Publication Date Title
WO2016156287A1 (de) Verfahren zur berechnung von hologrammen zur holographischen rekonstruktion von zweidimensionalen und/oder dreidimensionalen szenen
DE102007025069B4 (de) Holographisches Rekonstruktionssystem
DE102006059400B4 (de) Display-Einrichtung zur Erzeugung von Rekonstruktionen dreidimensionaler Darstellungen
DE102008001644B4 (de) Vorrichtung zur Darstellung von dreidimensionalen Bildern
DE102007023785B4 (de) Analytisches Verfahren zu Berechnung von Videohologrammen in Echtzeit und holographische Wiedergabeeinrichtung
DE102004044111B4 (de) Verfahren und Vorrichtung zum Kodieren und Rekonstruieren von computergenerierten Videohologrammen
DE102005021155B3 (de) Steuerbare Beleuchtungseinrichtung
WO2017198713A2 (de) Verfahren zur erzeugung von hologrammen
DE112007003043B4 (de) Holographische Projektionsvorrichtung und Verfahren zum Beobachten einer rekonstruierten Szene
EP1563346A2 (de) Videohologramm und einrichtung zur rekonstruktion von videohologrammen
WO2008138982A1 (de) Verfahren zum rendern und generieren von farbvideohologrammen in echtzeit
WO2008138979A1 (de) Verfahren zum generieren von videohologrammen in echtzeit zur erweiterung einer 3d-rendering-graphikpipeline
DE102007023738A1 (de) Verfahren und Einrichtung zum Rekonstruieren einer dreidimensionalen Szene in einem holographischen Display
DE102005010250B4 (de) Verfahren und Einrichtung zum Nachführen von Sweet-Spots
WO2008074628A1 (de) Verfahren und einrichtung zum reduzieren von speckle
WO2019076963A1 (de) Anzeigevorrichtung und verfahren zur erzeugung eines grossen sichtfeldes
EP2676449A2 (de) Verfahren und vorrichtung zur stereobasis-erweiterung von stereoskopischen bildern und bildfolgen
DE102010062728B4 (de) Lichtmodulationsvorrichtung für ein Display
WO2008028829A1 (de) Vorrichtung und verfahren zum nachführen eines betrachterfensters
WO2013030013A1 (de) Beleuchtungsvorrichtung eines holographischen displays
EP2122415B1 (de) Autostereoskopisches Bildwiedergabegerät zur Erzeugung eines schwebenden reellen Stereobildes
DE102008040581B4 (de) Steuerbare Lichtmodulationseinrichtung
DE102006043297B4 (de) Wiedergabevorrichtung und Verfahren mit Mitteln zum Nachführen eines Betrachterfensters
DE102008040578A1 (de) Steuerbare Lichtmodulationseinrichtung
DE102011056224B4 (de) Lichtmodulationsvorrichtung für ein Display

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16713395

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017550816

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 20177031624

Country of ref document: KR

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 16713395

Country of ref document: EP

Kind code of ref document: A1